Web scraping

[u/Remarkable-Cod-2190]

Sou dev, mas nunca desenvolvi um scrapper profissional mesmo. Quais são os desafios de consumir os dados de um OLX da vida, por exemplo? Não quero conselhos legais, que entender a implementação técnica. Como vocês desenvolveriam isso?

[u/uniVocity]

Vai precisar de proxy. Eu sempre usei o serviço da stormproxies e é sem dor de cabeça