MeuProvedor de Dados » Blog » Quando o web scraping é bom para você

Quando o web scraping é bom para você

  • by

Eu tenho que dizer isso Raspagem da web não é tão útil especialmente quando você não tem uma grande quantidade de dados.

Imagine que você precisa raspar o site do fornecedor e copiar os dados dele para o arquivo CSV. A tarefa é clara, mas se um fornecedor tiver apenas 100-200 SKUs. Não é tão grande e a maneira preferida nesse cenário será fazer esse trabalho manualmente. Mas se o seu SKU (itens) não for tão fácil e tiver, por exemplo, uma variante, um conjunto de imagens e recursos que e 100 SKUs estão ok para web scraping.

Portanto, não há uma boa resposta para esta pergunta. Se você perceber que o tempo para fazê-lo manualmente é maior do que para fazê-lo automaticamente, do que solicitar o web scraper. Lembre-se que quando você encomendar raspador de web em uma empresa você tem que fazer essa tarefa através de vários passos como:

- especificação técnica,

- pré-pagamento ou pagamento integral

- teste e entrega

– introdução ao produto desenvolvido para ele

Leva tempo e você tem que entendê-lo. Lembre-se de que, durante a primeira raspagem de dados reais, você encontrará vários bugs que devem ser corrigidos pelo desenvolvedor, portanto, esteja pronto para isso.