MijnDataProvider » Blog » Wanneer webschrapen goed voor je is

Wanneer webschrapen goed voor je is

  • by

Dat moet ik zeggen web schrapen is niet zo handig vooral als u niet over een grote hoeveelheid gegevens beschikt.

Stel je voor dat je de website van de leverancier moet schrapen en gegevens ervan naar een CSV-bestand moet kopiëren. De taak is duidelijk, maar als een leverancier slechts 100-200 SKU heeft. Het is niet zo groot en de beste manier in dit scenario is om die taak handmatig uit te voeren. Maar als uw SKU (items) niet zo eenvoudig zijn en bijvoorbeeld een variant, een bugset van afbeeldingen en functies hebben en 100 SKU's, is dit oké voor webscraping.

Er is dus niet één goed antwoord op deze vraag. Als u ziet dat de tijd om het handmatig te doen langer is dan om het automatisch te doen, dan bestelt u een webschraper. Herinner je eraan dat wanneer je bestel webschraper in een bedrijf moet je die taak via verschillende stappen doen, zoals:

– technische specificatie,

– vooruitbetaling, of volledige betaling

– testen en bezorgen

– intro in ontwikkeld product ervoor

Het kost tijd en je moet het begrijpen. Herinner u eraan dat u tijdens het eerste echte gegevensschrapen verschillende bugs zult vinden die door de ontwikkelaar moeten worden opgelost, dus wees erop voorbereid.