Webscraping

Webscraping er en metode til automatisk at hente data fra hjemmesider og samle dem i et brugbart format — typisk et regneark eller en database. I stedet for at en medarbejder sidder og kopierer priser, anmeldelser eller produktoplysninger ind i hånden, gør et program det selv, hurtigt og uden tastefejl.

Et eksempel: vil du holde øje med konkurrenternes priser hver dag, kan et scraping-program besøge deres sider hver morgen, læse priserne og lægge dem i et ark, du kan kigge i over kaffen. Det samme princip kan hente anmeldelser, jobopslag, ejendomsdata eller hvad der nu ligger offentligt tilgængeligt på nettet.

Hvad bruger virksomheder det til?

• Prisovervågning af konkurrenter, så du kan reagere hurtigt.
• Markedsindsigt ved at samle data fra mange kilder og se mønstre.
• Leadgenerering og research, hvor manuel indsamling ville tage dage.

To ting er værd at vide, før du går i gang. For det første: data skal stadig analyseres — selve indsamlingen er kun halvdelen, værdien ligger i, hvad du gør med tallene. For det andet er der grænser. Nogle sider forbyder scraping i deres betingelser, og personoplysninger er omfattet af GDPR. Hold dig til offentligt tilgængelige data, og tjek reglerne, før du sætter noget i drift.