La práctica de utilizar bots para recopilar información y material de un sitio web se conoce como «web scraping». Un proveedor de servicios de web scraping recopila el código HTML básico y los datos almacenados en un servidor, a diferencia del «screen scraping», que extrae los píxeles que se ven en la pantalla. A continuación, el scraper puede duplicar todo el contenido de un sitio web en otro lugar.
Muchas empresas digitales que dependen de la recopilación de datos utilizan el web scraping. Las empresas que realizan estudios de mercado utilizan scrapers para obtener información de las redes sociales y los foros. Los algoritmos de búsqueda web rastrean un sitio web, examinan sus datos y le asignan una puntuación.
Los sitios web de comparación de precios utilizan bots para obtener precios y detalles de productos de los sitios web de vendedores afiliados. El web scraping se emplea además para actividades como la especulación de precios y el robo de contenido. Un sitio web que es objeto de scraping puede sufrir pérdidas económicas significativas, especialmente si se trata de una empresa que depende de métodos de fijación de precios competitivos o se dedica a la distribución de contenido.
El robo de material a gran escala de un sitio web específico se conoce como scraping de contenido. Los directorios de productos en línea y los sitios web que dependen de material digital para generar tráfico son objetivos habituales. Un ataque de scraping de contenido podría ser fatal para estas empresas.
Por ejemplo, la creación del material para su base de datos requiere tiempo, costes y esfuerzo en el caso de los listados de empresas locales virtuales. El scraping puede provocar que todo ese material se ponga a disposición del público, se utilice en campañas de spam o se venda a empresas rivales.




