Ao desenvolver web crawlers, a maior dificuldade geralmente não é escrever código, mas encontrar bibliotecas ou ferramentas adequadas para diferentes linguagens e cenários, já que os recursos são muito dispersos. Me deparei com o Awesome Web Scraping, uma coleção de recursos de código aberto que organiza sistematicamente várias ferramentas de web scraping e processamento de dados. Está organizado por linguagens de programação, abrangendo bibliotecas de web scraping para linguagens populares como Python, PHP, Ruby, JavaScript e Go, além de ferramentas de linha de comando e materiais de aprendizagem. GitHub: https://t.co/MP1R3oMRNH Além da própria biblioteca de ferramentas, também inclui recursos práticos como tutoriais de web scraping e uma lista de navegadores headless. Este projeto é baseado em dados de diversas listas incríveis bastante conhecidas, e os recursos são relativamente abrangentes, o que faz com que valha a pena salvá-lo para referência futura.
