Sealbook / Open source / Herramientas para desarrolladores, CLI y editores

PuerkitoBio/gocrawl

Polite, slim and concurrent web crawler.

crawlerrobots-txt

Licencia y mantenimiento

BSD-3-Clause es una licencia permisiva: uso comercial libre con atribución.

Último cambio de código hace 5 años.

Proyectos similares

	Repositorio	Estrellas	Lenguaje	Licencia	Actividad
1	iawia002/lux👾 Fast and simple video download library and CLI tool written in Go	★ 31.8k	Go	MIT	Menos activo
2	projectdiscovery/katanaA next-generation crawling and spidering framework.	★ 17.7k	Go	MIT	Activo
3	binux/pyspiderA Powerful Spider(Web Crawler) System in Python.	★ 16.8k	Python	Apache-2.0	Archivado
4	codelucas/newspapernewspaper3k is a news, full-text, and article metadata extraction in Python 3. Advanced docs:	★ 15.2k	Python	MIT	Activo
5	shengqiangzhang/examples-of-web-crawlers一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )	★ 14.7k	HTML	MIT	Sin cambios
6	ssssssss-team/spider-flow新一代爬虫平台，以图形化方式定义爬虫流程，不写代码即可完成爬虫。	★ 11.4k	Java	MIT	Sin cambios
7	injetlee/PythonPython脚本。模拟登录知乎，爬虫，操作excel，微信公众号，远程开机	★ 10.9k	Python	—	Menos activo
8	yt-dlp/yt-dlpA feature-rich command-line audio/video downloader	★ 199.1k	Python	Unlicense	Activo