Web Crawling

Framework de araña web Anemone

<6개월 치 업무를 하루 만에 끝내는 업무 자동화(생능출판사, 2020)>의 예제 코드입니다. 파이썬을 한 번도 배워본 적 없는 분들을 위한 예제이며, 엑셀부터 디자인, 매크로, 크롤링까지 업무 자동화와 관련된 다양한 분야 예제가 제공됩니다.

一个好用的哔哩哔哩漫画下载器，拥有图形界面，支持关键词搜索漫画和二维码登入，黑科技下载未解锁章节，多线程下载，多种保存格式，本地漫画管理，一键检查更新！

Boss直聘爬虫 / BOSS直聘职位数据抓取工具，基于 Chrome CDP 协议复用真实登录态，绕过字体反爬，输出明文薪资 JSON/CSV + 薪资技能分析。A Chrome-CDP-based BOSS Zhipin job scraper/crawler.

Ejecuta un rastreador de archivo web basado en navegador de alta fidelidad en un solo contenedor Docker.

El kit completo de herramientas de web scraping para PHP.

Crawler para corpora lingüísticos

🚀🤖 Crawl4AI: Rastreador y scraper web de código abierto compatible con LLM. No seas tímido, únete aquí: https://discord.gg/jP8KfhDhyN

Crawlee Python

by Apify

Crawlee—Una biblioteca de web scraping y automatización de navegadores para Python para construir crawlers confiables. Extrae datos para IA, LLMs, RAG o GPTs. Descarga HTML, PDF, JPG, PNG y otros archivos de sitios web. Funciona con Parsel, BeautifulSoup, Playwright y raw HTTP. Tanto en modo headful como headless.

K 哥爬虫代码分享，JS 逆向，爬虫进阶。关注公众号：K哥爬虫

Crawler

by Spatie

Este paquete proporciona una clase fácil de usar para rastrear enlaces en un sitio web.

Crawly, un marco de alto nivel para rastreo y scraping web para Elixir.