Browsertrix Crawler
vonWebrecorder
Run a high-fidelity browser-based web archiving crawler in a single Docker container
Web-CrawlingOpen Source Entwickler-ToolsOpen Source
Über
Browsertrix Crawler ist ein eigenständiges, browserbasiertes Hochpräzisions-Crawling-System, das entwickelt wurde, um einen komplexen, anpassbaren browserbasierten Crawl in einem einzigen Docker-Container auszuführen. Browsertrix Crawler verwendet Puppeteer, um ein oder mehrere Brave Browser-Fenster parallel zu steuern. Daten werden über das Chrome Devtools Protocol (CDP) im Browser erfasst.
Open Source Health
- Stars
- 1,134
- Forks
- 151
- License
- AGPL-3.0
- Last commit
- 1 months ago
TypeScript
Alternativen zu Browsertrix Crawler
Deep Researchvon David ZhangEin KI-gestützter Forschungsassistent, der iterative, tiefgehende Recherchen zu jedem Thema durch Kombination von Suchmaschinen, Web-Scraping und großen Sprachmodellen durchführt.- select.rsvon Utkarsh KukretiEine Rust-Bibliothek zur Extraktion nützlicher Daten aus HTML-Dokumenten, geeignet für Web-Scraping.
Scrapelyvon ScrapyEine reine Python HTML-Screen-Scraping-Bibliothek- Faster Than Requestsvon Juan CarlosSchnellere Anfragen auf Python 3
MechanicalSoupvon MechanicalSoupEine Python-Bibliothek zur Automatisierung der Interaktion mit Websites.
Ressourcen & Links
Verwandte Kategorien
Nutzt du Browsertrix Crawler?
Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.
Zu meinem Stack hinzufügenAnbieter
Webrecorder
Publisher of ArchiveWeb.page and Browsertrix Crawler
