DataTrove
vonHugging Face
HuggingFace library to process and filter large amounts of webdata
Datenpipeline-OrchestrierungDatenorchestrierungOpen Source
Über
DataTrove ist eine Bibliothek zur Verarbeitung, Filterung und Duplikatentfernung von Textdaten in sehr großem Maßstab. Sie bietet eine Reihe von vorgefertigten, häufig verwendeten Verarbeitungsblöcken mit einem Framework, um benutzerdefinierte Funktionen einfach hinzuzufügen.
Open Source Health
- Stars
- 3,331
- Forks
- 300
- License
- Apache-2.0
- Last commit
- 2 months ago
Python
Alternativen zu DataTrove
Hyperswitchvon JuspayOpen-Source, modulare Zahlungsplattform | PCI-konform | SaaS- und Self-Hosting-Optionen | Ermöglicht die Anbindung an mehrere Zahlungs-, Auszahlungs-, Betrugs-, Vault- und Tokenisierungsanbieter | Optimiert die Autorisierung mit intelligentem Routing und Umsatzrückgewinnung | Reduziert die Zahlungsabwicklung...
Cstarvon SpotifyApache Cassandra Cluster-Orchestrierungstool für die Kommandozeile
Argo Workflowsvon ArgoprojWorkflow-Engine für Kubernetes
Composevon DockerDefinieren und Ausführen von Multi-Container-Anwendungen mit Docker
Shardingspherevon ApacheDatenintelligenz mit verteiltem SQL für Sharding, Skalierbarkeit und Sicherheit über alle Datenbanken hinweg.
Ressourcen & Links
Verwandte Kategorien
Nutzt du DataTrove?
Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.
Zu meinem Stack hinzufügenAnbieter
Hugging Face
Publisher of Speech To Speech, Diffusers and Optimum
