DataTrove
HuggingFace library to process and filter large amounts of webdata
Data Pipeline OrchestrationData OrchestrationOpen Source
About
DataTrove è una libreria per elaborare, filtrare e rimuovere i duplicati dei dati testuali su larga scala. Fornisce un insieme di blocchi di elaborazione predefiniti comunemente utilizzati con un framework per aggiungere facilmente funzionalità personalizzate.
Open Source Health
- Stars
- 3,331
- Forks
- 300
- License
- Apache-2.0
- Last commit
- 2 months ago
Python
Alternative a DataTrove
Hyperswitchby JuspayPiattaforma di pagamento open source e componibile | Conforme PCI | Opzioni SaaS e self-host | Consente connettività a più fornitori di pagamento, pagamento, frode, vault e tokenizzazione | Migliora l'autorizzazione con routing intelligente e recupero delle entrate | Riduce i costi di elaborazione dei pagamenti...
Cstarby SpotifyStrumento di orchestrazione del cluster Apache Cassandra per la riga di comando
Argo Workflowsby ArgoprojMotore di workflow per Kubernetes
Composeby DockerDefinisci e esegui applicazioni multi-contenitore con Docker
Shardingsphereby ApacheAbilitare l'intelligenza dei dati con SQL distribuito per sharding, scalabilità e sicurezza su tutti i database.
Resources & Links
Related Categories
Usi DataTrove?
Tieni traccia del suo costo insieme al resto del tuo stack e ricevi un promemoria prima del rinnovo.
Aggiungi al mio stackVendor
Hugging Face
Publisher of Speech To Speech, Diffusers and Optimum
