Curator
Scalable data pre processing and curation toolkit for LLMs
Data Quality ManagementOpen Source Data PlatformsOpen Source
About
NeMo Curator aiuta gli ingegneri ML e i team di dati a costruire pipeline ripetibili accelerate da GPU che caricano, filtrano, deduplicano e trasformano grandi set di dati di testo, immagini, video e audio per l'addestramento dell'IA. Esegui la stessa pipeline su un laptop o su un cluster Ray multi-nodo.
Open Source Health
- Stars
- 1,764
- Forks
- 323
- License
- Apache-2.0
- Last commit
- 1 months ago
Python
Alternative a Curator
Speechby NVIDIA-NeMoUn framework di intelligenza artificiale generativa scalabile progettato per ricercatori e sviluppatori che lavorano su modelli di linguaggio di grandi dimensioni, multimodale e AI vocale (Riconoscimento Vocale Automatico e Sintesi Vocale)
Switchyardby NVIDIA-NeMoSwitchyard consente alle applicazioni LLM di instradare il traffico tra modelli e fornitori mantenendo la compatibilità nativa delle API di OpenAI e Anthropic - consentendo una selezione flessibile dei modelli, benchmarking e ottimizzazione dei costi/performance.
DataDesignerby NVIDIA-NeMo🎨 NeMo Data Designer: Genera dati sintetici di alta qualità da zero o da dati di partenza.
session.jsby IainSession.js - Ottieni informazioni sulla sessione utente- Matrixby FacebookresearchMatrix (Multi-Agent daTa geneRation Infra e eXperimentation framework) è un motore versatile per la generazione di dati conversazionali multi-agente.
Resources & Links
Related Categories
Usi Curator?
Tieni traccia del suo costo insieme al resto del tuo stack e ricevi un promemoria prima del rinnovo.
Aggiungi al mio stackVendor
NVIDIA-NeMo
Open-source projects on GitHub: Speech, Guardrails and Switchyard