Curator
vonNVIDIA-NeMo
Scalable data pre processing and curation toolkit for LLMs
DatenqualitätsmanagementOpen Source DatenplattformenOpen Source
Über
NeMo Curator hilft ML-Ingenieuren und Datenteams, wiederholbare, GPU-beschleunigte Pipelines zu erstellen, die große Text-, Bild-, Video- und Audiodatensätze für das AI-Training laden, filtern, deduplizieren und transformieren. Führe dieselbe Pipeline auf einem Laptop oder über ein Multi-Node Ray-Cluster aus.
Open Source Health
- Stars
- 1,764
- Forks
- 323
- License
- Apache-2.0
- Last commit
- 1 months ago
Python
Alternativen zu Curator
Speechvon NVIDIA-NeMoEin skalierbares generatives KI-Framework, das für Forscher und Entwickler an großen Sprachmodellen, multimodalen und Sprach-KI (Automatische Spracherkennung und Text-to-Speech) entwickelt wurde.
Switchyardvon NVIDIA-NeMoSwitchyard ermöglicht es LLM-Anwendungen, den Datenverkehr zwischen Modellen und Anbietern zu steuern und dabei die native OpenAI- und Anthropic-API-Kompatibilität zu wahren - was eine flexible Modellauswahl, Benchmarking und Kosten-/Leistungsoptimierung ermöglicht.
DataDesignervon NVIDIA-NeMo🎨 NeMo Data Designer: Generiere hochwertige synthetische Daten von Grund auf oder aus Seed-Daten.
session.jsvon IainSession.js - Erhalte Benutzer-Sitzungsinformationen- Matrixvon FacebookresearchMatrix (Multi-Agent daTa geneRation Infra und eXperimentation Framework) ist eine vielseitige Engine zur Generierung von Multi-Agenten-Konversationsdaten.
Ressourcen & Links
Verwandte Kategorien
Nutzt du Curator?
Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.
Zu meinem Stack hinzufügenAnbieter
NVIDIA-NeMo
Open-source projects on GitHub: Speech, Guardrails and Switchyard