Curator
Scalable data pre processing and curation toolkit for LLMs
Data Quality ManagementOpen Source Data PlatformsOpen Source
About
NeMo Curator ayuda a ingenieros de ML y equipos de datos a construir pipelines repetibles aceleradas por GPU que cargan, filtran, deduplican y transforman grandes conjuntos de datos de texto, imagen, video y audio para el entrenamiento de IA. Ejecuta la misma pipeline en un portátil o en un clúster Ray multinodo.
Open Source Health
- Stars
- 1,764
- Forks
- 323
- License
- Apache-2.0
- Last commit
- 1 months ago
Python
Alternativas a Curator
Speechby NVIDIA-NeMoUn marco de IA generativa escalable diseñado para investigadores y desarrolladores que trabajan en Modelos de Lenguaje Grande, Multimodal y AI de Voz (Reconocimiento Automático de Voz y Texto a Voz).
Switchyardby NVIDIA-NeMoSwitchyard permite que las aplicaciones LLM dirijan el tráfico entre modelos y proveedores mientras preservan la compatibilidad nativa de la API de OpenAI y Anthropic - lo que permite una selección flexible de modelos, evaluación comparativa y optimización de costos/rendimiento.DataDesignerby NVIDIA-NeMo🎨 NeMo Data Designer: Genera datos sintéticos de alta calidad desde cero o a partir de datos semilla.
session.jsby IainSession.js - Obtén información de la sesión del usuario- Matrixby FacebookresearchMatrix (Multi-Agent daTa geneRation Infra y eXperimentation framework) es un motor versátil para la generación de datos conversacionales multi-agente.
Resources & Links
Related Categories
¿Usas Curator?
Controla su coste junto al resto de tu stack y recibe un recordatorio antes de que se renueve.
Añadir a mi stackVendor
NVIDIA-NeMo
Open-source projects on GitHub: Speech, Guardrails and Switchyard