Evals
Evals is a framework for evaluating LLMs and LLM systems, and an open-source registry of benchmarks.
About
Evals fournit un cadre pour évaluer les modèles de langage de grande taille (LLMs) ou les systèmes construits à l'aide de LLMs. Nous offrons un registre existant d'évaluations pour tester différentes dimensions des modèles OpenAI et la possibilité d'écrire vos propres évaluations personnalisées pour les cas d'utilisation qui vous intéressent. Vous pouvez également utiliser vos données pour créer des évaluations privées qui représentent les modèles LLM courants dans votre flux de travail sans exposer ces données publiquement.
Open Source Health
- Stars
- 19,444
- Forks
- 3,083
- License
- Not stated
- Last commit
- 6 months ago
Alternatives à Evals
- Whisperby OpenaiReconnaissance vocale robuste via une supervision faible à grande échelle.
- Skillsby OpenaiCatalogue de compétences pour Codex
- Symphonyby OpenaiSymphony transforme le travail de projet en exécutions autonomes et isolées, permettant aux équipes de gérer le travail au lieu de superviser les agents de codage.
Swarmby OpenaiCadre éducatif explorant l'orchestration multi-agents ergonomique et légère. Géré par l'équipe Solution d'OpenAI.
The Algorithmby TwitterCode source pour l'algorithme de recommandation X
Resources & Links
Related Categories
Tu utilises Evals ?
Suis son coût avec le reste de ton stack et reçois un rappel avant son renouvellement.
Ajouter à mon stackVendor
Openai
Publisher of Whisper, Skills and Symphony