Evals
Evals is a framework for evaluating LLMs and LLM systems, and an open-source registry of benchmarks.
About
Evals fornisce un framework per la valutazione di modelli di linguaggio di grandi dimensioni (LLM) o sistemi costruiti utilizzando LLM. Offriamo un registro esistente di evals per testare diverse dimensioni dei modelli OpenAI e la possibilità di scrivere i propri evals personalizzati per casi d'uso di interesse. È anche possibile utilizzare i propri dati per costruire evals privati che rappresentano i modelli comuni di LLM nel proprio flusso di lavoro senza esporre pubblicamente alcuno di questi dati.
Open Source Health
- Stars
- 19,444
- Forks
- 3,083
- License
- Not stated
- Last commit
- 6 months ago
Alternative a Evals
- Whisperby OpenaiRiconoscimento vocale robusto tramite supervisione debole su larga scala.
- Skillsby OpenaiCatalogo delle competenze per Codex
- Symphonyby OpenaiSymphony trasforma il lavoro di progetto in esecuzioni autonome e isolate, consentendo ai team di gestire il lavoro anziché supervisionare agenti di codifica.
Swarmby OpenaiFramework educativo che esplora l'orchestrazione multi-agente ergonomica e leggera. Gestito dal team di soluzioni OpenAI.
The Algorithmby TwitterCodice sorgente per l'Algoritmo di Raccomandazione X
Resources & Links
Related Categories
Usi Evals?
Tieni traccia del suo costo insieme al resto del tuo stack e ricevi un promemoria prima del rinnovo.
Aggiungi al mio stackVendor
Openai
Publisher of Whisper, Skills and Symphony