Lighteval
vonHugging Face
Lighteval is your all-in-one toolkit for evaluating LLMs across multiple backends
LLM-OrchestrierungOpen Source KI & Maschinelles LernenOpen Source
Über
Lighteval ist dein All-in-One-Toolkit zur Bewertung von LLMs über mehrere Backends – egal, ob dein Modell irgendwo bereitgestellt wird oder bereits im Speicher geladen ist. Tauche tief in die Leistung deines Modells ein, indem du detaillierte, pro Beispiel gespeicherte Ergebnisse speicherst und erkundest, um zu debuggen und zu sehen, wie deine Modelle abschneiden.
Open Source Health
- Stars
- 2,539
- Forks
- 553
- License
- MIT
- Last commit
- 1 months ago
Python
Alternativen zu Lighteval
Tokenizersvon Hugging FaceBietet eine Implementierung der heute am häufigsten verwendeten Tokenizer mit Fokus auf Leistung und Vielseitigkeit.
Nfsservevon Hugging FaceEine Rust NFS Server-Implementierung
The Algorithmvon TwitterQuellcode für den X Recommendation Algorithm.
Recommendersvon TensorFlowTensorFlow Recommenders ist eine Bibliothek zum Erstellen von Empfehlungsmodell-Systemen mit TensorFlow.- RPG_KDD2025von FacebookresearchDieses Repository bietet den Code zur Implementierung von RPG, wie in unserem KDD'25-Paper "Generierung von langen semantischen IDs in Parallel für Empfehlungen" beschrieben.
Ressourcen & Links
Verwandte Kategorien
Nutzt du Lighteval?
Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.
Zu meinem Stack hinzufügenAnbieter
Hugging Face
Publisher of Speech To Speech, Diffusers and Optimum