ChatEval

Codes for our paper "ChatEval: Towards Better LLM-based Evaluators through Multi-Agent Debate"

LLM-OrchestrierungOpen Source KI & Maschinelles LernenOpen Source

Über

ChatEval ist ein Tool, das die Bewertung von generiertem Text vereinfacht, indem es mehrere Sprachmodelle (LLMs) einsetzt, um autonom über die Nuancen verschiedener Textstücke zu debattieren und zu urteilen. Nutzer können zwei Modelle auswählen, um sie zu vergleichen, und die LLM-Schiedsrichter bewerten ihre Antworten basierend auf zugewiesenen Personas, was einen transparenten Bewertungsprozess ermöglicht. Dieses Produkt ist für diejenigen gedacht, die daran interessiert sind, die Qualität der Bewertungen von Textgenerierungen zu verbessern.

Open Source Health

Not enough history
Stars
343
Forks
32
License
Apache-2.0
Last commit
2 years ago
Python

Ressourcen & Links

Verwandte Kategorien

Nutzt du ChatEval?

Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.

Zu meinem Stack hinzufügen

Anbieter

THUNLP

Natural Language Processing Lab at Tsinghua University

Vendor-Profil anzeigen

Mehr von THUNLP