ChatEval

Codes for our paper "ChatEval: Towards Better LLM-based Evaluators through Multi-Agent Debate"

LLM OrchestrationOpen Source AI & Machine LearningOpen Source

About

ChatEval es una herramienta que simplifica la evaluación de texto generado al emplear múltiples modelos de lenguaje (LLMs) para debatir y juzgar de manera autónoma las matices de diferentes piezas de texto. Los usuarios pueden seleccionar dos modelos para comparar, y los árbitros LLM evaluarán sus respuestas en función de las personas asignadas, proporcionando un proceso de juicio transparente. Este producto está diseñado para aquellos interesados en mejorar la calidad de las evaluaciones de generación de texto.

Open Source Health

Not enough history
Stars
343
Forks
32
License
Apache-2.0
Last commit
2 years ago
Python

Resources & Links

Related Categories

¿Usas ChatEval?

Controla su coste junto al resto de tu stack y recibe un recordatorio antes de que se renueve.

Añadir a mi stack

Vendor

THUNLP

Natural Language Processing Lab at Tsinghua University

View vendor profile

More by THUNLP