InfiniteBench

Codes for the paper "∞Bench: Extending Long Context Evaluation Beyond 100K Tokens": https://arxiv.org/abs/2402.13718

LLM OrchestrationOpen Source AI & Machine LearningOpen Source

About

Bienvenido a InfiniteBench, un benchmark de vanguardia diseñado para evaluar las capacidades de los modelos de lenguaje para procesar, comprender y razonar sobre contextos super largos (más de 100k tokens). Los contextos largos son cruciales para mejorar aplicaciones con LLMs y lograr una interacción de alto nivel. InfiniteBench está diseñado para empujar los límites de los modelos de lenguaje al probarlos contra una longitud de contexto de más de 100k, que es diez veces más larga que los conjuntos de datos tradicionales.

Open Source Health

Not enough history
Stars
393
Forks
32
License
MIT
Last commit
2 years ago
Python

Resources & Links

Related Categories

¿Usas InfiniteBench?

Controla su coste junto al resto de tu stack y recibe un recordatorio antes de que se renueve.

Añadir a mi stack

Vendor

OpenBMB

OpenBMB (Open Lab for Big Model Base) aims to build foundation models and systems towards AGI

View vendor profile

More by OpenBMB