InfiniteBench

Codes for the paper "∞Bench: Extending Long Context Evaluation Beyond 100K Tokens": https://arxiv.org/abs/2402.13718

LLM OrchestrationOpen Source AI & Machine LearningOpen Source

About

Benvenuto su InfiniteBench, un benchmark all'avanguardia progettato per valutare le capacità dei modelli di linguaggio nel processare, comprendere e ragionare su contesti super lunghi (oltre 100k token). I contesti lunghi sono cruciali per migliorare le applicazioni con LLMs e raggiungere un'interazione di alto livello. InfiniteBench è progettato per spingere i confini dei modelli di linguaggio testandoli contro una lunghezza di contesto di oltre 100k, che è dieci volte più lunga rispetto ai set di dati tradizionali.

Open Source Health

Not enough history
Stars
393
Forks
32
License
MIT
Last commit
2 years ago
Python

Resources & Links

Related Categories

Usi InfiniteBench?

Tieni traccia del suo costo insieme al resto del tuo stack e ricevi un promemoria prima del rinnovo.

Aggiungi al mio stack

Vendor

OpenBMB

OpenBMB (Open Lab for Big Model Base) aims to build foundation models and systems towards AGI

View vendor profile

More by OpenBMB