PerceptionBench

PerceptionBench: Evaluating Atomic Visual Perception in Multimodal Large Language Models

LLM OrchestrationOpen Source AI & Machine LearningOpen Source

About

PerceptionBench es un benchmark diseñado para evaluar las habilidades de percepción visual atómica de modelos de lenguaje multimodal grandes (MLLMs). Aborda las limitaciones de los benchmarks existentes al aislar errores perceptuales de fallos en el razonamiento o el conocimiento del dominio. El benchmark incluye 3,000 preguntas verificadas que apuntan a diez capacidades perceptuales atómicas, proporcionando un enfoque estructurado para evaluar y diagnosticar los límites de percepción visual de los MLLMs.

Open Source Health

Not enough history
Stars
206
Forks
11
License
Apache-2.0
Last commit
2 months ago
Python

Related Categories

¿Usas PerceptionBench?

Controla su coste junto al resto de tu stack y recibe un recordatorio antes de que se renueve.

Añadir a mi stack

Vendor

Moonshot AI

Open-source projects on GitHub: Kimi-Dev, MoonEP and Checkpoint Engine

View vendor profile

More by Moonshot AI