OmniVinci

OmniVinci is an omni-modal LLM for joint understanding of vision, audio, and language.

Training von Machine Learning-ModellenML-FrameworksOpen Source

Über

OmniVinci ist ein großes Sprachmodell, das mehrere Modalitäten integriert, einschließlich Vision, Audio und Sprache, um das Verständnis und die Interaktion zu verbessern. Es verwendet innovative architektonische Merkmale, um die Ausrichtung zwischen diesen Modalitäten zu verbessern und nutzt einen umfassenden Datenkuratierungsprozess, um vielfältige Konversationsdaten zu generieren. Dieses Modell zielt darauf ab, die Maschinenintelligenz voranzutreiben, indem es die menschliche sensorische Wahrnehmung über verschiedene Eingabeformen nachahmt.

Open Source Health

Not enough history
Stars
679
Forks
56
License
Apache-2.0
Last commit
1 months ago
Python

Ressourcen & Links

Verwandte Kategorien

Nutzt du OmniVinci?

Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.

Zu meinem Stack hinzufügen

Anbieter

Nvlabs

Publisher of Pacnet, MUNIT and OmniVinci

Vendor-Profil anzeigen

Mehr von Nvlabs