OmniVinci
OmniVinci is an omni-modal LLM for joint understanding of vision, audio, and language.
Über
OmniVinci ist ein großes Sprachmodell, das mehrere Modalitäten integriert, einschließlich Vision, Audio und Sprache, um das Verständnis und die Interaktion zu verbessern. Es verwendet innovative architektonische Merkmale, um die Ausrichtung zwischen diesen Modalitäten zu verbessern und nutzt einen umfassenden Datenkuratierungsprozess, um vielfältige Konversationsdaten zu generieren. Dieses Modell zielt darauf ab, die Maschinenintelligenz voranzutreiben, indem es die menschliche sensorische Wahrnehmung über verschiedene Eingabeformen nachahmt.
Open Source Health
- Stars
- 679
- Forks
- 56
- License
- Apache-2.0
- Last commit
- 1 months ago
Alternativen zu OmniVinci
Pacnetvon NvlabsPixel-adaptive Convolutional Neural Networks (CVPR '19)
MUNITvon NvlabsMultimodale unbeaufsichtigte Bild-zu-Bild-Übersetzung
Instant Ngpvon NvlabsSofortige neuronale Grafikprimitive: blitzschnelles NeRF und mehr
Rclipvon Yurij MikhalevichSemantische Fotosuche für die Kommandozeile
ChineseNERvon jingyuanzhangEin neuronales Netzwerkmodell zur Erkennung benannter Entitäten im Chinesischen.
Ressourcen & Links
Verwandte Kategorien
Nutzt du OmniVinci?
Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.
Zu meinem Stack hinzufügenAnbieter
Nvlabs
Publisher of Pacnet, MUNIT and OmniVinci