MarketplaceKI-VideoerstellungHunyuan-GameCraft-1.0

Hunyuan-GameCraft-1.0

Hunyuan-GameCraft: High-dynamic Interactive Game Video Generation with Hybrid History Condition

KI-VideoerstellungOpen Source KI & Maschinelles LernenOpen Source

Über

Jüngste Fortschritte in der diffusionsbasierten und kontrollierbaren Videoerzeugung haben die Synthese von qualitativ hochwertigen und zeitlich kohärenten Videos ermöglicht, was die Grundlage für immersive interaktive Spielerlebnisse legt. Aktuelle Methoden stoßen jedoch auf Einschränkungen in der Dynamik, physikalisch realistischer Langzeitkonsistenz und Effizienz, die die Fähigkeit zur Erstellung verschiedener Gameplay-Videos einschränken. Um diese Lücken zu schließen, stellen wir Hunyuan-GameCraft vor, ein neuartiges Framework zur hochdynamischen interaktiven Videoerzeugung in Spielumgebungen. Um eine feinkörnige Aktionskontrolle zu erreichen, vereinheitlichen wir Standardtastatur- und Maus-Eingaben in einem gemeinsamen Kamerarepräsentationsraum, was eine flüssige Interpolation zwischen verschiedenen Kamera- und Bewegungsoperationen erleichtert. Dann schlagen wir eine hybride geschichtsbedingte Trainingsstrategie vor, die Video-Sequenzen autoregressiv erweitert und dabei Informationen über die Spielszene bewahrt. Darüber hinaus erreichen wir zur Verbesserung der Inferenz-Effizienz und Spielbarkeit eine Modell-Destillation, um den Rechenaufwand zu reduzieren und gleichzeitig die Konsistenz über lange zeitliche Sequenzen hinweg aufrechtzuerhalten, was es für den Echtzeiteinsatz in komplexen interaktiven Umgebungen geeignet macht.

Open Source Health

Not enough history
Stars
742
Forks
75
License
Not stated
Last commit
11 months ago
Python

Verwandte Kategorien

Nutzt du Hunyuan-GameCraft-1.0?

Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.

Zu meinem Stack hinzufügen

Anbieter

Tencent-Hunyuan

Open-source projects on GitHub: HunyuanVideo, HunyuanVideo-1.5 and HunyuanOCR

Vendor-Profil anzeigen

Mehr von Tencent-Hunyuan