TensorRT

PyTorch/TorchScript/FX compiler for NVIDIA GPUs using TensorRT

Training von Machine Learning-ModellenML-FrameworksOpen Source

Über

Torch-TensorRT integriert TensorRT mit PyTorch, um die Inferenzleistung auf NVIDIA-Plattformen zu verbessern. Es ermöglicht dir, die Modellinferenz erheblich zu beschleunigen und schnellere Ausführungszeiten mit minimalen Codeänderungen zu erreichen. Das Tool unterstützt sowohl Python- als auch C++-Umgebungen, sodass du deine Modelle effizient optimieren und bereitstellen kannst. Dieses Produkt eignet sich für Entwickler, die mit Deep-Learning-Anwendungen arbeiten und eine verbesserte Leistung auf NVIDIA-Hardware benötigen.

Open Source Health

Not enough history
Stars
2,993
Forks
410
License
BSD-3-Clause
Last commit
1 months ago
Python

Ressourcen & Links

Verwandte Kategorien

Nutzt du TensorRT?

Behalte die Kosten neben dem Rest deines Stacks im Blick und lass dich vor der Verlängerung erinnern.

Zu meinem Stack hinzufügen

Anbieter

PyTorch

Publisher of Captum and Bayesian Optimization Library (botorch)

Vendor-Profil anzeigen

Mehr von PyTorch