NVIDIA veröffentlicht Edge-KI-Modell mit 40 Milliarden Parametern und synthetischen Videodetektor
2026-07-21 10:17
Merken

de.wedoany.com-Bericht: Auf der SIGGRAPH 2026 hat NVIDIA mehrere technologische Neuerungen vorgestellt, die Bereiche wie KI-Integration in Kreativtools, synthetische Videoerkennung, physische Edge-KI und Desktop-Supercomputer abdecken.

Gängige Kreativanwendungen integrieren zunehmend das Model Context Protocol (MCP), sodass KI-Agenten direkt in Szenen, Einstellungen, Zeitachsen, Assets und Editoren arbeiten können, während die Kontrolle weiterhin bei den Kreativen liegt. NVIDIAs fortschrittliche Technologien werden seit Langem genutzt, um DCC-Tools für Künstler und Studios zu beschleunigen – darunter GPU-beschleunigte Viewports, CUDA-beschleunigte Effekte, RTX PRO Raytracing, KI-Entrauschung, neuronales Rendering und Echtzeitsimulation. Mit der Einführung von MCP beginnt eine neue Phase: Anwendungen sind nicht nur schneller, sondern auch in der Lage, KI-Agenten zu unterstützen.

Mit MCP-Tools können Künstler oder technische Direktoren Agenten automatisch fehlende Texturen in Szenen prüfen, Farbmanagement-Probleme markieren, Exportvarianten vorbereiten, tägliche Vorschauen generieren oder die Konformität von Einstellungen überprüfen lassen – alle kreativen Entscheidungen bleiben in menschlicher Hand. NVIDIA RTX PRO Workstations, DGX Spark und DGX Station Systeme bringen KI-Leistung näher an lokale Pipelines. Das NVIDIA Agent Toolkit bietet MCP-Clients zur Verbindung mit Remote-Servern sowie MCP-Server zur Bereitstellung von Tools für Clients.

Adobe integriert kreative Agenten in Firefly, Express und Creative Cloud, orchestriert mehrstufige Workflows über KI-Assistenten und bringt seine professionellen Tools über Adobe Connectoren in KI-Plattformen Dritter. Adobe hat zudem den Express Developer MCP Server veröffentlicht, der KI-Codierungsassistenten den Zugriff auf offizielle Dokumentationen und APIs zur Plugin-Entwicklung ermöglicht. Affinity by Canva hat einen KI-Connector für Claude eingeführt, der MCP für natürliche Sprachautomatisierung nutzt – Designer können damit Ebenen und Zeichenflächen umbenennen, Asset-Größen und -Formate anpassen, Batch-Bearbeitungen durchführen, Vektorpfade optimieren und Lieferdateien vorbereiten sowie wiederverwendbare Skripte generieren. Blender bietet über Blender Lab einen leichtgewichtigen MCP-Server, der eine natürliche Sprachschnittstelle für Blenders Python-API, Dokumentation und komplexe Einstellungen bereitstellt. Der MCP-Server von Boris FX Silhouette ermöglicht KI-Assistenten die Projektprüfung, den Aufbau von Node-Bäumen, die Bearbeitung von Shapes und Keyframes sowie das Rendern von Frames – das Preferences-Panel vereinfacht MCP-Installation, Client-Konfigurationsgenerierung und Verbindungstests und unterstützt sowohl interaktive Online-Modi als auch Offline-Headless-Instanzen.

Foundry Griptape unterstützt MCP nativ und bietet KI-Orchestrierung für professionelle VFX-Pipelines, die mehrere Modelle und Agenten sicher verwalten kann und sich mit Blender und Foundry Nuke integriert, um repetitive Aufgaben wie Cleanup, Mask Painting und Qualitätskontrolle zu automatisieren. SideFX führt MCP-Unterstützung für Houdini 22 über APEX Script Workflows ein – KI-Assistenten erhalten Zugriff auf APEX Script-Syntax, Funktionen, Dokumentation und Beispiele zur Unterstützung bei der Generierung von Character-Rigging-Code. Unreal Engine ermöglicht KI-Clients die Verbindung mit dem Unreal Editor über MCP und eröffnet so Assistenten für Spieleentwickler, Virtual Production und Echtzeitkünstler, die Szenen und Projekte analysieren können.

NVIDIA hat zudem den synthetischen Videodetektor NVIDIA NIM Microservice vorgestellt, der Teil der AI for Media-Plattform ist. Der Dienst analysiert Videos Frame für Frame und gibt Klassifikator-Scores aus, um Redaktionsteams bei der Priorisierung, Markierung oder Isolierung verdächtiger Sequenzen zu unterstützen. Das Modell bleibt auch nach Kompression, Größenänderung und Zuschnitt wirksam – Tests zeigen eine Genauigkeit von 92 % bei unkomprimierten Videos, 87 % bei 15 % Kompression und 82 % bei 50 % Kompression. Die Verarbeitung von 1080p-Videos dauert auf RTX-Systemen nur 22 Millisekunden, auf L40-GPUs etwa 30 Millisekunden. Organisationen können den Dienst lokal, am Edge, hybrid oder in isolierten Umgebungen bereitstellen. Wowza integriert den Microservice über das Wowza Video Intelligence Framework in Live-Workflows und bedient damit über 35.000 Installationen in mehr als 170 Ländern.

Das Edge-Weltfundamentmodell NVIDIA Cosmos 3 Edge ist zeitgleich verfügbar. Dieses 40-Milliarden-Parameter-Modell ist für die effiziente Bereitstellung auf Jetson-, RTX PRO-, DGX-Systemen und GeForce RTX GPUs optimiert. Als kompakte Version von Cosmos 3 kann das Modell Text, Bilder, Videos, Umgebungsgeräusche und Aktionen verstehen und generieren. Seine hybride Transformer-Architektur unterstützt physikbasierte Echtzeitanalyse und geräteinterne Roboteraktionen. Cosmos 3 Edge belegt im VANTAGE-Bench-Visualanalyse-Benchmark den ersten Platz in seiner Parameterklasse und ermöglicht nach Post-Training fortschrittliches Roboterlernen. Agile Robots, Doosan Robotics, Siemens und Skild AI evaluieren das Modell für ihre Roboter-Workflows. Im Bereich autonomes Fahren unterstützt das Modell Straßenszenenverständnis, Verkehrslogik und Strategie-Destillation. Im Bereich intelligente Infrastruktur erreicht es auf Jetson Thor den branchenweit besten Durchsatz und wird in Verkehrsüberwachung, öffentlicher Sicherheit, Logistik und industrieller Inspektion eingesetzt. Centific, Vaidio und YUAN evaluieren seine Fähigkeit, Edge-Visual-Agenten zu beschleunigen. Die Cosmos-Plattform ist in drei Größen erhältlich: Edge (4B), Nano (16B) und Super (64B).

Der NVIDIA DGX Station Desktop-KI-Supercomputer lässt sich mit dem Agent Toolkit in drei Schritten einrichten und ist in etwa 30 Minuten betriebsbereit. Der Stack umfasst das NVIDIA NemoClaw Open Agent Blueprint, das Nemotron 3 Ultra-Modell mit 550 Milliarden Parametern, die Omniverse-Bibliothek für physikalische Simulation und 3D-Asset-Workflows, die OpenShell-Sicherheitslaufzeit, den GB300 Grace Blackwell Ultra Desktop Superchip (20 Petaflops FP4-Rechenleistung, 748 GB Speicher) sowie die ConnectX-8 SuperNIC mit 800 GB/s Bandbreite. Das System erfordert keine tokenbasierte Bezahlung und kann mit mehreren Einheiten erweitert werden. NVIDIA hat die Integration der Omniverse-Bibliothek in Blender als Blueprint angekündigt. LangChain hat das Deep Agents Framework für Nemotron 3 Ultra optimiert, Nous Research hat das Hermes Agent Framework feinabgestimmt und unterstützt Blender MCP. DGX Station kann bei ASUS, Dell Technologies, Exxact, GIGABYTE, HP, MSI und Supermicro bestellt werden.

Im Bereich technische Forschung wurden auf der diesjährigen SIGGRAPH 21 Paper von NVIDIA angenommen. MotionBricks ist ein Echtzeit-Bewegungsmodell, das auf über 350.000 Bewegungssegmenten trainiert wurde und Charakterbewegungen in Spiel-Engine-Geschwindigkeit steuern sowie den Unitree G1 humanoide Roboter antreiben kann. GPC ist ein vortrainiertes generatives Bewegungssteuerungs-Framework, das Bewegungskompetenzen übertragen kann. ArtiFixer wandelt reale 3D-Aufnahmen in saubere virtuelle Szenen um und kann globale Beleuchtung direkt aus der Geometrie vorhersagen. Neue Solver ermöglichen die Simulation von Materialien wie Schnee, Sand und elastischen Festkörpern in der NVIDIA Newton-Physik-Engine. Die VideoNeuMat-Pipeline extrahiert neu beleuchtbare Materialien aus Videomodellen, während das ARDY autoregressive Diffusionsmodell die Echtzeitsteuerung von 3D-Charakterbewegungen über Text-Prompts ermöglicht.

Diese Kurznachricht stammt aus der Übersetzung und Weiterverbreitung von Informationen aus dem globalen Internet und von strategischen Partnern. Sie dient lediglich dem Austausch mit den Lesern. Bei Urheberrechtsverletzungen oder anderen Problemen bitten wir um rechtzeitige Mitteilung, und wir werden die notwendigen Änderungen oder Löschungen vornehmen. Die Weitergabe dieses Artikels ist ausdrücklich ohne formelle Genehmigung verboten.E-Mail: news@wedoany.com