de.wedoany.com-Bericht: Das auf Video-KI spezialisierte Unternehmen TwelveLabs Inc. gab bekannt, dass es eine frühe Finanzierungsrunde in Höhe von 100 Millionen US-Dollar erhalten hat, wodurch sich die Gesamtfinanzierung des Unternehmens auf über 207 Millionen US-Dollar beläuft. Diese Serie-B-Runde wurde gemeinsam von NEA und Naver Ventures angeführt, mit Beteiligung von Amazon, Radical Ventures, Korea Investment Partners, Index Ventures, Quadrille Capital und Red Bull Ventures.
Jae Lee, Gründer und CEO des Unternehmens, erklärte, dass die Grundlage maschineller Intelligenz in der dynamischen Aufzeichnung der Realität liege und Video die Daten seien, die es zu verstehen gelte. TwelveLabs konzentriert sich darauf, multimodale Modelle zu entwickeln, die Video nativ verstehen, anstatt es lediglich als Verarbeitungswerkzeug für große Sprachmodelle zu nutzen.
Zu den Flaggschiffprodukten gehören die Marengo-Modellreihe und Pegasus 1.5. Marengo unterstützt KI-Einbettungen aus der realen Welt für Video, Audio, Text und Kombinationen und wandelt verschiedene Inhaltstypen in maschinenlesbare Datenstrukturen um, die KI das Verstehen und Durchsuchen von Informationen in großem Maßstab erleichtern; Version 3.0 dieser Reihe wurde Ende letzten Jahres veröffentlicht. Pegasus wandelt Video in strukturierte Daten um, versteht Szenengrenzen, Entitäten und Zeitabschnitte und ermöglicht es großen Sprachmodellen, über visuelle Informationen hinweg zu schlussfolgern. Seine Funktionsweise ähnelt der Verarbeitung von Dokumenten und Bildern durch große Sprachmodelle, indem es Videos mit einer Auszeichnungssprache zusammenfasst, um sie verständlicher zu machen. Das Modell unterhält einen Gedächtnismechanismus, der über Abfragen hinweg bestehen bleibt und mit der Komplexität der Videoinhalte Wissen akkumuliert.
Das Unternehmen plant, auf Basis dieser Modelle ein neues Paradigma der Videowahrnehmung zu schaffen, das die Analyse, Suche und Bearbeitung von Videomaterial ermöglicht. Diese Technologie kann in Branchen wie Sicherheit, Werbung, Sport und Automobil eingesetzt werden, in denen große Mengen an Videoinformationen anfallen.
Im Rahmen der Finanzierung hat TwelveLabs seine Zusammenarbeit mit Amazon Web Services vertieft. Seine Dienste sind seit 2025 im AWS Marketplace verfügbar und bieten über Amazon Bedrock gehosteten Zugriff auf Basismodelle. TwelveLabs hat eine mehrjährige Verpflichtung unterzeichnet, um Video-Inferenz-Workloads auf Basis von AWS Trainium-Chips zu optimieren; zukünftige Spitzenmodelle werden erstmals auf der AWS-Plattform verfügbar sein.
