Metas neues KI-Modell kennzeichnet und verfolgt jedes Objekt in deinen Videos

Metas neues KI-Modell, Segment Anything Model 2 (SAM 2), kann Objekte in einem Video markieren und verfolgen, während sie sich bewegen, was die Videobearbeitung und -analyse erleichtert. Im Gegensatz zu seinem Vorgänger, der auf Bilder beschränkt war, repräsentiert die Echtzeit-Segmentierung von SAM 2 eine bedeutende technische Weiterentwicklung. Diese Fähigkeit ermöglicht es der KI, bewegte Bilder zu verarbeiten und Elemente zu unterscheiden, auch wenn sie aus dem Bild und wieder zurückkehren. Die Segmentierung ist der Prozess, bei dem bestimmt wird, welche Pixel zu welchen Objekten gehören, was die Bearbeitung komplexer Bilder erleichtert. Das ursprüngliche SAM ermöglichte diverse Anwendungen, wie z.B. die Analyse von Korallenriffen, die Katastrophenhilfe mit Satellitenbildern und die Erkennung von Hautkrebs in Zellbildern. SAM 2 erweitert diese Fähigkeiten auf Videos, was erst kürzlich durch Fortschritte in der KI-Technologie möglich wurde. Meta hat eine Datenbank mit 50.000 Videos für die Schulung von SAM 2 veröffentlicht, aufbauend auf 100.000 zuvor verwendeten Videos. Obwohl SAM 2 derzeit kostenlos und frei zugänglich ist, erfordert die Echtzeit-Video-Segmentierung erhebliche Rechenleistung, was darauf hindeutet, dass es möglicherweise nicht ewig kostenlos bleibt. SAM 2 kann die Videobearbeitung revolutionieren, indem es die einfache Manipulation von Objekten innerhalb von Szenen und interaktiven Videos ermöglicht. Meta sieht seine Verwendung in der Ausbildung von Computer-Vision-Systemen für autonomes Fahren, wo genaues Objektverfolgen von entscheidender Bedeutung ist. Trotz der Hype um AI-generierte Videos könnten SAM 2s Bearbeitungsfähigkeiten jedoch größeren Einfluss auf die Integration von KI in die Videoproduktion haben. Andere Unternehmen wie Google und Adobe entwickeln auch KI-Werkzeuge für Videozusammenfassung und -Bearbeitung, was ein wettbewerbsfähiges Umfeld in der AI-Video-Technologie zeigt.