Meta's new AI model etichetta e traccia ogni oggetto nei tuoi video

Il nuovo modello di intelligenza artificiale di Meta, Segment Anything Model 2 (SAM 2), può etichettare e tracciare oggetti in un video mentre si muovono, migliorando le capacità di editing e analisi video. A differenza del suo predecessore, che era limitato alle immagini, la segmentazione in tempo reale di SAM 2 rappresenta un significativo avanzamento tecnico. Questa capacità consente all'IA di elaborare immagini in movimento e distinguere tra elementi, anche se si muovono fuori e tornano nel frame. La segmentazione è il processo di determinazione di quali pixel appartengono a quali oggetti, semplificando l'editing di immagini complesse. Il SAM originale ha facilitato varie applicazioni, come l'analisi delle barriere coralline, l'aiuto per le operazioni di soccorso in caso di disastri con immagini satellitari e la rilevazione del cancro della pelle in immagini cellulari. SAM 2 estende queste capacità ai video, reso possibile recentemente grazie ai progressi nell'IA. Meta ha rilasciato un database di 50.000 video per l'addestramento di SAM 2, oltre ai 100.000 video utilizzati in precedenza. Sebbene SAM 2 sia attualmente aperto e gratuito, la segmentazione video in tempo reale richiede una notevole potenza di calcolo, indicando che potrebbe non rimanere gratuito indefinitamente. SAM 2 potrebbe rivoluzionare l'editing video, consentendo una maggiore manipolazione degli oggetti all'interno delle scene e dei video interattivi. Meta immagina il suo utilizzo nell'addestramento di sistemi di visione computerizzata per veicoli autonomi, dove la tracciatura degli oggetti è cruciale. Nonostante l' hype sui video generati dall'IA, le capacità di editing di SAM 2 potrebbero essere più influenti nell'integrare l'IA nella creazione di video. Altre società, come Google e Adobe, stanno anche sviluppando strumenti di IA per la sintesi e l'editing video, mostrando un panorama competitivo nella tecnologia video AI.