Da Sony un chip video che elabora le immagini con il machine learning

Sony CMOS
Immagine © Sony

Sony ha sviluppato un nuovo sensore CMOS (Complementary Metal Oxide Semiconductor) che ha già al suo interno algoritmi di machine learning in grado di elaborare un’immagine senza che questa debba necessariamente lasciare il chip.

Uno dei problemi nella computer vision è quello della latenza: le immagini devono essere mandate a una unità centrale (o, peggio, a un computer nel cloud) per l’elaborazione e il responso. Traffico di dati e ritardi sono un male necessario, poiché il chip della fotocamera di solito ha l’unico compito di catturare le immagini. Su sistemi che hanno bisogno di reazioni quasi immediate, come ad esempio le auto a guida autonoma, l’elaborazione avviene direttamente sul veicolo, ma anche qui la latenza è un collo di bottiglia che rallenta tutto il processo.

Questi chip invece, progettati nel laboratorio Sony ad Atsugi in Giappone, si occupano di espletare un’elaborazione preliminare, selezionando per l’invio all’hub solo quelle immagini – o parti di esse – considerate rilevanti in base alla programmazione. Gli ambiti di applicazione potrebbero riguardare tutti quei deployment edge (sul dispositivo) dove serve elaborazione immediata, oppure dove sarebbe utile non sovraccaricare la trasmissione di dati o i processori di elaborazione centrali. Oltre alle già citate auto a guida autonoma penso anche ai droni (per evitare collisioni servono reazioni in tempo reale) e a diverse applicazioni robotiche.

Per approfondire: Sony Builds AI Into a CMOS Image Sensor

Mi occupo da molti anni di intelligenza artificiale. Dopo la laurea in Management ho conseguito una specializzazione in Business Analytics a Wharton, una certificazione Artificial Intelligence Professional da IBM e una sul machine learning da Google Cloud. Ho trascorso la maggior parte della carriera – trent'anni - nel settore della cybersecurity, dove fra le altre cose sono stato consigliere del Ministro delle Comunicazioni e consulente di Telespazio (gruppo Leonardo). Oggi mi occupo prevalentemente di intelligenza artificiale, lavorando con un'azienda leader del settore e partecipando a iniziative della Commissione Europea. Questo blog è personale e le opinioni espresse appartengono ai singoli autori.