Renesas e Syntiant sviluppano una soluzione IA multimodale a controllo vocale che combina tecnologie avanzate di visione e voce

Ripubblicato da Platone

Seguaci: 0

Renesas Electronics Corporation, uno dei principali fornitori di soluzioni avanzate per semiconduttori, e Syntiant Corp., una società di tecnologia dei chip di deep learning che promuove l'elaborazione intelligente di voce e sensori a bassa potenza nei dispositivi perimetrali, ha annunciato lo sviluppo congiunto di una soluzione AI multimodale a comando vocale che consente il funzionamento senza contatto a bassa potenza per l'elaborazione delle immagini in IoT e edge di visione basati su AI sistemi come macchine per il self-checkout, telecamere di sicurezza e sistemi di videoconferenza e dispositivi intelligenti come i dispositivi di pulizia robotica.

La nuova soluzione unisce le Renesas Serie RZ/V Vision AI microprocessore (MPU) e il Syntiant multimodale e multifunzionale a bassa potenza NDP120 Processore di decisione neurale per fornire capacità avanzate di elaborazione di voce e immagini. La soluzione congiunta offre funzionalità sempre attive con una rapida attivazione vocale dalla modalità standby per eseguire il riconoscimento di oggetti, il riconoscimento facciale e altre attività basate sulla visione che sono funzioni critiche nelle telecamere di sicurezza e altri sistemi.

Ad esempio, mentre i segnali vocali definiti dall'utente guidano l'attivazione e il funzionamento del sistema, il riconoscimento visivo AI tiene traccia del comportamento dell'operatore e controlla il funzionamento o emette un avviso quando vengono rilevate azioni sospette.

L'architettura multimodale semplifica la creazione di esperienze utente contactless per i sistemi di visione basati sull'intelligenza artificiale. L'utilizzo di un chip dedicato ed efficiente dal punto di vista energetico per il riconoscimento vocale riduce il consumo energetico in standby mentre accelera lo sviluppo del sistema perché è possibile sviluppare software indipendentemente dalla funzionalità AI di visione.

"Prevediamo che la domanda di sistemi multimodali che utilizzano più flussi di informazioni di input sia immagine che voce aumenterà in futuro come un modo per migliorare sia la facilità d'uso che la sicurezza", afferma Hiroto Nitta, vicepresidente senior e capo del business SoC in la Business Unit IoT e Infrastrutture di Renesas.

“Attraverso la collaborazione tra Renesas, un fornitore di tecnologia AI per immagini a bassa potenza, e Syntiant, un fornitore di tecnologia AI vocale, accelereremo l'adozione della tecnologia AI vocale intelligente a bassa potenza e ultra-piccola nei sistemi embedded e forniremo nuovi soluzioni combinate per i clienti a livello globale.”

"Le interfacce utente basate sulla voce consentiranno ai clienti di offrire nuove esperienze utente che portano la prossima generazione di idee innovative dal concetto alla realtà", afferma Kurt Busch, CEO di Syntiant. “Abbiamo già spedito più di 15 milioni dei nostri NDP di deep learning a livello globale per abilitare la voce sempre attiva in un'ampia varietà di applicazioni IoT consumer e industriali. La nostra collaborazione con Renesas offre una soluzione voce e immagine potente e a basso consumo che sicuramente accelererà la trazione tra una base di clienti globale in una varietà di dispositivi e casi d'uso.

La MPU Renesas serie RZ/V per la visione AI incorpora l'esclusivo acceleratore DRP-AI (Dynamically Reconfigurable Processor-AI) di Renesas e combina l'inferenza AI ad alta precisione con un'efficienza energetica tra le migliori del settore. Queste prestazioni di potenza superiori eliminano la necessità di misure di dispersione del calore come dissipatori di calore o ventole di raffreddamento, il che riduce il costo della distinta base (BOM) e rende possibile l'integrazione dell'AI di visione in un'ampia gamma di applicazioni integrate.

Il chip Syntiant NDP120 incorpora sofisticate capacità di intelligenza artificiale che possono essere utilizzate per implementare molte funzioni vocali ad alta precisione e a mani libere, tra cui il riconoscimento dell'altoparlante, il rilevamento delle parole chiave, più parole di attivazione e il riconoscimento dei comandi locali. Dotato del motore di inferenza della rete neurale Syntiant Core 2, NDP120 può anche eseguire più applicazioni contemporaneamente riducendo al minimo il consumo energetico a 1 mW di potenza della batteria.

La nuova soluzione di intelligenza artificiale multimodale a comando vocale utilizza più dispositivi reciprocamente compatibili del più ampio portafoglio Renesas per fornire ai clienti una piattaforma di prototipazione elevata per un time to market più rapido e rischi ridotti. La nuova soluzione fa parte di Renesas Combinazioni vincenti, che presentano combinazioni di prodotti di elaborazione analogici, di alimentazione e embedded convincenti che aiutano i clienti ad accelerare i loro progetti e ad arrivare sul mercato più velocemente.