Renesas i Syntiant opracowują sterowane głosem multimodalne rozwiązanie AI, łączące zaawansowane technologie wizyjne i głosowe

Opublikowane ponownie przez Plato

Obserwuje: 0

Firma Renesas Electronics Corporation, wiodący dostawca zaawansowanych rozwiązań półprzewodnikowych, oraz Firma Syntiant., firma zajmująca się technologią chipów do głębokiego uczenia się, rozwijająca inteligentne przetwarzanie głosu i czujników o niskim zużyciu energii w urządzeniach brzegowych, ogłosiła wspólne opracowanie sterowanego głosem multimodalnego rozwiązania AI, które umożliwia bezkontaktowe działanie przy niskim zużyciu energii w celu przetwarzania obrazu w wizyjnej sztucznej inteligencji IoT i krawędzi systemów, takich jak kasy samoobsługowe, kamery bezpieczeństwa i systemy wideokonferencji, a także inteligentne urządzenia, takie jak zrobotyzowane urządzenia czyszczące.

Nowe rozwiązanie łączy Renesas Seria RZ/V Vision AI mikroprocesor (MPU) oraz multimodalny, wielofunkcyjny Syntiant o niskim zużyciu energii NPR120 Neuronowy procesor decyzyjny zapewniający zaawansowane możliwości przetwarzania głosu i obrazu. Wspólne rozwiązanie oferuje zawsze włączoną funkcjonalność z szybką aktywacją głosową z trybu gotowości w celu rozpoznawania obiektów, rozpoznawania twarzy i innych zadań wizyjnych, które są krytycznymi funkcjami w kamerach bezpieczeństwa i innych systemach.

Na przykład, podczas gdy zdefiniowane przez użytkownika wskazówki głosowe napędzają aktywację i działanie systemu, rozpoznawanie sztucznej inteligencji śledzi zachowanie operatora i kontroluje działanie lub wyświetla ostrzeżenie w przypadku wykrycia podejrzanych działań.

Multimodalna architektura ułatwia tworzenie bezkontaktowych doświadczeń użytkownika dla wizyjnych systemów opartych na sztucznej inteligencji. Korzystanie z dedykowanego, energooszczędnego chipa do rozpoznawania głosu zmniejsza zużycie energii w trybie czuwania, jednocześnie przyspieszając rozwój systemu, ponieważ możliwe jest tworzenie oprogramowania niezależnie od funkcjonalności wizyjnej sztucznej inteligencji.

„Przewidujemy, że popyt na systemy multimodalne, które wykorzystują wiele strumieni informacji wejściowych, zarówno obrazowych, jak i głosowych, będzie rosnąć, jako sposób na poprawę zarówno łatwości użytkowania, jak i bezpieczeństwa”, mówi Hiroto Nitta, starszy wiceprezes i szef działu SoC w jednostka biznesowa IoT i infrastruktury w Renesas.

„Dzięki współpracy między firmą Renesas, dostawcą technologii sztucznej inteligencji obrazu o niskim zużyciu energii, a firmą Syntiant, dostawcą technologii sztucznej inteligencji głosowej, przyspieszymy wdrażanie niskoenergetycznej, bardzo małej inteligentnej technologii sztucznej inteligencji głosowej w systemach wbudowanych i dostarczymy nowe połączonych rozwiązań dla klientów na całym świecie”.

„Głosowe interfejsy użytkownika umożliwią klientom dostarczanie nowych doświadczeń, które przeniosą innowacyjne pomysły nowej generacji od koncepcji do rzeczywistości” — mówi Kurt Busch, dyrektor generalny firmy Syntiant. „Dostarczyliśmy już ponad 15 milionów naszych NDP do głębokiego uczenia się na całym świecie, aby zapewnić zawsze aktywny głos w szerokiej gamie konsumenckich i przemysłowych aplikacji IoT. Nasza współpraca z Renesas zapewnia wydajne, energooszczędne rozwiązanie głosowe i obrazowe, które z pewnością przyspieszy trakcję wśród globalnej bazy klientów w różnych urządzeniach i przypadkach użycia”.

Renesas RZ/V Series MPU dla AI wizyjnej zawiera ekskluzywny akcelerator DRP-AI (Dynamically Reconfigurable Processor-AI) Renesas i łączy wysoce precyzyjne wnioskowanie AI z wydajnością energetyczną, która jest jedną z najlepszych w branży. Ta doskonała wydajność energetyczna eliminuje potrzebę stosowania środków rozpraszania ciepła, takich jak radiatory lub wentylatory chłodzące, co zmniejsza koszt zestawienia materiałów (BOM) i umożliwia integrację sztucznej inteligencji wizyjnej z szeroką gamą wbudowanych aplikacji.

Chip Syntiant NDP120 zawiera zaawansowane funkcje sztucznej inteligencji, które można wykorzystać do wdrożenia wielu precyzyjnych funkcji głosowych bez użycia rąk, w tym rozpoznawania mówcy, wykrywania słów kluczowych, wielu słów budzenia i rozpoznawania lokalnych poleceń. Wyposażony w silnik wnioskowania sieci neuronowej Syntiant Core 2, NDP120 może również uruchamiać wiele aplikacji jednocześnie, minimalizując zużycie energii do 1 mW mocy baterii.

Nowe, sterowane głosem, multimodalne rozwiązanie AI wykorzystuje wiele wzajemnie kompatybilnych urządzeń z szerszego portfolio Renesas, aby zapewnić klientom zaawansowaną platformę do prototypowania, która skraca czas wprowadzania produktu na rynek i zmniejsza ryzyko. Nowe rozwiązanie jest częścią projektu Renesas Zwycięskie kombinacje, które oferują atrakcyjne kombinacje produktów analogowych, mocy i wbudowanych procesorów, które pomagają klientom przyspieszyć ich projekty i szybciej wprowadzać je na rynek.