Renesas And Syntiant Develop Voice-controlled Multimodal AI Solution Combining Advanced Vision And Voice Technologies

Ponovno objavil Platon

Spremljevalci: 0

Renesas Corporation, vodilni dobavitelj naprednih polprevodniških rešitev, in Syntiant Corp., podjetje za tehnologijo čipov za globoko učenje, ki napreduje pri nizkoenergijski inteligentni obdelavi glasu in senzorjev v robnih napravah, je napovedalo skupni razvoj glasovno nadzorovane multimodalne rešitve umetne inteligence, ki omogoča brezkontaktno delovanje pri nizki porabi energije za obdelavo slik v IoT in edge na osnovi vizualne umetne inteligence. sistemi, kot so avtomati za samostojno blagajno, varnostne kamere in videokonferenčni sistemi ter pametne naprave, kot so robotske čistilne naprave.

Nova rešitev združuje Renesas Serija RZ/V vision AI mikroprocesorska enota (MPU) in nizkoenergijski multimodalni Syntiant z več funkcijami NDP120 Neural Decision Processor za zagotavljanje naprednih zmožnosti obdelave glasu in slike. Skupna rešitev ima stalno vklopljeno funkcionalnost s hitro glasovno aktivacijo iz stanja pripravljenosti za izvajanje prepoznavanja predmetov, prepoznavanja obraza in drugih nalog, ki temeljijo na vidu in so kritične funkcije v varnostnih kamerah in drugih sistemih.

Na primer, medtem ko uporabniško določeni glasovni znaki poganjajo aktivacijo in delovanje sistema, prepoznavanje vision AI sledi vedenju operaterja in nadzoruje delovanje ali izda opozorilo, ko so zaznana sumljiva dejanja.

Multimodalna arhitektura olajša ustvarjanje brezstičnih uporabniških izkušenj za sisteme, ki temeljijo na AI. Uporaba namenskega, energijsko učinkovitega čipa za prepoznavanje glasu zmanjša porabo energije v stanju pripravljenosti in hkrati pospeši razvoj sistema, ker je mogoče razviti programsko opremo neodvisno od funkcionalnosti AI vision.

"Predvidevamo, da se bo povpraševanje po multimodalnih sistemih, ki uporabljajo več tokov vhodnih informacij, tako slikovnih kot glasovnih, povečalo kot način za izboljšanje enostavnosti uporabe in varnosti," pravi Hiroto Nitta, višji podpredsednik in vodja poslovanja SoC v poslovno enoto za internet stvari in infrastrukturo pri Renesasu.

»S sodelovanjem med Renesasom, ponudnikom tehnologije umetne inteligence z nizko porabo energije, in Syntiantom, ponudnikom tehnologije glasovne umetne inteligence, bomo pospešili uvedbo tehnologije umetne inteligence z nizko porabo, ultra majhne pametne glasovne tehnologije v vgrajenih sistemih in zagotovili nove kombinirane rešitve za stranke po vsem svetu.”

»Glasovni uporabniški vmesniki bodo strankam omogočili zagotavljanje novih uporabniških izkušenj, ki bodo naslednjo generacijo inovativnih idej prenesle od koncepta do realnosti, pravi izvršni direktor Syntiant Kurt Busch. »Globalno smo poslali že več kot 15 milijonov naših NDP za globoko učenje, da bi omogočili vedno vključen glas v najrazličnejših potrošniških in industrijskih aplikacijah IoT. Naše sodelovanje z Renesasom prinaša zmogljivo rešitev za glas in sliko z nizko porabo energije, ki bo zagotovo pospešila oprijem med globalno bazo strank v različnih napravah in primerih uporabe.«

MPU serije Renesas RZ/V za vizualno umetno inteligenco vključuje Renesasov ekskluzivni pospeševalnik DRP-AI (Dynamically Reconfigurable Processor-AI) in združuje visoko natančno sklepanje umetne inteligence z energetsko učinkovitostjo, ki je med najboljšimi v industriji. Ta vrhunska moč odpravlja potrebo po ukrepih za razpršitev toplote, kot so hladilni odvodi ali hladilni ventilatorji, kar zmanjša stroške kosovnice (BOM) in omogoča integracijo umetne inteligence vida v široko paleto vgrajenih aplikacij.

Čip Syntiant NDP120 vključuje prefinjene zmožnosti umetne inteligence, ki jih je mogoče uporabiti za izvajanje številnih visoko natančnih prostoročnih glasovnih funkcij, vključno s prepoznavanjem zvočnikov, zaznavanjem ključnih besed, več besedami za bujenje in prepoznavanjem lokalnih ukazov. NDP2, opremljen z motorjem za sklepanje nevronskih omrežij Syntiant Core 120, lahko hkrati poganja več aplikacij, medtem ko porabo energije zmanjša na 1 mW baterije.

Nova glasovno vodena večmodalna rešitev AI uporablja več medsebojno združljivih naprav iz širšega portfelja Renesas, da strankam zagotovi napredno platformo za izdelavo prototipov za hitrejši čas do trga in zmanjšano tveganje. Nova rešitev je del Renesasove Zmagovalne kombinacije, ki predstavlja prepričljive analogne, močne in vgrajene kombinacije izdelkov za obdelavo, ki strankam pomagajo pospešiti njihovo oblikovanje in hitreje priti na trg.