瑞萨电子公司，先进半导体解决方案的主要供应商，以及 新天特公司一家在边缘设备中推进低功耗智能语音和传感器处理的深度学习芯片技术公司，宣布联合开发语音控制的多模态人工智能解决方案，可实现基于视觉人工智能的物联网和边缘图像处理的低功耗非接触式操作系统，如自助结账机、安全摄像头和视频会议系统，以及智能设备，如机器人清洁设备。
新的解决方案结合了瑞萨电子 RZ/V系列 视觉 AI 微处理器单元 (MPU) 和低功耗多模式、多功能 Syntiant 新民主党120 神经决策处理器提供先进的语音和图像处理功能。 该联合解决方案具有始终在线的功能，可从待机模式快速语音触发激活，以执行对象识别、面部识别和其他基于视觉的任务，这些任务是安全摄像头和其他系统中的关键功能。
例如，用户定义的语音提示驱动激活和系统操作，而视觉人工智能识别则跟踪操作员行为并控制操作或在检测到可疑行为时发出警告。
多模式架构可以更轻松地为基于视觉人工智能的系统创建非接触式用户体验。 使用专用的高能效芯片进行语音识别可以降低待机功耗，同时加快系统开发速度，因为可以独立于视觉人工智能功能开发软件。
高级副总裁兼 SoC 业务负责人 Hiroto Nitta 表示：“我们预计，对使用图像和语音等多种输入信息流的多模式系统的需求将会增加，作为提高易用性和安全性的一种方式。”瑞萨电子的物联网和基础设施业务部门。
“通过低功耗图像人工智能技术提供商瑞萨电子与语音人工智能技术提供商Syntiant的合作，我们将加速低功耗、超小型智能语音人工智能技术在嵌入式系统中的采用，并提供新的解决方案。为全球客户提供综合解决方案。”
Syntiant 首席执行官 Kurt Busch 表示：“基于语音的用户界面将使客户能够提供新的用户体验，将下一代创新理念从概念变为现实。” “我们已经在全球范围内发货了超过 15 万个深度学习 NDP，以在各种消费和工业物联网应用中实现始终在线的语音。 我们与瑞萨电子的合作提供了功能强大、低功耗的语音和图像解决方案，必将在各种设备和用例中加速全球客户群的吸引力。”
瑞萨电子用于视觉 AI 的 RZ/V 系列 MPU 采用了瑞萨电子独有的 DRP-AI（动态可重构处理器-AI）加速器，将高精度 AI 推理与业界最佳的功效相结合。 这种卓越的功率性能无需散热器或冷却风扇等散热措施，从而降低了物料清单 (BOM) 成本，并使将视觉 AI 集成到各种嵌入式应用中成为可能。
Syntiant NDP120芯片集成了先进的AI功能，可用于实现许多高精度、免提语音功能，包括说话人识别、关键字检测、多个唤醒词和本地命令识别。 NDP2 配备 Syntiant Core 120 神经网络推理引擎，还可以同时运行多个应用程序，同时将功耗降至 1mW 电池电量。
新的语音控制多模式人工智能解决方案使用瑞萨更广泛的产品组合中的多个相互兼容的设备，为客户提供更高的原型设计平台，以加快上市时间并降低风险。 新解决方案是瑞萨电子的一部分 获胜组合，其中具有引人注目的模拟、电源和嵌入式处理产品组合，可帮助客户加快设计速度并更快地将产品推向市场。
订购
新的多模式人工智能解决方案的参考设计现已推出，包括电路图和 BOM 列表。
更多资讯，敬请访问 多模态人工智能解决方案.
在下面或通过评论这篇文章 推特：@IoTNow_OR @jcIoTnow
