Renesas Electronics Corporation, 고급 반도체 솔루션의 최고의 공급업체, (주)신티엔트에지 장치에서 저전력 지능형 음성 및 센서 처리를 발전시키는 딥 러닝 칩 기술 회사가 비전 AI 기반 IoT 및 에지에서 이미지 처리를 위한 저전력 비접촉 작동을 가능하게 하는 음성 제어 다중 모드 AI 솔루션의 공동 개발을 발표했습니다. 자동 계산대, 보안 카메라 및 화상 회의 시스템과 같은 시스템 및 로봇 청소 장치와 같은 스마트 가전 제품.
새로운 솔루션은 Renesas를 결합합니다. RZ/V 시리즈 비전 AI 마이크로프로세서 유닛(MPU) 및 저전력 다중 모드, 다중 기능 Syntiant NDP120 고급 음성 및 이미지 처리 기능을 제공하는 신경 결정 프로세서. 공동 솔루션은 대기 모드에서 음성으로 빠르게 활성화되는 상시 작동 기능을 통해 보안 카메라 및 기타 시스템에서 중요한 기능인 물체 인식, 얼굴 인식 및 기타 비전 기반 작업을 수행합니다.
예를 들어, 사용자 정의 음성 신호가 활성화 및 시스템 작동을 유도하는 반면, 비전 AI 인식은 운영자 행동을 추적하고 작동을 제어하거나 의심스러운 작업이 감지되면 경고를 발행합니다.
다중 모드 아키텍처를 사용하면 비전 AI 기반 시스템을 위한 비접촉 사용자 경험을 더 쉽게 생성할 수 있습니다. 음성 인식을 위한 전력 효율적인 전용 칩을 사용하면 비전 AI 기능과 독립적으로 소프트웨어를 개발할 수 있어 시스템 개발 속도를 높이는 동시에 대기 전력 소비를 줄입니다.
Nitta 히로토 수석 부사장 겸 SoC 사업부 총괄은 “사용 편의성과 안전성을 모두 개선하기 위해 이미지와 음성 모두 여러 입력 정보 스트림을 사용하는 다중 모드 시스템에 대한 수요가 증가할 것으로 예상한다”고 말했다. Renesas의 IoT 및 인프라 사업부.
“저전력 영상 AI 기술을 제공하는 Renesas와 음성 AI 기술을 제공하는 Syntiant의 협력을 통해 임베디드 시스템에 저전력, 초소형 스마트 음성 AI 기술의 채택을 가속화하고 새로운 전 세계 고객에게 결합된 솔루션을 제공합니다."
"음성 기반 사용자 인터페이스를 통해 고객은 차세대 혁신적인 아이디어를 개념에서 현실로 가져오는 새로운 사용자 경험을 제공할 수 있게 될 것입니다."라고 Syntiant의 CEO인 Kurt Busch는 말합니다. “우리는 이미 15만 개 이상의 딥 러닝 NDP를 전 세계적으로 출하하여 다양한 소비자 및 산업용 IoT 애플리케이션에서 상시 통화를 지원합니다. Renesas와의 협력은 다양한 장치 및 사용 사례에서 전 세계 고객 기반의 관심을 가속화할 강력한 저전력 음성 및 이미지 솔루션을 제공합니다.”
비전 AI용 Renesas RZ/V 시리즈 MPU는 Renesas의 독점적인 DRP-AI(Dynamically Reconfigurable Processor-AI) 가속기를 통합하고 고정밀 AI 추론과 업계 최고 수준의 전력 효율성을 결합합니다. 이러한 우수한 전력 성능으로 인해 방열판이나 냉각 팬과 같은 열 분산 수단이 필요하지 않으므로 BOM(Bill of Material) 비용을 줄이고 비전 AI를 광범위한 임베디드 애플리케이션에 통합할 수 있습니다.
Syntiant NDP120 칩은 화자 인식, 키워드 감지, 다중 깨우기 단어 및 로컬 명령 인식을 포함하여 많은 고정밀 핸즈프리 음성 기능을 구현하는 데 사용할 수 있는 정교한 AI 기능을 통합합니다. Syntiant Core 2 신경망 추론 엔진과 함께 패키지된 NDP120은 전력 소비를 1mW 배터리 전력으로 최소화하면서 동시에 여러 애플리케이션을 실행할 수도 있습니다.
새로운 음성 제어 다중 모드 AI 솔루션은 광범위한 Renesas 포트폴리오의 여러 상호 호환 장치를 사용하여 고객에게 더 빠른 시장 출시 및 위험 감소를 위한 향상된 프로토타이핑 플랫폼을 제공합니다. 새로운 솔루션은 Renesas의 일부입니다. 우승 조합, 고객이 설계를 가속화하고 시장 출시 시간을 단축하는 데 도움이 되는 강력한 아날로그, 전력 및 임베디드 처리 제품 조합이 특징입니다.
유효성
회로도 및 BOM 목록을 포함하여 새로운 다중 모드 AI 솔루션에 대한 참조 설계를 지금 사용할 수 있습니다.
자세한 내용은 다음을 방문하십시오. 멀티모달 AI 솔루션.
아래 또는 통해이 기사에 대한 의견 트위터 : @IoTNow_OR 뿡뿡
