Renesas và Syntiant phát triển giải pháp AI đa phương thức điều khiển bằng giọng nói kết hợp công nghệ giọng nói và thị giác tiên tiến

Được xuất bản lại bởi Plato

Người theo dõi: 0

Tập đoàn điện tử Renesas, nhà cung cấp hàng đầu các giải pháp bán dẫn tiên tiến và Tập đoàn Syntiant, một công ty công nghệ chip học sâu đang phát triển khả năng xử lý giọng nói và cảm biến thông minh sử dụng năng lượng thấp trong các thiết bị biên, đã công bố cùng phát triển giải pháp AI đa phương thức điều khiển bằng giọng nói cho phép vận hành không tiếp xúc với năng lượng thấp để xử lý hình ảnh trong tầm nhìn dựa trên AI IoT và biên các hệ thống, chẳng hạn như máy tự kiểm tra, camera an ninh và hệ thống hội nghị video cũng như các thiết bị thông minh như thiết bị làm sạch robot.

Giải pháp mới kết hợp Renesas Dòng RZ/V bộ vi xử lý AI (MPU) của Vision và Syntiant đa phương thức, đa tính năng sử dụng năng lượng thấp NDP120 Bộ xử lý quyết định thần kinh để cung cấp khả năng xử lý giọng nói và hình ảnh tiên tiến. Giải pháp chung có chức năng luôn bật với khả năng kích hoạt nhanh bằng giọng nói từ chế độ chờ để thực hiện nhận dạng đối tượng, nhận dạng khuôn mặt và các tác vụ dựa trên tầm nhìn khác là những chức năng quan trọng trong camera an ninh và các hệ thống khác.

Ví dụ: trong khi các tín hiệu giọng nói do người dùng xác định sẽ thúc đẩy quá trình kích hoạt và vận hành hệ thống, thì tính năng nhận dạng AI tầm nhìn sẽ theo dõi hành vi của người vận hành và điều khiển hoạt động hoặc đưa ra cảnh báo khi phát hiện các hành động đáng ngờ.

Kiến trúc đa phương thức giúp việc tạo trải nghiệm người dùng không tiếp xúc cho các hệ thống dựa trên AI tầm nhìn trở nên dễ dàng hơn. Sử dụng chip chuyên dụng, tiết kiệm năng lượng để nhận dạng giọng nói giúp giảm tiêu thụ điện năng ở chế độ chờ đồng thời tăng tốc độ phát triển hệ thống vì có thể phát triển phần mềm độc lập với chức năng AI thị giác.

Hiroto Nitta, phó chủ tịch cấp cao kiêm người đứng đầu bộ phận kinh doanh SoC tại Đơn vị kinh doanh cơ sở hạ tầng và IoT tại Renesas.

“Thông qua sự hợp tác giữa Renesas, nhà cung cấp công nghệ AI hình ảnh năng lượng thấp và Syntiant, nhà cung cấp công nghệ AI giọng nói, chúng tôi sẽ đẩy nhanh việc áp dụng công nghệ AI giọng nói thông minh siêu nhỏ, năng lượng thấp trong các hệ thống nhúng và mang đến những giải pháp mới. giải pháp kết hợp cho khách hàng trên toàn cầu.”

Giám đốc điều hành Syntiant Kurt Busch cho biết: “Giao diện người dùng dựa trên giọng nói sẽ giúp khách hàng có thể cung cấp trải nghiệm người dùng mới, mang đến những ý tưởng đổi mới thế hệ tiếp theo từ ý tưởng đến hiện thực”. “Chúng tôi đã vận chuyển hơn 15 triệu NDP học sâu của mình trên toàn cầu để cho phép giọng nói luôn bật trong nhiều ứng dụng IoT công nghiệp và tiêu dùng. Sự hợp tác của chúng tôi với Renesas mang đến giải pháp hình ảnh và giọng nói mạnh mẽ, tiêu thụ ít năng lượng, chắc chắn sẽ tăng tốc độ thu hút giữa cơ sở khách hàng toàn cầu trong nhiều thiết bị và trường hợp sử dụng khác nhau.”

MPU dòng RZ/V của Renesas dành cho AI thị giác kết hợp bộ tăng tốc DRP-AI (Bộ xử lý có thể cấu hình lại động-AI) độc quyền của Renesas và kết hợp suy luận AI có độ chính xác cao với hiệu suất năng lượng thuộc hàng tốt nhất trong ngành. Hiệu suất năng lượng vượt trội này giúp loại bỏ nhu cầu sử dụng các biện pháp phân tán nhiệt như tản nhiệt hoặc quạt làm mát, giúp giảm chi phí hóa đơn vật liệu (BOM) và giúp tích hợp AI thị giác vào nhiều ứng dụng nhúng.

Chip Syntiant NDP120 tích hợp các khả năng AI tinh vi có thể được sử dụng để thực hiện nhiều chức năng thoại rảnh tay, có độ chính xác cao, bao gồm nhận dạng người nói, phát hiện từ khóa, nhiều từ đánh thức và nhận dạng lệnh cục bộ. Được trang bị công cụ suy luận mạng thần kinh Syntiant Core 2, NDP120 cũng có thể chạy nhiều ứng dụng cùng lúc đồng thời giảm thiểu mức tiêu thụ điện năng xuống mức pin 1mW.

Giải pháp AI đa phương thức được điều khiển bằng giọng nói mới sử dụng nhiều thiết bị tương thích lẫn nhau từ danh mục rộng hơn của Renesas để cung cấp cho khách hàng nền tảng tạo mẫu nâng cao nhằm rút ngắn thời gian tiếp thị và giảm rủi ro. Giải pháp mới là một phần của Renesas Kết hợp chiến thắng, có tính năng kết hợp sản phẩm xử lý tương tự, sức mạnh và nhúng hấp dẫn giúp khách hàng tăng tốc thiết kế và tiếp cận thị trường nhanh hơn.