半导体制造商Renesas与深度学习芯片技术公司的语法合作开发语音控制的多模式AI解决方案，该解决方案可以在基于AI的IoT和Edge Systems中的图像处理，例如自我检查机器，安全摄像头，安全摄像头，，安全摄像头，，安全性无接触式操作，以进行图像处理。和视频会议系统以及机器人清洁设备等智能设备。
新解决方案结合了Renesas RZ/V系列视觉AI微处理器单元（MPU）和低功率多模式，多功能的语法NDP120 NDP120神经决策处理器，以提供高级语音和图像处理功能。该联合解决方案具有始终在线功能，并通过备用模式的快速语音触发激活来执行对象识别，面部识别和其他基于视觉的任务，这些任务是安全摄像机和其他系统中的关键功能。例如，当用户定义的语音提示驱动激活和系统操作时，视觉AI识别符合操作员行为并控制操作或在检测到可疑动作时发出警告。
多模式体系结构使为基于视觉AI的系统创建非接触式用户体验变得更加容易。使用专用的，功率高效的芯片进行语音识别，可以在加速系统开发的同时降低待机功耗，因为可以独立于视觉AI功能，可以开发软件，报告肾脏。
“我们预计，对使用多个输入信息（图像和声音）的多模式系统的需求将增加前进，以提高使用易用性和安全性，” SOC业务高级副总裁兼高级副总裁Hiroto Nitta说。在Renesas的物联网和基础设施业务部门。“通过低功耗图像AI技术领导者Renesas和语音AI技术领导者语法的合作，我们将加快采用嵌入式系统中的低功率，超级智能智能语音AI技术并提供新的全球客户的解决方案。”
语法首席执行官Kurt Busch表示：“基于语音的用户界面将使客户能够提供新的用户体验，从而将下一代创新的想法从概念到现实。“我们已经在全球范围内运送了超过1500万个深度学习的NDP，以在各种消费者和工业的物联网应用中始终发表声音。我们与Renesas的合作提供了强大的低功率语音和图像解决方案，可以肯定地在各种设备和用例中加速全球客户群之间的牵引力。”
Renesas RZ/V系列MPU用于Vision AI，将Renesas的独家DRP-AI（动态可重新配置的处理器-AI）加速器结合在一起，并将高精度AI推断与行业中最佳的功率效率结合在一起。这种卓越的功率性能消除了对散热器或冷却风扇等热分散措施的需求，从而降低了材料清单（BOM）的成本，并可以将视觉AI整合到广泛的嵌入式应用程序中。
语法NDP120芯片结合了复杂的AI功能，可用于实现许多高精度，免提的语音功能，包括说话者识别，关键字检测，多个唤醒单词和本地命令识别。NDP120用语法核心2神经网络推理引擎包装，还可以同时运行多个应用程序，同时将功耗最小化为1MW电池电量。
阅读更多5G的力量和人工智能变更技术的技术会将明天的技术创新吗？
新的语音控制的多模式AI解决方案使用了更广泛的Renesas产品组合中的多个相互兼容的设备，为客户提供了一个高架的原型制作平台，以更快地推销市场和降低风险。新解决方案是Renesas获胜组合的一部分，该组合具有引人注目的模拟，功率和嵌入式处理产品组合，可帮助客户加速其设计并更快地推向市场。
可用性
现已提供新的多模式AI解决方案的参考设计，包括电路图和BOM列表。
