选型指南

瑞萨电子与Syntiant共同开发一款语音控制的多模态AI解决方案

发布时间:2021-07-28 00:00:00 责任编辑:lina

【导读】瑞萨电子集团和致力在边缘设备领域推动低功耗智能语音及传感器处理技术的深度学习芯片技术供应商Syntiant宣布,共同开发出一款语音控制的多模态AI解决方案,在基于视觉AI的物联网和边缘系统(如自助收银机、安全摄像头和视频会议系统)以及智能家电(如扫地机器人等)中实现低功耗、非接触式的图像处理。
 
 瑞萨电子与Syntiant共同开发一款语音控制的多模态AI解决方案
全新方案在物联网和边缘应用中
实现对嵌入式视觉AI系统的低功耗语音控制操作
 
2021 年 7 月 28 日,日本东京和美国加州尔湾讯 - 全球半导体解决方案供应商瑞萨电子集团(TSE:6723),和致力在边缘设备领域推动低功耗智能语音及传感器处理技术的深度学习芯片技术供应商Syntiant今日宣布,共同开发出一款语音控制的多模态AI解决方案,在基于视觉AI的物联网和边缘系统(如自助收银机、安全摄像头和视频会议系统)以及智能家电(如扫地机器人等)中实现低功耗、非接触式的图像处理。
 
全新解决方案结合了瑞萨RZ/V系列视觉AI微处理器(MPU)和低功耗多模态、多功能Syntiant NDP120 Neural Decision Processor™,以提供先进的语音和图像处理功能。该解决方案具备常开功能,可从待机模式快速通过语音激活,以执行物体识别、面部识别等视觉任务,以及其它安防摄像机等系统的关键功能。如当用户定义的语音提示激活并运行系统时,视觉AI将识别跟踪操作员的行为,并控制操作或在检测到可疑行为时发出警告。
 
多模态架构使得为基于视觉AI的系统创建非接触式用户体验变得更加容易。由于可以独立于视觉AI功能进行软件开发,因此利用专用的高能效芯片进行语音识别可降低待机功耗,并加速系统开发。
 
瑞萨电子高级副总裁、物联网及基础设施事业本部SoC事业部部长新田启人表示:“我们预计,作为提高易用性和安全性的一种有效途径,对采用多输入信息流(包括图像和语音)的多模态系统需求将会增加。拥有先进低功耗图像AI技术的瑞萨与语音AI技术优秀供应商Syntiant紧密合作,将加速低功耗、超小型智能语音AI技术在嵌入式系统中的应用,并为全球客户带来新的综合解决方案。”
 
Syntiant CEO Kurt Busch表示:“基于语音的用户界面让客户获得全新用户体验,将下一代创新理念从概念变为现实。我们的深度学习NDP全球出货量已超过1500万片,为各类消费和工业物联网应用实现了常开语音功能。我们同瑞萨的合作打造了强大、低功耗的语音及图像解决方案,相信它将会加速推动全球客户在丰富设备和案例中的应用。”
 
用于视觉AI的瑞萨RZ/V系列MPU集成了瑞萨独有的DRP-AI(动态可配置处理器-AI)加速器,并将高精度AI推理与业界领先能效充分结合。卓越能效可消除对散热片或冷却风扇等散热措施的需求,从而降低材料清单(BOM)成本,使视觉AI集成至广泛的嵌入式应用成为可能。
 
Syntiant NDP120芯片集成了复杂的AI功能,可用于众多高精度免提语音应用,包括演讲人识别、关键词检测、多唤醒词和本地命令识别等。NDP120与Syntiant Core 2™神经网络推理引擎封装,还可同时运行多个应用程序,并将功耗降至1mW电池功率。
 
全新语音控制多模态AI解决方案作为瑞萨电子“成功产品组合”的一部分,从瑞萨更广泛的产品组合中选取多个相互兼容的器件,为客户构建更高阶的原型设计平台,以加速上市并降低风险。瑞萨“成功产品组合”包含卓越的模拟、电源和嵌入式处理产品组合,可帮助客户加速设计并缩短上市时间。
 
供货信息
全新多模态AI解决方案的参考设计现已推出,其中包括电路图和BOM清单。
 
免责声明:本文为转载文章,转载此文目的在于传递更多信息,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请电话或者邮箱联系小编进行侵删。
 

为您推荐

豪威发布用于消费类安防和监控摄像头的2K 400万像素图像传感器 选型指南

豪威发布用于消费类安防和监控摄像头的2K 400万像素图像传感器

加利福尼亚,圣克拉拉–2023年3月8日–豪威集团,全球排名前列的先进数字成像、模拟、触屏和显示技术等半导体解决方案开发商,当日发布新品OS04D。这款400万像素图像传感器为IP摄像头和高清模拟安防摄像头(包括智能家居、门铃和婴儿监控设备)提供2K分辨率的数字图像和30帧/秒的高清视频。OS04D CMOS图像传感器采用高性能背照式(BSI)像素设计,与上一代产品相比,功耗降低40%,信噪比(SNR1)提高30%以上,灵敏度增加40%。

安防监控 智能家居 电源管理 传感技术 传感器

思特威推出两款全新AIoT及安防应用1/3超低功耗CMOS图像传感器 选型指南

思特威推出两款全新AIoT及安防应用1/3超低功耗CMOS图像传感器

近年来,随着云计算、人工智能、大数据技术的成熟,AI 已在物联网与安防应用领域展现了其变革的强大动力。根据Yole 2022数据显示,在各种家用摄像头产品日趋智能化的当下,智能家居市场正保持蓬勃发展,预计2021年到2027年的年复合增长率为7.8%,CMOS图像传感器作为智能家居感知层的重要一环,或将迎来更加高速的增长态势。

安防监控 智能家居 电源管理 传感技术 传感器

瑞萨电子推出电动汽车电源IC 可以实现压力感应制动并降低组装成本 选型指南

瑞萨电子推出电动汽车电源IC 可以实现压力感应制动并降低组装成本

从安全功能到减少污染和优化发动机效率,车辆中的许多关键系统都依赖于压力传感器。为了管理这些系统,瑞萨电子推出了 RAA2S425x 系列 IC。据称,这些新设备可为汽车电池电动汽车 (BEV)、插电式混合动力电动汽车 (PHEV) 和燃料电池电动汽车 (FCEV) 中的信号提供精确放大和传感器特定校正,以实现压力感应制动,传输和暖通空调系统。

汽车电子 智能家居 电源管理 传感技术 传感器 RENESAS(瑞萨)/IDT

瑞萨电子优化安全节能的无传感器无刷直流电机控制设计 选型指南

瑞萨电子优化安全节能的无传感器无刷直流电机控制设计

全球半导体解决方案供应商瑞萨电子集团(TSE:6723)今日宣布,推出两款系统级封装(SiP)解决方案,扩展电机控制解决方案组合,并简化无刷直流(BLDC)电机控制设计,适用于各类无线电池供电应用系统,如电动工具、无人机、水泵、吸尘器、扫地机器人、风扇等。与同类解决方案相比,全新RAJ306001和RAJ306010电机驱动IC将多种功能整合至同一SiP解决方案,实现更好的低速或高速旋转与高扭矩控制,同时最大限度减少占板面积并降低成本,从而为简单、高效且安全的BLDC电机控制提供交钥匙解决方案。

能源电路 智能家居 电源管理 传感技术 传感器 RENESAS(瑞萨)/IDT

特别推荐

更多

行业动态

更多

技术应用

更多

选型替代

更多

产品信息

更多

热门搜索

更多

欢迎登录

没有账号,

账号注册

注册成功!

3S后自动为你跳转登陆