瑞萨面向具备视觉AI和实时控制功能的下一代机器人推出功能强大的单芯片RZ/V2H MPU

发布时间:2024-03-01 10:56
作者:AMEYA360
来源:瑞萨
阅读量:2650

  全球半导体解决方案供应商瑞萨电子(TSE:6723)今日宣布推出一款面向高性能机器人应用的新产品——RZ/V2H,进一步扩展其广受欢迎的RZ产品家族微处理器(MPU)。RZ/V2H打造了产品家族中最高水平性能,可实现视觉AI与实时控制功能。

瑞萨面向具备视觉AI和实时控制功能的下一代机器人推出功能强大的单芯片RZ/V2H MPU

  RZ/V2H微处理器集成AI加速器

  提供卓越功效和高实时性能

  RZ/V2H配备瑞萨新一代专有AI加速器DRP-AI3(动态可配置处理器-AI3),可带来10TOPS/W的能效,相比早期型号提高可达10倍之多。此外,DRP-AI3加速器采用的剪枝技术显著增强了AI计算效率,将AI推理性能提升至80TOPS。这种性能提升使工程师能够直接在边缘AI设备上处理视觉AI应用,而无需依赖云计算平台。最近,全新DRP-AI3加速技术的细节在美国旧金山举行的国际固态电路会议(ISSCC 2024)上公布。

 瑞萨面向具备视觉AI和实时控制功能的下一代机器人推出功能强大的单芯片RZ/V2H MPU

  RZ/V2H集成了四个最大工作频率为1.8GHz的Arm® Cortex®-A55 CPU内核(用于Linux应用程序处理)、两个工作频率为800MHz的Cortex-R8内核(用于高性能实时处理),和一个Cortex-M33子内核。通过将这些内核集成至单个芯片中,该产品可有效管理视觉AI与实时控制任务,成为未来要求苛刻的机器人应用的理想之选。得益于RZ/V2H的较低功耗,因而无需使用冷却风扇和其它散热元件,让工程师可以设计出体积更小、成本更低、可靠性更高的系统。

  Daryl Khoo, Vice President of the Embedded Processing 1st Division at Renesas表示:“作为卓越的电机控制微处理器供应商,瑞萨已为迎接下一个挑战做好准备,以利用AI技术推动机器人市场的发展。RZ/V2H将促进具有视觉AI功能,且具备独立思考和实时动作控制能力的下一代自主机器人的研发。”

  OpenCV是用于计算机视觉处理的开源行业标准库。对此,瑞萨应用其专有的DRP技术开发了OpenCV加速器,可加快OpenCV的处理速度;相比CPU处理,速度提升高达16倍。DRP-AI3与OpenCV加速器的结合增强了AI计算和图像处理算法,使机器人吸尘器等应用中使用的虚拟SLAM(注)技术能得到高效、实时地执行。

  为加速开发,瑞萨还发布了“AI应用(AI Applications,针对各种案例的预训练模型库)”,和用于快速AI应用开发的AI SDK(软件开发工具包)。通过在RZ/V2H的评估板上运行这些软件,即使工程师不具备丰富的AI知识,也能在设计流程的早期阶段轻松评估AI应用。

  SEGGER Microcontroller GmbH创始人Rolf Segger表示:“我们很高兴能够参与RZ/V2H的发布,它将人工智能技术与实时控制相结合。SEGGER的J-Link调试器被全球众多嵌入式开发项目广泛采用,它将提供RZ/V2H所需的支持,帮助加速下一代机器人创新。我们期待与瑞萨电子长达数十年的合作关系更上一层楼。”

  成功产品组合

  瑞萨已开发出“视觉检测单板计算机”,利用摄像头图像识别周围环境,并实时确定和控制其运动。该解决方案将RZ/V2H与电源管理IC和VersaClock可编程时钟发生器相结合,以支持高能效工业机器人和装置。这一高效的设计无需额外冷却风扇,从而缩减了解决方案的BOM和尺寸。这些“成功产品组合”基于相互兼容且可无缝协作的产品,具备经技术验证的系统架构,带来优化的低风险设计,以加快产品上市速度。瑞萨现已基于其产品阵容中的各类产品,推出超过400款“成功产品组合”,使客户能够加速设计过程,更快地将产品推向市场。

  供货信息

  RZ/V2H现已上市,同时上市的还有评估板和AI SDK。了解有关该产品和开发工具的更多信息,请点击文末阅读原文访问查看。

  (注)视觉SLAM(同步定位与地图构建)技术通过分析机器人和无人机机载摄像机所捕获图像估计自己的位置,同时创建周围环境的详细地图。

  (备注)此项DRP-AI技术采用了新能源产业技术综合开发机构(NEDO)委托的部分工作成果。Arm和Arm Cortex是Arm Limited在欧盟和其它国家/地区的注册商标。本新闻稿中提及的所有产品或服务名称均为其各自所有者的商标或注册商标。

(备注:文章来源于网络,信息仅供参考,不代表本网站观点,如有侵权请联系删除!)

在线留言询价

相关阅读
议程揭晓|6.14深圳见 · 瑞萨RA MCU开发者日
喜报丨瑞萨电子凭借R-Car X5H荣膺第五届知鼎奖“智能驾驶科技创新奖”
2026-06-03 10:49 阅读量:307
瑞萨丨技术干货|解决方案套件概念:AI赋能的智能电动自行车——重塑城市出行与智能交通
  电动自行车正在迅速重塑城市出行方式。作为汽车之外更可持续、更灵活的选择,电动自行车不仅有助于缓解交通拥堵,也符合绿色低碳的发展趋势。随着电动自行车技术的不断进步和普及,用户对安全性、可靠性和智能辅助功能的期待也在持续提升。  然而,无论是传统机械自行车还是电动自行车,当前仍高度依赖骑手的主动感知以及按计划进行的维护保养。许多机械问题往往是逐步演变的,在性能明显下降或故障真正发生之前,几乎没有预警信号。这种被动式维护方式容易导致意外故障、更高的维修成本,甚至带来潜在的安全隐患。  瑞萨通过AI赋能的智能电动自行车概念方案应对这些挑战。该方案基于嵌入式边缘人工智能(AI),在自行车本体上即可实现预测性维护、智能骑行辅助、环境感知以及电池管理优化,无需依赖云端连接。  嵌入式边缘AI实现预测性与智能骑行  智能电动自行车的核心由Renesas AIK-RA8D1 AI开发套件驱动。该套件基于RA8D1微控制器(MCU)),这是一款面向实时嵌入式AI应用设计的高性能Arm® Cortex-M85® MCU。借助Renesas Reality AI Tools®,开发者可以部署高度优化的AI模型,使其完全运行于MCU本地,无需云端计算支持。  这种系统架构在实现更安全、更高效骑行体验的同时,也有效控制了功耗和系统成本,非常适合大规模部署于智能出行设备中。  AI赋能的智能电动自行车围绕以下两大核心能力,全面提升骑行体验:  AI驱动的状态监测  更顺畅、更安全的骑行体验,全面提升用户感受  瑞萨电动自行车概念  AI驱动的状态监测  无论是传统自行车、电动自行车,还是共享出行车队中的自行车,本质上都是精密的机械系统。其性能高度依赖于关键部件的健康状况,包括链条、齿轮、轴承以及车架连接部位。随着时间推移,这些部件会因机械应力、环境影响以及骑行工况而逐渐磨损和劣化。  传统的维护方式通常依赖定期人工检查或基于里程的保养周期。这些方法往往不够精准且偏被动,容易导致突发故障,增加维护成本和运营风险。  通过将AIK‑RA8D1与加速度传感器直接集成到自行车中,实时AI驱动的状态监测成为可能。系统可持续分析振动特征和运动模式,及早发现机械性能退化的迹象。  关键预测性维护功能包括:  链条劣化检测(Chain Deterioration Detection)——系统监测传动系统的振动模式。当振动特征偏离正常状态时,可在性能明显下降之前识别出链条过度磨损或润滑异常问题。  齿轮异常检测(Gear Anomaly Detection)——AI模型可识别由齿轮齿面磨损、损坏或变速器对位异常引起的异常振动模式,实现早期干预。  轴承失效检测(Bearing Failure Detection)——轴承在劣化过程中会产生特定的高频振动特征。系统可在出现可听噪声或严重机械损伤之前就检测到这些异常。  车架结构监测(Frame Structure Monitoring)——通过振动分析,还可识别车架的松动或结构性变化,从而提升骑行安全性并延长整车使用寿命  瑞萨如何实现智能自行车监测  要构建高精度的状态监测AI模型,必须采集涵盖正常运行状态和多种机械故障状态的数据集。  为此,系统采用AIK-RA8D1 AI开发套件,并通过Pmod™模块连接外部加速度传感器。开发套件和传感器均直接安装在自行车上,在真实骑行场景中采集振动和运动数据。  数据集采集通过Data Storage Tools完成。该工具可作为插件集成在Renesas e² studio中,也可作为独立应用供第三方IDE用户使用工具可实时采集加速度传感器的原始数据,并进行存储,用于后续的数据标注和AI模型训练。  Figure1.Training Set-up  AI模型开发与部署  在完成数据标注并上传至Renesas Reality AI Tools后,可利用云端AutoML功能训练和评估多个AI模型,并针对RA8D1 MCU进行部署优化。  最终选定的模型能够识别七种系统状态:  电动自行车状态:识别空闲与静止状态  链条运行状态:识别正常的正向与反向链条运动  齿轮异常:基于变速器位置检测两种故障状态  后轮结构状态:识别潜在的后轮松动问题  该优化模型在仅占用5KB内存的情况下,实现了99.63%的识别准确率,可高效运行于RA8D1 MCU上。  Figure2.Model Development to Deployment Flow  部署完成后,推理结果可通过集成在e² studio开发环境中的AI Live Monitor工具进行实时监控。  AI增强型骑行智能  除状态监测外,AIK RA8D1还可作为智能电动自行车计算核心,充当中央处理节点,分析来自电机、电池及各类传感器的数据——支持在有或无额外传感硬件的情况下运行。  AI赋能的骑行功能示例包括:  载荷分布检测——通过分析振动与运动信号,系统可估算骑手及货物的重量分布。据此推荐或自动调整坐垫位置,以提升舒适性和踩踏效率。  路面类型识别(Surface Detection)——AI模型可识别沥青路、碎石路或不平整地形。并根据路况动态调整电机扭矩和功率输出,从而提升稳定性与能效。  目标检测,实现更安全骑行(Object Detection for Safer Riding)——结合视觉传感器时,AI模型可识别周围车辆与障碍物,在盲区来车时触发预警。  “See with Sound”的空间感知能力——通过麦克风阵列,系统可估算周围车辆的来向,并向骑手提供空间方位提示,而无需持续视觉关注。  推动下一代智能出行  AI驱动的智能电动自行车方案充分展示了嵌入式边缘AI对个人出行和共享交通的变革潜力。通过将预测性维护与环境感知能力直接集成到自行车中,制造商能够打造更安全、更可靠、更高效的出行解决方案。  瑞萨AI技术致力于帮助客户基于可扩展的边缘AI平台,构建适用于实时嵌入式部署的智能出行系统。  告别突发故障,从瑞萨开始打造更智能、更安全的自行车。  准备好将AI驱动的状态监测引入骑行领域了吗?
2026-06-02 09:56 阅读量:331
喜报|瑞萨电子荣获上海繁易“战略合作伙伴”奖
2026-05-29 09:55 阅读量:412
  • 一周热料
  • 紧缺物料秒杀
型号 品牌 询价
RB751G-40T2R ROHM Semiconductor
TL431ACLPR Texas Instruments
MC33074DR2G onsemi
CDZVT2R20B ROHM Semiconductor
BD71847AMWV-E2 ROHM Semiconductor
型号 品牌 抢购
STM32F429IGT6 STMicroelectronics
BP3621 ROHM Semiconductor
ESR03EZPJ151 ROHM Semiconductor
IPZ40N04S5L4R8ATMA1 Infineon Technologies
TPS63050YFFR Texas Instruments
BU33JA2MNVX-CTL ROHM Semiconductor
热门标签
ROHM
Aavid
Averlogic
开发板
SUSUMU
NXP
PCB
传感器
半导体
相关百科
关于我们
AMEYA360微信服务号 AMEYA360微信服务号
AMEYA360商城(www.ameya360.com)上线于2011年,现 有超过3500家优质供应商,收录600万种产品型号数据,100 多万种元器件库存可供选购,产品覆盖MCU+存储器+电源芯 片+IGBT+MOS管+运放+射频蓝牙+传感器+电阻电容电感+ 连接器等多个领域,平台主营业务涵盖电子元器件现货销售、 BOM配单及提供产品配套资料等,为广大客户提供一站式购 销服务。

请输入下方图片中的验证码:

验证码