日期
12/22
2023
咨询
  • QQ扫一扫

  • Vision小助手
    (CMVU)

海思机器人开发平台首次实现了基于dToF全向3D立体感知拼接避障方案
收藏
2023-12-22 13:31:47来源: 中国机器视觉网

2023年12月15日至16日,海思携手多家合作伙伴,带来基于openEuler的机器人开发平台以及多样化解决方案。该方案在业界首次实现了将dToF、视觉在内的多传感器拼接与融合,同时结合海思领先的分布式异构计算、全场景联接、精准执行/表达/交互等技术,成为强大的机器人开发平台。

微信图片_20231222133326.png

海思机器人开发平台具备强劲的智能化处理能力,包括高达10.4TOPS INT8的NPU、4xA55、高性能RISC-V CPU以及双核DSP等,可接入高达7路的dToF微型激光雷达传感器,以及4路摄像头输入,并具备4K60的高性能视频编解码能力,是一个以AI, CPU和媒体处理为核心,并提供丰富的接口可接入强大的边缘智能处理平台。

在强大的端侧算力加持下,海思机器人开发平台首次实现了基于dToF全向3D立体感知拼接避障方案,通过MIPI或USB接口将2-8路dToF固态激光雷达Sensor采集到的深度信息,通过SoC的强大算力实现校准算法、搜峰深度计算算法、温度补偿算法、 滤波算法、点云转换等算法计算,并进行点云动态拼接。再结合openEuler的异构计算能力,通过DSP进行点云动态去除地面等算法加速,可以快速识别目标障碍物,然后通过ROS2系统进行路径优化,实时避障等操作。

微信截图_20231222133410.png

基于openEuler的Yocto构建环境,可以快速构建基于海思机器人解决方案的开发环境,实现内核、文件系统以及SD卡升级镜像的一次性构建,通过工具优化,实现2分钟内就可以对整系统进行升级,同时基于openEuler Embedded社区版本对接业界主流的机器人开源ROS系统,平滑使用ROS多个开源组件和工具平台,实现机器人开发平台的快速构建。

微信图片_20231222133343.png

机器人是一个复杂的系统,海思秉承“众行远”的理念,与多家伙伴深入合作,围绕机器人开发平台推出了多品类的生态产品与配件:欧拉派首款开发板(易百纳)、机器人避障模组(朝歌)、多向固态激光雷达模组(国微感知)、Wi-Fi超远图传模组(纬联&勤润)、星闪模组(爱联)、RedCap模组(鼎桥&利尔达)。这一系列配套产品不仅满足多传感器融合机器人各个环节的需求,同时通过深度整合,使其相互协同工作,构建更加智能、高效的机器人体系。在峰会现场可以看到鼎桥等合作伙伴基于海思机器人平台开发的面向电力巡检场景的机器人小车。

微信图片_20231222133347.png

微信图片_20231222133351.jpg

结语

在机器人行业的未来发展中,我们预见更多创新的可能性。随着技术的不断演进,多传感器将使机器人将更智能,适应性更强,拥有更广泛的应用领域。从智慧家庭到工业制造,再到医疗保健,海思机器人平台将为各行各业提供创新解决方案基座,助力迈向数字化智慧社会。未来,我们将持续与开发者、行业伙伴共同努力,为未来创造更加美好的生活。

(文章来源于上海海思,如有侵权,请联系删文)