彻底剖析激光-视觉-IMU-GPS融合SLAM算法:理论推导、代码讲解和实战

彻底剖析激光-视觉-IMU-GPS融合SLAM算法:理论推导、代码讲解和实战 描述:我们联合机器人学国家重点实验室的博士大佬推出这门课程,从理论和代码实现两个方面对激光雷达-视觉-IMU-GPS融合的SLAM算法框架和技术难点进行讲解,并且博士大佬会根据自己多年的机器人工程经验,向大家讲解在实际机器人应用中多模态融合的方法和技巧。 链接: 大小:NG 标签:#学习 #知识 #课程 #资源 来自:雷锋 频道:@Aliyundrive_Share_Channel 群组:@alyd_g 投稿:@AliYunPanBot

相关推荐

封面图片

《【3D视觉工坊】彻底剖析激光-视觉-IMU-GPS融合SLAM算法:理论推导、代码讲解和实战》

《【3D视觉工坊】彻底剖析激光-视觉-IMU-GPS融合SLAM算法:理论推导、代码讲解和实战》 简介:本书系统解析【3D视觉工坊】彻底剖析激光-视觉-IMU-GPS融合SLAM算法:理论推导、代码讲解和实战的核心内容,并结合实用案例帮助读者加深理解。内容涵盖其发展历程、关键概念及实际应用,提供深入的知识探索路径。适合对该主题有兴趣的学习者,帮助拓宽视野并提高专业素养。 标签: #【 #【3D视 #知识 #学习 文件大小:NG 链接:https://pan.quark.cn/s/55fb4a4ad38e

封面图片

上海交大团队研制“导盲六足机器人”:1秒之内可响应,已在实测

上海交大团队研制“导盲六足机器人”:1秒之内可响应,已在实测 这是一款来自上海交通大学机械与动力工程学院高峰教授团队研发的“六条腿”导盲机器人。在刚刚过去的由中国残联主办的“科技助残 共享美好生活”展会上,这款机器人吸引了众多人的目光。5月28日,高峰在上海交大对这款机器人进行了一次集中介绍。据高峰介绍,“导盲六足机器人”具有视觉环境感知功能,可自主导航至目的地、动态躲避障碍、识别红绿灯等。该款机器人如通过批量化生产、人工智能辅助可有效降低成本、提升智能,可解决导盲犬数量短缺的问题。不仅如此,通过后台建立完整的互联网服务体系,导盲机器人还可以实现居家陪护、应急处理,带领盲人抵达更多地方等功能。高峰在上海交大对“导盲六足机器人”进行介绍。 本文图片为 澎湃新闻记者 邹佳雯 图突破人机交互技术,让导盲机器人成为视障人士的“第二双眼睛”为什么会研究导盲机器人?高峰谈到,据世界卫生组织统计,我国视障人士已经突破1700万人,这意味着每100人中就有至少一位视障者。但是,和庞大的视障人士数量对比,全国现役导盲犬数量仅几百只。不仅如此,导盲犬的培育还需要极高的培训成本,以及极长的训练周期,并且许多场合能否允许工作中的导盲犬进入尚处于讨论当中,仅仅依靠导盲犬远远不能满足我国千万余名视障人士的需求。基于此,团队开始了导盲六足机器人的研发工作。高峰介绍,和盲人建立有效沟通,让导盲机器人在理解使用者意图的同时维持机器人自身动作协调,是导盲机器人的首要任务。团队在导盲机器人上集成了听觉、触觉和力觉三种交互方式,实现盲人与导盲六足机器人之间的人机智能感知与顺应性行为。机器人可根据盲人的语音指令,基于深度学习端到端语音识别模型理解语义信息,快速响应、准确识别,目前语音识别准确率为90%以上,响应速度在1秒之内。高峰团队研制的“导盲六足机器人”此外,机器人可通过语音下发指令,如启动、停止、设定目的地、加速、减速等,同时实时反馈行走和环境状况等信息,实现双向智能交互。盲杖可以实现盲人与导盲机器人之间的力觉交互,向盲人提供牵引力和转向力矩,引导盲人前进和转向。盲人也可以推拉盲杖来动态调整机器人的行走速度。目前机器人最大速度达3m/s,能够满足盲人慢走、快走、跑步等出行需求,且六足的独特构型优势确保机器人可以低噪声稳定行走。人机交互与机器人自律协同控制是机器人融合感知信息、任务需求、人机交互的指令,利用逻辑推理、自律决策,可实现智能导盲作业行为。基于导盲机器人的动力学模型,高峰团队构建了层级递进式外力估计、触地检测、坡度估计、运动状态估计模型算法,融合机器人关节、惯性导航、行为节律、历史状态等多源信息,进行多目标集成的状态观测和反馈优化的平衡控制,由此,能够实现导盲机器人在各类地形场景中自律协同控制效果。已进入实地测试阶段,将加快落地实用导盲机器人在复杂地形行走需要更高的自主规划能力,这类自主规划功能通常包含地面信息的获取和建模、定位导航、落脚点的选择、身体位姿规划以及连续运动的规划等。定位精准是导盲任务的核心要求之一,团队通过多传感器数据紧耦合方式,建立了雷达-惯性里程计系统,通过滑动窗口法耦合历史帧数据,大幅减少点云运动畸变,并设计了多维度的状态残差,显著提高了系统状态估计的精度和鲁棒性,实现了三维环境地图的精准建立与机器人自身的精准定位。而基于全局环境地图和实时感知的局部动态地图,科研团队采用模型预测和实时滚动优化方法实现机器人的路径规划和自主避障,敏捷自主躲避静态和动态障碍物,保障导盲任务的安全性。根据室内导航任务需求,团队制定了室内场景的多层导航策略,构建了层次拓扑地图实现室内全局路径规划;针对室外场景,基于环境地图结合GPS信息进行多传感器融合,大幅提高定位与导航精度。团队还利用深度相机,通过深度学习和数字图像处理技术实现对交通信号的辨别,保障使用者出行安全。针对台阶、楼梯等典型地形环境,团队采用多约束优化算法规划机器人稳定行走步态;通过采集机器人腿部足端力觉信息,使用机器学习方法来实时辨识足-地接触模型,可实现机器人对不同地形的自适应动态敏捷柔顺行走。高峰介绍,目前,团队研发制成的导盲机器人已进入实地测试阶段。在整个研究推进过程中,由视障人士参与线下展示与功能测试,未来团队也将根据视障人士的实时反馈,对机器人持续研发、调试。此外,导盲机器人的实际应用,不单单是机器人本身的应用,还需要后台大数据的支持,需要强大的运维团队的支持以及一系列推广普及的测试。据了解,高峰团队还与索辰科技密切合作,面向导盲机器人需求,开展了商业化推广。上海交通大学负责基础理论研究和关键技术攻关,索辰科技负责产品工程化以及产业化运维和推广,双方共同努力,并借助社会力量,加快导盲六足机器人的落地使用,为改善我国视障人士生活贡献一份力量。 ... PC版: 手机版:

封面图片

小鹏汽车再失自动驾驶大牛 吴恩达高徒王弢离职

小鹏汽车再失自动驾驶大牛 吴恩达高徒王弢离职 但在去年5月,他已调离小鹏,入职小鹏旗下机器人公司鹏行智能。9个月后,曝出他离职的消息。又一位自动驾驶大牛,重归江湖。王弢离职消息最早由凤凰网车研所曝光,报道称小鹏汽车原北美视觉感知负责人王弢已于近期离职,公司系统里查无此人。目前小鹏官方还没有对此消息作出回应。不过根据王弢的领英主页,他在小鹏汽车的工作时间截至到2024年1月。这可以证明此消息为真,王弢确实从小鹏汽车离开。王弢于2019年8月加入小鹏,在当年小鹏技术分享日上,首次以“北美视觉感知团队负责人”的title被介绍,是当时小鹏自动驾驶北美算法团队的核心成员。他总管大感知团队,向来自高通CR&D的Parixit Ahera汇报。但在去年5月,王弢内部调岗,从小鹏算法团队调去了小鹏旗下机器人公司鹏行智能,出任创新战略总监。机器人和自动驾驶底层算法确实有互通之处,内部转岗也不算非常大的变动。但是转岗不到一年,就传出王弢离职的消息。王弢是谁?为什么他的离职会备受关注?王弢是谁之所以称王弢为自动驾驶大牛,是因为无论是理论还是实践,王弢都有丰富的经验,还是将深度学习应用于自动驾驶领域的先驱之一。王弢本科就读于斯坦福大学计算机本科专业,硕士在新加坡国立大学读了电气与电子工程专业,博士阶段则回归斯坦福,师从AI大牛吴恩达,继续攻读计算机科学方向。当时硅谷第一波自动驾驶浪潮正盛,王弢则随着这股浪潮休学创业,和其他几位吴恩达的学生一起,创办了自动驾驶公司Drive.ai。王弢除了是公司联合创始人外,还是研发与工程总监。Drive.ai成立的目标很明确:推进自动驾驶技术落地,并且迅速成为硅谷明星自动驾驶公司之一。△ 中:王弢;右:吴恩达原因一方面是有吴恩达背书,另一方面是公司出色的技术实力:成立两年,成为全球首个展示雨夜行车的自动驾驶公司,还在德州提供了Robotaxi服务。并且,Drive.ai也备受资本青睐。成立两年多共完成5次融资,总金额超7700万美元(约5.54亿元),估值一度达到2亿美元(约14.39亿元)。这背后作为领导者和核心研发人员的王弢,功不可没。不过在2019年情况大变,Drive.ai作价2亿美元卖身,创始团队纷纷出走,后来公司被苹果收购。而王弢在同年跳槽来到小鹏汽车,出任北美自动驾驶视觉感知负责人。此时小鹏汽车的自动驾驶阶段,正好引来了“吴新宙时代”,王弢就是此时被吴新宙挖来的人才之一。当时吴新宙大刀阔斧改动小鹏自动驾驶的团队架构和研究方向,团队分为感知、归控、地图三部分,核心的算法团队在美国,除了负责核心算法研发,还要配合国内团队的需求、路测结果,解决对应问题。王弢正是北美感知算法团队的核心成员。在吴新宙带领下,小鹏通过智能驾驶重要功能不断落地,完成与“技术派”标签的绑定。这其中各类标志性事件:没有激光雷达实现高速NGP、记忆泊车功能上车、高速NGP完成从广州到北京的实测、发布“重感知、轻地图”的城市NGP……感知团队的作用越来越大,也越来越重要。王弢对小鹏自动驾驶技术的重要性,也能够管窥。不过,变动还是在2023年发生了。8月,曝吴新宙离职小鹏,入职英伟达,后亮相证实负责管理英伟达中国自动驾驶团队。巧合的是,无论是王弢,还是吴新宙,工作地点主要都在北美。而之前有传闻称,小鹏汽车想要逐步缩小北美团队,大概和控制人员预算有关。值得关注的是,同样是吴新宙挖来的人才之一刘兰个川,也在2023年被曝离职小鹏,离职前担任算法研发总监,对外也有“小鹏自动驾驶AI负责人”的title。至此可以明确,吴新宙的核心团队成员,正随着吴新宙出走逐渐离开小鹏。目前王弢还没曝光下一步的动向,一位懂管理、懂技术的自动驾驶大牛,重归江湖。 ... PC版: 手机版:

🔍 发送关键词来寻找群组、频道或视频。

启动SOSO机器人