电子导盲犬可能要来了!相关研究在我国取得新突破
“啪嗒啪嗒......”一只机器狗在街上迈着规律的电导得新步伐,拉着牵引绳的盲犬盲人,在它的相关带领下越过沿路障碍,平稳地行走着,研究电子导盲犬能否取代传统导盲犬,突破解决视障人士一犬难求的电导得新困境?西工大团队在这方面开展研究攻关并取得了新的突破。
近日,盲犬西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。相关具身智能,研究即具有物理实体,突破能够通过传感器和执行器与环境进行实时互动,电导得新执行相应指令或进行决策的盲犬智能机器。
李学龙教授团队将机器狗搭载离线大模型,相关应用在智能导盲场景,研究开发出大模型离线具身智能导盲犬,突破并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。
该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网环境,应用在无网或网络信号不佳的工况环境,进一步拓展了临地安防的应用场景。
近年来,随着机器人技术和SLAM导航技术的快速发展,针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制,上一代电子导盲犬仍然欠缺和人类“自由对话”的能力,也难以为视障人士提供情感陪伴。
大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源,通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力,这严重限制了电子导盲犬的场景应用范围。
电子导盲犬
为此,李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术,成功将大模型部署至机器狗的低算力计算平台,验证了“离线具身智能”范式的可行性。
目前通过实验,团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令,并带领其通过马路、楼梯、电梯等多样复杂环境,验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。
离线具身智能导盲犬指引视障人士进电梯
离线具身智能导盲犬指引视障人士过马路
该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性,同时验证了离线具身智能范式的可行性,使大模型具身智能机器人可以脱离互联网,应用在无网或网络信号不佳的工况环境,提供更加实时的智能响应以及更好的人机交互体验。
未来,团队将进一步优化具身智能导盲犬技术方案,与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能方案,进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景,有效赋能工业生产智能化,加快形成新质生产力。
相关文章
- 第16號颱風「諾盧」持續往中南半島前進,而第17號颱風「庫拉」已在遠洋轉向,兩者皆對台灣沒有影響。中央氣象局今28)日指出,太平洋地區除2個颱風外,又有一個熱帶性低氣壓「TD21」生成,有機會在24小2024-06-01
稳面积增单产“两手抓”!农村工作会议再提建立粮食产销区省际横向利益补偿机制
摘要:“建立粮食产销区省际横向利益补偿机制,实现销区对产区的资金、人员、技术、装备、医疗、文化等各方面的补偿,不仅能够促进主产区经济的高质量发展,更能缩小粮食主产区和销区之间经济社会发展差距,促进区域2024-06-01来之不易的丰收答卷:粮食产量再创新高,全国粮食产量连续9年站稳1.3万亿斤台阶
摘要:12月11日,国家统计局发布的数据显示,2023年全国粮食生产再获丰收,全年粮食产量再创历史新高。全国粮食总产量13908.2亿斤,比上年增加177.6亿斤,增长1.3%,连续9年稳定在1.3万2024-06-012023年养一头猪亏76元!牧原股份或现上市来首亏,仍坚定看好今年猪价
摘要:对于业绩亏损,牧原股份在公告中表示,报告期内,生猪价格较2022年大幅下降。同时,公司在按照会计准则要求对消耗性生物资产进行减值测试后,拟对部分消耗性生物资产计提减值准备。2024-06-01- 作者:王鑫昕 来源:中国青年报 发布时间:2015/4/1 14:01:542024-06-01
宿州市减灾救灾委员会关于启动低温雨雪冰冻灾害Ⅲ级应急响应的通知
各县区减灾救灾委,市减灾救灾委各成员单位、市管各园区管委会:根据气象部门预报,我市2月3-4日仍有强降雪,低温雨雪冰冻灾害防范应对形势严峻。应急管理部于2月3日10时提升我省低温雨雪冰冻灾害应急响应至2024-06-01
最新评论