电子导盲犬来了！西工大团队研究攻关取得新突破

近日，西北工业大学光电与智能研究院联合中国电信人工智能研究院在探索离线具身智能应用方面取得阶段性进展。具身智能，即具有物理实体，能够通过传感器和执行器与环境进行实时互动，执行相应指令或进行决策的智能机器。

李学龙教授团队将机器狗搭载离线大模型，应用在智能导盲场景，开发出大模型离线具身智能导盲犬，并实现了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。

该成果进一步展示了使用离线具身智能导盲犬代替传统导盲犬的可能性，同时验证了离线具身智能范式的可行性，使大模型具身智能机器人可以脱离互联网环境，应用在无网或网络信号不佳的工况环境，进一步拓展了临地安防的应用场景。

近年来，随着机器人技术和SLAM导航技术的快速发展，针对电子导盲犬的探索也层出不穷。然而受制于自然语言处理技术的限制，上一代电子导盲犬仍然欠缺和人类“自由对话”的能力，也难以为视障人士提供情感陪伴。

大模型及具身智能技术的出现使电子导盲犬实现这种高级能力成为可能。但机器狗的低算力计算平台难以支撑大模型运行所需的海量计算资源，通常只能通过请求云服务的“在线具身智能”范式获得大模型的高级能力，这严重限制了电子导盲犬的场景应用范围。

为此，李学龙教授团队结合目前最新的大模型量化压缩和加速推理技术，成功将大模型部署至机器狗的低算力计算平台，验证了“离线具身智能”范式的可行性。

目前通过实验，团队开发的离线具身智能导盲犬已能够与视障人士流畅沟通指令，并带领其通过马路、楼梯、电梯等多样复杂环境，验证了离线具身智能导盲犬的智能人机交互能力、电梯弱网络环境下的智能乘梯引导能力、实时性要求较高的智能过街引导能力和智能室内引导能力等。

该成果证明了离线具身智能导盲犬代替传统导盲犬的可能性，同时验证了离线具身智能范式的可行性，使大模型具身智能机器人可以脱离互联网，应用在无网或网络信号不佳的工况环境，提供更加实时的智能响应以及更好的人机交互体验。

未来，团队将进一步优化具身智能导盲犬技术方案，与电信星辰大模型相结合，探索在线与离线相融合的分布式异构具身智能方案，进一步拓宽离线具身智能导盲犬及更多智能机器人平台的应用场景，有效赋能工业生产智能化，加快形成新质生产力。

厉害

电子狗上面打的字母都不P掉，怕别人搜不到吗？  杭州宇树科技的机器狗，都出来好几年了，你们这团队还要脸不？拿着国家给的研究经费，转包给外面企业弄一下，回过头写一堆论文，搞的跟自己研究出来的一样！！！要不要你们那碧莲？？？

安川首钢机器人 发表于 2024-3-21 16:03
电子狗上面打的字母都不P掉，怕别人搜不到吗？  杭州宇树科技的机器狗，都出来好几年了，你们这团队还要脸 ...

上面好像没有说机器狗是西工大研发的，人家写的意思是助力机械狗导盲，应该是大脑算法解决方案吧！

赞

好

嗅觉要灵敏

西工大最厉害，赞一个！

如果能兼顾给我爬山旅游滴时候背行李就更完美咧{:mocs_36:}，续航能力不能太差

安川首钢机器人 发表于 2024-3-21 16:03
电子狗上面打的字母都不P掉，怕别人搜不到吗？  杭州宇树科技的机器狗，都出来好几年了，你们这团队还要脸 ...

看懂了再骂好不好？人家是研究算法，又不是做硬件的。 难道每个做软件的公司都要自己先设计一台电脑或者手机，而不是在市场上买一个？

晋

这种科研，它的代工协作企业才是最牛逼的。

加油

赞

牛