白雪走珠笔天猫价格相当于京东2倍 下单前多比价避免买贵AIGC时代来临,网络视听准备好了吗?极光GPTBots.ai通过中国信通院“大模型基础完备性测评”X平台惊爆大规模数据泄露 近30亿条用户信息遭窃内测已久的Manus开启收费,与阿里合作探索国产模型新可能黄仁勋透露:GAA技术2028年为NVIDIA新GPU提20%性能春季过敏退退退!华为天气健康服务上线,主动提醒早预防科大讯飞入局智驾 官方称“今年大概会有车陆续量产”英特尔酷睿Ultra 200HX新品分享会引围观 多款AI游戏本新品上线京东优创数据荣膺ISG保险科技领导者 生态协同与智能技术驱动产业升级模型云平台——引领3D设计与AI融合的云端创新力量锐龙AI Max 300系列引期待,锐龙9000G系列四季度或登场苹果2025至2027年产品规划曝光:M 系列芯片升级与 Mac 重大改版钛钽预告LG600一体式水冷散热器:3.95英寸可定制屏支持模块化拆装DIY玩家打造树莓派Zero拍立得相机 支持热敏纸即时打印华为:2024年全球销售收入8621亿元 净利润626亿元AI版论文搜索Ai2PaperFinder:输入主题AI自动搜索全部相关论文Wayve推完整世界模型GAIA-2:支持同时生成5个视角的视频,可模拟高风险场景飞猪首度公布AI成果:在线客服效率激增54%,商家发品人效翻倍告别节点噩梦!ComfyUI-C opilot发布,具备GPT-4o同款图像生成与编辑能力
  • 首页 > 企业IT频道 > 人工智能

    北大新成果:无需训练,机器人听指令就能灵活走位

    2023年11月07日 11:36:04   来源:站长之家

      北大的研究团队近期推出了一项具身导航系统,可使机器人无需额外训练或建图,仅通过口头指令在室内环境中自如移动。这一系统包括指令分析、视觉感知、完成估计和决策测试等多个关键任务,需要不同领域的知识,这些任务由一个大模型专家团队协同完成。

      作者启发于现实中专家讨论行为,设计了DiscussNav导航系统,通过赋予大语言模型(LLM)和多模态大模型(MLM)专家角色和任务,构建了具备不同专长的视觉导航专家团队。

      在这一系统中,导航机器人会在每一步移动前主动与专家讨论,以理解人类指令中所需的动作和提及的物体标志。然后,它会根据这些物体标志类型倾向性地感知周围环境,估计指令的完成情况,并做出初步的移动决策。

      值得注意的是,在决策过程中,机器人会同时生成多个独立的预测结果,并在这些结果之间出现不一致时,向决策测试专家求助,以筛选出最终的移动决策。这一方法不同于传统方法,无需额外预训练,通过与大模型专家的互动,直接解决了机器人导航训练数据稀缺的问题,并具备零样本能力。

      DiscussNav系统在经典的视觉语言导航数据集Room2Room上的表现显著超越了所有零样本方法,甚至胜过了经过训练的方法。

      研究团队还在Turtlebot4移动机器人上进行了真实室内场景导航实验,结果表明,该系统在真实世界中的表现明显优于之前最优的零样本方法和经过预训练微调的方法,展现出良好的从模拟环境到真实环境的迁移能力。

      作者指出,这一系统具备四个强大的能力,包括识别开放世界物体、识别细粒度的导航标志物体、纠正其他专家在讨论中的错误信息,以及排除不一致的移动决策。

      此外,作者还提出,深入研究如何有效利用仿真数据和大模型从海量数据中学到的先验知识是未来具身智能研究的发展方向。尽管受到数据规模和真实环境探索成本的限制,但大模型的进展为具身智能提供了新方向,将推动其发展。

      在总体上,北大的DiscussNav系统代表了具身导航领域的一项重要突破,使机器人能够根据口头指令自如导航,同时具备零样本能力,这对未来的智能机器人和自动化应用具有重要意义。

      文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

    即时

    新闻

    明火炊具市场:三季度健康属性贯穿全类目

    奥维云网(AVC)推总数据显示,2024年1-9月明火炊具线上零售额94.2亿元,同比增加3.1%,其中抖音渠道表现优异,同比有14%的涨幅,传统电商略有下滑,同比降低2.3%。

    企业IT

    重庆创新公积金应用,“区块链+政务服务”显成效

    “以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

    3C消费

    华硕ProArt创艺27 Pro PA279CRV显示器,高能实力,创

    华硕ProArt创艺27 Pro PA279CRV显示器,凭借其优秀的性能配置和精准的色彩呈现能力,为您的创作工作带来实质性的帮助,双十一期间低至2799元,性价比很高,简直是创作者们的首选。

    研究

    中国信通院罗松:深度解读《工业互联网标识解析体系

    9月14日,2024全球工业互联网大会——工业互联网标识解析专题论坛在沈阳成功举办。