实时感知！英伟达新VLM研究出炉 - 涉及机器人，结合激光雷达和视觉图像

日前，加州大学研究人员和英伟达共同发布了新的视觉语言模型“NaVILA”。

亮点在于，NaVILA模型为机器人导航提供了一种新方案。

无地图可实时感知

视觉语言模型（VLM）是一种具备多模态生成能力的AI模型，它能够对文本、图像以及视频等多种提示进行智能推理。通过将大型语言模型（LLM）与视觉编码器进行有机结合，VLM赋予了LLM“视觉感知”的能力。

以往，机器人在行动时通常需要依赖预先绘制的地图以及复杂的传感器系统。而NaVILA模型不需要预先的地图，机器人只需“听懂”人类的自然语言指令，结合实时的视觉图像和激光雷达信息，实时感知环境中的路径、障碍物和动态目标，就可以自主导航到指定位置。

不仅摆脱了对地图的依赖，NaVILA还进一步将导航技术从轮式扩展到了足式机器人，希望让机器人应付更多复杂场景，使其具备跨越障碍和自适应路径规划的能力。

在相关论文中，加州大学的研究人员采用了宇树的Go2机器狗和G1人形机器人进行了实际测试。根据团队的实测数据，在家庭、户外以及工作区等真实环境中，NaVILA的导航成功率高达88%，而在复杂任务中的成功率也达到了75%。

图解机器人分类

来源：同花顺

“机器人 行业应用”场景不断深化

在应用上，“机器人 行业应用”的场景不断深化，已覆盖65个行业大类、206个行业中类，制造业机器人密度已达到每万名工人392台。无论是传统产业还是新兴行业，无论是民生领域还是重大工程，都有机器人大显身手。

据央视新闻报道，在制造上，中国已经连续多年都是全球工业机器人销量最多的国家，2023年上半年工业机器人产量达到22.2万套，同比增长5.4%。

根据工信部发布的数据，我国机器人领域专精特新“小巨人”企业达273家，10家机器人企业成长为制造业单项冠军。

我国正在加紧布局，推动人形机器人产业占得先机并行稳致远。目前，我国已创建了机器人智能传感器、智能语音等国家制造业创新中心，组织揭榜挂帅攻关，推进关键软硬件的适配。

据不完全统计，中国人形机器人本体制造企业已超过50家。中国的人形机器人本体企业既包括在该领域耕耘近十年的老牌企业，如优必选、理工华汇、钢铁侠科技等，也有刚刚成立不久的的初创公司，如智元、星动纪元、开普勒探索等。

来源：同花顺

此外，近年来人形机器人领域跨界入局者增多，许多互联网企业及汽车企业都瞄准了这一新的经济增长点，如小米、小鹏、科大讯飞等，竞争态势愈发激烈。

就在前几天，12月10日消息，小米系首家大模型机器人公司——北京小雨智造科技有限公司完成亿元A轮融资，小雨智造是小米集团下专注开发适用工业领域的大模型机器人技术的科技公司，目前有自研的“Xiaoyu Brain”通用机器人大脑和机器人大模型解决方案，使得机器人能够在工业环境中执行各种任务。

10月，国家地方共建人形机器人创新中心联合行业头部企业和机构发布了《人形机器人分类分级应用指南》和《具身智能智能化等级分级指南》，定义了人形机器人相关术语，并进行了分类和智能化等级划分。

近期，多地发布促进机器人产业发展的政策，如重庆、杭州等。南京、四川天府新区等地也发布了相关政策。深圳凭借制造业基础和高科技企业优势，吸引大量投资，成为人形机器人融资热点城市之一。市政府还制定了行动计划，并设立100亿元的产业基金，集中投资于人工智能和具身机器人领域。

今年的IOTE 2024第二十二届国际物联网展·深圳站特设了12号场馆为人工智能专题展区，其中人形机器人展区成为了整场展会的亮点之一。人形机器人作为人工智能展区的明星展品，受到了展会观众的极大关注和热烈追捧，在为期三天的展览中吸引了众多科技爱好者和行业专家的目光与驻足留步。

值得一提的是，“2024‘物联之星’”中国物联网行业年度榜单评选活动也吸引了众多人工智能与机器人相关领域企业的积极参与。

“2024‘物联之星’”中国物联网行业年度榜单评选活动已于2024.10月15日正式启动，现已有超百家AIoT企业参与到活动中的申报中来。扫描下方二维码或搜索网页链接即可填写资料进行申报，“2024‘物联之星’”期待您的加入！

现在，“2024‘物联之星’”中国物联网行业年度榜单评选的投票打榜环节也已开启，扫描下方二维码即可参与到投票环节中来。欢迎行业内专业人士与爱好者们通过“物联之星”评选活动来了解行业内的前沿讯息，每个用户每日可在官网与小程序为打榜的产品、案例、企业、人物各投上宝贵的一票。