在当地时间周一揭幕的行业顶级会议SIGGRAPH(国际计算机协会计算机图形学和交互技术特别兴趣小组年度会议)上,“全球股王”英伟达推出一系列面向机器人开发者的世界模型 、应用库和基础设施。
其中 ,最引人关注的是参数量只有70亿的开源物理AI应用和机器人视觉推理模型Cosmos Reason 。
英伟达介绍称,自从OpenAI多年前发布CLIP模型以来,视觉语言模型已经改变了计算机视觉任务 ,例如物体与模式的识别等。然而,此前的模型无法解决多步骤任务,也难以应对模糊或新颖的现实体验。
凭借记忆和理解能力 ,Cosmos Reason能够使机器人和AI具身代理“像人类一样推理 ”,并在真实世界中采取行动 。
在英伟达给出的案例中,运行视觉推理模型的机器人手臂 ,成功根据“面包+烤面包机”的场景,推断出最合理的下一步动作是将面包放进烤面包机进行烘烤,并将思考逻辑转化成机器手臂的操作指令。
(来源:英伟达)
这项功能叫做“机器人规划与推理”。Cosmos Reason能够作为机器人的“大脑 ”,负责有意识、条理化的决策 。视觉推理模型能够解释环境 ,并在面对复杂指令时将其分解为任务并利用常识执行。
除此之外,这个模型还能用于一系列AI应用。例如自动化对大规模、多样化训练数据集进行整理 、标注,也能从海量视频数据中提取有价值的信息并进行归因分析 。
目前这个模型已经投入商业化运营。英伟达披露 ,公司内部的机器人和自动驾驶团队正使用这个模型进行数据整理与过滤、标注以及VLA(视觉语言动作)后训练。优步(Uber)也在使用该模型为自动驾驶训练数据进行标注与生成说明。
除此之外,麦格纳国际正在使用该模型开发全自动即时配送解决方案City Delivery,用来帮助车辆更快适应新城市环境 。VAST Data、Milestone Systems也在交通监控自动化 、视觉检测等领域应用该模型。
除了Cosmos Reason ,英伟达也在Cosmos世界模型中新增了Cosmos Transfer-2,用来加速从3D仿真等场景生成合成数据,以及一个经过蒸馏、更为注重速度优化的Cosmos Transfers版本。
英伟达也在周一更新了Omniverse软件开发工具包 ,并公布了新的神经重建库 。其中包括一种渲染技术库,允许开发者使用传感器数据在三维中模拟现实世界。
这一系列发布标志着AI芯片巨头正在加码进军机器人领域,试图将其培养成AI数据中心之外的下一个重要应用场景。
新手炒股怎么选股票:配资专业配资门户-商务部新闻发言人就加拿大政府关闭海康威视在加业务事答记者问
股票配资门户在线阅读:线上股票配资开户-江淮汽车大消息!上市1小时 尊界大定破1000台
炒股配资平台官网:手机股票量化软件-马斯克的“擎天柱”机器人解锁家政技能!宇树人形机器人将参加格斗大赛
股票配资门户:配资哪家比较好-“千机百态”亮相中博会!多形态机器人重塑创新生态 产业应用侧爆点已近?
股票:配资知名炒股配资门户-半导体“原产地”新规出台,科创综指ETF华夏(589000)上涨2.56%, 冲击4连涨
中国股票配资网在线配资平台:配资安全炒股配资平台门户网-前5月A股新股首日“0”破发:超七成单签浮盈过万 最高5.91万
盛康优配提示:文章来自网络,不代表本站观点。
宏观要闻外交部回应中方宣布对加拿大部分产品加税据《北京日报》客户端消息,商务部3月8日公布就加拿大对华相...
根据新股发行安排,今日有2只新股申购,新亚电缆(001382.SZ)发行价格为7.40元/股;矽电股份(301629.S...
界面新闻记者|陈靖金融市场充满变数。年初至今,券商研究所分析师“转会”频频。过去三个月,券业并购下的...
记者辛圆据交通运输部网站周三发布消息,交通运输部办公厅、国家发展改革委办公厅、财政部办公厅印发《202...
3月12日,汇丰发布对于中国投资市场的最新观点。汇丰环球私人银行及财富管理中国首席投资总监匡正表示,DeepSe...
文丨中信建投此次证监会召开座谈会主要围绕“中长期资金参与资本市场”这一主题展开。虽然我国中长期资金参与资...
界面新闻记者|杜萌春节后的AI热潮吹暖了基金市场。随着首批上证科创综指ETF的发行并上市,二级市场迎来久违的...
截至2025年3月12日 14:53,中证新能源汽车产业指数(930997)下跌0.81%。成分股方面涨跌互现,宏发股份...