在当地时间周一揭幕的行业顶级会议SIGGRAPH（国际计算机协会计算机图形学和交互技术特别兴趣小组年度会议）上，“全球股王”英伟达推出一系列面向机器人开发者的世界模型 、应用库和基础设施。
其中 ，最引人关注的是参数量只有70亿的开源物理AI应用和机器人视觉推理模型Cosmos Reason 。
英伟达介绍称 ，自从OpenAI多年前发布CLIP模型以来，视觉语言模型已经改变了计算机视觉任务 ，例如物体与模式的识别等 。然而 ，此前的模型无法解决多步骤任务，也难以应对模糊或新颖的现实体验。
凭借记忆和理解能力 ，Cosmos Reason能够使机器人和AI具身代理“像人类一样推理 ” ，并在真实世界中采取行动 。
在英伟达给出的案例中，运行视觉推理模型的机器人手臂 ，成功根据“面包+烤面包机 ”的场景 ，推断出最合理的下一步动作是将面包放进烤面包机进行烘烤，并将思考逻辑转化成机器手臂的操作指令 。
（来源：英伟达）
这项功能叫做“机器人规划与推理”。Cosmos Reason能够作为机器人的“大脑 ”，负责有意识 、条理化的决策 。视觉推理模型能够解释环境 ，并在面对复杂指令时将其分解为任务并利用常识执行 。
除此之外 ，这个模型还能用于一系列AI应用。例如自动化对大规模、多样化训练数据集进行整理 、标注，也能从海量视频数据中提取有价值的信息并进行归因分析 。
目前这个模型已经投入商业化运营 。英伟达披露 ，公司内部的机器人和自动驾驶团队正使用这个模型进行数据整理与过滤 、标注以及VLA（视觉语言动作）后训练。优步（Uber）也在使用该模型为自动驾驶训练数据进行标注与生成说明。
除此之外 ，麦格纳国际正在使用该模型开发全自动即时配送解决方案City Delivery，用来帮助车辆更快适应新城市环境 。VAST Data、Milestone Systems也在交通监控自动化 、视觉检测等领域应用该模型 。
除了Cosmos Reason ，英伟达也在Cosmos世界模型中新增了Cosmos Transfer-2 ，用来加速从3D仿真等场景生成合成数据，以及一个经过蒸馏 、更为注重速度优化的Cosmos Transfers版本。
英伟达也在周一更新了Omniverse软件开发工具包 ，并公布了新的神经重建库 。其中包括一种渲染技术库 ，允许开发者使用传感器数据在三维中模拟现实世界 。
这一系列发布标志着AI芯片巨头正在加码进军机器人领域，试图将其培养成AI数据中心之外的下一个重要应用场景。
杠杆模式:在手机上如何买卖股票-黄金成“不二之选”！这回以伊冲突 市场避险逻辑变了
在手机上怎么购买股票:炒股杠杆利息-上纬新材严重异常波动！上交所出手：暂停部分账户交易
网上股票开户怎么办理:怎么在手机上买股票开户-5月30日晚间沪深上市公司重大事项公告最新快递
股票开户如何办理流程:在手机上怎么开户买股票-港股基金包揽QDII涨幅榜前十！创新药持续上攻 资金或面临“高低切”？
股票的钱公司怎么用:怎么样在手机上开户买股票-3000亿元市值海光信息拟合并中科曙光 “芯片＋整机＋算力服务”巨头呼之欲出
股票账户多少岁可以开户:在手机上怎么买股票-7月4日涨停复盘：42只股涨停 塞力医疗4连板
网友评论
最新评论