在当地时间周一揭幕的行业顶级会议SIGGRAPH(国际计算机协会计算机图形学和交互技术特别兴趣小组年度会议)上,“全球股王”英伟达推出一系列面向机器人开发者的世界模型 、应用库和基础设施。
其中 ,最引人关注的是参数量只有70亿的开源物理AI应用和机器人视觉推理模型Cosmos Reason 。
英伟达介绍称,自从OpenAI多年前发布CLIP模型以来,视觉语言模型已经改变了计算机视觉任务 ,例如物体与模式的识别等。然而,此前的模型无法解决多步骤任务,也难以应对模糊或新颖的现实体验。
凭借记忆和理解能力 ,Cosmos Reason能够使机器人和AI具身代理“像人类一样推理 ”,并在真实世界中采取行动 。
在英伟达给出的案例中,运行视觉推理模型的机器人手臂 ,成功根据“面包+烤面包机”的场景,推断出最合理的下一步动作是将面包放进烤面包机进行烘烤,并将思考逻辑转化成机器手臂的操作指令。
(来源:英伟达)
这项功能叫做“机器人规划与推理”。Cosmos Reason能够作为机器人的“大脑 ”,负责有意识、条理化的决策 。视觉推理模型能够解释环境 ,并在面对复杂指令时将其分解为任务并利用常识执行。
除此之外,这个模型还能用于一系列AI应用。例如自动化对大规模、多样化训练数据集进行整理 、标注,也能从海量视频数据中提取有价值的信息并进行归因分析 。
目前这个模型已经投入商业化运营。英伟达披露 ,公司内部的机器人和自动驾驶团队正使用这个模型进行数据整理与过滤、标注以及VLA(视觉语言动作)后训练。优步(Uber)也在使用该模型为自动驾驶训练数据进行标注与生成说明。
除此之外,麦格纳国际正在使用该模型开发全自动即时配送解决方案City Delivery,用来帮助车辆更快适应新城市环境 。VAST Data、Milestone Systems也在交通监控自动化 、视觉检测等领域应用该模型。
除了Cosmos Reason ,英伟达也在Cosmos世界模型中新增了Cosmos Transfer-2,用来加速从3D仿真等场景生成合成数据,以及一个经过蒸馏、更为注重速度优化的Cosmos Transfers版本。
英伟达也在周一更新了Omniverse软件开发工具包 ,并公布了新的神经重建库 。其中包括一种渲染技术库,允许开发者使用传感器数据在三维中模拟现实世界。
这一系列发布标志着AI芯片巨头正在加码进军机器人领域,试图将其培养成AI数据中心之外的下一个重要应用场景。
股票配资官方网:炒股怎么融资加杠杆-股价暴涨近50%!又一黑马票房破10亿 2大主演平均年龄近70岁!
股票交易员是怎么炒股的:初学者怎么玩股票-潜在税务成本影响大股东贷款增持意愿?各方如是说
股票互动交流平台:炒股怎么可以加杠杆-批量涨停!“超级牛散”章建平持仓曝光 将51亿元押注人形机器人、AI赛道
股票买入时机选择技巧:怎么申请杠杆炒股-黄仁勋:机器人技术是英伟达下一个万亿美元级别的增长机会
炒股票开户要多少钱:股票交易员是怎么炒股的-8月27日晚间上市公司利好消息一览(附名单)
配资炒股app最新版本:股票开户流程买股票怎么开户-华为发布!国产算力与国产模型重大突破
上海股票配资-线上配资-在线配资炒股开户提示:文章来自网络,不代表本站观点。
记者|沈溦连续迅猛的营销攻势下,黄酒“二哥”会稽山(601579.SH)似乎又有了逼近“一哥”古越龙...
界面新闻记者|江怡曼“韩国人开始大量买入中国股票”登上微博热搜。3月10日,截至界面新闻发稿,该词条的阅读量...
今日A股V型反弹,TMT行业探底回升。芯片50ETF(516920)探底回升,尾盘翻红收涨0.92%,资金连续涌入,近2...
界面新闻编辑|江怡曼近期,多家A股上市公司披露2024年度分红计划,其中不乏大额分红预案。4月10日...
深成指、创业板指午后拉升,双双涨逾1%,早盘均一度跌超3%。军工、免税店、半导体、零售、房地产等方向涨幅居前,沪深京三市...
“第一次看到像抢购潮牌一样抢购汽车,简直是车圈的一道奇迹。” 6月26日,留足悬念的小米YU7正式公布售价:25....
近期,广东省佛山市顺德区发生输入引起的基孔肯雅热疫情,国家疾控局近日派出工作组赴佛山现场指导,国家疾控局相关负责人表...
界面新闻记者|张晓云近期,由...