Feature Reading

苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini

将文章核心主题、阅读路径与关联内容进行更清晰的组织,帮助用户以更流畅的节奏进入正文。

苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini
Sports Insight

当前位置

当前正在查看文章详情,可沿路径返回栏目页或继续切换其他内容。

苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini

pg赏金女王为你整理相关体育消息:

苹果新 CEO 最近对自家 AI 的进度有点不满意。

据彭博社最新爆料,苹果 CEO 约翰·特努斯已经要求软件主管费德里吉加快 AI 开发节奏,拿出更大胆的方案,不能只满足于给 Siri 升级几个功能。

比起苹果 AI 落地的速度,苹果在研究上的进展其实超出很多的预期,其中就包括具身智能,苹果也在研究怎么让 AI 拥有一副能在现实世界行动的身体。

最近,苹果研究团队公开了一项名为 HALO 的人形机器人研究,直接用宇树 G1 当身体,后背绑着一台 Mac mini M4 Pro,里面运行的还是阿里的千问模型。

这套看起来有点混搭的系统,已经能够让机器人自主走进陌生家庭,找到椅子坐下、钻过桌底、推走箱子。

在 6 个从未见过、没有提前扫描的真实环境里,360 次测试的平均成功率达到 91%。

图|项目地址:https://apple-aiml-research.

github.

io/ml-halo/ 更有意思的是,苹果甚至没有专门找人遥控机器人来采集这些训练数据。

研究团队用几百张 GPU,在上千个虚拟家庭中批量生成机器人的动作和视觉数据,再把学到的技能直接搬进现实世界。

这意味着,人形机器人原本需要人类手把手教的动作,现在开始有机会靠算力来学习。

教机器人坐下,得先拍到它看见了什么 我们听到「去椅子上坐」,一般会先看椅子在哪儿,然后走过去,转身,再把身体的重量落到座面上。

对机器人来说,这个过程则需要一种很具体的训练数据。

一条常见的数据样本里,既要有它听到的指令和第一视角画面,也要有完成任务时全身关节怎么动的记录。

靠人遥操作采集,每多一条样本,就得再做一遍。

这种配对机器人的数据叫做「视觉-语言-动作 Vison-Language-Action,VLA」,和训练大语言模型可以使用互联网上取之不尽的文本不同,现实世界中并不存在已有的 VLA 语料数据。

每一条训练样本都必须有人专门制造出来:遥操作系统(如 ALOHA)、穿戴式动捕设备(如 UMI),产出一小时数据至少要消耗一小时人力,这也是人形机器人领域著名的「数据瓶颈」。

苹果的这篇论文 HALO 给出的方案是 不采集人的数据了,全部用仿真合成。

about image

研究团队用运动扩散模型生成全身动作,用程序化生成器(INFINIGEN)造出 1000 个虚拟家庭,客厅、办公室、卧室,家具疏密随机;

再在 Isaac Sim 里把动作放进场景,渲染出机器人头部相机看到的第一视角画面,最后交给自动校验器筛掉穿模、滑脚的坏样本。

拿坐椅子来说,研究人员先指定走过去、转身、坐下这几个阶段,以及最后坐稳的姿势。

动作生成模型据此给出多组轨迹 ,程序检查脚底有没有打滑、身体有没有穿过地面、关节有没有超过活动范围,再把筛过的动作和椅子摆进虚拟房间,避开周围的家具。

接下来,仿真器从机器人头部摄像头的位置把这一幕拍下来。

团队在约 1000 个程序生成的房间里做出了 16.

3 万条、近 300 小时 的配对样本,数据规模只受算力限制。

论文里还提到,仅生成 SIT(坐下)一个技能的 5 万条样本,就用了 250 张 H100 GPU 跑了 9 个小时;

全部 1178 个房间的生成用了约 300 张 GPU、26 个小时。

房间多样性本身也起了作用。

研究团队保持动作数据量不变,只调整训练场景的数量。

在 100 个没见过的模拟房间里,坐椅子的成功率从只用 1 个房间训练时的 43%,涨到用 100 个房间时的 81%。

场景再加到 1000 个,成绩升到 84%。

苹果的机器人生态,跑在自己的芯片上 HALO 的自主性由三层结构协作完成,而且 全部在机器人本体上运行 ,不联网、不遥控、不需要外置动捕。

编排器(约 0.

5 Hz) :一个视觉语言模型(默认是本地运行的 Qwen3.

6-35B-A3B)每两秒看一次画面,可以把「帮我把箱子推到桌子那边」这样的自由指令拆解成子任务序列;

运动生成器(3 Hz) :冻结的 Qwen3.

5-2B VLM 编码器加上一个从零训练的扩散 Transformer 解码器,根据当前第一视角画面和子任务,生成未来 5 秒的全身运动计划,即机器人身上 29 个关节角度加骨盆位姿;

运动跟踪器(50 Hz) :结合深度视觉和本体感觉,把运动计划落地成真正的关节命令。

它经过「特权专家训练 → 多教师蒸馏 → 多 critic 强化学习微调」三段式训练,是解决「物理问题」的最底层。

总的来说,上两层解决的是「语义」问题,即指令说的是哪把椅子;

最底层解决的是,如何让屁股结结实实落在椅面上,还不能失去平衡。

这套编排有趣的地方是软硬件上的混搭,用的是宇树 Unitree G1 的身体,背上驮着一台 Mac mini M4 Pro(64GB 统一内存)负责思考,而机器人原厂 Jetson Orin NX 负

关注pg赏金女王,掌握更多体坛动态。

觉得有用?分享给朋友

让更多人看到这篇内容

推荐阅读

Search
热点新闻
黄仁勋犯了天下男人都想犯的错
黄仁勋犯了天下男人都想犯的错

美国中期选举一落地,硅谷科技巨头就纷纷遭到美国政府的清算。 继马斯克之后,黄仁勋也栽了。 美国政府曝光,黄仁勋与新加坡云计算企业Megaspeed的前高管Alice Huang(黄乐)有过恋爱关系。 那么,黄仁勋的出轨风暴是怎么卷起来的呢? 把时间拨回到2024年6月,一张领英照片流出: 台北某酒吧,黄仁勋和几位AI行业高管一起喝威士忌,其中,人群里就有一位亚裔女性,长发披肩坐在黄仁勋旁边。 20

末日来临,大限将至
末日来临,大限将至

曾几何时,泽连斯基被美西方包装为乌克兰的民族英雄,抗俄反侵略的伟大战士。美西方刮起了泽连斯基旋风,请泽连斯基议会演讲,为泽连斯基颁授勋章,泽连斯基一时风光无限。 一将成名万骨枯,泽连斯基的成名与风光则是数百万乌克兰人的生命与鲜血换来的,是乌克兰遍地焦土满目疮痍换来的,是成千上万乌克兰家庭的破碎换来的,是乌克兰无尽矿产换来的,是乌克兰欠下无数外债换来的。 泽连斯基是美西方的代理人,乌克兰成为美西方反

1935年徐向前拒绝跟随毛主席北上,晚年反思:成了他一生遗憾!
1935年徐向前拒绝跟随毛主席北上,晚年反思:成了他一生遗憾!

1935年9月8日晚,四川松潘附近,毛泽东来到徐向前住处。草地行军刚刚缓过一口气,红军两支主力却因战略方向发生分歧。毛泽东此行没有带来命令,只是想听听徐向前的想法,也希望这位红四方面军总指挥能跟中央一起北上。 这场谈话的分量,远远超过一次普通的征询。几个月前,中央红军与红四方面军在川西会师,徐向前才第一次见到毛泽东。此前,一个在中央苏区指挥作战,一个在大别山和川陕地区苦战,彼此虽早有声名,却一直未

图片报:虽然未入选国家队,但萨内将出席吕迪格的德国队告别仪式
图片报:虽然未入选国家队,但萨内将出席吕迪格的德国队告别仪式

直播吧11月16日讯 据《图片报》报道称,萨内将出席吕迪格的德国队告别仪式。 在德国对阵荷兰的焦点战中,吕迪格将正式告别国家队。这位皇家马德里后卫在今年夏天的世界杯失利后结束了86场的国家队生涯。如今这一刻注定感人至深:吕迪格将在其家乡柏林迎来盛大的致敬仪式。 据《图片报》获悉,球场将迎来一位特殊的观赛嘉宾:萨内!两人多年来一直保持着深厚的友谊,彼此关系极其融洽。萨内尚未宣布退出德国国家队,但此前

291对123,美国决议获落地,白宫首位女总统要出?万斯或放弃大选
291对123,美国决议获落地,白宫首位女总统要出?万斯或放弃大选

291票赞成、123票反对,纽约一场地方代表大会投票落下帷幕,左翼呼声推着AOC向着白宫进发;就在同一时段,共和党原本被寄予厚望的副总统万斯,传出正在斟酌放弃2028大选的消息。 一边有人争先起跑,一边有人打算抽身离场,美国下一轮总统大选的预热,早早掀起了不小的风浪。 左翼呼声高涨,共和党遭遇重挫 这场投票,发生在美国民主社会主义者协会纽约市分会曼哈顿代表大会。经过现场辩论,参会代表以接近2:1的