READ WITH
CONTEXT
苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini

FEATURED STORY

从信息变化中
发现新的观察角度

以事实为基础,以清晰表达为目标,为每一次阅读保留足够的背景与思考空间。

Wul_S STORY / 01
龙8-龙八(国际)头号玩家唯一官方网站 新闻中心 苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini
返回资讯列表

苹果罕见公布人形机器人进展,宇树 G1 背着一台跑千问的 Mac mini

今日体育资讯,由龙8头号玩家整理:

苹果新 CEO 最近对自家 AI 的进度有点不满意。

据彭博社最新爆料,苹果 CEO 约翰·特努斯已经要求软件主管费德里吉加快 AI 开发节奏,拿出更大胆的方案,不能只满足于给 Siri 升级几个功能。

比起苹果 AI 落地的速度,苹果在研究上的进展其实超出很多的预期,其中就包括具身智能,苹果也在研究怎么让 AI 拥有一副能在现实世界行动的身体。

最近,苹果研究团队公开了一项名为 HALO 的人形机器人研究,直接用宇树 G1 当身体,后背绑着一台 Mac mini M4 Pro,里面运行的还是阿里的千问模型。

这套看起来有点混搭的系统,已经能够让机器人自主走进陌生家庭,找到椅子坐下、钻过桌底、推走箱子。

在 6 个从未见过、没有提前扫描的真实环境里,360 次测试的平均成功率达到 91%。

图|项目地址:https://apple-aiml-research.

github.

io/ml-halo/ 更有意思的是,苹果甚至没有专门找人遥控机器人来采集这些训练数据。

研究团队用几百张 GPU,在上千个虚拟家庭中批量生成机器人的动作和视觉数据,再把学到的技能直接搬进现实世界。

这意味着,人形机器人原本需要人类手把手教的动作,现在开始有机会靠算力来学习。

教机器人坐下,得先拍到它看见了什么 我们听到「去椅子上坐」,一般会先看椅子在哪儿,然后走过去,转身,再把身体的重量落到座面上。

对机器人来说,这个过程则需要一种很具体的训练数据。

一条常见的数据样本里,既要有它听到的指令和第一视角画面,也要有完成任务时全身关节怎么动的记录。

about image

靠人遥操作采集,每多一条样本,就得再做一遍。

这种配对机器人的数据叫做「视觉-语言-动作 Vison-Language-Action,VLA」,和训练大语言模型可以使用互联网上取之不尽的文本不同,现实世界中并不存在已有的 VLA 语料数据。

每一条训练样本都必须有人专门制造出来:遥操作系统(如 ALOHA)、穿戴式动捕设备(如 UMI),产出一小时数据至少要消耗一小时人力,这也是人形机器人领域著名的「数据瓶颈」。

苹果的这篇论文 HALO 给出的方案是 不采集人的数据了,全部用仿真合成。

研究团队用运动扩散模型生成全身动作,用程序化生成器(INFINIGEN)造出 1000 个虚拟家庭,客厅、办公室、卧室,家具疏密随机;

再在 Isaac Sim 里把动作放进场景,渲染出机器人头部相机看到的第一视角画面,最后交给自动校验器筛掉穿模、滑脚的坏样本。

拿坐椅子来说,研究人员先指定走过去、转身、坐下这几个阶段,以及最后坐稳的姿势。

动作生成模型据此给出多组轨迹 ,程序检查脚底有没有打滑、身体有没有穿过地面、关节有没有超过活动范围,再把筛过的动作和椅子摆进虚拟房间,避开周围的家具。

接下来,仿真器从机器人头部摄像头的位置把这一幕拍下来。

团队在约 1000 个程序生成的房间里做出了 16.

3 万条、近 300 小时 的配对样本,数据规模只受算力限制。

论文里还提到,仅生成 SIT(坐下)一个技能的 5 万条样本,就用了 250 张 H100 GPU 跑了 9 个小时;

全部 1178 个房间的生成用了约 300 张 GPU、26 个小时。

房间多样性本身也起了作用。

研究团队保持动作数据量不变,只调整训练场景的数量。

在 100 个没见过的模拟房间里,坐椅子的成功率从只用 1 个房间训练时的 43%,涨到用 100 个房间时的 81%。

场景再加到 1000 个,成绩升到 84%。

苹果的机器人生态,跑在自己的芯片上 HALO 的自主性由三层结构协作完成,而且 全部在机器人本体上运行 ,不联网、不遥控、不需要外置动捕。

编排器(约 0.

5 Hz) :一个视觉语言模型(默认是本地运行的 Qwen3.

6-35B-A3B)每两秒看一次画面,可以把「帮我把箱子推到桌子那边」这样的自由指令拆解成子任务序列;

运动生成器(3 Hz) :冻结的 Qwen3.

5-2B VLM 编码器加上一个从零训练的扩散 Transformer 解码器,根据当前第一视角画面和子任务,生成未来 5 秒的全身运动计划,即机器人身上 29 个关节角度加骨盆位姿;

运动跟踪器(50 Hz) :结合深度视觉和本体感觉,把运动计划落地成真正的关节命令。

它经过「特权专家训练 → 多教师蒸馏 → 多 critic 强化学习微调」三段式训练,是解决「物理问题」的最底层。

总的来说,上两层解决的是「语义」问题,即指令说的是哪把椅子;

最底层解决的是,如何让屁股结结实实落在椅面上,还不能失去平衡。

这套编排有趣的地方是软硬件上的混搭,用的是宇树 Unitree G1 的身体,背上驮着一台 Mac mini M4 Pro(64GB 统一内存)负责思考,而机器人原厂 Jetson Orin NX 负

关注龙8头号玩家,了解更多体育资讯。

上一篇皇马在穆帅执教下4年来首次8连胜,与穆帅擦肩而过的前皇马后卫盛赞穆帅:穆帅在皇马的工作应该得到认可!...
下一篇为啥很多家庭是女人掌握经济大权?网友:想管钱,先看看自身有没有能力...

觉得内容有用?

分享给朋友,让更多人看到这篇内容。

正在被关注

查看近期访问较多的资讯内容,快速了解用户正在讨论的方向。

百度第三次改搜索框

百度第三次改搜索框

作者 I 龚正 编辑 I 杨晶 2000年1月,北京中关村,一间不起眼的办公室。 31岁的李彦宏坐在电脑前,屏幕上是一个还很粗糙的搜索框。此前,他在硅谷写过搜索引擎,拿过超链分析的专利。当时中文搜索市场几乎被境外技术包围,李彦宏想给中文互联网做一个自己的搜索框,于是把这套技术搬回了国内。 那时候的搜索很简单:敲几个字,它给你一排蓝色链接。百度就靠这个技术,长成了中国互联网的入口。 26年过去。10

皇马在穆帅执教下4年来首次8连胜,与穆帅擦肩而过的前皇马后卫盛赞穆帅:穆帅在皇马的工作应该得到认可!

皇马在穆帅执教下4年来首次8连胜,与穆帅擦肩而过的前皇马后卫盛赞穆帅:穆帅在皇马的工作应该得到认可!

在皇马近期各项赛事连胜之后,前皇马球员米格尔・托雷斯对主帅穆里尼奥的执教成果予以称赞。 进入本次国际比赛日之前,皇马交出了亮眼成绩单 —— 各项赛事豪取八连胜。 这是白衣军团近四年都没能达成的成就,托雷斯将这波向好势头归功于穆帅。 米格尔・托雷斯评价穆帅 米格尔・托雷斯出自皇马自家青训,他曾在2006–2009 年间为皇马一线队效力,2009 夏天他就转会去赫塔费了。因为与穆帅擦肩而过。 为皇马一

罗纳尔多的酒友,接连在国米巴黎当水货,蹭一座世界杯冠军太幸运

罗纳尔多的酒友,接连在国米巴黎当水货,蹭一座世界杯冠军太幸运

马科斯·万佩塔,昙花一现的代表。 虽然效力过国际米兰和巴黎圣日尔曼,然而他在五大联赛合计逗留时间只有一年半,又或者说连续当了两次水货! 效力国际米兰时,只在意甲出场了1次,唯一拿得出手的成绩单就是意大利超级杯对阵拉齐奥时收获了1粒进球,其余时间内的万佩塔碌碌无为。考虑到1500万欧元的转会费,巴西人的水货标签有一点不冤枉! 万佩塔是里皮钦点的意中人,不过自身难保的银狐很难为巴西人搭建避风港,何况继

另有重用!温瑞博落选混团世界杯真相揭晓,不是“输”了,而是王励勤或在下一盘大棋

另有重用!温瑞博落选混团世界杯真相揭晓,不是“输”了,而是王励勤或在下一盘大棋

聚焦体坛资讯,关注国乒资讯。 WTT冠军赛法兰克福站结束之后,本赛季接下来的重头戏便是即将开始的混团世界杯和年终总决赛。 10日上午,中国乒协公布了混团世界杯最终入围名单,具体为: 男子:王楚钦、林诗栋、黄友政、周启豪; 女子:王曼昱、孙颖莎、蒯曼、陈熠。 其实此前早已经确定了男女各3人,周启豪和陈熠是最后敲定的人选。 对于周启豪和陈熠入围,其实还是引发了球迷的讨论。 尤其是男子选手周启豪,“爆冷

香港公开赛首日国羽5胜1负 4对男双均顺利进16强

香港公开赛首日国羽5胜1负 4对男双均顺利进16强

北京时间9月10日晚,2024年世界羽联世界巡回赛香港羽毛球公开赛结束首日争夺,中国队在这个比赛日取得了5胜1负,4对男双全部顺利晋级,李汶妹/张殊贤赢德比进16强。 2024年香港羽毛球公开赛于9月10-15日在中国香港举行。本站赛事,国羽共派出了3位男单选手、1位女单选手、4对男双选手、3对女双选手和4对混双选手参赛。 由于参赛人数问题,首日比赛是正赛首轮和资格赛同时进行的。当日有国羽球员出战