IT之家2月17日报道，据银河万能机器人官方微信公众号消息，马年大年之夜，银河万能机器人“小盖”的一系列动作让观众惊喜不已。从日常生活中压碎坚果、捡起碎玻璃、从货架上挑选物品到叠衣服、穿香肠，一切都轻松自如，动作灵巧，动物自然拟人化。此外，与依赖预编程的传统机器人性能不同，银河将军展示的工作技能是端到端的自主感知、自主决策和自主执行。 IT之家附上官方详细介绍： Galaxy General 的核心功能源于与传统机器人技术显着不同的大规模模型路径。该公司独特创新并应用了一种集成的新范式测试大规模虚拟和真实数据，用于大脑协调实施模型的端到端训练。这就是“银河星脑AstraBrain”，全球首个基于百亿级自建内置智能数据集的端到端、全身、全手一体化“大脑-小脑-神经控制”的大型模型。今天，通过这些独特的能力，我们第一次正式详细破译了这个全身、双手、大小大脑端到端协调的大型模型是如何被创造出来的。独特技能背后的创新。 “小盖”在春节联欢舞台上展现的所有动作，都不是预先编程好的“表演”，而是基于laAstra Brain自主决策能力的实时自主工作能力。让我们把这些最具代表性的独特能力，拆解它们背后的技术代码。独特能力1：胡桃木涂层：AstraBrain的小脑赋予“感觉”指尖。当你把两颗核桃放在手掌上时，手指就会灵巧地搓动、扭动“小帽子”。这背后隐藏着灵巧操控领域的全球性难题。胡桃木单板面临的挑战是胡桃木表面不平整且重量分布不均匀。当握在手中时，每个手指的受力点始终存在。它将变为如果扭矩稍微偏离，螺母就会打滑。ェネラル社が独自に开発したasutorabureinの小脳モデルです。想要练好灵活尿布游戏的小脑，首先要让机器人在虚拟世界里打好基础，让机器人手在虚拟世界里痴迷地练习。按比例创建不同大小和重量的虚拟坚果，系统让用户通过不断的试错练习一系列适应性很强的“基本游戏技巧”。第二步，纠正现实的偏差。因为人与人之间总是存在着差异计算机模拟和现实（如真实的摩擦力和机械误差），我们让真实的机器人手触摸各种物理物体，积累现实的“物理感觉”。简单来说，就是在虚拟世界中练习动作，在现实世界中感受动作。通过将这两者结合起来，机器人手实际上可以非常顺利地转动螺母。问题。渐渐地，这个过程变得更加自然和更快。ユuniークなsukiru 2: ガラスの破片を拾う – AstraBraintoru·ガイ」はこう寻ねた明るい色のテーブル天板に散らばったガラスの破片を拾います。これは人间にとっては危険を伴う繊细な操作であり、ロボットにとっては认识と制御の二重の界となります。ガラス片の难点は、特に明るい色のテーブルトプに置いた场合、透明な物体が视覚的にほとんど「见えない」こと、そしてそのエッジ、厚さ、反射机能が容易に环境に溶け込んでしまうことです。従来の视覚アルゴリズムでは、透明なオブジェクトの3次元の轮郭や姿势を正确に识另外することは困难であり、ましてや掴む位置を决定することは困难です。 AstraBrain 产卵时，机器人可以“看到”虚拟世界中可能存在的几种透明方式。结合多模态感知融合技术，“小盖”可以从弱反光边缘和阴影处“看到”玻璃的存在变化，精准谋划其抓取策略。更重要的是，该模型的力感使其能够检测玻璃接触时的硬度或滑度，并施加适量的力以牢固地抓住玻璃，而不会压碎或滑动玻璃碎片。这一功能为机器人在家庭清洁、工业回收等场景中处理透明物体开辟了新的可能性。独特技能3：从货架上拿起物品：BrainsAstraBrain的大大小小的设备协同工作，可以在动态环境中准确捕捉。春晚舞台上，“小个子”要从架子上拿起一瓶矿泉水。这个看似简单的动作，其实暗藏玄机。水瓶在货架之间一字排开，没有任何间隙，与周围产品的距离极其接近。如果你不小心，你可能会撞倒旁边的物体或无法抓住它。这就要求机器人能够同时解决三个问题。首先，你的大脑准确地确定水瓶在架子上的位置。二是利用拟人化的动作到达水瓶，并避免在此过程中撞倒周围的产品。三是操作熟练。水瓶顶部较薄，底部较厚，通常比较紧，直接拉出来很容易被卡住。 AstraBrain的强化学习框架让“小盖”在虚拟世界中经历了数亿次的“试错把握”。当您找到某个项目旁边的项目时，会扣除积分；当您成功删除项目时，会添加积分。这样一场游戏的结果，让他“教育”了人类想不到的最佳方法，先用灵巧的手指轻轻抓住水瓶瓶身顶部的瓶盖，稍微倾斜一下，避开左右邻居，感受到阻力时调整角度，并不断地把它拿出来。这个过程是实时决策的结果，而不是预先设定的轨迹。每次拉动、每次倾斜、每次抓取都是机器人根据当前环境在几毫秒内自主决定的。 loveunique rLe 4：折叠衣服：灵活物体的泛化和AstraBrain的灵巧操控。折叠衣服被认为是机器人操作领域最大的挑战之一。衣服是有弹性的，没有固定的形状，所以每次拿起它们时，它们的状态都会完全不同。春晚上，“小个子”面对的是随机摆放的T恤，没有预设的折叠轨迹，也没有固定的抓握点。它必须实时确定织物当前的折叠状态，预测其折叠形状，并规划抓、拉、折叠和推动作的顺序。动作顺序。通过在模拟环境中生成数万个柔性物体的变形数据AstraBrain 的解决方案允许机器人学习“看到”虚拟世界中不同可能的折叠形状，并从当前状态推断出最佳的机动路径。当小G的FingersAI轻轻抚平衣服的角并将其精确地对折时，它不是在运行程序，而是根据大量的模拟经验做出实时决策。这就是“举一反三”能力的终极体现。独特技能5：烤香肠：双手配合和工具使用的双重创新技能。如果说烤坚果考验的是你的单手灵巧度，那么烤香肠则是对你的双手协调能力和工具操作能力的最大挑战。春晚舞台上，“小盖”需要一手控制烤钳烧烤，一手抓串。你必须用双手精确地串起香肠并将其递给明星。一切动作都流畅如水呃。这包括手的空间协调、工具“身体延伸”的力量和压缩力的独立控制。 AstraBrain的端到端大规模模型架构让机器人的“大脑”能够同时处理双手独立的指令流，并在执行过程中进行实时调整。更重要的是，“小改”通过研究大量的模拟数据，抓住了“工具”的本质。烤钳不是被控制的“物体”，而是一种延伸和完成任务的手段。这种概括与工具交互的能力使您可以像人类一样快速开始使用新工具。在上述所有工作任务中，细心的观察者都会注意到，小盖机器人的肢体语言和手势比其他机器人更接近真人，有一种熟悉感。这背后有一种使用“AstraBrain”生成人类行为数据的大规模模拟的机制。为什么要重点关注“人体数据模拟生成”？这是因为，与慢慢采集机器人的刚性动作相比，我们日常生活中的动作不仅巨大，而且非常容易捕捉。将这种更丰富、更容易访问的人体数据与模拟生成相结合，使我们能够充分利用先验的人体运动，这也是当前大规模机器人建模技术最有可能的发展方向。银河星脑AstraBrain：拒绝“死记硬背”，学会“举一反三” 通过以上独特能力，我们看得一清二楚。 AstraBrain的核心理念是拒绝特定动作的机械配置，而是让机器人学习一组通用功能，这些功能可以对新场景和新任务产生适应。图：AstraBrain 银河星脑技术框架 我们来仔细看看目前为止所做的训练步骤，取《小嘎》中最常用的“架子挑”以“i”为例：第一步：与人进行小样本演示。以往教机器人一项新技能，往往需要对AstraBrain进行数千次远程命令，这种模式彻底改变。只需一点点人类演示，机器人就能理解任务的核心意图，“记住”这些动作，并在自己的硬件上等效地展示出来。这样，“小盖”就很快适应了春晚舞台。醋。放置杂散灯和可互换配件的底座。步骤2：模拟数据合成在实践中，学习效率太低，数据成本太高，AstraBrain的第二步是将机器人发射到“虚拟世界”，或者说是高度精确的、物理真实的模拟环境，在这里，系统可以自动生成数以万计的不同场景，随意改变光照条件，并通过类来批量生成拟人化的抓取行为。主动模型。通过模仿和学习大量的模拟数据，机器人已经掌握了各种复杂情况下行为的基本方面。第三步：闭环强化学习只有模仿，不足以支持非常复杂的机动或动态避障。为了实现这一目标，AstraBrain引入了强化学习机制，使机器人末端执行器能够在虚拟世界中进行高强度的“自我对弈”。如果您触摸相邻的产品，则会扣除积分；如果您成功避开障碍物并安全移除该产品，则会添加积分。经过数亿次的试验和错误，机器人“照亮”了人类演示也无法给出的最佳路径，实现了春节庆祝活动中“举重如轻”的丝滑感觉。第四步：在现实世界中“练习”。无论你在虚拟世界中训练得有多好，我当你回到物质现实时，错误总会发生。训练 AstraBrain 的最后一步是让机器人在真实环境中执行少量真实操作，并收集这些真实世界数据来“微调”它。这一步看似简单，但却是彻底缩小虚拟与现实差距的重要一步。数据金字塔上述四步的基础：从底到针的培育逻辑，是融合虚拟现实和通用银河技术系统“银河星广场”（AstraSynth）的基础设施数据结构。具体包括以下基础层： 角度层（人类数据）：机器人的常见任务识别。构建一个“小”来帮助您理解“什么是坚果？”和“你在坚持什么？”中间层（综合仿真数据）：通过大量多样且低成本的虚拟数据，机器人可以在仿真中遍历不同的可能性，从而跨界拉近虚拟与现实的差距。尖塔层（实战数据）：虚拟训练成熟后，在真实场景中利用少量高质量的实战数据完成最终打磨。 Galaxy Star Square AstraSynth 数据金字塔利用虚拟仿真解决数据稀疏问题，利用强化学习解决运动不精确的 b-necksotella。这是 Galaxy Universal Robots 的密码。这个逻辑集不仅可以用来抓取架子上的物品，还可以用来装坚果、折叠衣服和烤香肠。正如“小一”在春节庆祝舞台上所展现的那样，他真正掌握了快速学习任何新技能的一般能力，而不是学习具体的孤立动作。
特别提示：以上内容（包括图片、视频，如有）由自有媒体平台“网易账号”用户上传发布。本平台仅提供信息存储服务。
注：a以上内容（包括照片和视频）由网易号用户上传和发布，网易号是一个仅提供信息存储服务的社交媒体平台。
银河优傲机器人：小盖过年期间的所有行为都不是预先编程的表演
