ChatGPT背后：通过人类反馈进行强化学习

作者：Faisal Khan；https://reurl.cc/MXYqW4

欢迎订阅关注，AI圈ER哥精选，每日带来AI，Metaverse，Blockchain资讯，抓住风口

这项最新发明与詹姆斯·卡梅隆 (James Cameron) 广受欢迎的科幻惊悚片《终结者 2》惊人地相似。这部电影于 1991 年上映，以可变形的液态金属 T-1000 机器人为特色。尽管液态金属机器人还处于起步阶段，但它是朝这个方向迈出的一步。

虽然开发可以执行包括变形在内的各种功能的软体机器人并不是什么新鲜事，但这是第一次尝试一种新颖的方法——一种解决先前技术挑战的方法。尽管目前的许多机器人都像这种新颖的方法一样受到磁力控制，但它们要么是有弹性但坚固的，这使得它们无法在狭小的空间中航行，要么是磁性液体，它们是流动的但不能承受重载。

去年早些时候，我写了一篇关于科学家现在如何开发下一代软体机器人的文章——赋予它们更好的机动性和变形能力。回到最新的研究，它采用了一种两全其美的方法——创造一种机器人，它不仅提供力量和敏捷性，而且还提供挤压和摆动进入更多地方的灵活性。

麻省理工学院的研究人员使用人工智能向机器人传授社交技能，新的机器学习系统使机器能够理解帮助或阻碍彼此的意义。

有趣的是，研究人员从大自然中汲取了灵感，在大自然中海参可以非常迅速且可逆地改变它们的刚度。然而，他们必须在软材料系统中模仿这种行为。这导致他们创造了一种新开发的相移材料，称为“磁活性液-固相变物质”或MPTM。

磁场不依赖外部热源来变形和变形，而是通过感应使机器人产生自身的热量。这些机器人不需要像 ATLAS 这样的复杂机器人所需的数千个组件，并且仅由两种材料制成——嵌入镓中的磁性钕铁硼微粒，镓是一种在 29.8 °C 的温度下熔化的金属。

镓中注入了磁性颗粒，使其可以被永磁体移动。当固态时，材料可以通过磁铁以每秒约 1.5 米的速度移动。此外，增强的镓可以承受高达自身重量 10,000 倍的负载。外部磁铁仍然可以操纵液体形式，使其伸展、分裂和合并。

然而，控制流体的运动更具挑战性，因为镓中的磁性颗粒可以自由旋转并且由于熔化而具有未对齐的磁极。结果，当粒子暴露于磁铁时，由于它们的不同方向，粒子会向不同的方向移动。为了测试他们发明的应用，研究人员团队进行了不同的测试。

第一个涉及应用，通过熔化穿过栅栏并使用放置在栅栏外的模具以其原始形式重新凝固来逃离牢房。

第二个更实际的应用涉及从模型人体胃中取出一个小球，方法是在离开器官之前稍微融化并包裹住异物。

在另一个展示其在工业应用中有用性的演示中，机器人爬进机器并通过简单地“熔化到带螺纹的螺丝槽中”来替换丢失的螺丝，然后再次凝固。尽管机器人使用磁场形式的外部电源提供了令人印象深刻的运动精度，但它的生物医学应用仍然存在一些问题——比如控制人体中外部产生的磁场。无论如何，这对科学家来说是一个勇敢的时刻。

完整的研究发表在《物质杂志》上。感谢来自海参的灵感。