英伟达开发的人工智能代理Eureka引入大模型参与训练

①英伟达开发的人工智能代理Eureka引入大模型参与训练，可以教授机器人复杂的运动控制技能，MetaHabitat3.0模拟器可以教机器人如何与物理世界互动；

《科技创新板日报》10月21日电如今，科技巨头主动肩负起机器人研发的重任，正是你追我赶往下一场科技盛宴。当地时间10月20日，英伟达和Meta发布了大型重型机器人培训模式。

英伟达开发的人工智能代理Eureka可以教机器人复杂的运动控制技能，如转笔、打开抽屉和橱柜、扔球和接球、操作剪刀等。英伟达表示，这一突破将重新定义机器学习。

到底是什么样的工具？新成果有什么意义？

▌英伟达Eureka-大模型参与训练机器人

Evolutionnn是Evolution的全称-driven Universal Reward Kit for Agent，本质是一种由大型模型驱动的算法生成工具。Eureka凭借GPT-4编写代码的能力，具有优秀的奖励函数设计能力，可以独立编写奖励算法来训练机器人。

Eureka的关键是通过上下文设计人类水平的奖励算法。简单地说，它是通过GPT-4的零样本生成、代码编写和上下文改进功能来优化奖励执行策略，从而通过加强学习来实现复杂的技能。

英伟达说，强化学习有29种不同的开源（RL）在环境中，Eureka奖励设计的性能达到了人类水平，包括10种不同的机器人形式（四足机器人、四旋翼机器人、双足机器人、机器人和几种灵巧的手）。Eureka生成的奖励程序在没有任何特定任务提示或奖励模板的情况下，超过80%的任务优于专家编制的奖励程序。这使得机器人的平均性能提高了50%以上。

通过Eureka，机器人学会了转笔、扔接球、打开橱柜(注:这些机械手指上下翻飞的场景暂时局限于虚拟环境)

人形机器人通过Eureka学习跑步态

英伟达的研究由宾夕法尼亚大学、加州理工学院和德州大学奥斯汀分校的研究人员完成。目前，该项目已完全开源。

在机器人领域，有一个“莫拉维克悖论”——人类独特的高级智能能力只需要很少的计算能力，但无意识的技能和直觉（如识别人脸、举起铅笔、在房间里行走、回答问题等）需要巨大的计算能力，也就是说，事情越简单，事情就越困难，事情就越简单。

这就是为什么人类已经创造了AlphaGo，打败了世界顶级棋手，但仍然不能让机器人像两三岁的孩子一样感知和行动。

英伟达的最新结果显示了大型模型在机器人精细控制中的作用。在英伟达的推动下，预计更智能的机器学习方法将迅速引入工业和消费者应用领域。

MLOPS是机器学模型，概念股是什么？

MLOPS是指机器学习、开发、操作和维护的集成，包括三个步骤：项目设计、模型开发和模型操作和维护。它将业务、数据、算法和操作和维护相结合。其主要功能是构建一条通用和可重复使用的模型生产线。它可以理解为人工智能生产力加速器。

需要指出的是，机器学习的整个生命周期过程非常复杂，在实际应用中，业务和模型往往脱节，存在工具碎片化、缺乏数据样本、缺乏综合开发环境、缺乏行业知识、缺乏团队协调等问题。

为了改善甚至消除上述问题，MLOPS应运而生。MLOPS的实施可以更好地连接模型开发、运行和维护的整个过程，创建自动化、可重复的工作流，从而提高开发和运行效率。

中金表示，MLOPS是AI掘金时代的“铲子”，从模型到生产应用，MLOPS帮助AI模型落地生花。在人工智能的大规模生产中，由于流程和管理不当，效率低、周期长等问题影响了实际实施。MLOPS是一套工程管理方法论和工具链，旨在解决上述问题，通过统一的ML研发和运营流程提高质量和效率，使人工智能模型的整个生命周期。

MLOps概念大全如下：

恒华科技(300365)：2023年4月18日，该公司在互动平台上回复，该公司的人工智能引擎AI-En­g­i­n­ev1.0属于ML­O­PS系统。它提供了一套完整的模型生命周期支持，包括数据标记、模型设计、模型培训和服务发布。

新炬网络(605398)：继续深入参与中国信通研究院发起的多个创新工作组织，公司是中国信通研究院AI­O­PS标准编制工作组等成员单位参与“云计算智能化运维”（AI­O­ps）“人工智能研发与运营一体化”系列标准（Mo­d­el/ML­O­ps）能成熟度模型系列标准等。

科大国创(300520)：根据2021年年报，国创九章数据智能平台继续深化数据处理、人工智能开发、人工智能推理、人工智能部署能力，打造云端协作一站式人工智能平台，继续深化并行计算、高性能推理等核心技术的应用­O­PS理念构建人工智能开发敏捷流水线，赋能行业客户端到端业务建模。

星环科技(688031)：根据公司招股说明书，So­p­h­o­n­M­L­O­PS通过统一多源异构算法框架、模型文件和模型服务，统一部署大型机器学习模型，提供实时监控模型服务运行状态，可大大降低模型管理成本，提高模型使用效率和运行能力，降低模型集成管理成本，控制生产环境风险。

奥比中光(68832)：互动很容易表达，ML­O­PS是指一套完成人工智能模型开发和着陆的工具包和工作流程。目前，公司在个别产品上有ML­O­PS实践，但工具的通用性还不够。随着未来更多应用场景的实施，预计这些工具将更加通用。海涵财经来源