LAM - 微软推出的大型行动模型,能自主操作Windows程序

发布于 2025-01-03 · LAM是微软推出的名为“Large Action Model”(简称 LAM)的新人工智能模型。与传统语言模型不同,LAM能够自主操作Windows程序,实现真实任务执行。 能理解文本,将用户请求转化为具体行动,如启动程序或控制设备。

LAM是什么

LAM是微软推出的新AI模型,全称叫“Large Action Model”,简称LAM。跟传统语言模型不一样,LAM可以自己操作Windows程序,真把活干完:能理解文本,把用户的请求变成具体动作,比如启动程序、控制设备。它是第一个专门跟Microsoft Office产品和其他Windows应用协同工作的模型。在Word环境里的测试显示,LAM完成任务的成功率为71%,高于GPT-4的63%,执行速度也更快。

LAM的主要功能

  • 用户意图解读:自然语言、语音、图像,各种形式的输入LAM都收,先弄懂用户想干什么,再拆成能执行的行动步骤。
  • 行动生成:意图弄明白后,LAM会把它变成具体行动指令,可能是图形用户界面(GUI)操作、API调用,也可能是机器人的物理动作。
  • 动态规划与适应:复杂任务会被LAM拆成多个子任务,环境一变,计划和行动跟着调整,执行中碰上意外也不至于卡死。
  • 专业化与效率:针对特定环境或任务,LAM会做定向训练,在这个领域的表现更稳,计算开销也省下来,响应更快。
  • 环境交互:LAM接入代理系统后,能和外部工具互动、保留记忆、跟环境做接口交互,对物理世界产生实际影响,而不只是停留在对话里。
  • 自主执行:从理解任务、规划步骤到执行和根据反馈调整,LAM自己走完全程,不用人一步步指挥。
  • 自动化软件任务:文档编辑、数据录入、表格处理这类办公杂活,都可以交给LAM。

LAM的技术原理

  • 多模态输入理解:自然语言请求、语音命令、图像或视频,LAM都读得懂,重点是把用户的意图理解到位。
  • 数据收集与准备:训练用的是收集来的用户请求、环境状态和对应行动这三类数据,数据要先清洗和预处理,之后才拿去训模型。
  • 模型训练:靠监督式微调、强化学习这些技术,用收集到的数据把LAM训练得会执行特定行动。
  • 环境集成:训练好的LAM放进代理系统里跟环境互动:收集观察数据、调用工具、维持记忆,再把反馈循环跑起来。
  • 评估:正式部署之前,LAM要过可靠性、鲁棒性和安全性这几关评估,保证在不同环境和任务里表现稳定,遇到意外情况也处理得了。

LAM的应用场景

  • 自动化软件任务:文档编辑、数据录入、表格处理这些办公事务由LAM接手,这类重复劳动省下来的时间能用在别处。
  • 智能家居管理:灯光、温度、安防监控,LAM可以操控这些智能家居设备,日常居家管理省事不少。
  • 客户服务与支持:LAM装进客服聊天机器人里,能实时诊断问题、给出解决方案,用户排队等待的时间短了。
  • 电子商务:商品搜索、下单、支付,在线购物这条流程可以整套交给LAM自动跑。
  • 教育与培训:LAM可以当虚拟助教,给每个人准备各自的学习计划和教学内容,上课的互动性也会上来。
0

相关文章

0 条评论

后参与评论

暂无评论,来抢沙发。