MobileAgent是由阿里巴巴开发的一个自主多模态AI代理，可以模拟人类操作手机，是一个纯视觉解决方案，不需要任何系统代码，完全通过分析图像来理解和操作手机。
项目地址:https://top.aibase.com/tool/mobile-agent
特点:
MobileAgent能够自动完成各种任务，比如在Alibaba上帮助用户找到帽子，并根据条件添加到购物车，在Amazon Music中搜索歌手Jay Chou或播放关于“代理”的音乐，在Chrome中搜索今日湖人队比赛结果或关于Taylor Swift的信息，在Gmail中发送空邮件或具有特定内容的邮件，在TikTok上为宠物猫视频点赞或评论等，还可以结合使用多个应用完成复杂任务。
MobileAgent的特点包括依赖于纯视觉解决方案，独立于XML和系统元数据，具备多种视觉感知工具进行操作定位，无需探索和训练，即插即用。
其工作原理包括视觉感知工具，自主任务规划和执行，自反思和提示格式。 MobileAgent使用了视觉感知模块、文本和图标定位，自主规划和自反思方法来实现对手机应用的操作。观察、思考和行动是MobileAgent采用的提示格式，要求代理输出三个组成部分。
版权声明：除非特别标注，否则均为本站原创文章，转载时请以链接形式注明文章出处。