欢迎光临
我们一直在努力

让AI真正“长出手“:字节跳动开源TARS,能像人一样操作电脑!

让AI真正"长出手":字节跳动开源TARS,能像人一样操作电脑!

【2025年最炸裂开源AI项目】

2025年3月25日,字节跳动开源了一款叫Agent TARS的AI助手——它能像真人一样"看"着你的屏幕,用鼠标点击、用键盘输入,帮你完成各种电脑操作。Manus最强对手来了?


一、这玩意儿是啥?

Agent TARS = 能操作电脑的AI助手

想象一下:你对AI说一声"帮我查一下特斯拉股价,做成图表发给我",然后AI自己打开浏览器、搜索、复制数据、画图、发邮件——全程你躺着就行。

这就是Agent TARS在做的事。

它不是聊天机器人,不是Copilot,而是一个能真正替你操作电脑的AI数字员工。

名字的由来

TARS出自电影《星际穿越》里的机器人——靠谱、聪明、什么都能干。字节跳动沿用这个名字,意思是"让AI成为你生活中靠谱的助手"。


二、它能做什么?(真实场景)

场景1:自动化办公

你:“帮我把今天竞品动态整理成报告”

Agent TARS自动:

  • 打开多个竞品官网/新闻站
  • 抓取最新文章标题和摘要
  • 整理成Word文档
  • 发到你邮箱
  • 你做的: 只说了一句话

    场景2:深度市场调研

    你:“帮我分析抖音和快手的用户增长策略”

    Agent TARS自动:

  • 打开Google Scholar、行业报告网站
  • 搜索相关数据报告
  • 提取关键数字和趋势
  • 生成对比分析图表
  • 写成研究报告
  • 场景3:电脑日常操作

    • “帮我把Downloads文件夹里昨天的文件都移到项目目录”
    • “打开Excel,把这张表的数据按销量排序”
    • “帮我写一封邮件发给老板,附上上周的数据报告”

    三、技术原理:为什么它能做到?

    传统AI助手 vs Agent TARS

    维度传统AI助手Agent TARS
    输入方式 文字 文字 + 屏幕截图
    输出方式 文字回答 文字 + 鼠标点击 + 键盘输入
    操作能力 ❌ 无法操作界面 ✅ 直接操作任何GUI
    环境感知 ❌ 不知道屏幕什么样 ✅ 实时看屏幕、理解界面

    核心技术:视觉语言模型(VLM)

    Agent TARS底层基于视觉语言模型,工作原理像这样:

    你输入指令:"点击登录按钮"

    AI看屏幕截图:"这里有个蓝色按钮,上面写着'登录'"

    AI决定动作:"鼠标移动到那个按钮位置,点击"

    系统执行 → 屏幕变化 → AI再看新截图 → 继续下一步

    关键点:不需要DOM、不需要API、不需要控件ID。 它跟人类一样——看图操作。这让它可以操作任何软件:浏览器、Word、Excel、QQ、微信……

    OSWorld基准测试:超越GPT-4o

    OSWorld是AI操作电脑的"高考卷",Agent TARS得分24.6分(15步限制),远超GPT-4o等竞品,刷新了SOTA。


    四、三大黑科技

    1. 全自动任务流水线

    用户指令 → 任务拆解 → 子任务执行 → 结果整合 → 输出

    AI会把一个复杂任务自动拆成多个小步骤,按顺序执行,遇到问题还会自我纠错。

    2. 多工具无缝集成

    Agent TARS通过MCP协议(Model Context Protocol)连接各种工具:

    • 🌐 浏览器:自动上网搜索、填表、爬数据
    • 📁 文件系统:读文件、写文件、整理文件夹
    • 💻 命令行:执行Shell命令、部署代码
    • 📊 文档工具:生成Word/Excel/PPT报告

    3. 实时可视化 + 人工干预

    执行过程中,Agent TARS会实时展示:

    • 正在操作哪个窗口
    • 当前步骤是什么
    • 屏幕上看到了什么

    你可以随时喊停或修改指令,不会让AI按错误方向跑到底。


    五、和Manus、Claude Computer Use对比

    特性Agent TARSManusClaude Computer Use
    出品方 字节跳动 中国团队 Anthropic
    操作方式 视觉+VLM 云虚拟机 视觉+VLM
    工具集成 MCP生态 内置工具集 基础系统操作
    开源程度 ✅ 部分开源 ❌ 闭源 ❌ 闭源
    OSWorld得分 24.6分 未公布 14.4分
    中文支持 ✅ 优秀 ✅ 优秀 一般
    上手难度 较低 较高

    一句话总结: Agent TARS是目前开源社区里最接近Manus体验的方案,且中文支持更好。


    六、5分钟快速体验

    方式1:下载桌面应用(推荐)

  • 访问官网:https://agent-tars.com/
  • 下载对应系统的安装包(macOS优先)
  • 安装后配置你的AI模型(比如豆包、GPT-4o、Claude)
  • 开始用自然语言控制电脑!
  • 方式2:开发者API接入

    # 克隆项目
    git clone https://github.com/bytedance/UI-TARS-desktop.git

    # 进入Agent TARS目录
    cd UI-TARS-desktop/apps/agent-tars

    # 安装依赖
    npm install

    # 配置API Key(支持豆包/GPT-4o/Claude等)
    export API_KEY="your-api-key"

    # 启动
    npm run dev

    配置示例

    {
    "model": "doubao",
    "api_key": "your-doubao-key",
    "provider": "bytedance"
    }


    七、应用场景脑洞

    场景具体操作
    客服 自动回复邮件、处理工单
    财务 自动抓取账单、生成报表
    运营 批量发布内容、自动采集数据
    测试 自动跑测试用例、提交Bug
    销售 自动整理客户资料、发报价单
    HR 筛选简历、发送面试通知

    八、总结

    Agent TARS代表了一个新方向:从"AI回答问题"到"AI替我干活"。

    它不完美——目前还在快速迭代,部分功能依赖云端算力。但它让"AI数字员工"从概念变成了现实。

    GitHub 27.7k Stars的成绩,说明全世界的开发者都在关注这个方向。


    参考资料

    • 官网:https://agent-tars.com/
    • GitHub:https://github.com/bytedance/UI-TARS-desktop
    • 项目Star数:27.7k+
    • 开源协议:Apache 2.0

    相关推荐:

    • Claude Code工具系统深度解析
    • MCP协议集成:Claude Code如何扩展AI Agent的能力边界
    • Context Management:Claude Code的上下文管理艺术
    赞(0)
    未经允许不得转载:171主机测评 » 让AI真正“长出手“:字节跳动开源TARS,能像人一样操作电脑!
    分享到: 更多 (0)

    评论 抢沙发

    • 昵称 (必填)
    • 邮箱 (必填)
    • 网址