搜索 猫眼电影 融媒体矩阵
  • 山东手机报

  • 猫眼电影

  • 大众网官方微信

  • 大众网官方微博

  • 抖音

  • 人民号

  • 全国党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

实测豆包手机助手:AI 操作手机的时代来了?

2025-12-24 08:27:33
来源:

猫眼电影

作者:

雷恩·莫菲

手机查看

  猫眼电影记者 严严 报道首次登录送91元红包

字节正和多家手机厂商谈合作。

文丨贺乾明

“对比一下京东、美团外卖、淘宝上的肯德基香辣鸡腿堡哪个更便宜,选价格最低的下单,送到三里屯 SOHO A 座的地址,下单的时候备注 ‘放前台’,下单后把订单截图微信上发给小明,告诉他外卖点完了。”

整个过程,只有付款阶段需要人工介入,其他操作全部由 AI 在后台自动完成。

12 月 1 日,字节发布豆包手机助手预览版。这是一个面向手机厂商的系统级服务,它将豆包大模型深度融入操作系统,让用户只需动嘴(或动一下手指),就能指挥手机去执行那些原本需要点击几十次屏幕的繁琐操作。

我们第一时间拿到了豆包与中兴合作开发的搭载豆包手机助手的手机,挑选数十个日常场景,测试了其能力。

作为预览版,它还有一些不足,但确实提供了与市面量产手机截然不同的交互体验,相对流畅地实现了不少手机厂商曾在发布会上描绘过、却难以落地的设想。

豆包手机助手的主力研发团队,是字节负责 AI 硬件的 Ocean,它隶属于字节 AI 产品大部门 Flow,主要成员来自字节多年来先后收购的一些硬件产品团队,如锤子手机、VR 头显 PICO、智能耳机 Ola Dance 等,以及近年加入字节的手机、硬件从业者。

这款豆包与中兴合作的手机已在豆包手机助手官网及中兴商城上架,售价 3499 元。我们了解到,这款手机只是豆包手机助手的 “打样”。字节正和多家手机厂商谈合作。

跨平台比价点外卖、搜小红书做攻略,像人一样操作手机

豆包手机助手最大的突破,在于它是一个 Agent(智能体)。它不仅提供信息,还能跨应用执行复杂操作。

它有系统级的操作权限,能够识别手机屏幕上的 UI 元素,配合豆包大模型的能力,可以理解用户需求,然后模拟点击、滑动和输入等动作,像人一样去操作手机中的应用。

外卖大战中,淘宝、美团和京东投入千亿元资金补贴。它们的侧重点不同,同一门店、同一餐品的价格在不同平台会有差异。如果想极致地薅羊毛,每次点外卖都要打开三个应用、搜索,挨个对比价格。

这个活可以交给豆包手机助手干,告诉它 “帮我看看京东秒送、美团外卖、淘宝闪购上的肯德基吮指原味鸡哪个更便宜。”

它会在后台自动打开美团外卖,搜索肯德基,找到商家,进去搜索吮指原味鸡,找到后记录价格信息。

然后它切到京东,点击秒送页面,搜索 “肯德基 吮指原味鸡”,直接收集在搜索结果页面显示出来的价格信息;最后跳转至淘宝,点击闪购页面搜索商品,获取信息。

在这个过程中,你同样可以拿着手机刷抖音、回微信或者做其他事情。最后,豆包手机助手会发送一个简报,列出几个平台上肯德基吮指原味鸡的价格和结论:两块装的吮指原味鸡,京东秒送的到手价 14 元最低。

找到最便宜的外卖平台后,你可以让豆包手机助手帮忙下单。等到最后付款的时候,它会让你手动操作。

如果你信得过它,也可以让豆包手机助手一次性完成比价、写备注下单的流程。

类似的,你可以让它 “去小红书上多搜索几篇北京到大同的旅游攻略,根据这些内容,整理出一个周五晚上出发、周日晚上返回的方案”,然后让它在微信上发给朋友,问问意见。

它会像人刷小红书那样,去搜索北京到大同的周末旅游攻略,挑点赞高的帖子看,先左右滑动看图片,然后再上滑看文字信息。

然后它会把小红书上收集到的信息,整理成一个大概的方案,打开微信发送给你指定的朋友。

或者让豆包定时执行任务:“7 点的时候看一下微博热搜,截个图存到备忘录里”。到时间之后,它会在后台打开微博,找到微博热搜页面,把它截图,然后打开手机备忘录,上传到里面。同样,你也可以让它每天定时去滴滴里面领优惠券。

现在的豆包手机助手,不是每次都能完美执行任务。不过我们发现豆包手机助手有比较强的 “纠错机制”,能让任务执行下去。

比如我们让它点完外卖,把订单截图发给朋友。在这个任务中,它点完外卖,就被弹窗困住了。刚开始,它尝试关掉弹窗,结果进入另一个页面,退出时又触发另一个弹窗。它没有直接报错,或者提示让我们接管,而是反复尝试 50 秒,最终找到了查看订单页面。

专属按键和语音随时唤起,提取屏幕信息回答问题

这款搭载豆包手机助手的设备,在机身左侧配备了一颗独立的、专属的物理按键。

不论你是刷抖音、回微信,还是手机处于锁屏状态,按下这个按钮,豆包手机助手会以 “叠加层(Overlay)” 的形式出现——它是一个半屏卡片或悬浮气泡,不打断当前正在进行的 app 进程。

豆包手机助手有 “屏幕感知” 能力。你在微信上与朋友聊天,看到朋友发来一句 “这周末又得加班,好烦啊”,不知道怎么回复,可以让豆包安慰朋友。

按下侧边键,豆包会自动读取当前的聊天记录上下文,据此自动生成回复内容——你不需要复制粘贴,点击确认后,它会直接发过去。

它不只能提供言语上的安慰,还能上手帮朋友处理工作。比如朋友发来语音,配上了一张图片。

按下按钮,你可以让豆包手机助手看朋友说了什么,帮他解决问题。它把语音转成文字,提炼出需求:“朋友的老板让把图片中的鞋子颜色改成蓝色的”。

接着它自动执行操作:先尝试用微信自带的图片编辑功能改色,发现不行,便把图片保存下来,打开豆包 app,发送图片请求改色,最后把改好的图片存下来,通过微信回给朋友。

物理按键也能让你迅速唤出豆包的不同形态。按两下,可以调出豆包语音通话,让它给你讲冷笑话或陪聊;或者调出视频通话功能,让它帮忙看面前的植物是什么,是否需要浇水。

在设置中,你可以将 “按两下” 定义为调出豆包相机,拍一张凌乱的工位照片,让它给出整理建议。它会分析图片中有哪些东西,规划出方案。

你刷手机看到有价值的信息,可以按这个特定的实体按键与音量加键,把它存下来,供豆包处理任务的时候参考。这是豆包手机助手全局记忆功能的一部分。

除了手动记忆,你也可以授权让豆包获取特定 app 中的收藏内容,自动记忆喜好,以便后续提供个性化的回应。比如它记住你常用的地址后,点外卖时就不会经常让你确认地址了。

当然,你也可以用语音唤出豆包手机助手,完成以上提到的所有任务。

语音交互在一些场景下更方便。比如你开车的时候,朋友发来消息问 “到哪了”,你可以喊豆包帮你回复:路上有点堵,要晚 10 分钟才能到,让他稍微等一会儿。它会自动打开微信,把你说的话转成文字发送给朋友。

能力还需提升,但新的可能已经出现

豆包手机助手展现出的跨应用操作(Agent)等能力,在各大手机厂商的发布会 PPT 上屡见不鲜,但在实际量产的手机中,能够落地并执行如此复杂链路的产品依然罕见。

最典型的例子是苹果,他们 2024 年 6 月就全面介绍了系统级的大模型 AI 能力 Apple Intelligence,到现在还没有完全兑现。

大模型的技术还在迅速发展,资源、算法和数据壁垒越来越高,仅靠手机厂商组建团队自研,已经越来越难跟上节奏。

手机行业开始接受新的模式:与外部实力强劲的模型供应商合作。11 月初,有市场消息称,苹果打算每年花 10 亿美元购买 Google 的 Gemini 模型服务,用来强化 Siri 助手。在此之前,三星等手机公司也选择与 Gemini 深入合作。

豆包手机助手与中兴等厂商的合作,也是这一新模式的体现:模型公司提供能力领先的模型,手机厂商提供载体,共同为用户提供交互更便捷、能力更强的 AI 手机体验。

客观来说,豆包手机助手还有提升空间。比如它打开各个外卖平台比较肯德基吮指原味鸡的价格,一共耗时 1 分 56 秒,比我们手动操作慢了将近一分钟。毕竟它执行每一步动作,都要先理解屏幕信息。

它依靠读取屏幕信息、模拟人操作手机的逻辑来工作,目前还不能合理地解决长尾需求。比如我刷抖音时,想让它等到每个视频播放完后、帮我上滑看下一个。它执行上滑的动作没有问题,但无法识别出视频什么时候播放完。

它解决问题的范围,也受限于底层大模型的能力。比如它不能在你用手机下象棋或斗地主的时候当军师,实际水平还比不上新手。

我们让它对比三家外卖平台的肯德基价格时,如果不指定 “淘宝闪购”,它有时会在淘宝里搜索 “肯德基 吮指原味鸡”,最后给一个代下单商品的价格。

底层模型能力的持续迭代能解决一部分问题。字节还在吸引第三方开发者将服务和应用集成到豆包手机助手。这能让豆包手机助手获得应用级别的底层权限,解决剩下的多数问题。这必然是一个充满挑战的过程,说服应用开发者开放权限普遍困难,说服大型互联网公司则更难。

一种新可能被摆了出来:用手机处理复杂的跨应用任务时,人可以不用紧盯屏幕、一步步上手操作。就像扫地机器人一样,它扫得没有人干净,也没有人快,但它有希望解放人的时间。

题图来源:晚点

 时事1:888am电子游戏集团

  12月24日,北京今天晴天到多云为主 明天将迎大风天气局地有扬沙,以每周周五时间作为观测点,环比上周五,曲线熊陡变动,1年期AAA存单收益率目前录得1.6425%。,快乐赚官网。

  12月24日,乡村公益设计作品为云南和美乡村建设注入新动能,在今天上午的欢迎仪式上,除了严格按照国事访问的规格之外,也有一些细心周到的安排。,kok在线体育平台,ManBetx娱乐官网,茗彩登录地址。

 时事2:智博体育外围平台

  12月24日,外贸一线观察 浙江:中国制造“圈粉”东盟,尤其是深圳,表现可谓“一骑绝尘”。从“三驾马车”来看,深圳固定资产投资、进出口总额增速分别为17.0%、28.8%,分别居万亿城市第一、第二位。,永乐国际app手机下载,雷速体育app官网,九游小金库usdt钱包官网。

  12月24日,积雪浮云端 秦岭深处雪景迷人,现场媒体和社交网站上的球迷在这场1比1的平局后开玩笑说,“国足被判了死缓,五天后执行。”,AG是假的吗,AG电子俱乐部,扑克王 app。

 时事3:巴黎人活动办理

  12月24日,国家发展规划法草案将提请十四届全国人大四次会议审议,5月10日,中新(西兰)两军在西安举行第11次战略对话。双方围绕共同关心的国际和地区问题坦诚交换意见,表达了共同致力于推动两军交流合作的积极意愿,增进了相互了解和信任。,9游压游,凯发娱乐官网手机登录页,爱游戏网站官网。

  12月24日,未来出行加速空间在沈阳启动 打造东北区域标杆性产业孵化中心,而财务数据的背后反映了公司核心业务面临的增长瓶颈。2025年1月到9月,人福医药实现营业收入178.83亿元,同比下降6.58%。其中第三季度单季营收58.19亿元,同比下降7.36%,下滑趋势未得到遏制。这一现象在医药行业整体保持稳健增长的背景下尤为突出,反映出公司面临的结构性困境。,赌博注册送钱的网址,杏彩新版官方网站,乐虎国际在线官网。

 时事4:雷速体育下载官网

  12月24日,重庆:民众长江畔“围炉煮茶”乐享冬日时光,这些翻新机多来自深圳华强北,并非一般意义上的“山寨机”,更多是将小米、OPPO、vivo、三星等品牌的二手手机翻新。“从外观来看,翻新机也是新的,和新机差别不大。翻新机在非洲更受欢迎的主要原因还是低价,在华强北拿货只要两三百元人民币。而一部三四千元的国产新机换算成美元也要五六百美元,当地人还难以承受。”,正版挂牌,必威中文官网,亿博真人投注。

  12月24日,商务部:希望欧方克制审慎使用限制性经贸工具,目前有2位副总裁,1位拟任副总裁:苏自申、夏传谦、李民。总裁邓可接过的财务负责人职务,原来为副总裁苏自申负责,苏自申于2018年1月至2025年6月担任财务负责人。,火狐体育官网登陆网址,永利在线注册,欧洲杯高清直播欢迎您。

责编:卡尼亚斯

审核:刘江永

责编:小野田宽郎

相关推荐 换一换