一夜之间,人工智能代理学会了控制手机。
“太可怕了。”
直播间里,赵明向周鸿祎现场展示了真实的技术,并让AI客服点咖啡:
只需拿起手机说:“点三杯瑞幸美式咖啡,大杯的。”
明确需求后,手机中的AI代理会自动读取并理解手机屏幕上的内容,并自动操作手机上的美团APP。无需与传统语音助手进行多轮对话。您只需点击最后即可下单并付款。按钮就可以了。
视频连接还可以实现AI换脸检测:
无论是其他AI换脸技术,手机都可以利用终端侧算法进行识别并发出警告。
新一代AI手机将如此开启?可见,智能座席自动化工作的过程既便捷又透明:可以看到手机打开APP就可以像人一样读屏、点击操作的整个过程。只有最后的“确认”按钮需要自己完成。结束。
10月23日下午,荣耀正式发布新一代操作系统9.0。这一系列新功能正式公布。如果不出意外的话,我们将在本月底提供。
发布会上,荣耀宣布荣耀9.0是业界首款搭载智能代理的个性化全场景AI操作系统。它带来的全新体验,真正将智能终端带入“自动驾驶”时代。
距离联发科、高通发布已经不远了,新一代旗舰手机即将发布之际,荣耀却一马当先,掀起了一股影响力和覆盖面巨大的技术变革浪潮,让我们洞悉了未来下一代操作。
神奇大模型家族驱动平台级AI进一步进化
不仅在移动设备领域,进入2024年,AI和大型模型的方向已经出现了一些明显的变化。
首先,大模型的尺寸由大变小。无论是谷歌这样的行业龙头,还是智浦这样的初创公司,除了千亿级的大模型之外,都开辟了“小模型”的战场。人们希望通过不断优化来提高效率,大幅降低生成式人工智能的应用门槛。
不过,尺寸不断缩小、甚至进入终端侧的大轻量化车型并没有失去实力。经过快速迭代,他们已经展现出了多模态和长文本的能力。
荣耀9.0全新的AI代理交互范式背后,有这样一个新一代模型作为支撑。
随着新一代系统的出现,荣耀新一代的设备端和云端大模型矩阵应运而生。 9.0中,荣耀推出了由语言大模型、图像大模型、语音大模型、多模态大模型等一系列大模型组成的家庭矩阵。
全新升级的客户端语言大模型Nano(3B),与8.0部署的7B魔法大模型相比,由于模型“瘦身”,带来了更快的加载速度(提升77%)和文字输出速度(提升77%) 500%),并对功耗、ROM、RAM使用等影响手机日常运行的诸多方面进行了优化。
还有多模态大模型,在图像、语音等多模态应用场景中提供更强的算力。其中,大图像模型在图像语义理解和图像内容生成方面有了质的提升,而大语音模型则实现了超流畅自然的人机对话、更真实的音色克隆以及稳定准确的实时翻译。
它们是AI手机智能体实现“自动驾驶”的先决条件:多模态大模型赋予了手机理解UI语义、屏幕内容分析和行为语义的能力。
随着 家族端云协同基础能力的全面提升,在个性化理解、多任务规划、海量知识理解、文本内容生成等场景下更加便捷。
横向上,9.0上,AI场景感知的类别从上一代的40个类别增加到60个类别,用户理解的类别从600个增加到950个,意图决策覆盖场景数量从100个猛增到 600。
可以说,拥有这个庞大的模型矩阵后,荣耀可以构建以人为中心的手机交互逻辑,在场景感知、用户理解和意图决策方面实现质的飞跃。
当然,拥有了强大的大模型家族之后,更重要的是如何使用它。荣耀大机型家族矩阵的重点并不是简单的设备端生成或者服务特定应用,而是为平台级AI赋能。
9.0中, 家族支持的平台级AI覆盖多种场景,跨越各类APP和手机能力。可以实现更多应用场景的按需调度和灵活部署,在客户端构建多维网络。个人知识库。
比如9.0基于荣耀AI代理可以实现“一句话取消自动续费”:
您只需向手机发送查询,代理就会自动开始查询支付宝、微信等应用。很快您就可以通过手机、平板等电子设备上的APP了解所有购买的会员信息,避免一直迷茫而不了解。续订,已订阅的可一键取消。
平台级AI不仅意味着打破应用壁垒,将手机融为一体,更意味着让手机理解人、赋能人、增强人。
荣耀Live智能引擎可以通过整合基于个人行为、个人记忆推理图、个人画像知识索引的多维度数据,构建手机端多维度的个人知识库。这样,在保证用户隐私的同时,手机才能真正了解用户,实现一系列更深层次的理解意图和个性化的复杂场景服务。
值得一提的是,荣耀9.0的大模型能力被信通院评为“最强AI大模型能力”。
此外,荣耀还积极参与全行业AI智能体标准的制定。作为核心贡献者,与国家机构中国信息通信研究院合作开发了AI时代的终端智能分级系统。该分级系统已得到所有手机制造商的认可。一致通过。
在汽车领域,自动驾驶从0到5级,首款搭载9.0的荣耀系列已通过“终端智能分级测试计划”评估,终端智能水平达到行业最高级别L3。如果从自动驾驶汽车领域来看,这相当于今年年底将推出的端到端智能。城市自动驾驶系统水平。
它几乎可以在任何路况下“自动驾驶”。
AI手机的智能革命
从荣耀在平台级AI的尝试中我们可以看到,实现AI代理的高度自动化需要的不仅仅是“把大模型放进手机里”。
是什么让它发展成今天的样子?回顾荣耀手机的发展历史,我们可以梳理出两条线。
首先是对手机AI形态的长期探索。荣耀自2016年推出第一代手机以来,就率先提出了移动AI的概念,并于去年6月率先提出将大AI模型引入手机端的战略。今年1月,随着荣耀8.0的发布,通过平台级AI赋能的意图识别方式,智能手机的人机交互进入了新的高度。阶段。
在8.0操作系统上,荣耀引入大模型技术,构建平台级AI实现意图识别,进而带来了任意门、智能胶囊等一系列功能,极大提升了用户体验。
这背后是荣耀对未来AI时代的深入思考:体验的进一步提升需要利用AI技术重构系统。荣耀以平台级AI为核心,将过去单独的应用程序和菜单式的订阅模式连接起来。
至此,各种应用程序之间的壁垒已经被打破,人机交互的步骤也得到了极大的简化。这一切变化的原因都是为了构建一个以平台级AI为核心、以人为本的操作系统。
智能代理的开发是AI大模型能力落地的主线。自大模型技术爆发以来,多模态、多任务、多领域大模型被认为是通向AGI的必由之路。在人们的想象中,人与AI的交互将涵盖语音、文字、图片等多种方式。大模型驱动的AI手机也需要能够充分理解人类意图,并根据场景等信息快速制定解决方案。环境、个人喜好、环境。计划可以自动帮助人们完成各种任务。
智能代理(AI)用于执行此类复杂的任务。它基于大型模型的功能。它既是自主的,又能够与环境相互作用。它可以分解复杂的任务进行规划,使用专业模型或外部工具来提高其能力,并且具有远远超过大型模型本身的记忆能力。
这意味着,在切换到智能代理方向后,手机等设备可以使用相对轻量级的模型来执行更复杂的智能任务。同时,设备可以在日常与人的高频交互中不断积累背景理解,这是以往基于云端大模型的应用和服务所无法实现的。
在荣耀9.0上,这两条线终于走到了一起。基于大模型能力的基础,平台级AI具备感知环境、学习用户行为的能力。通过智能代理的应用,手机可以调用不同的APP来实现复杂的功能,在了解用户的前提下展现多样化的能力。
现在,手机OS可以帮助用户完成一系列想做但不知道怎么做、知道怎么做但不想做的事情,比如点咖啡、取消自动扣费、AI人脸- 变更检测等,可以通过AI代理自动完成。
进一步看,手机厂商的智能化思路与科技公司的智能化思路不谋而合。
今年各大厂商都提出了基于智能代理的应用。微软率先发布,苹果则连接了大型号。扎克伯格甚至断言:“AI代理的数量可能达到数十亿,最终甚至超过人类。”
在9月底的Meta 2024大会上,Meta推出了 3.2和升级版3S的智能眼镜。通过智能体,大型模型迅速被引入各种元应用程序和设备中。
就在本周一,微软正式推出了10种AI代理。这些代理可以接管销售、客户服务、财务和供应链管理,并且可以在无需人工干预的情况下执行各种任务。
图片来自:
微软首席执行官萨蒂亚纳德拉表示,智能代理接管繁重的任务后,人们可以腾出时间来执行更有价值的任务,从而提高生产力。
同样在这个时间点,在生成式AI的下半场,荣耀是第一家开发AI代理的手机厂商。 9.0推出后,我们可以在智能手机上快速体验到效率的升级。
AI手机,还是得看荣耀
如今,传统操作系统已经固化。 和iOS的发展几乎已经到了瓶颈。消费者不再关心手边的设备是 15还是iOS 18,而是关注终端能够在AI时代给我们带来什么。这是一种超越的体验。
上周末,有爆料称,内部员工声称苹果的AI技术“至少落后两年”,成为热门话题。
据称,苹果公司的内部研究表明,其即将推出的人工智能功能缺乏与谷歌、谷歌和 Meta 等竞争对手的竞争力。苹果CEO蒂姆·库克曾站出来回应。
哪里有落后者,自然就会有领先者。相比之下,荣耀在思考和构建下一代操作系统方面已经处于领先地位。
荣耀列出了一个数据:8.0版本推出后,近十个月,仅“任意门”功能累计意图识别次数就超过16.8亿次。此外,智能胶囊、YOYO建议、智能平板、多日程管理等功能也正在被众多手机厂商跟进。
9.0,随着平台级AI、系统级AI代理的落地,荣耀正与全球合作伙伴一起,以开放的态度拥抱人机交互的变革。手机上越来越多的功能将由大的AI模型驱动,更多的可能性将会出现。
10月30日,首款搭载9.0的新一代旗舰手机系列将发布,将搭载最新一代旗舰芯片骁龙8至尊版。
赵明宣布,在新手机中,除了引入AI代理外,影像和游戏也将首次搭载生成式AI能力。近期还有更多黑科技即将揭晓。
AI手机的新篇章和未来操作系统的新发展,将由以荣耀为代表的中国科技公司开启。