最近,联发科发布了全新旗舰芯片天玑9400,这款第二代全大核SoC芯片成为业内首个具备旗舰级5G智能体AI功能的处理器。天玑9400在前代9300的基础上,进一步巩固了生成式AI在智能手机中的落地。凭借更强大的端侧AI性能,联发科继续引领行业创新,推出一系列具备端侧AI视频生成、AI训练等功能的智能手机解决方案,构建了强大的端侧AI生态,进一步增强了天玑系列的产品优势。
先进技术创新,开启“端侧视频”和“端侧训练”的新篇章
天玑9400还带来了多项震惊整个行业的前沿技术,首发了端侧视频生成应用,这在整个业界包括云端都是最前沿的功能。据介绍,天玑9400的NPU 890通过内建时域张量(Temporal Tensor)硬件指令加速技术和端侧高画质Diffusion Transformer(DiT)技术,在端侧实现了类似Sora的视频生成功能,开创了手机端侧AI生成视频的新篇章。
从生成图像到生成视频,这是AI技术上的一大跨越,意味着端侧AI从此拥有了像云端一样理解物理世界规则的能力,可以期待天玑这项技术的成熟和进化,这或许将带来一场手机应用生态和手机生产力角色的巨大变革。
智慧的AI体验,一定是个性化的服务。基于强悍的端侧算力和生成式AI能力,天玑9400首发端侧LoRA训练,可以让用户利用个人资料在端侧训练和生成个性化内容,并建立专属于个人的AI数字分身。整个过程无需连网,既保护了用户隐私,又实现了AI的专属个人化,无限地拓展创意。这是智能手机和应用升级为智能体化的关键,在保护用户隐私的前提下,智能体化的手机会基于个人数据越来越懂用户的偏好、习惯,甚至在未来会理解用户的情感和行动趋势。
联发科还与虹软合作,基于端侧个性化模型训练,打造了生成式AI修图解决方案,让搭载天玑9400的手机拥有更好的AI修图效果。
天玑让AI更懂你,先进生成式AI让创意更随心
天玑9400还带来了一系列的端侧AI应用底层技术创新。天玑9400的Stable Diffusion性能相较前代提升了2倍,可以根据用户照片的身体姿态,生成各种颇具创意的动图,让用户在手机端侧就可以轻松发挥创造力。
联发科还和小红书深度合作,首发推出端侧SDXL高清风格图,可以将用户的个人照片通过端侧的AI处理生成各种风格的魔幻照片,而且相比云端平均生成时长还要快2倍,本地AI运算快速的优势体现出来了。
此外,联发科还和全民K歌深度合作,首发推出端侧AI纯净人声萃取技术,通过天玑AI音源分轨技术,将K歌时的人声提取出来,再搭配stable diffusion算法做人声还原,可以打造出纯净动听的歌声,然后再搭配音乐混音, 可以为用户提供媲美专业录音室的的K歌作品,让唱歌爱好者用手机就可以享受媲美专业录音室级别的效果。
同时,天玑9400的端侧长文本处理能力大幅提升,支持32K Tokens,提升到上一代的8倍,极大的提升了端侧大语言模型的沟通能力。这意味着可以录入更多的内容给生成式AI应用,人机沟通更加不受限,AI也变得越来越聪明,可以快速学习更丰富的知识来生成更准确的内容。
更惊艳的是,天玑9400端侧多模态AI运算性能达到业界第一的50 Tokens每秒,可以大幅度减少用户等待内容生成的时间。基于强大的端侧多模态AI运算性能,天玑9400可以理解与推理图片的内容,还可以理解图片中文字和数字的相对关系,并根据用户的喜好提供更加个性化的服务。
联发科技与面壁智能合作,提升端侧多模态AI的理解和推理能力,只需要用手机拍一张图,就可以让AI帮你解题。除了做数学题,还可以实现更多场景应用,比如点餐,只需要拍一张菜单照片,智能体AI就可以根据你的喜好帮你点餐。
今年,联发科提出的天玑端侧AI技术路线包括“芯片、模型、应用”三个维度。为了满足用户在端侧对不同应用和大模型的需求,天玑9400与阿里云、百川智能、百度智能云、Google、零一万物、面壁智能、Meta、Microsoft、腾讯混元等全球领先的大模型厂商深度合作,实现了对这些主流大模型的深度适配优化,让用户自由选择不受限。
在面向应用开发者的天玑AI先锋计划推动和引领下,目前已经有海量AI先行者加入到天玑AI生态中,共同探索端侧AI技术创新路线和应用前景,天玑在端侧AI的领导和行业聚合效应无疑正在为端侧AI用户带来更多可能性。
NPU性能称霸,以最强端侧AI构筑“智能体化”坚实基底
看天玑9400的AI性能提升。天玑9400搭载联发科全新的第八代AI处理器NPU 890,AI性能和能效都有着飞跃式的提升。在苏黎世ETHZ AI Benchmark v6.0 芯片AI性能的测试中,天玑9400以绝对高分的成绩一骑绝尘,相比友商芯片直接就是倍数级的领先。此外,天玑9400相较于上一代功耗降低可达35%。AI性能第一、功耗大幅降低,轻松拿下最强手机NPU。联发科对于低功耗的重视真是刻到了骨子里,毕竟只有更好的功耗控制,才有更大的潜力运行各类创新的AI应用。
天玑9400统治级的AI性能已经远超一般迭代的范围,但联发科花费这么大的力气提升AI其实并不意外。早在今年上半年联发科就召开了开发者大会MDDC 2024,与众多合作伙伴联合发布了《生成式AI手机产业白皮书》,诠释了手机发展与变革的新趋势,手机和AI应用的智能体化是未来手机进化的主要路线,移动芯片毫无疑问是这一场变革的关键。联发科作为端侧AI的率先布局者和引领者以及端侧AI生态的建设者,在AI技术和能力上的巨大投入是必然。
面向AI手机和AI应用智能体化这一关键趋势,天玑9400集成了MediaTek天玑AI智能体化引擎,可将传统AI应用程序升级为更先进的智能体化AI应用。联发科正在积极与开发者合作,为 AI智能体、第三方应用程序和大模型之间提供统一的标准接口,实现AI跨应用串联,从而高效地运行边缘AI计算和云服务。天玑AI智能体化引擎具备自主化、推理化和行动化三大特性,可以自主感知环境理解目标,可根据环境的变化调整策略以及支持多个智能体交流和协作,作为集成于天玑9400中的先进AI技术,一经发布就受到了行业的广泛关注。
同时,该技术还可缩短AI产品的开发周期,有利于加速构建应用更丰富、体验更出色的天玑AI生态。
不论端侧AI技术发展的如何快速,能够落地到端侧应用,带给用户最智能、智慧的体验才是最终目的。在天玑开发者大会上,联发科联合众多合作伙伴发布了天玑AI先锋计划,用端侧AI生态的基础设施建设为AI应用大爆发埋下了第一个伏笔。天玑AI智能体化引擎则为应用开发者带来了更加便捷的解决方案,可以加快移动应用大面积智能体化的进程。
发布会上,联发科发布天玑AI智能体化引擎先锋计划,在未来将联合荣耀、OPPO、vivo、小米、传音等多个业界重磅合作伙伴,携手打造先进的智能体化AI应用体验。这便是联发科为端侧AI应用大爆发埋下的第二个伏笔。联发科正在从芯片、开发者解决方案、终端合作构建全链路的智能体化AI应用创新环境。相信很快,在天玑AI生态深刻而广泛的推进作用下,端侧AI应用将迎来无比繁荣的景象,各种最懂用户的端侧智能体化应用将带来全面智慧的AI生活体验。
去年,"端侧生成式AI"还仅是行业中的前沿概念,而今天,这一技术已经加速渗透到移动行业的方方面面。在联发科天玑9400的强大助力下,手机设备不仅在AI性能上实现了突破,整个行业的软硬件生态也在同步快速进化。天玑9400凭借出色的NPU性能和领先的AI功能,将生成式AI与手机场景化体验完美结合,推动移动设备迈向智能体化新高度,为未来的全场景智慧生活奠定了坚实基础。