MDDC 2024:联发科如何“All in AI”?
通信世界网消息(CWW)数据显示,2023年四季度,联发科归属母公司股东的净利润为257.13亿元新台币,环比增长38.5%、同比增长38.9%,创近五个季度新高,这主要受益于5G与4G需求增长,及旗舰芯片天玑9300的放量。
而天玑9300受到市场追捧离不开其出色的AI功能,联发科董事、总经理暨营运长陈冠州表示:“生成式AI彻底革新了终端应用的使用价值,智能终端是生成式AI普及的关键载体,2024年生成式AI将全面普及到消费级市场,而芯片的驱动,可以推动生成式AI的体验创新与突破。”
AI发展势头正酣,联发科迅速且完善地进行了布局。5月7日,联发科举办2024年天玑开发者大会(MDDC 2024),揭晓了由芯片、大模型、应用构成的天玑AI生态战略,并加快构建包含“硬件与软件、云端与终端、模型与应用”的AI新生态,妥妥“All in AI”的节奏。
发布产业白皮书,率先定义AI手机
在会上,联发科与Counterpoint,携手阿里云、百川智能、虎牙直播、酷狗音乐、零一万物、OPPO、SoulApp、腾讯AI Lab、腾讯混元、vivo 等生态伙伴联合发布《生成式AI手机产业白皮书》,共同探索端侧AI技术路线,定义“生成式AI手机”。
什么是真正的AI手机?消费者需要怎样的AI体验?业内众说纷纭,却得不到定论,而这本白皮书结合芯片厂商、手机厂商、大模型厂商、开发者的AI战略,以及生成式AI手机的软硬件科技全景,给出了更加准确的回答,并介绍了AI手机的典型特征。
一是支持大模型的本地部署,或是通过云端协同的方式执行复杂的生成式 AI 任务。生成式 AI 手机本身具备强大的 AI 算力,无须完全依赖云端服务器。
二是具备多模态能力,即可以处理文本、图像、语音等多种形式的内容输入,以生成各种形式的输出,典型用例如翻译、图像生成和视频生成等。
三是确保流畅、无缝的用户体验,设备能够以自然而直观的交互方式,快速响应用户的请求。
四是拥有实现上述特征的硬件规格,包括但不限于移动计算平台,拥有集成或者独立的神经网络运算单元(如APU/NPU/TPU)、大容量和高带宽的内存,以及稳定和高速的连接,硬件级和系统级的安全防御。
白皮书还称,受益于强大的移动计算平台,丰富的不同体量的模型矩阵,完整的配套工具链,以及产业各方积极的应用探索,生成式AI手机将在未来几年保持高速成长,到2027年将达到43%左右的渗透率,存量规模将从2023年的只有百万级别增长至2027年的12.3亿部,帮助实现生成式AI技术的普惠。
推出天玑9300+:解锁突破性AI体验
在会上,联发科发布天玑9300+旗舰5G生成式AI移动芯片,以先进的全大核架构设计和生成式AI引擎带来更优异的旗舰体验。据悉,天玑9300+进一步解锁了突破性的生成式AI体验,率先在端侧支持AI推测解码加速技术,支持Meta Llama 270亿参数模型,并通过端侧双LoRA融合的天玑AI LoRA Fusion 2.0技术,在端侧大模型生成效率上带来了高达100%的提升。同时,天玑9300+可以允许在手机设备上直接运行生成式大模型,支持通义千问、百川大模型、文心大模型等多款主流AI大模型。
在性能方面,天玑9300+采用台积电第三代4nm先进制程和联发科第二代创新旗舰封装设计,并延续天玑9300开创性的全大核CPU架构,搭载4个Cortex-X4超大核和4个Cortex-A720大核,其中Cortex-X4超大核最高主频可达3.4GHz。这样的高能效的配置让天玑9300+在轻载、中载和重载应用场景中保证低功耗运行。
在游戏方面,天玑9300+旗舰芯采用旗舰级12核GPU,支持硬件级光线追踪技术、星速引擎自适应技术和星速引擎网络质量监测系统,能够在高帧游戏运行时有效节省功耗,并高效运用Wi-Fi /蜂窝网络双网并发技术,提升能效表现,天玑9300+相比竞品能耗可降低20%。同时,联发科还将AI技术导入游戏交互与游戏内容生成,协助开发者实现大语言模型在游戏中的端侧应用,为移动终端游戏发展注入动能。
除了注重能效、AI和游戏表现,天玑9300+在影像、显示、连接性等方面同样颇具实力。
在影像方面,天玑9300+搭载Imagiq 990影像处理器,支持18位RAW ISP、AI视频录制和低延迟预览功能,并支持AI语义分割视频引擎,可以支持16层的图像语意分割,让用户随手录制就有电影级大片的震撼效果。
在连接性方面,天玑9300+支持超广范围覆盖的Wi-Fi 7增强技术,网络速率理论峰值可达6.5Gbps;支持Sub-6GHz全频段5G网络、四载波聚合,Sub-6GHz网络下行速率理论峰值可达7Gbps。天玑9300+还采用安全芯片技术和内存标记拓展技术,从开机到应用程序运行全程保护用户个人数据。
达成重磅合作:天玑AI生态起飞
由芯片、大模型、应用构成的天玑AI生态战略,旨在与产业伙伴、开发者共同探索和发展端侧AI技术,推动终端设备和应用从触控(Graphical Touch UI)向由生成式AI赋能的智能体(Agent UI)加速演进,为用户提供更出色的交互体验、多模态内容生成能力、个性化服务以及革新的应用生态。从发布白皮书率先定义AI手机,到推出天玑9300+实力赋能端侧AI,再到与大模型厂商、手机厂商、开发者、内容创作者等达成多项合作,一环扣一环,不难窥得天玑AI生态的繁荣前景。
其一,面对终端生成式AI开发起步期面临多重挑战:终端硬件多样,移植难度大;大模型终端运行,技术难度大;开发工具缺乏,AI应用开发难度大。联发科全新推出天玑AI开发套件,提供终端生成式AI应用开发的一站式解决方案。据介绍,开发套件包括快速高效的GenAI最佳实践、覆盖全球主流大模型的GenAI Model Hub、高效提升性能的GenAI优化技术和Neuron Studio一站式视觉化开发环境四大模块,可赋能终端生成式AI应用开发的全部环节,同时覆盖手机、汽车、PC、物联网等全场景终端。
其二,联发科与阿里云、百川智能、传音、零一万物、OPPO、荣耀、vivo、小米启动“天玑AI先锋计划”,面向全球开发者,整合自身与产业生态伙伴的资源,为开发者提供开发资源、技术支持和商业机会,助力开发者在搭载天玑芯片的终端设备上打造创新的生成式AI体验。
其三,联发科与谷歌、Meta、百度、百川智能等大模型厂商达成合作,天玑移动芯片将支持包括阿里云通义千问、零一万物等众多前沿的大模型;与阿里云通义千问 、Cocos、Honor of Kings、虎牙直播、酷狗音乐、美图、全民K歌、RWKV、Soul、腾讯AI Lab、小红书等数十家生态伙伴共创体验更精彩的生成式AI应用。
AI手机能否普及,取决于端侧AI应用的好坏,而联发科以天玑芯片为驱动,整合“芯片、模型、应用”三方力量,构建包含“硬件与软件、云端与终端、模型与应用”的AI新生态,以先锋者和引领者的角色,为移动生态的AI革新谋篇布局,加上各种强有力的技术支持,未来在终端侧AI领域,联发科看点十足。