众所周知,前段时间OpenAI推出的Sora文生视频AI模型爆火,让“生成式AI”在视频创作方面的潜力再一次受到了大众的关注。甚至有不少创作者都因此“哀嚎”,称传统的视频拍摄和剪辑人员可能会因此收到不小的冲击。
平心而论,其实Sora还是有一些局限性。除了1分钟的视频生成时长限制外,主要面向PC、对算力的需求较高也使得它目前其实还主要是科技爱好者以及少数极客导演们的“玩物”,暂时还很难简单地被普通消费者所用。
但是如果将类似的AI生成式视频功能适配到大家日常使用、而且随身携带的手机上,会意味着什么呢?没错,这就是我们三易生活在2024年世界移动通信大会(MWC)现场,看到联发科演示手机端视频生成技术之后的感想。
“边拍摄边AI生成”,联发科大秀AI黑科技
根据现场的技术说明我们了解到,目前联发科天玑9300平台已经可以支持文本到图像、文本到视频,以及图像到视频的生成式AI体验,而且视频的生成风格还提供了多种可选。
但这些还都不是最亮眼的部分。真正令人惊讶的地方在于,基于联发科天玑9300的演示平台甚至可以实现摄像头录制与AI视频生成功能的结合。也就是说,SoC可以即时地将正在拍摄的影像,瞬间“生成”为不同动画风格的视频。
这是怎么做到的?根据联发科方面的说法,这是由于天玑9300整合了端侧生成式AI的扩充特性,通过支持LoRA Fusion特性,天玑9300可以仅用很小的计算量和很低的内存占用,就实现大模型的功能“发散”。这样一来,同时运行视频拍摄和AI视频生成这两种高算力任务,就变得可能了。
特别值得一提的是,前面所提到的所有这些AI技术,如今都已被整合进联发科NeuroPilot AI平台,这就意味着它们已经可以被开发者所使用,并且在不久的将来便有可能实装到各品牌现有以及新发布的机型上。而且联发科目前的SoC产品线里除了天玑9300之外,天玑8300也具备相同架构的高性能生成式AI引擎。所以这也就代表着,基于联发科天玑平台的“生成式AI智能手机”,将来的售价也会比大家预期得还要更加亲民一些。
发力智能汽车和物联网,联发科继续“扩军”
除了展示最新的智能手机生成式AI成果之外,联发科此次在MWC现场还有不少关于物联网设备的新动向。
比如说,他们展示了基于定制天玑SoC的Dimensity Auto智能座舱和车用娱乐平台。这套硬件平台支持同时运行多个操作系统,多路无线网络接入和多视窗视频同步播放,甚至它也支持前文中所提及的生成式AI相关功能。
如果此前就有关注智能座舱就会知道,目前市面上绝大多数的智能座舱芯片实际上都是基于老旧移动平台“改造”而来。相比之下,联发科Dimensity Auto最大的优势,可能就在于它在技术、性能上的先进性。
不仅如此,联发科在此次MWC期间还发布了用于可穿戴式设备、轻量级AR头显、工业联网设备等产品的低功耗5G平台T300。它将有望打破传统低功耗物联网平台无法支持5G的技术桎梏。而对于消费者来说,这也使得我们可以期待后续支持5G连接能力的可穿戴健康监测产品(比如手表、心率带、智能项链或耳机)的出现。
5.5G卫星宽带与6G环境计算,联发科“战未来”
不难发现,联发科这次发布的很多新产品和技术展示,其实都是基于他们此前在移动SoC和通讯领域的成功经验,以及制程(能效)方面的成功经验实现。
可能有的朋友会说这有点“取巧”,但不可否认的是,无论是智能手机上的生成式AI、车机里的高性能设计,还是可穿戴芯片的5G支持和高能效,联发科都“命中”了目前的用户痛点。
而且更为重要的是,在亮眼的市场表现支持下,联发科现在有了更多的余裕去探索未来的通信技术、抢占行业中的技术高地。
比如,他们此次还展示了新一代5G-Advanced NR-NTN 卫星测试芯片。据悉,它工作于Ku频段,搭配低轨道(LEO)卫星能为汽车和其他多种终端设备提供超过100Mbps的数据吞吐量。在MWC现场,我们就看到了这套系统的模拟串流效果。很显然,在那些基站建设困难的地区,这样的卫星宽带通讯手段将会成为未来极为重要的基础设置之一。
其次,考虑到卫星通讯技术在未来6G标准中的重要地位,当然也可以说联发科这是已经开始提前发力、探索未来的产品设计了。
除了卫星宽带之外,联发科也在MWC上展出了同样被视为6G重要特征之一的家庭虚拟个人网络技术。
正如同它的名称所示,虚拟个人网络可以让家中的物联网设备、智能手机、CPE和路由器等装置,构成一个虚拟的私有网络。在这个网络里,不同设备之间的连接不再需要端口转发、安全隧道等过去繁琐的设定,连接可以更简单、延迟更低、也更加安全。
最为重要的是,在这个虚拟个人网络里,设备之间将终于可以实现协同的算力融合。而提前布局这种“6G环境计算”的联发科,显然也已经比过去有了更多对于未来的自信和期望。