联发科的人工智能芯片旨在使您的下一部手机非常个性化

联发科的人工智能芯片旨在打造您个性化的下一代手机

像谷歌这样的手机制造商和高通等芯片制造商预测,2024年将是设备内部人工智能的年份。上个月,在年度高层峰会上,移动芯片生产商联发科技(MediaTek)突出了在手机上使用生成式人工智能的优势。例如,可以比基于云的解决方案更快地获得更个性化的答案和建议,而且技术将使手机变得更好的方法很少。

但是,联发科技首席财务官大卫·库(David Ku)解释说,未来几个具体的用例正在出现。Vivo明年将推出一款带有会议记录、转录和提供摘要功能的手机,这可以在关键会议室中使用,因为处理是在设备上完成的。

库说:“如果是私人会议,你可以保持信息的保密性。你不希望将这个录音提交到云端,所以可以在设备上处理。”

阅读更多:2023年一直以来就是生成式人工智能的年份。它将在2024年进入手机领域

去年十月,竞争对手芯片制造商高通在下一波高端安卓手机(比如小米14)的芯片中直接增加了生成式人工智能能力。虽然联发科技没有为其生成式人工智能提供太多具体用例,但两家公司都提出,该技术将通过考虑人们的行为模式和图像处理(如将照片扩展到原始边界之外)提供更个性化的建议。

此外,联发科技还推出了新的 Redcap(缩写为“reduced capacity”)5G调制解调器和芯片,旨在帮助处理较低数据负载的设备(如智能家居设备、耳机和配件),为人们和公司之间的更多设备交流打下基础。联发科技的这些新发布代表了将旧技术现代化,促使其与我们多年来一直在期待的互联未来相结合。

Pixel 8手机的最佳功能使用人工智能来识别照片中的面部,并允许你用同一时间拍摄的类似照片中的面部替换它们。

James Martin/CNET

设备内生成式人工智能的模糊新边界

在手机上使用生成式人工智能有许多提议的优势,例如可以比基于云的解决方案更快地获得更个性化的答案和建议,而且技术将使手机变得更好的方法很少。

库提出的两个潜在生成式人工智能功能是使用它来擦除照片中不需要的对象,就像谷歌的Pixel手机上的 Magic Eraser 功能(以及谷歌One云存储服务)一样,并自动为要发布到社交媒体上的照片添加文本草稿。

联发科技的Dimensity 8300芯片具备设备内生成式人工智能,适用于次高端手机。

MediaTek

库还指出,生成式人工智能可以改进手机的个人助手功能,并提供上下文建议。如果你因为出席会议而迟到,你的手机可以告诉你不可能及时到达,并提出向其他人发送消息的建议。如果你的手机静音,但收到一封紧急电子邮件,个人助手仍可提醒你。

联发科技的两款新手机芯片,高端手机的 Dimensity 9300 和较低端设备的 Dimensity 8300,都具备设备内生成式人工智能,但公司只发布了前者的性能信息,声称它可以在不到一秒钟内使用 Stable Diffusion 生成图像,并以每秒20个Tokens的速度运行70亿参数的人工智能模型。Snapdragon 8 Gen 3 可以达到相同的 Tokens Per Second 的传输速率,但这个指标除了用于高通的PC芯片的设备内人工智能(每秒30个 Tokens)之外没有太多比较。

较低端的 Dimensity 8300 可以处理带有100亿参数的语言学习模型,而 Dimensity 9300 能够处理330亿参数的LLMs。

公平地说,目前还没有一个明确的度量标准来比较生成式人工智能的能力。现在,“Tokens Per Second”和“每秒万亿次运算”是最常用的,但联发科技正在与不同的生态系统合作伙伴合作,以找出更好的方法,库表示。

“我们正努力提供更详细的指导,并从用户的角度来确定真正有意义的基准。”库说。

看这个:

开拓新领域面临挑战。已经有人担心,人们将利用生成型人工智能来洪水般地向互联网上传播虚假图像和其他错误信息。高通在介绍其设备上的生成型人工智能时提出了自己的解决方案:与认证平台Truepic合作,为任何经过生成型人工智能修改或直接创建的图像数字加水印。联发科正在与不同的合作伙伴合作,开发一种类似的身份验证技术,就像是“隐形水印”,库说——不管图像被生成型人工智能修改了50%还是仅仅5%,都会带上那个水印。

“也许那是最重要的5%。”库说。“也许那是你的脸。”

阅读更多: 在人工智能时代要如何判断照片与事实的距离?

除了手机,联发科希望生成型人工智能将来能在汽车领域发挥作用。在峰会现场重申与GPU制造商Nvidia的合作伙伴关系后,该公司推测汽车可以利用这项技术配合外置摄像头,识别前方的物体,并结合手势,澄清司机指的是远处的某个物体。汽车甚至可以察觉到疯狂驾驶,并询问司机是否昏昏欲睡,或者在绿灯亮起时提醒司机。

5G 网速测试结果。

Patrick Holland/CNET

更加连通的2024年

虽然设备可能会在离线情况下使用生成型人工智能,但改善网络连接以及设备之间的连接性具有巨大的好处。联发科去年发布了首批支持Wi-Fi 7的芯片,今年将推出更先进的芯片——不过,该公司也在考虑更远的未来。

莫伊尼汉说:“当我们看到像Wi-Fi 7这样的技术,以及移植到Wi-Fi 8上去的时候,它们都提供了更高的数据速率,但更重要的是,具有更低的时延。”

Wi-Fi 7相较于前一代具有几个优势,比如多链路操作,可以让设备同时连接2.4GHz、5GHz和/或6GHz的Wi-Fi频段,以获取最佳连接(类似于载波聚合,使用多个5G频谱频率为手机用户提供更好的信号)。而且,Wi-Fi 7将来能够运行在联发科为明年的固定无线接入终端提供的芯片上,用户可以使用家庭5G互联网服务来享受这些连通性的先进技术。

阅读更多: 2023年最佳手机

RedCap 5G以较低的成本利用5G移动网络的低时延和其他优势,使得便宜的设备仍然能够从下一代网络中受益。当前的5G调制解调器提供了强大的功率、性能和范围,但对于较小的物联网和智能家居解决方案来说可能有些大材小用。莫伊尼汉说:“你不需要10GB每秒,但你确实需要几百兆每秒。”多亏了运营商建立的独立5G网络以及遵循行业联盟3GPP的第17版标准而开发的新设备,更简单的设备将能够以低时延和低功耗接入5G。

莫伊尼汉表示,将来,随着技术在家庭中的普及,连通性可能与设备上的生成型人工智能有所关联,这被称为“环境计算”。“环境计算”可能看起来像是您的智能设备网络根据您的喜好来塑造您的环境。当您走进门时,设备可以根据您喜欢的内容以及您何时回家来自动决定您想要的灯光和制热/空调水平,然后为家中其他人激活不同的设置。

索尼Playstation VR 2虚拟现实头戴设备。

James Martin / CNET

联发科技与增强现实

和竞争对手一样,联发科技一直在探索其芯片的下一步发展方向,包括增强现实和虚拟现实。在去年的峰会上,该公司透露其芯片正在为索尼的PSVR2提供动力,这是与PS5配对使用的虚拟现实头盔。在今年的峰会舞台上,联发科技还宣布了另一项合作伙伴关系:将与Facebook母公司Meta合作开发定制的AR / VR芯片。

尽管联发科技没有具体说明该芯片将用于什么样的设备,但不难想象它可能最终用于类似Meta Quest 3或Ray Ban Meta Smart Glasses的AR / VR头盔或后继产品。由于这些Meta设备分别由高通的新Snapdragon XR Gen 2和AR1 Gen 1芯片驱动,因此尚不清楚联发科技是否会取代芯片制造商的角色,使用即将推出的硅片进行新项目。

阅读更多: 高通的最新VR / AR芯片透露了关于Quest 3和未来设备的许多信息

清楚的是,联发科技以与竞争对手不同的方式进入了AR / VR领域。高通今年早些时候发布了其通用混合现实设备芯片。但莫伊尼汉表示,联发科技与索尼合作,并将与Meta合作开发为每个品牌定制的芯片,并将寻求与更多品牌合作伙伴关系。

“我们有一些可以提供的技术,在未来,会有连接机会,无论是Wi-Fi还是RedCap或其他一些技术,”莫伊尼汉说。

编辑注:ENBLE正在使用人工智能引擎来帮助创作一些故事。了解更多信息,请参见此帖子