iPhone|融入AI的第二代骁龙8,能否成为手机未来的“最优解”?( 二 )


基于第二代骁龙 8的AI性能 , 小米也宣布会在2023年推出离线版小爱同学 , 支持离线对话、语音唤醒、离线翻译等功能 。
这是语音助手的一种全新形态 , 这些都与消费者的产品体验息息相关 。
为手机加入看世界的“眼睛” 相比于前面比较“缥缈”的AI算力 , “高通传感器中枢”会让手机变得更“拟人化” 。
在第一代骁龙 8上 , 高通传感器中枢就发挥了强大的作用 , 用于处理一些需要长时间运行的新特性 , 比如语音助理、活动检测、环境理解 , 以及低功耗感知摄像头(人脸解锁扫描) 。 利用AI的强大算力 , 来为我们处理手机上的音频、视觉以及传感器的信息 , 帮助设备侦测周围环境并作出相应调整 。
在第二代骁龙 8上 , 高通为其内置了两颗 AI协处理单元和一颗DSP , 用来提升高通传感器中枢的能力 。
在加入更多的AI协处理单元后 , 高通传感器中枢在“始终感知能力”上 , 得到了大幅提升 。 在提高设备AI性能、加快处理速度的基础上 , 提升了音频和传感器的始终感知能力 , 并且解锁了“始终感知摄像头”的全新能力 。
“始终感知摄像头”最重要的一点 , 就是为手机加入能够看到世界的眼睛 。
搭载第二代骁龙 8的手机 , 可以在后台持续运行摄像头的功能 , 并且依托于AI算力 , 将一切都留存在手机当中 , 避免隐私泄露 。
比如 , 熄屏下只需对着二维码 , 就可以实现扫码的行为 , 手机自动弹出扫描出来的窗口;如果有陌生人在身旁 , 前置摄像头也可以对其进行识别 , 并且自动隐藏通知 , 当感知到陌生人离开后重新开启;当用户躺下时 , 手机会自动更改屏幕方向 , 无需进行手动更改 。
高通传感器中枢的功能远不止此 , 对于语义识别、日常操作学习等 , 高通传感器中枢都能有着比较不错的表现 。
除此之外 , 为了带来更强大的AI影像体验 , 高通选择在Hexagon 处理器和Qualcomm Spectra ISP之间 , 增加了一个名为“Hexagon直连”的物理连接 , 在两者之间建立了直接连接通道 。
而这一操作 , 除了让智能手机能够从多个层面认知外部世界之外 , 还获得了一个全新而独特的、具有AI能力的ISP , 高通将其称之为“认知 ISP” 。
拥有独立AI的拍照系统 近两年 , 计算摄影成为手机厂商的不二选择 , 除了能够保证更优质的成像效果之外 , 还能让更多零基础人群体验到拍摄的乐趣 。
但事实上 , 计算摄影只是AI拍照系统中的一环 。
2018年 , 高通推出了首款支持“计算机视觉(CV-ISP)”的ISP:Spectra 380 , 如今又推出了全新认知 ISP , 高通一直想让AI深度介入影像系统当中 。
此前的AI摄影有着较大的局限性 , 手机拍摄与AI引擎介入之间有着先后顺序 , 在手机进行拍摄后 , 系统才会调用神经网络来对图片进行优化和计算 , 在耗时耗电的同时 , 还会影响拍摄速度和质量 。
简单来说 , 就是先拍照 , 再AI 。
由于第二代骁龙 8在Spectra ISP与Hexagon 处理器之间建立了物理层面的直连通道 , 两者之间可以进行实时的、大量的数据交换 , 相当于为Spectra ISP带来更强的AI认知能力 , 去更好的理解世界、环境、物体、光线等等 。
所以 , 有了强大AI性能的影像系统 , 有了更多新的玩法 。
高通为搭载第二代骁龙 8的移动设备加入了名为“语义分割”的AI照片编辑技术 , 能够将画面中多种不同的元素进行自定义编辑和分割 , 将每个物体分割变成类似“Photoshop”图层一样 , 在拍摄时根据每个物体的种类 , 进行编辑分类、柔化皮肤、锐化草地等等 , 整个过程在拍摄时都在实时运行 , 甚至在按下快门前 , 也就是取景框当中就可以实时看到这一切 。