近日的一份消息显示,苹果开发了一种新的ai 技术,其能够改善极低光照环境下的拍摄效果。
据介绍,在非常昏暗的条件下拍摄照片的话,画面中经常会充满颗粒状的噪点。这种情况的发生是由于图像传感器没有接收到足够的光线。
为了弥补这一缺陷,以往的做法基本是应用图像处理算法,但这些算法会造成过度平滑、呈现出类似“油画”的涂抹感。在这种效果下,细微之处要么消失不见,要么被重构为几乎无法辨认或阅读的东西。
为了解决这个问题,苹果开发了一种名为darkdiff 的模型。
其提出了一种新的框架,通过将预训练的生成式扩散模型“重新指派”给相机的图像信号处理(isp)流程,来增强低光原始图像。
darkdiff 的核心创新在于介入时机,不同于在成像后才进行 ai 修补,darkdiff 在相机 isp 处理原始传感器数据(raw data)的早期阶段就已介入。
不过,这项技术也存在着一定的局限性。
其基于人工智能的处理速度明显慢于传统方法,而且很可能需要云处理来弥补其高计算需求,因为如果在手机本地运行,会很快耗尽电池电量。
此外,在低光场景中对非英语文本的识别存在局限性。
还有一点值得注意的是,该研究中并未提及 darkdiff 会在短期内应用于 iphone。不过,这项工作表明苹果公司仍在持续关注计算摄影技术的进步。
除此之外,苹果后续的iphone系列更迭情况也在最近出现了不少新的爆料。
按照最近爆料中的说法,苹果内部正同时推进八款新 iphone 的研发,其将在未来两年内大幅扩展智能手机产品线。
基于此,苹果在 2027 年将至少推出七款新机。
