Apple 研究人员联手普渡大年夜学宣布了一项名为 DarkDiff 的摄影黑科技,旨在解决智妙手机在极端微光情况下摄影满是噪点、细节模糊的痛点。这项技巧经由过程将生成式扩散模型直接引入相机的图像旌旗灯号处理(ISP)流程,让手机镜头在黑阴郁也能捕获到惊人的细节。

传统的夜景模式往往依附后期算法降噪,但这常导致照片出现像油画一样的虚假感或严重的涂抹陈迹。DarkDiff 的立异之处在于它并非简单的“后期修图”,而是让 AI 在图像生成的最初阶段就介入进来。它经由过程进修海量影像数据,可以或许“预判”并恢复传感器在暗光下损掉的纹理与色彩。为了防止 AI “凭空假造”不真实的物体,研究团队还引入下场部斑块留意力机制,确保生成的每一处细节都相符拍摄现场的实际构造。
在实际测试中,研究人员应用索尼 A7SII 模仿极暗情况,在仅有0.033秒的极短曝光下,DarkDiff 还原出的照片质量极高,甚至能与应用三脚架进行300倍时长曝光的参考照片相媲美。

尽管后果惊人,但该技巧要真正装进 iPhone 仍面对挑衅。因为扩散模型对算力请求极高,运行起来异常耗电,将来可能须要依附云端处理。此外,该模型今朝在辨认弱光情况下的非英语文字时仍有局限。苹果尚未泄漏这项技巧何时正式商用。

发表评论 取消回复