夜枭,是夜晚视力最好的动物。
在小米,有一群工程师让小米相机像夜枭的眼睛一样,能把极度黑暗场景下的事物拍得清晰。这背后的AI技术是如何实现的?
问题抛向了百万美金技术大奖二等奖得主:夜枭——AI极暗光视觉项目团队。今天,他们将为大家带来小米相机「 夜枭之眼 」背后的故事。
戳视频,了解「夜枭」项目
小米相机的领先,离不开工程师们在极端拍照场景下的不断死磕。极暗光场景拍照既是用户关注的重点,也是行业的技术难点。在环境照度0.1lux以下的极暗光场景,入射光不足导致拍摄的照片存在亮度低、色彩失真、噪声严重的问题,连单反相机都很难拍出很好的效果。对此,小米相机算法AI组开展了夜枭—AI极暗光视觉项目。在短短半年的时间内,突破了暗光视觉极限,解决了手机的极暗光应用难题。在极暗光场景下的拍照效果已经达到了全球顶级水平。夜枭算法使用深度学习技术来提升极暗光场景画质,为了能够更加了解噪声的分布和形态,小米自研了极暗光场景的噪声标定系统和数据采集系统,分解噪声的来源和对成像质量的影响,获得丰富的数据用于训练。依托于小米手机强大的AI算力,夜枭算法使用AI测光实现环境自适应的亮度提升和色彩还原。在去噪方面,夜枭对多帧raw图进行subpixel-level的对齐,以及feature-level的融合,既有效去掉了噪声,又能保留丰富的细节。
夜枭的这颗「黑暗之眼」,让我们看到了黑夜中隐藏的无限可能。小米集团副总裁、集团技术委员会主席崔宝秋博士这样评价他们:夜枭这个项目的工程师们非常年轻,创新能力非常强。作为一名摄影爱好者,我深知,小米在不断刷新DXOMARK全球第一的背后,离不开工程师们在影像技术领域的大胆探索,离不开他们在极端拍照场景下的不断死磕,把一个个不可能变成了可能。
2020年小米百万美金技术大奖的评选中,涌现出了一大批领先的硬核技术。未来,小米将持续探索先进技术,让全球每个人都能享受科技带来的美好生活。
和大家一起看