logo好方法网

图像降噪方法及装置、电子设备和存储介质


技术摘要:
本公开涉及一种图像降噪方法及装置、电子设备和存储介质,所述方法包括:获取待降噪图像及对应的运动检测图,其中,所述待降噪图像是根据多帧图像得到的,所述运动检测图用于表示所述待降噪图像与所述多帧图像的转换关系;根据所述运动检测图,得到所述待降噪图像对应  全部
背景技术:
由于光源照射和终端设备的硬件限制,导致拍摄的照片会存在较多噪声,造成图 像模糊,不清晰等问题,故对图像降噪是数码相机和手机拍照中重要的环节。
技术实现要素:
本公开提出了一种提高降噪精度的图像降噪技术方案。 根据本公开的一方面,提供了一种图像降噪方法,包括: 获取待降噪图像及对应的运动检测图,其中,所述待降噪图像是根据多帧图像得 到的,所述运动检测图用于表示所述待降噪图像与所述多帧图像的转换关系; 根据所述运动检测图,得到所述待降噪图像对应的降噪力度图,所述降噪力度图 用于表示所述待降噪图像中包含的像素点所对应的降噪力度; 根据所述降噪力度图对所述待降噪图像进行降噪处理,得到降噪图像。 在一种可能的实现方式中,所述获取待降噪图像及对应的运动检测图,包括: 对采集的多帧图像进行运动检测,得到运动检测结果,所述运动检测结果中标识 出各帧图像中的运动区域; 根据所述运动检测结果对所述多帧图像进行叠加,得到待降噪图像及所述待降噪 图像对应的运动检测图。 在一种可能的实现方式中,所述根据所述运动检测结果对所述多帧图像进行叠 加,得到待降噪图像及所述待降噪图像对应的运动检测图,包括: 针对所述待降噪图像中的任一第一像素点,根据所述运动检测结果从所述多帧图 像中确定所述第一像素点对应的第一图像,所述第一图像中与所述第一像素点对应的第二 像素点处于运动区域; 将具有第一图像的任一第一像素点作为目标像素点,将所述第一图像中对应于所 述目标像素点的像素值进行叠加,得到所述待降噪图像中所述目标像素点对应的像素值; 针对所述待降噪图像中除所述目标像素点之外的任一第二像素点,将所述多帧图 像中所述第二像素点对应的像素值进行叠加,得到所述待降噪图像中所述第二像素点对应 的像素值。 在一种可能的实现方式中,所述根据所述运动检测图,得到所述待降噪图像对应 的降噪力度图,包括: 根据所述运动检测图中的任一第三像素点对应的像素值,及初始降噪力度图中与 所述第三像素点对应的第四像素点的像素值,得到对应的降噪力度, 其中,所述降噪力度与所述运动检测图中所述第三像素点对应的像素值负相关, 4 CN 111583145 A 说 明 书 2/15 页 所述降噪力度与初始降噪力度图中所述第四像素点对应的像素值正相关; 根据所述降噪力度,得到所述待降噪图像对应的降噪力度图。 在一种可能的实现方式中,所述待降噪图像为第一格式的图像,所述方法还包括: 对所述第一格式的降噪图像进行图像格式转换,得到第二格式的降噪图像,其中, 所述第一格式的图像的噪声分布还原度高于所述第二格式的图像的噪声分布还原度。 在一种可能的实现方式中,通过降噪网络实现所述根据所述降噪力度图对所述待 降噪图像进行降噪处理,得到降噪图像,所述方法还包括:通过预设的训练集训练所述降噪 网络,所述训练集包括无噪样本图像,所述无噪样本图像由多张原始格式的图像叠加得到。 在一种可能的实现方式中,所述通过预设的训练集训练所述降噪网络,包括: 根据所述无噪样本图像及所述无噪样本图像对应的曝光增益值,得到所述无噪样 本图像对应的有噪样本图像及所述有噪样本图像对应的降噪力度图; 将所述有噪样本图像及所述有噪样本图像对应的降噪力度图输入所述降噪网络 进行降噪处理,得到降噪后的有噪样本图像; 根据所述降噪后的有噪样本图像及所述无噪样本图像,训练所述降噪网络。 在一种可能的实现方式中,所述根据所述无噪样本图像及所述无噪样本图像对应 的曝光增益值,得到所述无噪样本图像对应的有噪样本图像及所述有噪样本图像对应的降 噪力度图,包括: 确定所述无噪样本图像对应的曝光增益值; 根据所述曝光增益值确定所述无噪样本图像对应的第一噪声及第二噪声; 根据所述第一噪声、所述第二噪声及所述无噪样本图像,得到所述无噪样本图像 对应的有噪样本图像。 在一种可能的实现方式中,所述根据所述无噪样本图像及所述无噪样本图像对应 的曝光增益值,得到所述无噪样本图像对应的有噪样本图像及降噪力度图,还包括: 根据所述曝光增益值确定所述无噪样本图像对应的降噪力度; 根据所述降噪力度构造所述降噪力度图,所述降噪力度图与所述有噪样本图像大 小一致。 根据本公开的一方面,提供了一种图像降噪装置,包括:获取模块,用于获取待降 噪图像及对应的运动检测图,其中,所述待降噪图像是根据多帧图像得到的,所述运动检测 图用于表示所述待降噪图像与所述多帧图像的转换关系; 处理模块,用于根据所述运动检测图,得到所述待降噪图像对应的降噪力度图,所 述降噪力度图用于表示所述待降噪图像中包含的像素点所对应的降噪力度; 降噪模块,用于根据所述降噪力度图对所述待降噪图像进行降噪处理,得到降噪 图像。 在一种可能的实现方式中,所述获取模块,还用于: 对采集的多帧图像进行运动检测,得到运动检测结果,所述运动检测结果中标识 出各帧图像中的运动区域; 根据所述运动检测结果对所述多帧图像进行叠加,得到待降噪图像及所述待降噪 图像对应的运动检测图。 在一种可能的实现方式中,所述获取模块,还用于: 5 CN 111583145 A 说 明 书 3/15 页 针对所述待降噪图像中的任一第一像素点,根据所述运动检测结果从所述多帧图 像中确定所述第一像素点对应的第一图像,所述第一图像中与所述第一像素点对应的第二 像素点处于运动区域; 将具有第一图像的任一第一像素点作为目标像素点,将所述第一图像中对应于所 述目标像素点的像素值进行叠加,得到所述待降噪图像中所述目标像素点对应的像素值; 针对所述待降噪图像中除所述目标像素点之外的任一第二像素点,将所述多帧图 像中所述第二像素点对应的像素值进行叠加,得到所述待降噪图像中所述第二像素点对应 的像素值。 在一种可能的实现方式中,所述处理模块,还用于: 根据所述运动检测图中的任一第三像素点对应的像素值,及初始降噪力度图中与 所述第三像素点对应的第四像素点的像素值,得到对应的降噪力度, 其中,所述降噪力度与所述运动检测图中所述第三像素点对应的像素值负相关, 所述降噪力度与初始降噪力度图中所述第四像素点对应的像素值正相关; 根据所述降噪力度,得到所述待降噪图像对应的降噪力度图。 在一种可能的实现方式中,所述待降噪图像为第一格式的图像,所述装置还包括: 转换模块,用于对所述第一格式的降噪图像进行图像格式转换,得到第二格式的 降噪图像,其中,所述第一格式的图像的噪声分布还原度高于所述第二格式的图像的噪声 分布还原度。 在一种可能的实现方式中,通过降噪模块通过降噪网络实现,所述装置包括: 训练模块,用于通过预设的训练集训练所述降噪网络,所述训练集包括无噪样本 图像,所述无噪样本图像由多张原始格式的图像叠加得到。 在一种可能的实现方式中,所述训练模块,还用于: 根据所述无噪样本图像及所述无噪样本图像对应的曝光增益值,得到所述无噪样 本图像对应的有噪样本图像及所述有噪样本图像对应的降噪力度图; 将所述有噪样本图像及所述有噪样本图像对应的降噪力度图输入所述降噪网络 进行降噪处理,得到降噪后的有噪样本图像; 根据所述降噪后的有噪样本图像及所述无噪样本图像,训练所述降噪网络。 在一种可能的实现方式中,所述训练模块,还用于: 确定所述无噪样本图像对应的曝光增益值; 根据所述曝光增益值确定所述无噪样本图像对应的第一噪声及第二噪声; 根据所述第一噪声、所述第二噪声及所述无噪样本图像,得到所述无噪样本图像 对应的有噪样本图像。 在一种可能的实现方式中,所述训练模块,还用于: 根据所述曝光增益值确定所述无噪样本图像对应的降噪力度; 根据所述降噪力度构造所述降噪力度图,所述降噪力度图与所述有噪样本图像大 小一致。 根据本公开的一方面,提供了一种电子设备,包括:处理器;用于存储处理器可执 行指令的存储器;其中,所述处理器被配置为调用所述存储器存储的指令,以执行上述方 法。 6 CN 111583145 A 说 明 书 4/15 页 根据本公开的一方面,提供了一种计算机可读存储介质,其上存储有计算机程序 指令,所述计算机程序指令被处理器执行时实现上述方法。 这样一来,可以获取待降噪图像及所述待降噪图像对应的运动检测图,其中,所述 待降噪图像是根据多帧图像得到的,该运动检测图用于表示所述待降噪图像与所述多帧图 像的转换关系。根据所述运动检测图,得到所述待降噪图像对应的降噪力度图,该降噪力度 图中用于表示所述待降噪图像中包含的像素点所对应的降噪力度。进而可以根据所述降噪 力度图对所述待降噪图像进行降噪处理,得到降噪图像。根据本公开实施例提供的图像降 噪方法及装置、电子设备和存储介质,由于根据运动检测图得到的降噪力度图用于标识待 降噪图像中各像素点对应的降噪力度,进而根据降噪力度图可以对待降噪图像中运动区域 和非运动区域的不同噪声粒度进行降噪处理,可以解决待降噪图像中全局噪声粒度不一 致、及局部噪声粒度不一致的问题,可以提高降噪的精度。 应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非 限制本公开。根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将 变得清楚。 附图说明 此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本公 开的实施例,并与说明书一起用于说明本公开的技术方案。 图1示出根据本公开实施例的图像降噪方法的流程图; 图2示出根据本公开实施例的降噪网络的结构示意图; 图3示出根据本公开实施例的图像降噪方法的示意图; 图4示出根据本公开实施例的图像降噪装置的框图; 图5示出根据本公开实施例的一种电子设备800的框图; 图6示出根据本公开实施例的一种电子设备1900的框图。
分享到:
收藏