一种模糊视频修复方法及装置与流程 专利技术说明

计算;推算;计数设备的制造及其应用技术1.本发明涉及图像处理技术领域，尤其涉及一种模糊视频修复方法及装置。背景技术：2.视频去模糊是一类经典的计算机视觉任务。视频去模糊的主要目的是对模糊视频进行修复，从而获取清晰的视频。由于在各种高级计算机视觉任务(视频检测、视频识别等)中首先需要对视频进行去模糊处理得到清晰的视频才能进行，因此视频去模糊问题在计算机视觉界受到了广泛重视。3.相较于单帧图像的去模糊网络，视频去模糊网络在理论上可以利用相邻帧的信息来获取更多的细节信息，从而取得更好的去模糊效果。为了在视频去模糊时取得更好的去模糊效果，现有视频去模糊网络普遍会采用基于光流(optical flow)的运动补偿模块、基于可形变卷积的运动补偿模块等显式运动补偿模块消除相邻帧间因为相机和背景运动所产生的位移，从而将相邻帧中同一个像素点对齐，进而使得后续的多帧融合模块可以有效进行信息融合，以取得更好的去模糊效果。然而，尽管视频去模糊网络在理论上可以利用相邻帧的信息来获取更多的细节信息，从而取得更好的去模糊效果，但是由于模糊视频的相邻帧中不同像素点的模糊程度可能不一致，这会使得相邻帧中同一个像素点的亮度一致这一约束被严重打破，进而导致显式的运动补偿模块常常无法准确预测相邻帧间同一像素点的位移，视频去模糊网络非常容易从相邻帧中得到错误的信息，因此现有的视频去模糊网络的去模糊效果很不理想，甚至都无法超越单帧图像的去模糊网络的去模糊效果。技术实现要素：4.有鉴于此，本发明提供了一种模糊视频修复方法及装置，用于提升视频去模糊的去模糊效果。5.为了实现上述目的，本发明实施例提供技术方案如下：6.第一方面，本发明的实施例提供了一种模糊视频修复方法，包括：7.对待修复视频的目标视频帧进行特征提取，获取所述目标视频帧的本征特征；8.根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集；所述第一隐变量集为所述目标视频帧的前一个视频帧的前向隐变量集；9.根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集；所述第二隐变量集为所述目标视频帧的后一个视频帧的后向隐变量集；10.根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征；11.对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。12.第二方面，本发明的实施例提供了一种模糊视频修复装置，包括：13.特征提取单元，用于对待修复视频的目标视频帧进行特征提取，获取所述目标视频帧的本征特征；14.前向传递单元，用于根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集；所述第一隐变量集为所述目标视频帧的前一个视频帧的前向隐变量集；15.后向传递单元，用于根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集；所述第二隐变量集为所述目标视频帧的后一个视频帧的后向隐变量集；16.特征处理单元，用于根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征；17.获取单元，用于对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。18.第三方面，本发明实施例提供了一种电子设备，包括：存储器和处理器，所述存储器用于存储计算机程序；所述处理器用于在调用计算机程序时，使得所述电子设备实现第一方面或第一方面任一种可选的实施方式所述的模糊视频修复方法。19.第四方面，本发明实施例提供一种计算机可读存储介质，当所述计算机程序被计算设备执行时，使得所述计算设备实现第一方面或第一方面任一种可选的实施方式所述的模糊视频修复方法。20.第五方面，本发明实施例提供一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机实现第一方面或第一方面任一种可选的实施方式所述的模糊视频修复方法。21.本发明实施例提供的模糊视频修复方法在对视频中的目标视频帧进行修复时，首先对待修复视频的目标视频帧进行特征提取获取所述目标视频帧的本征特征，然后根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集，以及根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集，再根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征，最后对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。相比于现有技术中通过显式的运动补偿模块消除相邻帧间的位移，本发明实施例利用一个向前传递的前向隐变量集和一个向后传递的后向隐变量集对相邻视频帧的隐变量进行相加融合，从而避免了视频去模糊网络从相邻视频帧中得到错误的信息，提高了对相邻视频帧的信息利用的效率，因此本发明实施例可以提升视频去模糊的去模糊效果。附图说明22.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。23.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。24.图1为本发明实施例提供的模糊视频修复方法的步骤流程图；25.图2为本发明实施例提供的模糊视频修复网络的结构示意图之一；26.图3为本发明实施例提供的模糊视频修复网络的结构示意图之二；27.图4为本发明实施例提供的模糊视频修复网络的结构示意图之三；28.图5为本发明实施例提供的模糊视频修复网络的结构示意图之四；29.图6为本发明实施例提供的模糊视频修复网络的结构示意图之五；30.图7为本发明实施例提供的模糊视频修复网络的结构示意图之六；31.图8为本发明实施例提供的模糊视频修复装置的示意图；32.图9为本发明实施例提供的电子设备的硬件结构示意图。具体实施方式33.为了能够更清楚地理解本发明的上述目的、特征和优点，下面将对本发明的方案进行进一步描述。需要说明的是，在不冲突的情况下，本发明的实施例及实施例中的特征可以相互组合。34.在下面的描述中阐述了很多具体细节以便于充分理解本发明，但本发明还可以采用其他不同于在此描述的方式来实施；显然，说明书中的实施例只是本发明的一部分实施例，而不是全部的实施例。35.需要说明的是，为了便于清楚描述本发明实施例的技术方案，在本发明的实施例中，采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分，本领域技术人员可以理解“第一”、“第二”等字样并不是在对数量和执行次序进行限定。例如：第一特征图像集合和第二特征图像集合仅仅是为了区分不同的特征图像集合，而不是在对特征图像集合的顺序等进行限定。36.在本发明实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。此外，在本发明实施例的描述中，除非另有说明，“多个”的含义是指两个或两个以上。37.本发明实施例提供了一种模糊视频修复方法，参照图1所示的步骤流程图以及图2所示的模糊视频修复网络的结构示意图，本发明实施例提供的模糊视频修复方法包括如下步骤：38.s11、对待修复视频的目标视频帧进行特征提取，获取所述目标视频帧的本征特征。39.具体的，本发明实施例中的目标视频帧可以为待修复的模糊视频中的任意一帧，逐一将待修复的模糊视频中的每一帧作为本发明实施例中的目标视频帧，则可以获取待修复的模糊视频中的每一帧的去模糊视频帧，进而获取待修复的模糊视频的修复结果。40.作为本发明实施例一种可选的实施方式，上述步骤s11(对待修复视频的目标视频帧进行特征提取，获取所述目标视频帧的本征特征)的实现方式包括如下步骤a和步骤b：41.步骤a、通过卷积层对所述目标视频帧进行处理，获取卷积特征。42.步骤b、通过残差块(residual，res)对所述卷积特征进行处理，获取所述目标视频帧的本征特征。43.具体的，本发明实施例中的残差快又称为通道注意力模块(channel attention blacok)。44.参照图3所示，实现上述步骤s11的特征提取模块的网络结构包括：卷积层31以及通道注意力模块32。其中，通道注意力模块32包括：卷积层321、激活层322、卷积层323、平均池化层324、卷积层325、卷积层326、归一化单元327、相乘融合单元328以及相加融合单元329。特征提取模块获取目标视频帧的本征特征的过程包括：首先将目标视频帧it输入卷积层31，再将卷积层31输出的卷积特征zt输入通道注意力模块32。通道注意力模块32首先依次通过卷积层321、激活层322、卷积层323、平均池化层324、卷积层325、卷积层326、归一化单元327对卷积特征zt进行处理，然后在通过相乘融合单元328对归一化单元327的输出与卷积层323的输出进行相乘融合，最后通过相加融合单元329对相乘融合单元328的输出与卷积特征zt进行相加融合，获取所述目标视频帧it的本征特征φt。45.s12、根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集。46.其中，所述第一隐变量集为所述目标视频帧的前一个视频帧的前向隐变量集。47.即，根据当前帧的本征特征和前一个视频帧的前向隐变量集，获取当前帧的前向隐变量集。48.作为本发明实施例一种可选的实施方式，所述前向隐变量集包括：49.第一尺度下的编码特征和解码特征、第二尺度下的编码特征和解码特征以及第三尺度下的编码特征和解码特征。50.即，所述前向隐变量集中共包括3个空间尺度下的特征对(编码特征和解码特征)。51.需要说明的是，在上述实施例的基础上，本发明实施例中的所述前向隐变量集还可以包括其它数量的空间尺度下的特征对。例如：空间尺度下的特征对可以可以包括2个空间尺度下的特征对，再例如：空间尺度下的特征对可以可以包括4个空间尺度下的特征对，本发明实施例对此不做限定。52.作为本发明实施例一种可选的实施方式，在所述前向隐变量集包括：第一尺度下的编码特征和解码特征、第二尺度下的编码特征和解码特征以及第三尺度下的编码特征和解码特征的情况下，上述步骤s12(根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集)的实现步骤包括如下步骤121至步骤127：53.步骤121、根据所述本征特征、所述第一隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第一编码特征。54.可选的，上述步骤121(根据所述本征特征、所述第一隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第一编码特征)的一种实现方式包括如下步骤1211至步骤1214：55.步骤1211、通过残差块对所述本征特征进行处理，获取第一特征。56.设：本征特征为φt，残差块对特征的处理为第一特征为t1，则有：[0057][0058]步骤1212、通过卷积层对所述第一隐变量集中第一尺度下的编码特征进行处理，获取第二特征。[0059]设：所述第一隐变量集中第一尺度下的编码特征为卷积层对特征的处理为conv(…)，第二特征为t2，则有：[0060][0061]步骤1213、通过卷积层对所述第一隐变量集中第一尺度下的解码特征进行处理，获取第三特征。[0062]设：所述第一隐变量集中第一尺度下的解码特征为卷积层对特征的处理为conv(…)，第三特征为t3，则有：[0063][0064]步骤1214、对所述第一特征、所述第二特征以及所述第三特征进行相加融合，获取所述第一编码特征。[0065]设：第一编码特征为fte1，则有：[0066][0067]步骤122、根据所述第一编码特征、所述第一隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第二编码特征。[0068]可选的，上述步骤122(根据所述第一编码特征、所述第一隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第二编码特征)包括如下步骤1221至1225：[0069]步骤1221、对所述第一编码特征进行降采样，获取第一降采样特征。[0070]可选的，对所述第一编码特征进行降采样的降采样率为2。即，将第一编码特征降采样为原特征尺寸的一半。[0071]步骤1222、通过残差块对所述第一降采样特征进行处理，获取第四特征。[0072]设：降采样率为2，第一编码特征为fte1，残差块对特征的处理为第四特征为t4，则有：[0073][0074]步骤1223、通过卷积层对所述第一隐变量集中第二尺度下的编码特征进行处理，获取第五特征。[0075]设：所述第一隐变量集中第二尺度下的编码特征为卷积层对特征的处理为conv(…)，第五特征为t5，则有：[0076][0077]步骤1224、通过卷积层对所述第一隐变量集中第二尺度下的解码特征进行处理，获取第六特征。[0078]设：所述第一隐变量集中第二尺度下的解码特征为卷积层对特征的处理为conv(…)，第六特征为t6，则有：[0079][0080]步骤1225、对所述第四特征、所述第五特征以及所述第六特征进行相加融合，获取所述第二编码特征。[0081]设：第二编码特征为fte2，则有：[0082][0083]步骤123、根据所述第二编码特征、所述第一隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第三编码特征。[0084]可选的，上述步骤123(根据所述第二编码特征、所述第一隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第三编码特征)包括如下步骤1231至1235：[0085]步骤1231、对所述第二编码特征进行降采样，获取第二降采样特征。[0086]可选的，对所述第二编码特征进行降采样的降采样率为2。即，将第二编码特征降采样为原特征尺寸的一半(本征特征的1/4)。[0087]步骤1232、通过残差块对所述第二降采样特征进行处理，获取第七特征。[0088]设：降采样率为2，第二编码特征为fte2，残差块对特征的处理为第七特征为t7，则有：[0089][0090]步骤1233、通过卷积层对所述第一隐变量集中第三尺度下的编码特征进行处理，获取第八特征。[0091]设：所述第一隐变量集中第三尺度下的编码特征为卷积层对特征的处理为conv(…)，第八特征为t8，则有：[0092][0093]步骤1234、通过卷积层对所述第一隐变量集中第三尺度下的解码特征进行处理，获取第九特征。[0094]设：所述第一隐变量集中第三尺度下的解码特征为卷积层对特征的处理为conv(…)，第九特征为t9，则有：[0095][0096]步骤1235、对所述第七特征、所述第八特征以及所述第九特征进行相加融合，获取所述第三编码特征。[0097]设：第二编码特征为fte3，则有：[0098][0099]步骤124、根据所述第三编码特征，获取所述第三尺度下所述目标视频帧的第三解码特征。[0100]可选的，上述步骤124(根据所述第三编码特征，获取所述第三尺度下所述目标视频帧的第三解码特征)的一种实现方式为：[0101]通过残差块对所述第三编码特征进行处理，获取所述第三解码特征。[0102]设：第三编码特征为fte3，第三解码特征为ftd3，残差块对特征的处理为则有：[0103][0104]步骤125、根据所述第三解码特征和所述第一隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第二解码特征。[0105]可选的，上述步骤125(根据所述第三解码特征和所述第一隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第二解码特征)的一种实现方式包括如下步骤1251至步骤1254：[0106]步骤1251、对所述第三解码特征进行升采样，获取第一升采样特征。[0107]需要说明的是，此处对所述第三解码特征进行升采样的升采样率需要与上步骤中对第二解码特征的降采样率相同。示例性的，对所述第三解码特征进行升采样的升采样率可以为2。[0108]步骤1252、通过残差块对所述第二编码特征进行处理，获取第十特征。[0109]设：第二编码特征为fte2，第十特征为t10，残差块对特征的处理为则有：[0110][0111]步骤1253、对所述第一升采样特征和所述第十特征进行相加融合，获取所述第十一特征。[0112]设：第一升采样特征为(ftd3)↑2，第十一特征为t11，则有：[0113][0114]步骤1254、通过残差块对所述第十一特征进行处理，获取所述第二解码特征。[0115]设：第二解码特征为ftd2，残差块对特征的处理为则有：[0116][0117]步骤126、根据所述第二解码特征和所述第一隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第一解码特征。[0118]可选的，上述步骤126(根据所述第二解码特征和所述第一隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第一解码特征)的一种实现方式包括如下步骤1261至步骤1264：[0119]步骤1261、对所述第二解码特征进行升采样，获取第二升采样特征。[0120]需要说明的是，此处对所述第二解码特征进行升采样的升采样率需要与上步骤中对第一解码特征的降采样率相同。示例性的，对所述第二解码特征进行升采样的升采样率可以为2。[0121]步骤1262、通过残差块对所述第一编码特征进行处理，获取第十二特征。[0122]设：第一编码特征为fte1，第十二特征为t12，残差块对特征的处理为则有：[0123][0124]步骤1264、对所述第二升采样特征和所述第十二特征进行相加融合，获取第十三特征。[0125]设：第二升采样特征为(ftd2)↑2，第十二特征为t12，则有：[0126][0127]步骤1264、通过残差块对所述第十三特征进行处理，获取所述第一解码特征。[0128]设：第一解码特征为ftd1，残差块对特征的处理为则有：[0129][0130]步骤127、将所述第一编码特征、所述第二编码特征、所述第三编码特征、所述第一解码特征、所述第二解码特征以及所述第三解码特征组合为所述目标视频帧的前向隐变量集。[0131]设：第一隐变量集(目标视频帧的前一个视频帧的前向隐变量集)ft-1，目标视频帧的前向隐变量集为ft，则有：[0132][0133]ft＝tfte1，fte2，fte3，ftd1，ftd2，ftd3}[0134]进一步的，参照图4所示，用于根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集的前向传递模块包括：特征预处理单元41、编码单元42以及解码单元43。其中，特征预处理41包括：卷积层411、卷积层412、卷积层413、卷积层414、卷积层415、卷积层416、相加融合单元417、相加融合单元418以及相加融合单元419。编码单元42包括：残差块421、相加融合单元422、降采样单元423、残差块424、相加融合单元425、降采样单元426、残差块427以及相加融合单元428。解码单元43包括：残差块431、升采样单元432、残差块433、相加融合单元434、残差块435、升采样单元436、残差块437、相加融合单元438、残差块439。[0135]s13、根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集。[0136]其中，所述第二隐变量集为所述目标视频帧的后一个视频帧的后向隐变量集。[0137]即，根据当前帧的本征特征和后一个视频帧的后向隐变量集，获取当前帧的后向隐变量集。[0138]作为本发明实施例一种可选的实施方式，所述后向隐变量集包括：[0139]所述第一尺度下的编码特征和解码特征、所述第二尺度下的编码特征和解码特征以及所述第三尺度下的编码特征和解码特征。[0140]即，所述后向隐变量集中也包括3个空间尺度下的特征对(编码特征和解码特征)。[0141]同样，在上述实施例的基础上，本发明实施例中的所述后向隐变量集还可以包括其它数量的空间尺度下的特征对，本发明实施例对此不做限定，以前向隐变量集和后向隐变量集中的特征对数量相同为准。[0142]作为本发明实施例一种可选的实施方式，在所述后向隐变量集包括：第一尺度下的编码特征和解码特征、第二尺度下的编码特征和解码特征以及第三尺度下的编码特征和解码特征的情况下，上述步骤s13(根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集)的实现步骤包括如下步骤131至步骤137：[0143]步骤131、根据所述本征特征、所述第二隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第四编码特征。[0144]可选的，上述步骤131(根据所述本征特征、所述第二隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第四编码特征)的一种实现方式包括如下步骤1311至步骤1314：[0145]步骤1311、通过残差块对所述本征特征进行处理，获取第一特征。[0146]设：本征特征为φt，残差块对特征的处理为第一特征为t1，则有：[0147][0148]步骤1312、通过卷积层对所述第二隐变量集中第一尺度下的编码特征进行处理，获取第十四特征。[0149]设：所述第二隐变量集中第一尺度下的编码特征为卷积层对特征的处理为conv(…)，第十四特征为t14，则有：[0150][0151]步骤1313、通过卷积层对所述第二隐变量集中第一尺度下的解码特征进行处理，获取第十五特征。[0152]设：所述第二隐变量集中第一尺度下的解码特征为卷积层对特征的处理为conv(…)，第十五特征为t15，则有：[0153][0154]步骤1314、对所述第一特征、所述第十四特征以及所述十五特征进行相加融合，获取所述第四编码特征。[0155]设：第四编码特征为则有：[0156][0157]步骤132、根据所述第四编码特征、所述第二隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第五编码特征。[0158]可选的，上述步骤132(根据所述第四编码特征、所述第二隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第五编码特征)包括如下步骤1321至1325：[0159]步骤1321、对所述第四编码特征进行降采样，获取第三降采样特征。[0160]可选的，对所述第四编码特征进行降采样的降采样率为2。即，将第四编码特征降采样为原特征尺寸的一半。[0161]步骤1322、通过残差块对所述第三降采样特征进行处理，获取第十六特征。[0162]设：降采样率为2，第四编码特征为残差块对特征的处理为第十六特征为t16，则有：[0163][0164]步骤1323、通过卷积层对所述第二隐变量集中第二尺度下的编码特征进行处理，获取第十七特征。[0165]设：所述第二隐变量集中第二尺度下的编码特征为卷积层对特征的处理为conv(…)，第十七特征为t17，则有：[0166][0167]步骤1324、通过卷积层对所述第二隐变量集中第二尺度下的解码特征进行处理，获取第十八特征。[0168]设：所述第二隐变量集中第二尺度下的解码特征为卷积层对特征的处理为conv(…)，第十八特征为t18，则有：[0169][0170]步骤1325、对所述第十六特征、所述第十七特征以及所述第十八特征进行相加融合，获取所述第五编码特征。[0171]设：第五编码特征为则有：[0172][0173]步骤133、根据所述第五编码特征、所述第二隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第六编码特征。[0174]可选的，上述步骤133(根据所述第五编码特征、所述第二隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第六编码特征)包括如下步骤1331至1335：[0175]步骤1331、对所述第五编码特征进行降采样，获取第四降采样特征。[0176]可选的，对所述第五编码特征进行降采样的降采样率为2。即，将第五编码特征降采样为原特征尺寸的一半(本征特征的1/4)。[0177]步骤1332、通过残差块对所述第四降采样特征进行处理，获取第十九特征。[0178]设：降采样率为2，第五编码特征为残差块对特征的处理为第十九特征为t19，则有：[0179][0180]步骤1333、通过卷积层对所述第二隐变量集中第三尺度下的编码特征进行处理，获取第二十特征。[0181]设：所述第二隐变量集中第三尺度下的编码特征为卷积层对特征的处理为conv(…)，第二十特征为t20，则有：[0182][0183]步骤1334、通过卷积层对所述第二隐变量集中第二尺度下的解码特征进行处理，获取第二十一特征。[0184]设：所述第二隐变量集中第三尺度下的解码特征为卷积层对特征的处理为conv(…)，第二十一特征为t21，则有：[0185][0186]步骤1335、对所述第十九特征、所述第二十特征以及所述第二十一特征进行相加融合，获取所述第六编码特征。[0187]设：第六编码特征为则有：[0188][0189]步骤134、根据所述第六编码特征，获取所述第三尺度下所述目标视频帧的第六解码特征。[0190]可选的，上述步骤134(根据所述第六编码特征，获取所述第三尺度下所述目标视频帧的第六解码特征)的一种实现方式为：[0191]通过残差块对所述第六编码特征进行处理，获取所述第六解码特征。[0192]设：第六编码特征为第六解码特征为残差块对特征的处理为则有：[0193][0194]步骤135、根据所述第六解码特征和所述第二隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第五解码特征。[0195]可选的，上述步骤135(根据所述第六解码特征和所述第二隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第五解码特征)的一种实现方式包括如下步骤1351至步骤1354：[0196]步骤1351、对所述第六解码特征进行升采样，获取第三升采样特征。[0197]需要说明的是，此处对所述第六解码特征进行升采样的升采样率需要与上步骤中对第五解码特征的降采样率相同。示例性的，对所述第六解码特征进行升采样的升采样率可以为2。[0198]步骤1352、通过残差块对所述第五编码特征进行处理，获取第二十二特征。[0199]设：第五编码特征为第二十二特征为t22，残差块对特征的处理为则有：[0200][0201]步骤1353、对所述第三升采样特征和所述第二十二特征进行相加融合，获取第二十三特征。[0202]设：第三升采样特征为第第二十三特征为t11，则有：[0203][0204]步骤1354、通过残差块对所述第二十三特征进行处理，获取所述第五解码特征。[0205]设：第五解码特征为残差块对特征的处理为则有：[0206][0207]步骤136、根据所述第五解码特征和所述第二隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第四解码特征。[0208]可选的，上述步骤136(根据所述第五解码特征和所述第二隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第四解码特征)的一种实现方式包括如下步骤1361至步骤1364：[0209]步骤1361、对所述第五解码特征进行升采样，获取第四升采样特征。[0210]需要说明的是，此处对所述第五解码特征进行升采样的升采样率需要与上步骤中对第四解码特征的降采样率相同。示例性的，对所述第五解码特征进行升采样的升采样率可以为2。[0211]步骤1362、通过残差块对所述第四编码特征进行处理，获取第二十四特征。[0212]设：第四编码特征为第二十四特征为t24，残差块对特征的处理为则有：[0213][0214]步骤1364、对所述第四升采样特征和所述第二十四特征进行相加融合，获取第二十五特征。[0215]设：第四升采样特征为第二十五特征为t25，则有：[0216][0217]步骤1364、通过残差块对所述二十五特征进行处理，获取所述第四解码特征。[0218]设：第四解码特征为残差块对特征的处理为则有：[0219][0220]步骤137、将所述第四编码特征、所述第五编码特征、所述第六编码特征、所述第四解码特征、所述第五解码特征以及所述第六解码特征组合为所述目标视频帧的后向隐变量集。[0221]设：第二隐变量集(目标视频帧的前一个视频帧的前向隐变量集)bt-1，目标视频帧的后向隐变量集为bt，则有：[0222][0223][0224]进一步的，参照图5所示，用于根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集的后向传递模块包括：特征预处理单元51、编码单元52以及解码单元53。其中，特征预处理51包括：卷积层511、卷积层512、卷积层513、卷积层514、卷积层515、卷积层516、相加融合单元517、相加融合单元518以及相加融合单元519。编码单元52包括：残差块521、相加融合单元522、降采样单元523、残差块524、相加融合单元525、降采样单元526、残差块527以及相加融合单元528。解码单元53包括：残差块531、升采样单元532、残差块533、相加融合单元534、残差块535、升采样单元536、残差块537、相加融合单元538、残差块539。[0225]s14、根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征。[0226]作为本发明实施例一种可选的实施方式，上述步骤s14(根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征)包括如下步骤141至步骤144：[0227]步骤141、对所述本征特征、所述第一编码特征、所述第四编码特征、所述第一解码特征以及所述第四解码特征进行融合，获取第二十六特征。[0228]可选的，上述步骤141(对所述本征特征、所述第一编码特征、所述第四编码特征、所述第一解码特征以及所述第四解码特征进行融合，获取第二十六特征)的实现方式可以包括如下步骤1411至1416：[0229]步骤1411、通过残差块对所述本征特征进行处理，获取第一特征。[0230]设：本征特征为φt，残差块对特征的处理为第一特征为t1，则有：[0231][0232]步骤1412、对所述第一编码特征和所述第四编码特征进行相加融合处理，获取第一融合特征。[0233]设：第一融合特征为第一编码特征为fte1，第四编码特征为则有：[0234][0235]步骤1413、通过卷积层对所述第一融合特征进行处理，获取第一卷积特征。[0236]设：卷积层对特征的处理为conv(…)，第一卷积特征为则有：[0237][0238]步骤1414、对所述第一解码特征和所述第四解码特征进行相加融合处理，获取第二融合特征。[0239]设：第二融合特征为第一解码特征为ftd1，第四解码特征为则有：[0240][0241]步骤1415、通过卷积层对所述第二融合特征进行处理，获取第二卷积特征。[0242]设：卷积层对特征的处理为conv(…)，第二卷积特征为则有：[0243][0244]步骤1416、对所述第一特征、所述第一卷积特征以及所述第二卷积特征进行相加融合，获取所述第二十六特征。[0245]设：第二十六特征为t26，则有：[0246][0247]步骤142、对所述第二十六特征、所述第二编码特征、所述第五编码特征、所述第二解码特征以及所述第五解码特征进行融合，获取第二十七特征。[0248]可选的，上述步骤142(对所述第二十六特征、所述第二编码特征、所述第五编码特征、所述第二解码特征以及所述第五解码特征进行融合，获取第二十七特征)的实现方式可以包括如下步骤1421至1428：[0249]步骤1421、通过残差块对所述第二十六特征进行处理，获取第一残差特征。[0250]设：第二十六特征为t26，残差块对特征的处理为第一残差特征为r1，则有：[0251][0252]步骤1422、对所述第二编码特征和所述第五编码特征进行相加融合处理，获取第三融合特征。[0253]设：第三融合特征为第二编码特征为fte2，第四编码特征为则有：[0254][0255]步骤1423、通过卷积层对所述第三融合特征进行处理，获取第三卷积特征。[0256]设：卷积层对特征的处理为conv(…)，第三卷积特征为则有：[0257][0258]步骤1424、对所述第三卷积特征进行升采样，获取第五升采样特征。[0259]其中，对所述第三卷积特征进行升采样的升采样率为对第二解码特征进行降采样时的降采样率。[0260]步骤1425、对所述第二解码特征和所述第五解码特征进行相加融合处理，获取第四融合特征。[0261]设：第四融合特征为第二解码特征为ftd2，第四解码特征为则有：[0262][0263]步骤1426、通过卷积层对所述第四融合特征进行处理，获取第四卷积特征。[0264]设：卷积层对特征的处理为conv(…)，第四卷积特征为则有：[0265][0266]步骤1427、对所述第四卷积特征进行升采样，获取第六升采样特征。[0267]其中，对所述第四卷积特征进行升采样的升采样率为对第二解码特征进行降采样时的降采样率。[0268]步骤1428、对所述第一残差特征、所述第五升采样特征以及所述第六升采样特征进行相加融合，获取所述第二十七特征。[0269]设：第二十七特征为t27，则有：[0270][0271]步骤143、对所述第二十七特征、所述第三编码特征、所述第六编码特征、所述第三解码特征以及所述第六解码特征进行融合，获取第二十八特征。[0272]可选的，上述步骤143(对所述第二十七特征、所述第三编码特征、所述第六编码特征、所述第三解码特征以及所述第六解码特征进行融合，获取第二十八特征)的实现方式可以包括如下步骤1431至1436：[0273]步骤1431、通过残差块对所述第二十七特征进行处理，获取第二残差特征。[0274]设：第二十七特征为t27，残差块对特征的处理为第一残差特征为r2，则有：[0275][0276]步骤1432、对所述第三编码特征和所述第六编码特征进行相加融合处理，获取第五融合特征。[0277]设：第五融合特征为第三编码特征为fte3，第六编码特征为则有：[0278][0279]步骤1433、通过卷积层对所述第五融合特征进行处理，获取第五卷积特征。[0280]设：卷积层对特征的处理为conv(…)，第五卷积特征为则有：[0281][0282]步骤1434、对所述获取第五卷积特征进行升采样处理，获取第七升采样特征。[0283]其中，对所述第六卷积特征进行升采样的升采样率为对第一解码特征进行降采样时的降采样率与对第二解码特征进行降采样时的降采样率的乘积。[0284]步骤1435、对所述第三解码特征和所述第六解码特征进行相加融合处理，获取第六融合特征。[0285]设：第六融合特征为第三解码特征为ftd3，第六解码特征为则有：[0286][0287]步骤1436、通过卷积层对所述第六融合特征进行处理，获取第六卷积特征。[0288]设：卷积层对特征的处理为conv(…)，第六卷积特征为则有：[0289][0290]步骤1437、对所述获取第六卷积特征进行升采样处理，获取第八升采样特征。[0291]其中，对所述第六卷积特征进行升采样的升采样率为对第一解码特征进行降采样时的降采样率与对第二解码特征进行降采样时的降采样率的乘积。[0292]步骤1438、对所述第二残差特征、所述第七升采样特征以及所述第八升采样特征进行相加融合，获取所述第二十八特征。[0293]设：第二十八特征为t28，则有：[0294][0295]步骤144、对通过卷积层对所述第二十八特征进行处理，获取所述目标视频帧的增强特征。[0296]设：卷积层对特征的处理为conv(…)，增强特征为：i′t，则有：[0297]i′t＝conv(t28)[0298]可选的，对所述第二十八特征进行处理的卷积层的卷积核可以为5*5。[0299]示例性的，参照图6所示，用于根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征的特征增强模块包括：第一融合单元61、第二融合单元62、第三融合单元63以及第四融合单元64。其中，第一融合单元61包括：相加融合单元611、卷积层612、相加融合单元613、卷积层614、残差块615以及相加融合单元616。第二融合单元62包括：相加融合单元621、卷积层622、升采样单元623、相加融合单元624、卷积层625、升采样单元626、残差块627以及相加融合单元628。第三融合单元63包括：相加融合单元631、卷积层632、升采样单元633、相加融合单元634、卷积层635、升采样单元636、残差块637以及相加融合单元638。第四融合单元64包括卷积层641[0300]s15、对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。[0301]设：目标视频帧的去模糊视频帧为ot，目标视频帧的增强特征为i′t，目标视频帧为it，则有：[0302]ot＝it+i′t[0303]示例性的，参照图7所示，用于对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧的特征融合模块包括：相加融合单元71。相加融合单元71的输入为目标视频帧的增强特征i′t以及目标视频帧为it，相加融合单元71的输出为目标视频帧的去模糊视频帧ot。[0304]本发明实施例提供的模糊视频修复方法在对视频中的目标视频帧进行修复时，首先对待修复视频的目标视频帧进行特征提取获取所述目标视频帧的本征特征，然后根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集，以及根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集，再根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征，最后对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。相比于现有技术中通过显式的运动补偿模块消除相邻帧间的位移，本发明实施例利用一个向前传递的前向隐变量集和一个向后传递的后向隐变量集对相邻视频帧的隐变量进行相加融合，从而避免了视频去模糊网络从相邻视频帧中得到错误的信息，提高了对相邻视频帧的信息利用的效率，因此本发明实施例可以提升视频去模糊的去模糊效果。[0305]基于同一发明构思，作为对上述方法的实现，本发明实施例还提供了一种模糊视频修复装置，该装置实施例与前述方法实施例对应，为便于阅读，本装置实施例不再对前述方法实施例中的细节内容进行逐一赘述，但应当明确，本实施例中的模糊视频修复装置能够对应实现前述方法实施例中的全部内容。[0306]本发明实施例提供了一种模糊视频修复装置，图8为该模糊视频修复装置的结构示意图，如图8所示，该模糊视频修复装置800包括：[0307]特征提取模块81，用于对待修复视频的目标视频帧进行特征提取，获取所述目标视频帧的本征特征；[0308]前向传递模块82，用于根据所述本征特征和第一隐变量集获取所述目标视频帧的前向隐变量集；所述第一隐变量集为所述目标视频帧的前一个视频帧的前向隐变量集；[0309]后向传递模块83，用于根据所述本征特征和第二隐变量集获取所述目标视频帧的后向隐变量集；所述第二隐变量集为所述目标视频帧的后一个视频帧的后向隐变量集；[0310]特征融合模块84，用于根据所述本征特征、所述目标视频帧的前向隐变量集以及所述目标视频帧的后向隐变量集，获取所述目标视频帧的增强特征；[0311]去模糊模块85，用于对所述目标视频帧的增强特征和所述目标视频帧进行相加融合，获取所述目标视频帧的去模糊视频帧。[0312]作为本发明实施例一种可选的实施方式，所述特征提取模块81具体用于：[0313]通过卷积层对所述目标视频帧进行处理，获取卷积特征；[0314]通过残差块对所述卷积特征进行处理，获取所述目标视频帧的本征特征。[0315]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0316]根据所述本征特征、所述第一隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第一编码特征；[0317]根据所述第一编码特征、所述第一隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第二编码特征；[0318]根据所述第二编码特征、所述第一隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第三编码特征；[0319]根据所述第三编码特征，获取所述第三尺度下所述目标视频帧的第三解码特征；[0320]根据所述第三解码特征和所述第一隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第二解码特征；[0321]根据所述第二解码特征和所述第一隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第一解码特征；[0322]将所述第一编码特征、所述第二编码特征、所述第三编码特征、所述第一解码特征、所述第二解码特征以及所述第三解码特征组合为所述目标视频帧的前向隐变量集。[0323]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0324]通过残差块对所述本征特征进行处理，获取第一特征；[0325]通过卷积层对所述第一隐变量集中第一尺度下的编码特征进行处理，获取第二特征；[0326]通过卷积层对所述第一隐变量集中第一尺度下的解码特征进行处理，获取第三特征；[0327]对所述第一特征、所述第二特征以及所述第三特征进行相加融合，获取所述第一编码特征。[0328]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0329]对所述第一编码特征进行降采样，获取第一降采样特征；[0330]通过残差块对所述第一降采样特征进行处理，获取第四特征；[0331]通过卷积层对所述第一隐变量集中第二尺度下的编码特征进行处理，获取第五特征；[0332]通过卷积层对所述第一隐变量集中第二尺度下的解码特征进行处理，获取第六特征；[0333]对所述第四特征、所述第五特征以及所述第六特征进行相加融合，获取所述第二编码特征。[0334]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0335]对所述第二编码特征进行降采样，获取第二降采样特征；[0336]通过残差块对所述第二降采样特征进行处理，获取第七特征；[0337]通过卷积层对所述第一隐变量集中第三尺度下的编码特征进行处理，获取第八特征；[0338]通过卷积层对所述第一隐变量集中第二尺度下的解码特征进行处理，获取第九特征；[0339]对所述第七特征、所述第八特征以及所述第九特征进行相加融合，获取所述第三编码特征。[0340]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0341]通过残差块对所述第三编码特征进行处理，获取所述第三解码特征。[0342]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0343]对所述第三解码特征进行升采样，获取第一升采样特征；[0344]通过残差块对所述第二编码特征进行处理，获取第十特征；[0345]对所述第一升采样特征和所述第十特征进行相加融合，获取第十一特征；[0346]通过残差块对所述第十一特征进行处理，获取所述第二解码特征。[0347]作为本发明实施例一种可选的实施方式，所述前向传递模块82具体用于：[0348]对所述第二解码特征进行升采样，获取第二升采样特征；[0349]通过残差块对所述第一编码特征进行处理，获取第十二特征；[0350]对所述第二升采样特征和所述第十二特征进行相加融合，获取第十三特征；[0351]通过残差块对所述第十三特征进行处理，获取所述第一解码特征。[0352]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0353]根据所述本征特征、所述第二隐变量集中第一尺度下的编码特征和解码特征，获取所述第一尺度下所述目标视频帧的第四编码特征；[0354]根据所述第四编码特征、所述第二隐变量集中第二尺度下的编码特征和解码特征，获取所述第二尺度下所述目标视频帧的第五编码特征；[0355]根据所述第五编码特征、所述第二隐变量集中第三尺度下的编码特征和解码特征，获取所述第三尺度下所述目标视频帧的第六编码特征；[0356]根据所述第六编码特征，获取所述第三尺度下所述目标视频帧的第六解码特征；[0357]根据所述第六解码特征和所述第二隐变量集中所述第二尺度下的编码特征，获取所述第二尺度下所述目标视频帧的第五解码特征；[0358]根据所述第五解码特征和所述第二隐变量集中所述第一尺度下的编码特征，获取所述第一尺度下所述目标视频帧的第四解码特征；[0359]将所述第四编码特征、所述第五编码特征、所述第六编码特征、所述第四解码特征、所述第五解码特征以及所述第六解码特征组合为所述目标视频帧的后向隐变量集。[0360]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0361]通过残差块对所述本征特征进行处理，获取第一特征；[0362]通过卷积层对所述第二隐变量集中第一尺度下的编码特征进行处理，获取第十四特征；[0363]通过卷积层对所述第二隐变量集中第一尺度下的解码特征进行处理，获取第十五特征；[0364]对所述第一特征、所述第十四特征以及所述十五特征进行相加融合，获取所述第四编码特征。[0365]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0366]对所述第四编码特征进行降采样，获取第三降采样特征；[0367]通过残差块对所述第三降采样特征进行处理，获取第十六特征；[0368]通过卷积层对所述第二隐变量集中第二尺度下的编码特征进行处理，获取第十七特征；[0369]通过卷积层对所述第二隐变量集中第二尺度下的解码特征进行处理，获取第十八特征；[0370]对所述第十六特征、所述第十七特征以及所述第十八特征进行相加融合，获取所述第五编码特征。[0371]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0372]对所述第五编码特征进行降采样，获取第四降采样特征；[0373]通过残差块对所述第四降采样特征进行处理，获取第十九特征；[0374]通过卷积层对所述第二隐变量集中第三尺度下的编码特征进行处理，获取第二十特征；[0375]通过卷积层对所述第二隐变量集中第二尺度下的解码特征进行处理，获取第二十一特征；[0376]对所述第十九特征、所述第二十特征以及所述第二十一特征进行相加融合，获取所述第六编码特征。[0377]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0378]通过残差块对所述第六编码特征进行处理，获取所述第六解码特征。[0379]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0380]对所述第六解码特征进行升采样，获取第三升采样特征；[0381]通过残差块对所述第五编码特征进行处理，获取第二十二特征；[0382]对所述第三升采样特征和所述第二十二特征进行相加融合，获取第二十三特征；[0383]通过残差块对所述二十三特征进行处理，获取所述第五解码特征。[0384]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0385]对所述第五解码特征进行升采样，获取第四升采样特征；[0386]通过残差块对所述第四编码特征进行处理，获取第二十四特征；[0387]对所述第四升采样特征和所述第二十四特征进行相加融合，获取第二十五特征；[0388]通过残差块对所述二十五特征进行处理，获取所述第四解码特征。[0389]作为本发明实施例一种可选的实施方式，所述后向传递模块83具体用于：[0390]对所述本征特征、所述第一编码特征、所述第四编码特征、所述第一解码特征以及所述第四解码特征进行融合，获取第二十六特征；[0391]对所述第二十六特征、所述第二编码特征、所述第五编码特征、所述第二解码特征以及所述第五解码特征进行融合，获取第二十七特征；[0392]对所述第二十七特征、所述第三编码特征、所述第六编码特征、所述第三解码特征以及所述第六解码特征进行融合，获取第二十八特征；[0393]对通过卷积层对所述第二十八特征进行处理，获取所述目标视频帧的增强特征。[0394]作为本发明实施例一种可选的实施方式，所述特征融合模块84具体用于：[0395]通过残差块对所述本征特征进行处理，获取第一特征；[0396]对所述第一编码特征和所述第四编码特征进行相加融合处理，获取第一融合特征；[0397]通过卷积层对所述第一融合特征进行处理，获取第一卷积特征；[0398]对所述第一解码特征和所述第四解码特征进行相加融合处理，获取第二融合特征；[0399]通过卷积层对所述第二融合特征进行处理，获取第二卷积特征；[0400]对所述第一特征、所述第一卷积特征以及所述第二卷积特征进行相加融合，获取所述第二十六特征。[0401]作为本发明实施例一种可选的实施方式，所述特征融合模块84具体用于：[0402]通过残差块对所述第二十六特征进行处理，获取第一残差特征；[0403]对所述第二编码特征和所述第五编码特征进行相加融合处理，获取第三融合特征；[0404]通过卷积层对所述第三融合特征进行处理，获取第三卷积特征；[0405]对所述第三卷积特征进行升采样，获取第五升采样特征；[0406]对所述第二解码特征和所述第五解码特征进行相加融合处理，获取第四融合特征；[0407]通过卷积层对所述第四融合特征进行处理，获取第四卷积特征；[0408]对所述第四卷积特征进行升采样，获取第六升采样特征；[0409]对所述第一残差特征、所述第五升采样特征以及所述第六升采样特征进行相加融合，获取所述第二十七特征。[0410]作为本发明实施例一种可选的实施方式，所述特征融合模块84具体用于：[0411]通过残差块对所述第二十七特征进行处理，获取第二残差特征；[0412]对所述第三编码特征和所述第六编码特征进行相加融合处理，获取第五融合特征；[0413]通过卷积层对所述第五融合特征进行处理，获取第五卷积特征；[0414]对所述第五卷积特征进行升采样，获取第七升采样特征；[0415]对所述第三解码特征和所述第六解码特征进行相加融合处理，获取第六融合特征；[0416]通过卷积层对所述第六融合特征进行处理，获取第六卷积特征；[0417]对所述第六卷积特征进行升采样，获取第八升采样特征；[0418]对所述第二残差特征、所述第七升采样特征以及所述第八升采样特征进行相加融合，获取所述第二十八特征。[0419]本实施例提供的模糊视频修复装置可以执行上述方法实施例提供的模糊视频修复方法，其实现原理与技术效果类似，此处不再赘述。[0420]基于同一发明构思，本发明实施例还提供了一种电子设备。图9为本发明实施例提供的电子设备的结构示意图，如图9所示，本实施例提供的电子设备包括：存储器901和处理器902，所述存储器901用于存储计算机程序；所述处理器902用于在调用计算机程序时执行上述实施例提供的模糊视频修复方法。[0421]基于同一发明构思，本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当计算机程序被处理器执行时，使得所述计算设备实现上述实施例提供的模糊视频修复方法。[0422]基于同一发明构思，本发明实施例还提供了一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算设备实现上述实施例提供的模糊视频修复方法。[0423]本领域技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质上实施的计算机程序产品的形式。[0424]处理器可以是中央处理单元(central processing unit，cpu)，还可以是其他通用处理器、数字信号处理器(digital signal processor，dsp)、专用集成电路(application specific integrated circuit，asic)、现成可编程门阵列(field-programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。[0425]存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(ram)和/或非易失性内存等形式，如只读存储器(rom)或闪存(flash ram)。存储器是计算机可读介质的示例。[0426]计算机可读介质包括永久性和非永久性、可移动和非可移动存储介质。存储介质可以由任何方法或技术来实现信息存储，信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。根据本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。[0427]最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。









图片声明：本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!




内容声明：本文中引用的各种信息及资料（包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主体（包括但不限于公司、媒体、协会等机构）的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理！本站为非盈利性质站点,发布内容不收取任何费用也不接任何广告!




免责声明：我们致力于保护作者版权，注重分享，被刊用文章因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系管理员，我们会立即处理，本文部分文字与图片资源来自于网络，部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理!的,若有来源标注错误或侵犯了您的合法权益，请立即通知我们，情况属实，我们会第一时间予以删除，并同时向您表示歉意,谢谢!