(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210914465.2 (22)申请日 2022.08.01 (71)申请人 零束科技有限公司 地址 201805 上海市嘉定区安亭镇墨玉南 路888号2201室JT1740 (72)发明人 王彤　 (74)专利代理 机构 北京合智同创知识产权代理 有限公司 1 1545 专利代理师 李杰 (51)Int.Cl. G06F 21/62(2013.01) G06T 7/11(2017.01) (54)发明名称 视频脱敏、 车辆的视频脱敏方法、 车载处理 系统 (57)摘要 本申请实施例提供了一种视频脱 敏、 车辆的 视频脱敏方法、 车载处理系统， 属于视频处理领 域。 本发明通过对多帧视频帧图像进行语义分割 处理获得待脱敏区域， 对其进行文字识别生成待 脱敏字符串， 根据脱 敏后字符串生成与待脱 敏区 域形状相同的脱敏图像， 再通过图像迁移模型将 待脱敏区域对应的部分图像的图像参数迁移至 脱敏图像， 最后将脱 敏图像替换掉待脱敏区域对 应的图像。 此方法对采样视频无严格的要求， 适 用于各种复杂场景数据采集的需求， 在没有较好 初始条件的情况下可以获得很好的替换效果， 使 用图像迁移模型避免了图像局部特征被破坏而 导致的图像数据再训练时， 使通过图像迁移模型 后的图像精度降低的问题， 大大提高了数据的可 利用价值和利用范围。 权利要求书2页 说明书9页 附图4页 CN 115270184 A 2022.11.01 CN 115270184 A 1.一种视频脱敏 方法， 其特 征在于， 包括： 获得待脱敏视频的多帧视频帧图像； 通过语义分割 模型对多帧所述视频帧图像分别进行语义分割处理， 获得各所述视频帧 图像中的待 脱敏区域； 针对各个视频帧图像， 对所述视频帧图像的待脱敏区域进行文本识别， 得到待脱敏字 符串， 并确定所述待脱敏字符串对应的脱敏后字符串， 根据所述脱敏后字符串生成与所述 待脱敏区域形状相同的脱敏图像； 将所述视频帧图像中与所述待脱敏区域对应的部分图像以及所述脱敏图像输入至预 先训练的图像迁移模型， 通过所述图像迁移模型将所述待脱敏区域对应的部分图像的图像 参数迁移至所述脱敏图像， 并输出迁移后的所述脱敏图像； 将各所述视频帧图像中的所述待脱敏区域对应的部分图像替换为迁移后的所述脱敏 图像， 得到所述待 脱敏视频对应的多帧脱敏后的视频帧图像。 2.根据权利要求1所述的方法， 其特征在于， 所述根据所述脱敏后字符串生成与所述待 脱敏区域形状相同的脱敏图像， 包括： 从预设的图像模板库中确定出与所述待 脱敏区域对应的图像模板； 根据所述图像模板以及所述脱敏后字符串生成候选脱敏图像； 根据所述待脱敏区域的形状， 对所述候选脱敏图像进行形状变换处理， 得到所述脱敏 图像。 3.根据权利要求2所述的方法， 其特征在于， 所述待脱敏区域为四边形， 所述根据所述 待脱敏区域的形状， 对所述 候选脱敏图像进行 形状变换处理， 得到所述脱敏图像， 包括： 确定所述待 脱敏区域的四个顶点的坐标； 根据四个顶点的坐标， 对所述 候选脱敏图像进行透 视变换处 理， 得到所述脱敏图像。 4.根据权利要求1所述的方法， 其特征在于， 所述图像迁移模型通过下述方法训练得 到： 获得第一图像样本和第二图像样本， 其中， 所述第一图像样本和所述第二图像样本的 图像参数不同； 将所述第一图像样本和所述第 二图像样本输入迁移模块， 通过所述迁移模块将所述第 二图像样本的图像参数迁移至所述第一图像样本， 生成第一迁移图像； 通过重建模块， 根据所述第一图像样本的图像参数和所述第一迁移图像进行图像重 建， 得到第一重建图像； 根据所述第 一重建图像和所述第 一图像样本之间的差异， 调 整所述迁移模块和所述重 建模块， 并将调整后的所述迁移模块作为训练后的所述图像迁移模型。 5.根据权利要求4所述的方法， 其特征在于， 所述获得第一图像样本和第二图像样本， 包括： 获得包含多个图像的图像样本集； 根据预设的图像参数阈值， 将所述图像样本集中的各个图像确定为所述第 一图像样本 或者第二图像样本 。 6.根据权利要求1所述的方法， 其特征在于， 所述图像参数包括以下至少之一： 图像亮 度、 图像模糊度、 图像纹 理。权　利　要　求　书 1/2 页 2 CN 115270184 A 27.根据权利要求1所述的方法， 其特征在于， 所述待脱敏区域的图像内容为形状 固定车 牌或者路牌， 所述方法还包括： 通过包括形状固定的车牌 或者路牌的样本图像， 训练所述语 义分割模型。 8.根据权利要求1所述的方法， 其特 征在于， 所述方法还 包括： 将所述待 脱敏视频对应的多帧脱敏后的视频帧图像进行帧合并， 得到脱敏后视频。 9.一种车辆的视频脱敏方法， 其特征在于， 所述车辆包括用于采集车外信息的图像采 集装置， 所述方法包括： 获得所述图像采集装置采集到的待 脱敏视频的多帧视频帧图像； 通过语义分割 模型对多帧所述视频帧图像分别进行语义分割处理， 获得各所述视频帧 图像中的待 脱敏区域； 针对各个视频帧图像， 对所述视频帧图像的待脱敏区域进行文本识别， 得到待脱敏字 符串， 并确定所述待脱敏字符串对应的脱敏后字符串， 根据所述脱敏后字符串生成与所述 待脱敏区域形状相同的脱敏图像； 将所述视频帧图像中与所述待脱敏区域对应的部分图像以及所述脱敏图像输入至预 先训练的图像迁移模型， 通过所述图像迁移模型将所述待脱敏区域对应的部分图像的图像 参数迁移至所述脱敏图像， 并输出迁移后的所述脱敏图像； 将各所述视频帧图像中的所述待脱敏区域对应的部分图像替换为迁移后的所述脱敏 图像， 得到所述待 脱敏视频对应的多帧脱敏后的视频帧图像。 10.一种车 载处理系统， 包括图像采集装置、 处 理器、 存储器， 所述图像采集装置用于采集车外信息， 得到待 脱敏视频； 所述存储器用于存 储所述待 脱敏视频， 以及存 储可执行程序； 所述处理器运行所述可执行程序时执行如权利要求1 ‑9任一项所述的方法对应的步 骤。权　利　要　求　书 2/2 页 3 CN 115270184 A 3