(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210774950.4 (22)申请日 2022.07.01 (71)申请人 维沃移动通信有限公司 地址 523863 广东省东莞 市长安镇维沃路1 号 (72)发明人 潘超鹏　 (74)专利代理 机构 北京远志博慧知识产权代理 事务所(普通 合伙) 11680 专利代理师 李翠雅 (51)Int.Cl. G06T 17/00(2006.01) (54)发明名称 三维模型构建方法、 装置、 电子设备及存储 介质 (57)摘要 本申请公开了一种三维模型构建方法、 装 置、 电子设备及存储介质， 属于图像技术领域， 该 方法包括： 确定目标图像的突变区域； 基于目标 图像的突变区域和与该突变区域对应的采样步 长更新策略， 对目标图像进行非均匀采样， 得到 非均匀采样顶点集合； 基于非均匀采样顶点集 合， 构建三维模型。 权利要求书3页 说明书16页 附图6页 CN 115205456 A 2022.10.18 CN 115205456 A 1.一种三维模型构建方法， 其特 征在于， 所述方法包括： 确定目标图像的突变区域； 基于所述目标图像的突变区域和与 所述突变区域对应的采样步长更新策略， 对所述目 标图像进行非均匀采样， 得到非均匀采样顶点 集合； 基于所述非均匀采样顶点 集合， 构建三维模型。 2.根据权利要求1所述的方法， 其特 征在于， 所述确定目标图像的突变区域， 包括： 采用单帧深度估计网络， 确定所述目标图像的深度图； 获取所述深度图的每个像素点的深度信息， 并确定至少一个深度差值， 每个深度差值 为所述深度图的一个像素点的深度信息与一个像素领域中的一个像素点的深度信息的差 值， 所述一个像素领域包括与所述深度图的一个 像素点相邻的所有像素点； 根据所述至少一个深度差值， 确定所述目标图像的突变区域。 3.根据权利要求2所述的方法， 其特征在于， 所述根据所述至少一个深度差值， 确定所 述目标图像的突变区域， 包括： 将所述至少一个深度差值中大于或等于第一阈值的深度差值对应的像素点的深度突 变掩码值确定为第一数值； 将所述至少一个深度差值中小于第一阈值的深度差值对应的像素点的深度突变掩码 值确定为第二数值， 所述第二数值小于所述第一数值； 其中， 所述目标图像的突变区域 为由所述第一数值对应的像素点组成的图像区域。 4.根据权利要求1至3中任一项所述的方法， 其特征在于， 所述基于所述目标图像的突 变区域和与所述突变区域对应的采样步长更新策略， 对所述 目标图像进行非均匀采样， 得 到非均匀采样顶点 集合， 包括： 针对所述目标图像的深度图中的每个像素点， 基于任意一个像素点的初始化采样步长 和所述深度图的所有像素点的突变掩码值， 确定第三数值， 并根据所述任意一个像素点的 初始化采样步长和已采样的所有顶点采样掩码， 确定第四数值， 所述第三数值为所述任意 一个像素点对应的采样步长窗口内的深度突变掩码值之和， 所述第四数值为所述任意一个 像素点对应的采样步长窗口内的顶点采样掩码值之和； 在所述第三数值或所述第 四数值大于第二阈值的情况下， 更新所述初始化采样步长， 直至满足第一条件， 所述第一条件为更新后的采样步长等于第三阈值， 或者所述任意一个 像素点对应的采样步长窗口内的深度突变掩码值之和以及顶点采样掩码值之和均等于所 述第二阈值； 根据更新后的采样步长， 从所述任意一个像素点对应的采样步长窗口内确定目标采样 顶点， 并更新所述任意一个像素点对应的采样步长窗口内的顶点采样掩码值， 得到一个深 度图采样顶点 集合； 遍历所述目标图像的深度图的所有像素点， 得到所述非均匀采样顶点 集合。 5.根据权利要求1所述的方法， 其特征在于， 所述基于所述非均匀采样顶点集合， 构建 三维模型， 包括： 将所述非均匀采样顶点 集合映射为三维空间点 集， 以构建三维顶点； 构建所述非均匀采样顶点 集合中的各个顶点之间的连接关系， 以构建三维片面； 基于所述 三维顶点和所述 三维片面， 得到所述 三维模型。权　利　要　求　书 1/3 页 2 CN 115205456 A 26.根据权利要求1所述的方法， 其特 征在于， 所述确定目标图像的突变区域， 包括： 对所述目标图像的深度图进行中值滤波， 并对中值滤波后的所述深度图中的边缘异常 深度信息进行修 正， 以得到修 正后的所述 突变区域。 7.根据权利要求6所述的方法， 其特征在于， 所述对所述目标图像的深度图进行中值滤 波， 并对中值滤波后的所述深度图中的边缘异常深度信息进行修正， 以得到修正后的所述 突变区域， 包括： 针对所述目标图像的深度图中的每个像素点， 采用预设滤波窗口半径， 确定任意一个 像素点对应的滤波像素集 合， 并确定所述滤波像素集 合中的所有像素点的权 重值； 根据所述滤波像素集合中的所有像素点的权重值， 将所述任意一个像素点的深度信 息 更新为目标深度信息， 所述目标深度信息为所述任意一个像素点的相 邻像素点的深度信息 的中值； 遍历所述目标图像的深度图中的所有像素点， 以得到修 正后的所述 突变区域。 8.根据权利要求6或7所述的方法， 其特征在于， 所述对所述目标图像的深度图进行中 值滤波， 包括： 基于目标滤波窗口半径， 对所述目标图像的深度图进行第一次的中值滤波， 并更新所 述目标滤波窗口半径； 基于更新后的所述目标滤波窗口半径， 对第 一次中值滤波后的所述深度图进行下一 次 的中值滤波， 并继续更新所述目标滤波窗口半径， 直至完成预设次数的中值滤波， 以对所述 目标图像的深度图进行中值滤波。 9.一种三维模型构建装置， 其特征在于， 所述装置包括： 确定模块、 采样模块和构建模 块； 所述确定模块， 用于确定目标图像的突变区域； 所述采样模块， 用于基于所述确定模块确定的所述目标图像的突变区域和与 所述突变 区域对应的采样步长更新策略， 对所述 目标图像进行非均匀采样， 得到非均匀采样顶点集 合； 所述构建模块， 用于基于所述采样模块采样得到的所述非均匀采样顶点集合， 构建三 维模型。 10.根据权利要求9所述的装置， 其特征在于， 所述确定模块， 具体用于采用单帧深度估 计网络， 确定所述目标图像的深度图； 并获取所述深度图的每个像素点的深度信息， 并确定 至少一个深度差值， 每个深度差值为所述深度图的一个像素点的深度信息与一个像素领域 中的一个像素点的深度信息的差值， 所述一个像素领域包括与所述深度图的一个像素点相 邻的所有像素点； 以及根据所述至少一个深度差值， 确定所述目标图像的突变区域。 11.根据权利要求10所述的装置， 其特征在于， 所述确定模块， 具体用于将所述至少一 个深度差值中大于或等于第一阈值的深度差值对应的像素点的深度突变掩码值确定为第 一数值； 并将所述至少一个深度差值中小于第一阈值的深度差值对应的像素点的深度突变 掩码值确定为第二数值， 所述第二数值小于所述第一数值； 其中， 所述目标图像的突变区域 为由所述第一数值对应的像素点组成的图像区域。 12.根据权利要求9至1 1中任一项所述的装置， 其特 征在于， 所述采样模块， 具体用于： 针对所述目标图像的深度图中的每个像素点， 基于任意一个像素点的初始化采样步长权　利　要　求　书 2/3 页 3 CN 115205456 A 3