(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202180005744.0 (22)申请日 2021.12.3 0 (85)PCT国际申请进入国家阶段日 2022.04.02 (86)PCT国际申请的申请数据 PCT/CN2021/14310 6 2021.12.3 0 (71)申请人 焦旭 地址 100095 北京市海淀区温泉镇 东埠头 村四区398号 (72)发明人 焦旭　 (74)专利代理 机构 北京律和信知识产权代理事 务所(普通 合伙) 11446 专利代理师 谢清萍　张莎莎 (51)Int.Cl. G06V 20/40(2022.01)G06V 10/764(2022.01) G06T 7/73(2017.01) G06K 9/62(2022.01) G06N 20/00(2019.01) (54)发明名称 电子设备、 手部按压深度检测方法、 系统以 及穿戴设备 (57)摘要 本申请提供一种电子设备， 包括处理器执行 如下步骤： 获取图像采集设备提供的视频， 所述 视频中包含按照时间顺序生成的视频帧序列的 多个图像； 其中， 每个所述图像中包含有所述用 户按压患者时按压部位附近佩戴的穿戴设备， 所 述穿戴设备上设置有所述穿戴设备的定位标志 图像作为跟踪框； 根据所述视频帧序列中的至少 一帧图像识别所述图像中的穿戴设备中的跟踪 框； 跟踪所述视频帧序列中的多个图像中所述跟 踪框在按压方向上位置的起伏变化； 根据所述位 置的起伏变化确定用户按压动作的深度并将所 述按压动作的深度输出到所述电子设备和/或所 述穿戴设备。 该电子设备可提高按压深度的准确 性。 权利要求书2页 说明书12页 附图6页 CN 114556446 A 2022.05.27 CN 114556446 A 1.一种电子设备， 其特征在于， 用于用户为患者提供心肺复苏场景中检测用户按压动 作深度， 所述电子设备至少包括处 理器； 所述处理器被配置为执 行如下步骤： 获取图像采集设备提供的视频， 所述视频中包含按照时间顺序生成的视频帧序列的多 个图像； 其中， 每个所述图像中包含有 所述用户按压患者时按压部位附近佩戴的穿戴设备， 所述穿戴设备 上设置有所述 穿戴设备的定位标志图像作为跟踪框； 根据所述视频帧序列中的至少一帧图像识别所述图像中的穿戴设备中的跟踪框； 跟踪所述视频帧序列中的多个图像中所述跟踪框在按压方向上位置的起伏变化； 根据所述位置的起伏变化确定用户按压动作的深度并将所述按压动作的深度输出到 所述电子设备和/或所述 穿戴设备。 2.根据权利要求1所述的电子设备， 其特征在于， 根据所述视频帧序列中的至少一帧图 像识别所述图像中的穿戴设备中的跟踪框， 具体包括： 同时根据 预先设定的穿戴设备的背景图像的形状和颜色， 以及根据预先设定的所述背 景图像中的局部图像的颜色和形状识别所述跟踪框 。 3.根据权利要求2所述的电子设备， 其特征在于， 根据所述视频帧序列中的至少一帧图 像识别所述图像中的穿戴设备中的跟踪框， 具体包括： 将所述至少一个图像转换到HSV颜色空间， 提取图像 中的颜色特征， 所述提取出的颜色 特征与预先设定的颜色特征一致， 所述预先设定的颜色特征包含所述预先设定的背景图像 的颜色特 征以及预 先设定的所述局部图像的颜色特 征； 在所述提取出的颜色特征所对应的图像区域中， 根据预先设定的背景图像的形状和颜 色以及所述局部图像的形状和颜色， 提取 方向梯度直方图特 征和灰度共生矩阵特 征； 将所述方向梯度直方图特征和灰度共生矩阵特征作为分类器的输入识别穿戴设备中 的跟踪框； 所述分类器是预先训练过的， 训练所述分类器时将所述预先设定的背景图像的形状和 颜色以及所述局部图像的形状和颜色作为输入。 4.根据权利要求3所述的电子设备， 其特征在于， 所述预先设定的背景图像为红色矩形 区域或绿色矩形区域； 所述预先设定的局部图像包括所述红色矩形区域或所述绿色矩形区 域中的多个白色矩形区域和黑色矩形区域； 所述多个白色矩形区域的其中一个位于所述红色矩形区域或绿色矩形区域的中心， 所 述多个白色矩形区域至少部 分位于红色矩形区域或绿色矩形区域的至少相对的两个边上， 所述白色方 形区域所在的位置与矩形中位线相交。 5.根据权利要求3所述的电子设备， 其特征在于， 所述图像采集设备为所述电子设备上 的摄像头， 通过 所述摄像头对佩戴有穿戴设备的用户进行拍摄； 所述穿戴设备为手环， 所述手环包括腕带， 所述腕带上设置有硬质方形区域， 所述硬质 方形区域的背 景颜色为红色或绿色， 所述的硬质方形区域的中心设置有白色方形区域， 和/ 或所述硬质方形区域的至少相对的两个边上分别设置有白色方形区域， 所述白色方形区域 所在的位置与矩形中位线相交。 6.根据权利要求1所述的电子设备， 其特征在于， 跟踪所述视频帧序列中的多个图像中 所述跟踪框在按压方向上位置的起伏变化， 具体包括：权　利　要　求　书 1/2 页 2 CN 114556446 A 2采用KCF算法对所述跟踪框进行跟踪， 所述KCF算法至少融合方向梯度直方图特征、 颜 色域和分类 器的得分。 7.根据权利要求1所述的电子设备， 其特征在于， 根据所述位置的起伏变化确定用户按 压动作的深度并将所述按压动作的深度输出到所述电子 设备的显示器和/或所述穿戴设备 的显示器， 或者在所述显示器或所述 穿戴设备 上输出语音提 示信息。 8.一种穿戴设备， 其特征在于， 所述穿戴设备为权利要求1中所述的穿戴设备， 用于用 户为患者提供心肺复苏场景中佩戴在用户的按压部位附近， 使得摄像头拍摄用户为患者提 供心肺复苏的视频图像并提供给电子设备， 通过电子设备识别所述视频图像中的穿戴设备 并跟踪穿戴设备 上的跟踪框； 所述穿戴设备设置有硬质方形区域， 所述硬质方形区域的背景颜色为红色或绿色， 所 述硬质方 形区域设置有白色方 形区域。 9.根据权利要求8所述的穿戴设备， 其特征在于， 所述硬质方形区域设置有白色方形区 域， 具体包括： 所述硬质方 形区域的中心设置有白色方 形区域； 和/或 所述硬质方 形区域的四边上至少其中两个相对的边上设置有白色方 形区域； 和/或 所述硬质方形区域的两个中位线上设置有黑色条形区域， 所述黑色条形区域从所述硬 质方形区域的中心延伸到四个边中的一个或多个边上。 10.根据权利要求9所述的穿戴设备， 其特征在于， 所述硬质方形区域的红色或绿色背 景图像的周边设置有白色线条， 所述白色线 条为所述硬质方形区域的红色或绿色背景图像 的轮廓。 11.根据权利要求8 ‑10任一所述的穿戴设备， 其特征在于， 所述跟踪框包括所述白色方 形区域的轮廓、 所述黑色条形区域的轮廓、 所述红色或绿色背景图像的轮廓中的之一或任 意两个或两个以上的组合。 12.根据权利要求11所述的穿戴设备， 其特征在于， 所述穿戴设备为佩戴在手腕上的手 环， 所述手环包括腕带， 所述腕带 上设置有所述硬质方 形区域。 13.根据权利要求8所述的穿戴设备， 其特征在于， 多个所述硬质方形区域的背景颜色 不相同并且不构成中心对称或轴对称。 14.一种手部按压深度检测方法， 其特 征在于， 包括： 获取图像采集设备提供的视频， 所述视频中包含按照时间顺序生成的视频帧序列的多 个图像； 其中， 每个所述图像中包含有用户按压患者时按压部位附近佩戴的穿戴设备， 所述 穿戴设备 上设置有所述 穿戴设备的定位标志图像作为跟踪框； 根据所述视频帧序列中的至少一帧图像识别所述图像中的穿戴设备中的跟踪框； 跟踪所述视频帧序列中的多个图像中所述跟踪框在按压方向上位置的起伏变化； 根据所述位置的起伏变化确定用户按压动作的深度并将所述按压动作的深度输出到 其它电子设备和/或所述 穿戴设备。 15.一种手部按压深度检测系统， 其特征在于， 包括如权利要求1～7之任一项所述的电 子设备和如权利要求8～13之任一项所述的穿戴设备。 16.一种非瞬态计算机可读存储介质， 其特征在于， 其上存储有计算机程序， 其中， 所述 计算机程序被处 理器执行时实现如权利要求14所述的方法。权　利　要　求　书 2/2 页 3 CN 114556446 A 3