基于画面识别的视频培训方法、终端、服务器和系统与流程

1.本发明涉及医疗培训领域，具体而言，涉及一种基于画面识别的视频培训方法、培训终端、服务器和系统。
2.

背景技术：

3.相关技术中，在对客户进行医疗器械的视频培训时，需要客户选择医疗器械对应的培训视频。在客户对医疗器械不够熟悉的情况下，客户难以准确找到对应的培训视频。
4.

技术实现要素：

5.有鉴于此，本发明的一个目的在于提供一种基于画面识别的视频培训方法、培训终端、服务器和系统，以至少解决现有技术中存在的问题。
6.为了实现上述目的，本发明的第一方面的技术方案提供了一种基于画面识别的视频培训方法，应用于培训终端，所述方法包括：获取目标医疗器械的第一图像信息；将所述第一图像信息发送至服务器；接收所述服务器发送的、根据所述第一图像信息发送的播放指示信息；根据所述播放指示信息确定所述培训终端上存储的、用于所述目标医疗器械演示的目标培训视频；控制播放装置播放所述目标培训视频。
7.可选地，在所述培训终端上存储有至少两个用于所述目标医疗器械演示的培训视频的情况下，所述根据所述播放指示信息确定所述培训终端上存储的、用于所述目标医疗器械演示的目标培训视频，包括：根据所述播放指示信息，确定所述培训终端上用于所述目标医疗器械演示的全部培训视频；控制显示装置显示所述全部培训视频；接收视频选择指令，并确定所述视频选择指令对应的培训视频为所述目标培训视频。
8.可选地，所述获取目标区域的第一图像信息，包括：接收用户终端发送的、所述目标医疗器械的第一图像信息。
9.可选地，所述方法还包括：在播放所述目标培训视频的过程中，获取用户的第二图像信息；在所述第二图像信息表征用户未观看所述培训终端的情况下，暂停播放所述目标培训视频。
10.可选地，在暂停播放所述目标培训视频之后，所述方法还包括：
在所述第二图像信息表征用户正在观看所述培训终端的情况下，接续播放所述目标培训视频。
11.本发明第二方面提供了一种基于画面识别的视频培训方法，应用于服务器，所述方法包括：接收培训终端发送的、目标医疗器械的第一图像信息；根据所述第一图像信息识别所述目标医疗器械；向所述培训终端发送对应于所述目标医疗器械的播放指示信息。
12.本发明第三方面提供了一种培训终端，包括：存储器，其上存储有计算机程序；处理器，用于执行所述程序，所述程序被所述处理器执行时能实现本发明第一方面所提供的方法。
13.本发明第四方面提供了一种服务器，包括：存储器，其上存储有计算机程序；处理器，用于执行所述程序，所述程序被所述处理器执行时能实现本发明第二方面所提供的方法。
14.本发明第五方面提供了一种基于画面识别的培训系统，包括：本发明第三方面所提供的培训终端、以及本发明第四方面所提供的服务器。
15.通过上述技术方案，可以根据目标医疗器械的第一图像信息，确定培训终端上存储的、对应于该目标医疗器械的目标培训视频。这样，即使待培训人员对目标医疗机械比较陌生，培训终端也能准确地确定目标培训视频，便于对待培训人员进行准确、即时的视频培训。
16.本发明的附加方面和优点将在下面的描述部分中变得明显，或通过本发明的实践了解到。
17.附图说明
18.图1是本发明一示例性实施例提供的基于画面识别的视频培训方法的流程图；图2是本发明另一示例性实施例提供的基于画面识别的视频培训方法的流程图；图3是本发明一示例性实施例提供的培训终端的框图；图4是本发明一示例性实施例提供的服务器的框图。
19.具体实施方式
20.为了可以更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是，在不冲突的情况下，本技术的实施例及实施例中的特征可以相互组合。
21.在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是，本发明还可以采用其他不同于在此描述的其他方式来实施，因此，本发明的保护范围并不受下面公开的具体实施例的限制。
22.首先对本发明可能的应用场景进行阐述。
23.在医疗器械使用过程中，需要对使用的用户进行培训。例如在医疗器械面向护工使用时，通过对护工进行培训，可以使护工对医疗器械的工作方式进行了解。但是在日常工作中，护工们很难有时间进行集中培训，同时不同的护工对于医疗器械的了解也不同，护工难以单独进行操作。
24.有鉴于此，本发明提供了一种基于画面识别的视频培训方法、培训终端、服务器和系统。
25.参照图1，本发明第一方面提供了一种基于画面识别的视频培训方法，应用于培训终端，该方法可以包括步骤s11至步骤s15。
26.在步骤s11中，获取目标医疗器械的第一图像信息。可以理解，第一图像信息中包括目标医疗器械。
27.在步骤s12中，将第一图像信息发送至服务器。在一种可能的实施方式中，培训终端可以通过4g通信将第一图像信息发送至服务器。
28.在步骤s13中，接收服务器发送的、根据第一图像信息发送的播放指示信息。
29.培训终端上可以存储有培训视频，培训视频可以对应于多个医疗器械。在步骤s14中，根据播放指示信息确定培训终端上存储的、用于目标医疗器械演示的目标培训视频，如此，可以准确地确定对应于目标医疗器械的目标培训视频。
30.在步骤s15中，控制播放装置播放目标培训视频。
31.这样，即使待培训人员对目标医疗机械比较陌生，培训终端也能准确地确定目标培训视频，便于对待培训人员进行准确、即时的视频培训。
32.同时，通过服务器对目标医疗器械进行识别，便于服务器端的图像识别算法获得足够多的样本进行反馈，可以提高识别的准确率。
33.示例性地，在培训终端上可以存储有至少两个用于目标医疗器械演示的培训视频的情况下，根据播放指示信息确定培训终端上存储的、用于目标医疗器械演示的目标培训视频，可以包括：根据播放指示信息，确定培训终端上用于目标医疗器械演示的全部培训视频；控制显示装置显示全部培训视频；接收视频选择指令，并确定视频选择指令对应的培训视频为目标培训视频。
34.本方案中，服务器在接收到第一图像信息之后，可以对第一图像信息进行识别，以确定目标医疗器械。这样，服务器向培训终端发送的播放指示信息可以是播放目标医疗器械对应的培训视频。而当目标医疗器械具有多种功能时，目标医疗器械可能对应有多个培训视频。因此，在这种情况下，培训终端根据播放指示信息，确定培训终端上用于目标医疗器械演示的全部培训视频，并控制显示装置显示全部培训视频（例如可以通过显示屏显示全部培训视频）。例如可以通过文件列表的形式显示全部的培训视频，或者也可以显示每个培训视频的缩略图。
35.用户可以根据显示的全部培训视频，确定要观看的培训视频，并可以选择该培训视频（例如可以是点击触摸屏），培训终端接收视频选择指令，并确定视频选择指令对应的培训视频为目标培训视频。
36.如此，在目标医疗器械对应多个培训视频的情况下，可以使用户自行选择需要的
培训视频。
37.在另一种可能的实施方式中，在目标医疗器械的多个培训视频具有固定的顺序关系的情况下，培训终端可以获取当前用户的历史播放记录，并根据历史播放记录中当前用户最新观看的、目标医疗器械的培训视频、以及该顺序关系，确定目标培训视频。
38.如此，可以更加便捷地确定目标培训视频，在用户对目标医疗器械不够了解的情况下可以准确地对用户进行培训。
39.其中，目标医疗器械的顺序关系，例如可以是按照操作难度从简单到困难进行排序，或者也可以按照操作的工序由少到多进行排序，以能对用户进行系统的培训。
40.示例性地，获取目标区域的第一图像信息，包括：接收用户终端发送的、目标医疗器械的第一图像信息。
41.本方案中，用户可以通过用户终端拍摄目标医疗器械的第一图像信息，并将该图像信息发送至培训终端（例如可以通过蓝牙发送）。可以更加便捷地获取目标医疗器械。
42.示例性地，方法还包括：在播放目标培训视频的过程中，获取用户的第二图像信息；在第二图像信息表征用户未观看培训终端的情况下，暂停播放目标培训视频。
43.例如，可以根据第二图像信息识别用户的姿态，在用户的姿态表征用户当前未朝向培训终端的情况下，可以确定用户未观看培训终端。此时可以暂停播放目标培训视频。如此可以在用户因为其他事情中断培训的时候暂停播放，不需要用户手动暂停，提高便捷性，同时在疫情期间可以减少交叉感染的风险。
44.其中，对于用户的姿态识别可以通过卷积神经网络等深度学习算法实现，此处不再赘述。
45.示例性地，在暂停播放目标培训视频之后，方法还包括：在第二图像信息表征用户正在观看培训终端的情况下，接续播放目标培训视频。
46.参照图2，本发明第二方面提供了一种基于画面识别的视频培训方法，应用于服务器，方法包括：步骤s21，接收培训终端发送的、目标医疗器械的第一图像信息；步骤s22，根据第一图像信息识别目标医疗器械；步骤s23，向培训终端发送对应于目标医疗器械的播放指示信息。
47.这样，即使待培训人员对目标医疗机械比较陌生，培训终端也能准确地确定目标培训视频，便于对待培训人员进行准确、即时的视频培训。
48.同时，通过服务器对目标医疗器械进行识别，便于服务器端的图像识别算法获得足够多的样本进行反馈，可以提高识别的准确率。
49.图3是根据一示例性实施例示出的一种培训终端700的框图。如图3所示，该培训终端700可以包括：处理器701，存储器702。该培训终端700还可以包括多媒体组件703，输入/输出（i/o）接口704，以及通信组件705中的一者或多者。
50.其中，处理器701用于控制该培训终端700的整体操作，以完成上述应用于培训终端的基于画面识别的视频培训方法中的全部或部分步骤。存储器702用于存储各种类型的数据以支持在该培训终端700的操作，这些数据例如可以包括用于在该培训终端700上操作的任何应用程序或方法的指令，以及应用程序相关的数据，例如联系人数据、收发的消息、图片、音频、视频等等。该存储器702可以由任何类型的易失性或非易失性存储设备或者它
们的组合实现，例如静态随机存取存储器（static random access memory，简称sram），电可擦除可编程只读存储器（electrically erasable programmable read-only memory，简称eeprom），可擦除可编程只读存储器（erasable programmable read-only memory，简称eprom），可编程只读存储器（programmable read-only memory，简称prom），只读存储器（read-only memory，简称rom），磁存储器，快闪存储器，磁盘或光盘。多媒体组件703可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏，音频组件用于输出和/或输入音频信号。例如，音频组件可以包括一个麦克风，麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器702或通过通信组件705发送。音频组件还包括至少一个扬声器，用于输出音频信号。i/o接口704为处理器701和其他接口模块之间提供接口，上述其他接口模块可以是键盘，鼠标，按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件705用于该培训终端700与其他设备之间进行有线或无线通信。无线通信，例如wi-fi，蓝牙，近场通信（near field communication，简称nfc），2g、3g、4g、nb-iot、emtc、或其他5g等等，或它们中的一种或几种的组合，在此不做限定。因此相应的该通信组件705可以包括：wi-fi模块，蓝牙模块，nfc模块等等。
51.在一示例性实施例中，培训终端700可以被一个或多个应用专用集成电路（application specific integrated circuit，简称asic）、数字信号处理器（digital signal processor，简称dsp）、数字信号处理设备（digital signal processing device，简称dspd）、可编程逻辑器件（programmable logic device，简称pld）、现场可编程门阵列（field programmable gate array，简称fpga）、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述应用于培训终端的基于画面识别的视频培训方法。
52.在另一示例性实施例中，还提供了一种包括程序指令的计算机可读存储介质，该程序指令被处理器执行时实现上述应用于培训终端的基于画面识别的视频培训方法的步骤。例如，该计算机可读存储介质可以为上述包括程序指令的存储器702，上述程序指令可由培训终端700的处理器701执行以完成上述基于画面识别的视频培训方法。
53.图4是根据一示例性实施例示出的一种服务器1900的框图。参照图4，服务器1900包括处理器1922，其数量可以为一个或多个，以及存储器1932，用于存储可由处理器1922执行的计算机程序。存储器1932中存储的计算机程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理器1922可以被配置为执行该计算机程序，以执行上述应用于服务器的基于画面识别的视频培训方法。
54.另外，服务器1900还可以包括电源组件1926和通信组件1950，该电源组件1926可以被配置为执行服务器1900的电源管理，该通信组件1950可以被配置为实现服务器1900的通信，例如，有线或无线通信。此外，该服务器1900还可以包括输入/输出（i/o）接口1958。服务器1900可以操作基于存储在存储器1932的操作系统，例如windows server
tm
，mac os x
tm
，unix
tm
，linux
tm
等等。
55.在另一示例性实施例中，还提供了一种包括程序指令的计算机可读存储介质，该程序指令被处理器执行时实现上述应用于服务器的基于画面识别的视频培训方法的步骤。例如，该非临时性计算机可读存储介质可以为上述包括程序指令的存储器1932，上述程序指令可由服务器1900的处理器1922执行以完成上述应用于服务器的基于画面识别的视频培训方法。
56.在另一示例性实施例中，还提供一种计算机程序产品，该计算机程序产品包含能够由可编程的装置执行的计算机程序，该计算机程序具有当由该可编程的装置执行时用于执行上述应用于服务器的基于画面识别的视频培训方法的代码部分。
57.本发明还提供了一种基于画面识别的培训系统，包括：上述实施例锁提供的培训终端和服务器。
58.本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、cd-rom、光学存储器等）上实施的计算机程序产品的形式。
59.本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
60.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
61.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
62.应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

技术特征：
1.一种基于画面识别的视频培训方法，其特征在于，应用于培训终端，所述方法包括：获取目标医疗器械的第一图像信息；将所述第一图像信息发送至服务器；接收所述服务器发送的、根据所述第一图像信息发送的播放指示信息；根据所述播放指示信息确定所述培训终端上存储的、用于所述目标医疗器械演示的目标培训视频；控制播放装置播放所述目标培训视频。2.根据权利要求1所述的方法，其特征在于，在所述培训终端上存储有至少两个用于所述目标医疗器械演示的培训视频的情况下，所述根据所述播放指示信息确定所述培训终端上存储的、用于所述目标医疗器械演示的目标培训视频，包括：根据所述播放指示信息，确定所述培训终端上用于所述目标医疗器械演示的全部培训视频；控制显示装置显示所述全部培训视频；接收视频选择指令，并确定所述视频选择指令对应的培训视频为所述目标培训视频。3.根据权利要求1所述的方法，其特征在于，所述获取目标区域的第一图像信息，包括：接收用户终端发送的、所述目标医疗器械的第一图像信息。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：在播放所述目标培训视频的过程中，获取用户的第二图像信息；在所述第二图像信息表征用户未观看所述培训终端的情况下，暂停播放所述目标培训视频。5.根据权利要求4所述的方法，其特征在于，在暂停播放所述目标培训视频之后，所述方法还包括：在所述第二图像信息表征用户正在观看所述培训终端的情况下，接续播放所述目标培训视频。6.一种基于画面识别的视频培训方法，其特征在于，应用于服务器，所述方法包括：接收培训终端发送的、目标医疗器械的第一图像信息；根据所述第一图像信息识别所述目标医疗器械；向所述培训终端发送对应于所述目标医疗器械的播放指示信息。7.一种培训终端，其特征在于，包括：存储器，其上存储有计算机程序；处理器，用于执行所述程序，所述程序被所述处理器执行时能实现如权利要求1至5中任一项所述的方法。8.一种服务器，其特征在于，包括：存储器，其上存储有计算机程序；处理器，用于执行所述程序，所述程序被所述处理器执行时能实现如权利要求6所述的方法。9.一种基于画面识别的培训系统，其特征在于，包括如权利要求7所述的培训终端、以及如权利要求8所述的服务器。

技术总结
本发明提出了一种基于画面识别的视频培训方法、培训终端、服务器和系统，应用于培训终端的视频培训方法包括：获取目标医疗器械的第一图像信息；将第一图像信息发送至服务器；接收服务器发送的、根据第一图像信息发送的播放指示信息；根据播放指示信息确定培训终端上存储的、用于目标医疗器械演示的目标培训视频；控制播放装置播放目标培训视频。如此，即使待培训人员对目标医疗机械比较陌生，培训终端也能准确地确定目标培训视频，便于对待培训人员进行准确、即时的视频培训。即时的视频培训。即时的视频培训。


技术研发人员：段小霞 赵郑 刘德恒 于言言
受保护的技术使用者：北京泽桥医疗科技股份有限公司
技术研发日：2021.12.24
技术公布日：2022/3/8