触觉媒体内容的处理方法及装置、设备、存储介质与流程

本申请涉及多媒体数据处理，具体涉及一种触觉媒体内容的处理方法、装置、设备以及计算机可读存储介质。

背景技术：

1、沉浸式媒体(immersive media)内容的呈现往往伴随着各种各样的可穿戴设备或者可交互设备，因此，在沉浸式媒体的呈现方式上，除了传统的视觉和听觉方面的呈现外，还具备触觉呈现这种方式。随着可穿戴设备和可交互设备的普及，用户在消费媒体内容时可感知的触觉呈现将不再局限于基础的振动触觉，而是包括振动、压力、速度、加速度、温度、湿度、嗅觉等全方位体感的更逼近真实世界的触觉呈现体验，因此，如何统一地表达触觉媒体内容是触觉媒体消费的痛点。

技术实现思路

1、本申请的实施例分别提供了一种触觉媒体内容的处理方法、触觉媒体内容的处理装置、触觉媒体内容的处理设备、计算机可读存储介质以及计算机程序产品。

2、一方面，本申请实施例提供了一种触觉媒体内容的处理方法，该方法包括：获取至少一个触觉媒体信号；根据所述至少一个触觉媒体信号生成触觉媒体交换格式，所述触觉媒体交换格式包含触觉体验对象、人物信息对象、设备信息对象、触觉模式对象、触觉通道对象、触觉事件对象、组件分量对象中的至少一种数据对象；对所述触觉媒体交换格式进行转换处理，得到触觉媒体二进制位流；将所述触觉媒体二进制位流封装为触觉媒体文件，并将所述触觉媒体文件传输至客户端。

3、另一方面，本申请实施例还提供了一种触觉媒体内容的处理装置，该装置包括：信号获取模块，配置为获取至少一个触觉媒体信号；交换格式生成模块，配置为根据所述至少一个触觉媒体信号生成触觉媒体交换格式，所述触觉媒体交换格式包含触觉体验对象、人物信息对象、设备信息对象、触觉模式对象、触觉通道对象、触觉事件对象、组件分量对象中的至少一种数据对象；交换格式转换模块，配置为对所述触觉媒体交换格式进行转换处理，得到触觉媒体二进制位流；封装及传输模块，配置为将所述触觉媒体二进制位流封装为触觉媒体文件，并将所述触觉媒体文件传输至客户端。

4、另一方面，本申请实施例还提供了一种触觉媒体内容的处理设备，包括：一个或多个处理器；存储器，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述触觉媒体内容的处理设备实现如前所述的触觉媒体内容的处理方法中的步骤。

5、另一方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机可读指令，当所述计算机可读指令被计算机的处理器执行时，使计算机执行如上所述的触觉媒体内容的处理方法中的步骤。

6、另一方面，本申请实施例还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现如上所述的触觉媒体内容的处理方法中的步骤。

7、本申请的实施例提出了一种通用的触觉媒体内容表示方式，具体为，通过在触觉媒体交换格式文中包含至少一种数据对象，来相应表示出不同类型的触觉媒体信号，同时支持由触觉媒体交换格式向触觉媒体二进制位流的转换，由此实现了触觉媒体内容的统一表达，还通过将转换得到的触觉媒体二进制位流封装为触觉媒体文件，将触觉媒体文件传输至客户端，实现了触觉媒体内容的流化传输。

8、应理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。

技术特征：

1.一种触觉媒体内容的处理方法，其特征在于，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述触觉体验对象包含版本属性、创建时间属性、描述信息属性、指示当前触觉体验相关的触觉模式的属性、指示当前触觉体验相关的人物信息的属性、指示当前触觉体验相关的设备信息的属性、指示触觉事件是否划分层级的属性中的至少一种。

3.根据权利要求1所述的方法，其特征在于，所述人物信息对象包含指示人物的标识符的属性、指示人物模型的类型的属性、指示人物模型文件的uri地址的属性中的至少一种。

4.根据权利要求1所述的方法，其特征在于，所述设备信息对象包括设备标识属性、设备名称属性、指示当前设备对应人物的属性、指示当前设备对应人物的具体信息的属性、指示当前设备对应的人物身体部位的属性中的至少一种。

5.根据权利要求1所述的方法，其特征在于，所述触觉模式对象包括模式标识符属性、模式类型属性、指示当前模式对应的设备的属性、指示当前模式对应的人物的属性、指示当前模式对应的触觉事件是否存在语义的属性、指示触觉事件语义所遵循的规范的属性、指示触觉事件是否划分层级的属性、指示当前模式包含的知识触觉事件的属性、指示当前模式包含的触觉通道的属性中的至少一种。

6.根据权利要求1所述的方法，其特征在于，所述触觉通道对象包含通道标识符属性、通道描述属性、指示当前通道对应的设备的属性、指示当前通道对应的人物的属性、通道增益属性、指示当前通道是否和其它触觉通道属于可替换关系的属性、指示当前通道所属的可替换通道组的标识符的属性、指示当前通道是否属于某个通道组的属性、指示当前通道所属的通道组的标识符的属性、指示当前通道在相应通道组内的权重的属性、指示触觉事件是否划分层级的属性、指示当前通道的优先级的属性、指示当前通道包含的触觉事件的属性中的至少一种；

7.根据权利要求1所述的方法，其特征在于，所述触觉事件对象包含事件标识符属性、事件语义属性、事件层级属性、事件类型属性、指示事件类型为参考事件时对应的知识触觉事件标识符的属性、指示当前事件的时间偏移量的属性、指示当前事件的持续时间的属性、指示当前事件的信号最大幅度值的属性、指示当前事件的信号基准频率的属性、指示组成当前事件的组件的属性中的至少一种。

8.根据权利要求1所述的方法，其特征在于，所述组件分量对象包含指示当前组件所属触觉事件的标识符的属性、指示当前组件相对于触觉事件的时间偏移的属性、指示当前组件相对于触觉事件的幅度值比例的属性、指示当前组件相对于触觉事件的频率偏移的属性中的至少一种。

9.根据权利要求1－8中任一项所述的方法，其特征在于，所述触觉媒体二进制位流由二进制头和二进制负载组成；所述对所述触觉媒体交换格式进行转换处理，得到触觉媒体二进制位流，包括：

10.根据权利要求9所述的方法，其特征在于，所述预定义的属性转换方式包括如下至少一项：

11.根据权利要求9所述的方法，其特征在于，所述预定义的字段转换方式包括如下至少一项：

12.根据权利要求1－8中任一项所述的方法，其特征在于，所述将所述触觉媒体二进制位流封装为触觉媒体文件，以及将所述触觉媒体文件传输至客户端，包括：

13.一种触觉媒体内容的处理装置，其特征在于，所述装置包括：

14.一种触觉媒体内容的处理设备，其特征在于，包括：

15.一种计算机可读存储介质，其特征在于，其上存储有计算机可读指令，当所述计算机可读指令被计算机的处理器执行时，使计算机执行权利要求1至12中任一项所述的触觉媒体内容的处理方法。

技术总结
本申请的实施例揭示了触觉媒体内容的处理方法及装置、设备、存储介质。该方法包括：获取用于呈现预期的触觉媒体效果的至少一个触觉媒体信号；根据所述至少一个触觉媒体信号生成触觉媒体交换格式，所述触觉媒体交换格式包含触觉体验对象、人物信息对象、设备信息对象、触觉模式对象、触觉通道对象、触觉事件对象、组件分量对象中的至少一种数据对象；对所述触觉媒体交换格式进行转换处理，得到触觉媒体二进制位流；将所述触觉媒体二进制位流封装为触觉媒体文件，并将所述触觉媒体文件传输至客户端。本申请提出了一种通用的触觉媒体内容表示方式，同时支持由触觉媒体交换格式向触觉媒体二进制位流的转换，还实现了触觉媒体内容的流化传输。

技术研发人员：胡颖
受保护的技术使用者：腾讯科技（深圳）有限公司
技术研发日：
技术公布日：2024/12/5