一种数据同步方法和装置与流程

本申请涉及数据处理，特别涉及一种数据同步方法和装置。

背景技术：

1、随着多模态人工智能技术的发展，音频与视觉信息融合广泛应用于视频会议、智能语音助手、目标语音分离等场景。因此需要考虑如何将音频、视觉等不同模态的信息进行同步，以便于后续处理。

技术实现思路

1、有鉴于现有技术中存在的上述至少一个技术问题而提出了本申请，本申请能够提高同步精度和鲁棒性。

2、第一方面，本申请实施例提供了一种数据同步方法，包括：

3、获取第一模态数据和第二模态数据；

4、从所述第一模态数据中提取第一模态事件，从所述第二模态数据中提取第二模态事件；

5、确定所述第一模态事件与所述第二模态事件之间的匹配关系；

6、基于所述匹配关系，同步所述第一模态数据与所述第二模态数据。

7、第二方面，本申请实施例提供了一种跨模态数据同步装置，包括：

8、获取模块，配置为获取第一模态数据和第二模态数据；

9、提取模块，配置为从所述第一模态数据中提取第一模态事件，从所述第二模态数据中提取第二模态事件；

10、确定模块，配置为确定所述第一模态事件与所述第二模态事件之间的匹配关系；

11、同步模块，配置为基于所述匹配关系，同步所述第一模态数据与所述第二模态数据。

12、第三方面，本申请实施例提供了一种电子设备，包括存储器和处理器，所述存储器中存储有可执行程序，所述处理器执行所述可执行程序以进行如下步骤：

13、获取第一模态数据和第二模态数据；

14、从所述第一模态数据中提取第一模态事件，从所述第二模态数据中提取第二模态事件；

15、确定所述第一模态事件与所述第二模态事件之间的匹配关系；

16、基于所述匹配关系，同步所述第一模态数据与所述第二模态数据。

1.一种数据同步方法，包括：

2.如权利要求1所述的方法，

3.如权利要求2所述的方法，

4.如权利要求3所述的方法，

5.如权利要求1所述的方法，

6.如权利要求1-5中任一项所述的方法，

7.如权利要求6所述的方法，

8.如权利要求6所述的方法，还包括：

9.一种跨模态数据同步装置，包括：

10.一种电子设备，包括存储器和处理器，所述存储器中存储有可执行程序，所述处理器执行所述可执行程序以进行如下步骤：