一种内容生成方法、书写笔及计算机可读存储介质与流程

本申请涉及图像处理，特别涉及一种内容生成方法、书写笔及计算机可读存储介质。

背景技术：

1、随着信息化技术的发展，人们对信息的电子化管理需求日益增长。

2、然而，在会议记录、课堂笔记、访谈调研等场景中，大量信息仍然以传统的纸笔书写形式记录。这种通过传统的纸笔书写形式记录信息的方式，无法实现对书写信息的快速整理、关键信息识别和总结归纳等处理。

3、因此，如何实现对书写信息的有效处理是值得关注的问题。

技术实现思路

1、基于此，有必要针对上述技术问题，提供一种能够实现对书写信息有效处理的内容生成方法、书写笔及计算机可读存储介质。

2、第一方面，本申请提供了一种内容生成方法，应用于控制终端，包括：

3、接收书写笔在书写过程中采集的至少一帧书写图像；

4、根据至少一帧书写图像，确定书写笔在书写过程的全局书写图像；

5、根据全局书写图像，确定书写笔在书写过程的书写轨迹，以及书写轨迹上各轨迹点的像素坐标数据；

6、根据各轨迹点的书写顺序，确定各轨迹点之间的连接关系；以及

7、根据书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，生成目标文本内容。

8、在其中一个实施例中，根据至少一帧书写图像，确定书写笔在书写过程的全局书写图像，包括：针对任意相邻的两帧书写图像，对两帧书写图像进行特征点匹配，得到两帧书写图像中的特征点对；根据特征点对，确定两帧书写图像之间的坐标转换关系；根据坐标转换关系，对两帧书写图像进行坐标转换，得到两帧书写图像在同一坐标空间中各自对应的目标书写图像；以及，对得到的目标书写图像进行融合处理，得到书写笔在书写过程的全局书写图像。

9、在其中一个实施例中，根据全局书写图像，确定书写笔在书写过程的书写轨迹，以及书写轨迹上各轨迹点的像素坐标数据，包括：对全局书写图像进行图像识别，得到书写笔在书写过程的书写轨迹；对全局书写图像进行二值化处理，得到二值化书写图像；以及，从二值化书写图像中，提取书写轨迹上各轨迹点的像素坐标数据。

10、在其中一个实施例中，根据书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，生成目标文本内容，包括：获取音频文本内容；其中，音频文本内容是对书写笔在书写过程中采集的音频数据进行文本转换得到的；根据音频文本内容、各轨迹点的像素坐标数据和各轨迹像素点之间的连接关系，生成目标文本内容。

11、在其中一个实施例中，获取音频文本内容，包括：接收书写笔在书写过程中采集的音频数据；对音频数据进行文本转换，得到音频文本内容。

12、在其中一个实施例中，根据音频文本内容、各轨迹点的像素坐标数据和各轨迹像素点之间的连接关系，生成目标文本内容，包括：获取目标文档类型；根据音频文本内容、各轨迹点的像素坐标数据和各轨迹像素点之间的连接关系，生成与目标文本类型匹配的目标文本内容。

13、第二方面，本申请提供了一种内容生成方法，应用于书写笔，包括：

14、响应于书写笔的书写信号，获取书写笔在书写过程中采集的至少一帧书写图像；

15、将至少一帧书写图像发送至控制终端；

16、其中，至少一帧书写图像用于供控制终端确定书写笔在书写过程的全局书写图像；根据全局书写图像，确定书写笔在书写过程的书写轨迹，以及书写轨迹上各轨迹点的像素坐标数据；根据各轨迹点的书写顺序，确定各轨迹点之间的连接关系将各轨迹点的像素坐标数据和各轨迹点之间的连接关系；以及根据书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，生成目标文本内容。

17、在其中一个实施例中，内容生成方法还包括：

18、获取书写笔在书写过程中采集的音频数据；

19、将音频数据发送至控制终端。

20、第三方面，本申请还提供了一种书写笔，包括存储器和处理器，存储器存储有计算机程序，处理器执行计算机程序时实现以下步骤：

21、响应于书写笔的书写信号，获取书写笔在书写过程中采集的至少一帧书写图像；

22、将至少一帧书写图像发送至控制终端；

23、其中，至少一帧书写图像用于供控制终端确定书写笔在书写过程的全局书写图像；根据全局书写图像，确定书写笔在书写过程的书写轨迹，以及书写轨迹上各轨迹点的像素坐标数据；根据各轨迹点的书写顺序，确定各轨迹点之间的连接关系将各轨迹点的像素坐标数据和各轨迹点之间的连接关系；以及根据书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，生成目标文本内容。

24、第四方面，本申请还提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一方面的内容生成方法的步骤。

25、上述内容生成方法中，控制终端可以接收书写笔在书写过程中采集的至少一帧书写图像；根据至少一帧书写图像，确定书写笔在书写过程的全局书写图像；根据全局书写图像，确定书写笔在书写过程的书写轨迹，以及书写轨迹上各轨迹点的像素坐标数据；根据各轨迹点的书写顺序，确定各轨迹点之间的连接关系；以及，根据书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，生成目标文本内容；上述内容生成方法通过根据至少一帧书写图像，确定书写笔在书写过程的全局书写图像，如此，可以获取书写过程的完整书写内容，为后续得到准确的目标文本内容奠定了基础，另外，通过确定书写轨迹上各轨迹点的像素坐标数据和各轨迹点之间的连接关系，可以准确还原出书写过程的完整笔迹，从而可以得到准确的目标文本内容，实现对书写内容的有效处理。

1.一种内容生成方法，其特征在于，应用于控制终端，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述根据所述至少一帧书写图像，确定所述书写笔在所述书写过程的全局书写图像，包括：

3.根据权利要求1所述的方法，其特征在于，所述根据所述全局书写图像，确定所述书写笔在所述书写过程的书写轨迹，以及所述书写轨迹上各轨迹点的像素坐标数据，包括：

4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据所述书写轨迹上各轨迹点的像素坐标数据和所述各轨迹点之间的连接关系，生成目标文本内容，包括：

5.根据权利要求4所述的方法，其特征在于，所述获取音频文本内容，包括：

6.根据权利要求4所述的方法，其特征在于，所述根据所述音频文本内容、所述各轨迹点的像素坐标数据和所述各轨迹像素点之间的连接关系，生成目标文本内容，包括：

7.一种内容生成方法，其特征在于，应用于书写笔，所述方法包括：

8.根据权利要求7所述的方法，其特征在于，还包括：

9.一种书写笔，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求7或8所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤或实现权利要求7或8所述的方法的步骤。