一种显示设备及协同作画方法与流程

1.本技术涉及智能电视画板技术领域，尤其涉及一种显示设备及协同作画方法。


背景技术：

2.显示设备是指能够输出具体显示画面的终端设备，如智能电视、移动终端、智能广告屏、投影仪等。以智能电视为例，智能电视可以基于internet应用技术，具备开放式操作系统与芯片，拥有开放式应用平台，可实现双向人机交互功能，集影音、娱乐、教育、数据等多种功能于一体的电视产品，用于满足用户多样化和个性化需求。例如，智能电视上可以安装画板应用软件，以供用户作画。
3.相关技术中，多个显示设备可以通过网络连接实现信息共享，从而使多个用户通过不同的显示设备进行协同作画，以在各显示设备中显示相同的作画内容，当其中一个用户对画作进行编辑时，其他用户的显示界面中也会显示该用户编辑的内容。
4.但是，在上述场景中，各显示设备执行撤销操作时会直接撤销最近一次对画作编辑的内容，而不会区分该内容是由哪个用户进行编辑的，即目标用户可以随意撤销其他用户编辑的内容，影响其他用户的交互体验。


技术实现要素：

5.本技术提供了一种显示设备及协同作画方法，以解决用户在进行撤销操作时，可以随意撤销其他显示设备输入的内容的问题，有利于用户的体验。
6.第一方面，本技术提供了一种显示设备，包括：
7.显示器，被配置显示电子画板界面，所述电子画板界面包括控件区和绘画区，所述控件区包括至少一个用于对所述绘画区进行输入操作的控件，所述绘画区用于呈现输入的内容；
8.通信器，被配置为与服务器建立通信连接，以使所述显示设备作为第一显示设备与连接所述服务器的至少一个第二显示设备协同作画；
9.控制器，被配置为：
10.获取用户输入的指示撤销历史绘画操作的控制指令；
11.响应于所述控制指令，检测输入所述历史绘画操作的输入设备；
12.如果所述输入设备为所述第二显示设备，向所述输入设备发送撤销请求，所述撤销请求包括撤销所述历史绘画操作的问询指令，所述撤销请求用于请求所述第二显示设备在同意撤销所述历史绘画操作后反馈用于表示同意撤销的第一反馈信息；
13.响应于接收到所述第一反馈信息，刷新所述电子画板界面；
14.向所述服务器发送同步指令，所述同步指令用于指示所述服务器向各所述第二显示设备发送同步请求，以刷新各所述第二显示设备的电子画板界面。
15.第二方面，本技术还提供了一种显示设备，包括：
16.显示器，被配置为显示电子画板界面，所述电子画板界面包括控件区和绘画区，所
述控件区包括至少一个用于对所述绘画区进行输入操作的控件，所述绘画区用于呈现输入的内容；
17.通信器，被配置为与服务器建立通信连接，以使所述显示设备作为第二显示设备与连接所述服务器的第一显示设备协同作画；
18.控制器，被配置为：
19.接收所述第一显示设备发送的撤销请求，所述撤销请求包括撤销历史绘画操作的问询指令，所述撤销请求用于请求所述第二显示设备在同意撤销所述历史绘画操作后反馈用于表示同意撤销的第一反馈信息；
20.响应于用户输入的用于同意所述撤销请求的指令，向所述第一显示设备发送第一反馈信息，以使所述第一显示设备在接收到所述第一反馈信息时刷新所述第一显示设备的电子画板界面，以撤销所述第一显示设备显示的所述历史绘画操作，以及，使所述第一显示设备向所述服务器发送同步指令，所述同步指令用于指示所述服务器向所述第二显示设备发送同步请求；
21.接收所述服务器发送的同步请求；
22.刷新所述电子画板界面。
23.第三方面，本技术提供了一种协同作画方法，应用于第一显示设备，包括：
24.与服务器建立通信连接，以使所述第一显示设备与连接所述服务器的至少一个第二显示设备协同作画；
25.获取用户输入的指示撤销历史绘画操作的控制指令；
26.响应于所述控制指令，检测输入所述历史绘画操作的输入设备；
27.如果所述输入设备为所述第二显示设备，向所述输入设备发送撤销请求，所述撤销请求包括撤销所述历史绘画操作的问询指令，所述撤销请求用于请求所述第二显示设备在同意撤销所述历史绘画操作后反馈用于表示同意撤销的第一反馈信息；
28.响应于接收到所述第一反馈信息，刷新所述电子画板界面；
29.向所述服务器发送同步指令，所述同步指令用于指示所述服务器向各所述第二显示设备发送同步请求，以刷新各所述第二显示设备的电子画板界面。
30.由以上技术方案可知，本技术提供一种显示设备及协同作画方法，当用户对第一显示设备输入指示撤销历史绘画操作的控制指令时，响应于所述控制指令，检测输入历史绘画操作的输入设备；如果输入设备是与第一显示设备进行协同作画的第二显示设备，则向所述第二显示设备发送撤销请求，以请求所述第二显示设备反馈用于表示同意撤销的第一反馈信息；响应于接收到第一反馈信息，刷新电子画板界面，并向服务器发送同步指令，以指示服务器向各参与协同作画的显示设备发送同步请求，以刷新各第二显示设备的电子画板界面。解决了用户在进行撤销操作时，可以随意撤销其他显示设备输入的内容的问题，有利于用户的体验。
附图说明
31.为了更清楚地说明本技术的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
32.图1为一些实施例中的显示设备的使用场景；
33.图2为一些实施例中的显示设备的硬件配置框图；
34.图3为一些实施例中的显示设备中软件配置图；
35.图4为一些实施例中的显示设备显示的用户界面图；
36.图5为一些实施例中的应用列表的示意图；
37.图6为一些实施例中的电子画板的示意图；
38.图7为一些实施例中的邀请界面图；
39.图8为一些实施例中的协同作画场景图；
40.图9为一些实施例中的进行撤销操作时的信息交互图；
41.图10为一些实施例中的一种操作链的示意图；
42.图11为一些实施例中的电子画板界面的示意图；
43.图12为一些实施例中的电子画板界面的示意图；
44.图13为一些实施例中的电子画板界面的示意图；
45.图14为一些实施例中的电子画板界面的示意图；
46.图15为一些实施例中的参与协同作画的显示设备进行撤销操作前的界面图；
47.图16为一些实施例中的参与协同作画的显示设备进行撤销操作后的界面图；
48.图17为一些实施例中的一种进行撤销操作时的信息交互图；
49.图18为一些实施例中的一种进行撤销操作时的信息交互图；
50.图19为一些实施例中的一种进行撤销操作时的信息交互图；
51.图20为一些实施例中的一种恢复历史绘画操作的信息交互图；
52.图21为一些实施例中的参与协同作画的显示设备进行恢复操作前的界面图；
53.图22为一些实施例中的参与协同作画的显示设备进行恢复操作后的界面图；
54.图23为一些实施例中的协同作画方法的流程图；
55.图24为一些实施例中的协同作画方法的流程图。
具体实施方式
56.下面将详细地对实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本技术相一致的所有实施方式。仅是与权利要求书中所详述的、本技术的一些方面相一致的系统和方法的示例。
57.为使本技术的目的和实施方式更加清楚，下面将结合本技术示例性实施例中的附图，对本技术示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本技术一部分实施例，而不是全部的实施例。
58.需要说明的是，本技术中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本技术的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
59.本技术中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
60.术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
61.术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。
62.图1为根据实施例中显示设备的使用场景的示意图。如图1所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100操作显示设备200。
63.在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备200的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。
64.在一些实施例中，也可以使用智能设备300以控制显示设备200。例如，使用在智能设备上运行的摄像头应用控制显示设备200。
65.在一些实施例中，也可以使用智能设备300和显示设备200进行数据的通信。
66.在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制装置来接收用户的语音指令控制。
67.在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(lan)、无线局域网(wlan)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。
68.图2示出了根据示例性实施例中显示设备的硬件配置框图。
69.在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
70.在一些实施例中控制器包括中央处理器，视频处理器，音频处理器，图形处理器，ram，rom，用于输入/输出的第一接口至第n接口。
71.在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控ui界面等。
72.在一些实施例中，显示器260可为液晶显示器、oled显示器、以及投影显示器中的至少一种，还可以为一种投影装置和投影屏幕。
73.在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与控制装置100或服务器400建立控制信号和数据信号的发送和接收。
74.在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，
如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。
75.在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(hdmi)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(cvbs)、usb输入接口(usb)、rgb端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。
76.在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备200的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示ui对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。
77.在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。
78.在一些实施例中控制器包括中央处理器(central processing unit，cpu)，视频处理器，音频处理器，图形处理器(graphics processing unit，gpu)，ram random access memory，ram)，rom(read-only memory，rom)，用于输入/输出的第一接口至第n接口，通信总线(bus)等中的至少一种。
79.cpu处理器。用于执行存储在存储器中操作系统和摄像头应用指令，以及根据接收外部输入的各种交互指令，来执行各种摄像头应用、数据和内容，以便最终显示和播放各种音视频内容。cpu处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。
80.在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等中的至少一种。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。
81.在一些实施例中，用户可在显示器260上显示的图形用户界面(gui)输入用户命令，则用户输入接口通过图形用户界面(gui)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。
82.在一些实施例中，“用户界面”，是摄像头应用或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphic user interface，gui)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、widget等可视的界面元素中的至少一种。
83.在一些实施例中，用户接口280，为可用于接收控制输入的接口(如：显示设备200本体上的实体按键，或其他等)。
84.在一些实施例中，显示设备200的系统可以包括内核(kernel)、命令解析器(shell)、文件系统和摄像头应用。内核、shell和文件系统一起组成了基本的操作系统结
构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(ipc)。内核启动后，再加载shell和用户摄像头应用。摄像头应用在启动后被编译成机器码，形成一个进程。
85.参见图3，在一些实施例中，将系统分为四层，从上至下分别为摄像头应用(applications)层(简称“应用层”)，摄像头应用框架(application framework)层(简称“框架层”)，安卓运行时(android runtime)和系统库层(简称“系统运行库层”)，以及内核层。
86.在一些实施例中，摄像头应用层中运行有至少一个摄像头应用，这些摄像头应用可以是操作系统自带的窗口(window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的摄像头应用。在具体实施时，摄像头应用层中的摄像头应用包不限于以上举例。
87.框架层为摄像头应用层的摄像头应用提供应用编程接口(application programming interface，api)和编程框架。摄像头应用框架层包括一些预先定义的函数。摄像头应用框架层相当于一个处理中心，这个中心决定让应用层中的摄像头应用做出动作。摄像头应用通过api接口，可在执行中访问系统中的资源和取得系统的服务。
88.如图3所示，本技术实施例中摄像头应用框架层包括管理器(managers)，内容提供者(content provider)等，其中管理器包括以下模块中的至少一个：活动管理器(activity manager)用与和系统中正在运行的所有活动进行交互；位置管理器(location manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(package manager)用于检索当前安装在设备上的摄像头应用包相关的各种信息；通知管理器(notification manager)用于控制通知消息的显示和清除；窗口管理器(window manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。
89.在一些实施例中，活动管理器用于管理各个摄像头应用的生命周期以及通常的导航回退功能，比如控制摄像头应用的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。
90.在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的c/c 库以实现框架层要实现的功能。
91.在一些实施例中，内核层是硬件和软件之间的层。如图3所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、wifi驱动、usb驱动、hdmi驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。
92.在一些实施例中，显示设备200可以具有触控交互功能，用户可以通过手指触碰显示器260，实现交互操作，代替键盘、鼠标、遥控器等操作，使人机交互更为直截了当。基于上述显示设备200，可以通过增加触控组件使显示设备200支持触控交互功能。通常，触控组件可以与显示器260共同构成触摸屏。在触摸屏上用户可以通过触摸操作输入不同的控制指令。例如，用户可以输入点击、滑动、长按、双击等触控指令，不同的触控指令可以代表不同的控制功能。
93.为了实现上述不同的控制指令，触控组件可以在用户输入不同触摸动作时，产生
不同的电信号，并将产生的电信号发送给控制器250。控制器250可以对接收到的电信号进行特征提取，从而根据提取的特征确定用户要执行的控制功能。
94.例如，当用户在应用程序界面中的任一程序图标位置输入点击触摸动作时，触控组件将感应到触摸动作从而产生电信号。控制器250在接收到电信号后，可以先对电信号中触摸动作对应电平的持续时间进行判断，在持续时间小于预设时间阈值时，识别出用户输入的是点击触控指令。控制器250再对电信号产生的位置特征进行提取，从而确定触摸位置。当触摸位置在应用图标显示范围内时，确定用户在应用图标位置输入了点击触控指令。相应的，点击触控指令在当前场景下用于执行运行相应应用程序的功能，因此控制器250可以启动运行对应的应用程序。
95.又例如，当用户在媒资展示页面中输入滑动动作时，触控组件同样将感应到的电信号发送给控制器250。控制器250先对电信号中触摸动作对应信号的持续时间进行判断。在确定持续时间大于预设时间阈值时，再对信号产生的位置变化情况进行判断，显然，对于互动触摸动作，其信号的产生位置将发生变化，从而确定用户输入了滑动触控指令。控制器250再根据信号产生位置的变化情况，对滑动触控指令的滑动方向进行判断，控制在媒资展示页面中对显示画面进行翻页，以显示更多的媒资选项。进一步地，控制器250还可以对滑动触控指令的滑动速度、滑动距离等特征进行提取，并按照所提取的特征进行翻页的画面控制，以达到跟手效果等。
96.同理，对于双击、长按等触控指令，控制器250可以通过提取不同的特征，并通过特征判断确定触控指令的类型后，按照预设的交互规则执行相应的控制功能。在一些实施例中，触控组件还支持多点触控，从而使用户可以在触摸屏上通过多指输入触摸动作，例如，多指点击、多指长按、多指滑动等。
97.对于上述触控动作还可以配合特定的应用程序，实现特定的功能。例如，当用户打开画板应用后，显示器260可以呈现绘图区域，用户可以通过滑动触控指令在绘图区域中画出特定触控动作轨迹，控制器250则通过触控组件检测的触控动作，确定触控动作图案，并控制显示器260实时进行显示，以满足演示效果。
98.在一些实施例中，显示设备200中可以安装有多个应用，图4示出了一些实施例中显示器显示的用户界面，用户可以点击用户界面中的“我的应用”，触发显示应用列表。应用列表中包括显示设备200已安装的所有应用。
99.图5示出了一些实施例中应用列表的示意图。如6图所示。显示设备200可以安装有画板应用，播放器应用，视频聊天应用，摄像头应用和镜子应用。当显示器中显示应用列表时，用户可以选择其中一个应用并进行打开，以触发显示该应用的界面，例如，用户可以选择打开画板应用，触发显示器显示画板应用对应的界面，用户可以在画板应用对应的界面中进行绘画操作，以在该界面中显示对应的内容。
100.在一些实施例中，当用户启动画板应用时，控制器可以控制显示器中显示电子画板。电子画板界面上显示与画板应用的一个或者多个功能相对应的交互区域，交互区域中可以显示以下内容，例如文本、图像、图标、按键按钮、下拉菜单、复选框、可选列表等等。用户可以在需要交互的位置与触摸屏进行接触，从而与交互区域进行交互。显示设备200检测接触，并且通过执行对应的操作来响应所检测到的接触。
101.在一些实施例中，图6为一种示例性的电子画板界面，如图6所示，该电子画板界面
包括绘画区610和控件区620，其中，绘画区610为可输入内容的区域。控件区620可显示有与画板应用的一个或者多个功能相对应的项目入口，包括画笔项目621、橡皮擦项目622、删除项目623、录屏项目624、协同作画项目625、恢复项目626、撤销项目627等，用户可以点击各个项目，以触发显示设备200显示相应的项目界面，还可以在项目界面上设置一些项目的参数。例如，用户可以点击画笔项目，触发显示器显示画笔工具栏，基于画笔工具栏，可以对画笔类型、画笔颜色、线条类型以及线条粗细等项目进行选择，选择完毕后，画笔工具处于拾取状态，用户可以控制画笔工具在绘画区进行相应的绘画操作。
102.在一些实施例中，当用户点击协同作画项目625，显示设备200可以响应用户输入的点击动作，显示如图7所示的邀请界面，邀请界面中显示有待邀请的用户列表，待邀请的用户列表包括若干可以邀请进行协同作画的用户id/设备id项目，显示设备200响应于用户对相应的项目进行选中操作，可以根据选中的项目的用户id/设备id访问其他显示设备，以邀请对应的显示设备进行协同作画，协同作画是指参与协同作画的各显示设备的电子画面中显示相同的作画内容，例如，可以将发起协同作画的显示设备作为第一显示设备，将接受协同作画邀请的显示设备作为第二显示设备，当第一显示设备和第二显示设备共同参与协同作画时，在第一显示设备的电子画板界面中绘制一条目标轨迹后，第一显示设备会将绘制目标轨迹这一绘画操作发送至第二显示设备，以使得第二显示设备刷新其电子画板界面，显示目标轨迹。
103.相关技术中，第一显示设备和第二显示设备共同参与协同作画时，在第一显示设备和第二显示设备的电子画板界面中输入的每一个绘画操作都按照输入的时间顺序存储在第一显示设备的存储器中，第一显示设备在接收到撤销/恢复指令后，控制器每次只读取最近一步的绘画操作，比如第一显示设备的存储器中共存储了n次操作，执行撤销/恢复操作时只能从第n次开始执行撤销操作。并且，无论最进一步的绘画操作是否为第一显示设备输入的，第一显示设备都会直接撤销/恢复该绘画操作，并向第二显示设备发出撤销/恢复指令，以撤销/恢复第二显示设备的电子画板界面中对应的绘画操作，降低使用第二显示设备进行协同作画的用户的体验感。
104.另外，如果用户希望撤销之前输入的某一次绘画操作，比如用户希望撤销第m次绘画操作，m介于1和n之间,则必须依次撤销从m到n之间的所有的绘画操作，不利于用户体验。
105.因此，为了解决上述的技术问题，增加用户的体验感，本技术实施例提供了一种显示设备，所述显示设备通过内置的通信器与服务器建立通信连接，以使所述显示设备作为第一显示设备与连接服务器的至少一个第二显示设备协同作画。
106.可以理解的是，本技术中的第一显示设备和第二显示设备可以是相同的显示设备，例如，第一显示设备和第二显示设备均为智能电视，第一显示设备和第二显示设备也可以是不同的显示设备，例如，第一显示设备是智能电视，第二显示设备是手机、平板电脑等终端设备。为了便于说明，将本技术实施例中的第一显示设备的控制器、存储器以及通信器分别称为第一控制器、第一存储器以及第一通信器，将第一显示设备呈现的电子画板界面称为第一电子画板界面；将第二显示设备的控制器、存储器以及通信器分别称为第二控制器、第二存储器以及第二通信器，将第二显示设备呈现的电子画板界面称为第二电子画板界面。
107.图8为本技术实施例提供的一种协同作画的场景图，如图8所示，第一通信器与服
务器建立通信连接，至少一个第二显示设备的第二通信器也与服务器建立通信连接，第一显示设备和各第二显示设备之间通过第一通信器、服务器和第二通信器之间建立的通信连接，完成信息的交互。
108.在一些实施例中，第一控制器可以接收用户输入的多种控制指令。每种控制指令对应一个控制功能，部分控制指令可以用于撤销第一电子画板界面上显示的内容。
109.如图9所示，用户向第一控制器输入指示撤销历史绘画操作的控制指令时，第一控制器响应于所述控制指令，可以检测输入该历史绘画操作的输入设备。
110.其中，历史绘画操作是预先在第一电子画板界面或第二电子画板界面中输入的绘画操作，用户在第一电子画板界面中输入绘画操作时，第一控制器响应于用户在第一电子画板界面输入的绘画操作，将所述绘画操作存储至第一存储器中。其中，用户在第一电子画板界面输入的绘画操作是指用户通过操作使第一电子画板界面中的内容发生变化的事件，例如，用户拾起画笔工具，在第一电子画板界面留下一条触控轨迹可以视为一个绘画操作；用户拾起橡皮擦工具，将第一电子画板界面中显示的部分内容擦除可以视为一个绘画操作；以及，用户点击撤销项目，以撤销掉用户的某一次输入操作在第一电子画板界面上显示的内容也可以视为一个绘画操作。第一存储器存储用户在第一电子画板界面输入的绘画操作后，向服务器发送同步指令，同步指令用于指示服务器将用户在第一电子画板界面输入的绘画操作发送至各第二显示设备。
111.第二显示设备接收到用户在第一电子画板界面输入的绘画操作后，第二控制器控制将其存储至第二存储器中，并根据第二存储器中存储的绘画操作刷新第二电子画板界面，刷新后的第二电子画板界面与第一电子画板界面显示相同的绘画内容。同样，第二控制器响应于用户在第二电子画板界面输入的绘画操作，可以将用户在第二电子画板界面输入的绘画操作存储至第二存储器中，并向服务器发送同步指令，以指示服务器将用户在第二电子画板界面输入的绘画操作发送至第一显示设备。第一显示设备接收到用户在第二电子画板界面输入的绘画操作后，第一控制器控制将其存储至第一存储器中，并根据第一存储器中存储的绘画操作刷新第一电子画板界面，以显示对应的内容。
112.第一存储器和第二存储器中均存储有操作记录列表，操作记录列表用于存储用户在第一电子画板界面和第二电子画板界面输入的绘画操作。
113.操作记录列表在存储用户在第一电子画板界面和第二电子画板界面输入的绘画操作时，第一控制器和第二控制器会根据该绘画操作的输入设备的设备标识标记该绘画操作，并按照各绘画操作输入的时间顺序将其存储至操作记录列表中。
114.其中，操作记录列表可以是一个操作链，该操作链包括若干节点，用户的每一个绘画操作都可以存储在操作链的一个节点上，如图10所示，对于第一显示设备，用户在第一电子画板界面输入绘画操作a后，第一控制器用第一显示设备标识标记绘画操作a，并将绘画操作a存储在操作链的第一个节点上，之后，接收到用户在第二电子画板界面中输入的绘画操作b，则用第二显示设备标识标记绘画操作b，并将绘画操作b存储在操作链的第二个节点上，由此可知，用户每在第一电子画板界面和第二电子画板界面完成一次绘画操作后，第一控制器都会用输入该绘画操作的设备标识标记该绘画操作，并将标记好的绘画操作按照输入的时间的顺序顺次存储在操作链的节点上，其中，每一节点存储的信息可以包括用户输入的画笔类型信息、画笔颜色信息、画笔宽度信息以及输入形状信息等，本技术不做限制。
115.另外，对于第二显示设备，第二控制器控制将在第一电子画板界面和第二电子画板界面中输入的绘画操作存储至第二存储器中的操作记录列表的方式与上述第一控制器控制将在第一电子画板界面和第二电子画板界面中输入的绘画操作存储在第一存储器中的方式相同，本技术不再赘述。
116.在一些实施例中，第一电子画板界面包括第一绘画区和第一控件区，其中，第一绘画区被绘制在第一图层的部分或全部区域，第一控件区被绘制在第二图层的部分或全部区域，第一图层和第二图层可以并列设置在第一电子画板界面上，第二图层也可以悬浮设置在第一图层的上层，用户可以选中第二图层，通过触控拖拽将第二图层移至第一图层上层的任意位置。
117.在一些实施例中，进一步如图6所示，第一控件区包括用于指示对输入的历史绘画操作进行撤销操作的撤销项目627，用户点击撤销项目627以向第一控制器输入对历史绘画操作的撤销指令，第一控制器在接收到用户输入的撤销指令后，生成第三图层，并根据第一存储器中存储的操作记录列表绘制第三图层，第三图层悬浮设置在第二图层的上层，以在第一电子画板界面中显示操作记录列表的相关选项。
118.其中，操作记录列表的相关选项可以是如图11所示的以图片的形式显示的缩略图列表，缩略图列表包括以缩略图的形式显示的参与协同作画的各显示设备输入的历史绘画操作，列表中的任一项对应一项历史绘画操作。每一项历史绘画操作所执行的内容都会在缩略图中被标注或者显示出来，例如，当用户输入的历史绘画操作是线条或图形时，用户输入的每一个历史绘画操作会被文本框圈中，以提示用户知晓当前缩略图对应的绘画操作。或者，当用户输入的历史绘画操作是存储滤镜或者填充颜色时，也会有与该历史绘画操作对应的缩略图，在该缩略图中显示有存储滤镜或者填充颜色后的画面。此外，输入每一项历史绘画操作的输入设备id/用户id也会在缩略图中被标注出来，以便用户直观的了解输入各历史绘画操作的输入设备。上述缩略图列表设置在时间轴中，时间轴两侧分别设有滚动控件，点击滚动控件可控制时间轴滚动，从而浏览完整的缩略图列表。用户对操作记录列表中的历史绘画操作进行选中操作后，第一控制器响应于所述选中操作，获取标记第一目标历史事件的设备标识，并根据所述设备标识检测输入历史绘画操作的输入设备。
119.在一些实施例中，第一控制器接收到用户输入的指示撤销历史绘画操作的控制指令后，可以如图12所示在第一电子画板界面中显示可选择的历史绘画操作的操作对象，在接收到用户对历史绘画操作的操作对象的选中操作后，响应于所述选中操作，检测输入所述历史绘画操作的输入设备。其中，第一控制器接收到用户输入的指示撤销历史绘画操作的控制指令后，第一控制器控制在第一图层上绘制可选择的历史绘画操作的操作对象，以在第一电子画板界面中显示可选择的历史绘画操作的操作对象，用户可以对任意操作对象进行点击等选中操作，响应于用户的选中操作，第一控制器控制在第一图层上绘制选中框，以提示用户该操作对象已被选中。
120.在一些实施例中，第一控制器接收到用户输入的指示撤销历史绘画操作的控制指令后，可以生成第四图层，并根据参与协同作画的各显示设备的标识绘制第四图层，以在第一电子画板界面中显示如图13所示的用户列表。当用户对用户列表中的显示设备的标识进行选中操作后，第一控制器响应于所述选中操作，在操作记录列表中获取被选中的显示设备在其电子画板界面中输入的历史绘画操作，将所述历史绘画操作件按照输入所述被选中
显示设备的电子画板界面的时间顺序排列，生成对应于所述被选中显示设备的操作记录列表，并根据所述被选中显示设备的操作记录列表重新绘制第四图层，以在第一电子画板界面显示如图14所示的操作记录列表的相关选项，用户对该操作记录列表中的历史绘画操作进行选中操作后，第一控制器响应于所述选中操作，可以直接将被选中的显示设备确定为输入设备。
121.在一些实施例中，如果第一控制器检测到输入待撤销的历史绘画操作的输入设备是第二显示设备，则向所述输入设备发送撤销请求，撤销请求包括撤销指定历史绘画操作的问询指令，以请求输入设备在同意撤销该历史绘画操作后反馈用于表示同意撤销的第一反馈信息。其中，第一显示设备可以通过局域网、蓝牙传输等方式直接向所述输入设备发送撤销请求，也可以将撤销请求发送至服务器并指示服务器将所述撤销请求转发至所述输入设备。
122.输入设备接收到第一显示设备发送的撤销请求后，第二控制器响应于接收到的所述撤销请求，在第二电子画板界面上显示如图15所示的用于选择是否接收所述撤销请求的“撤销选择”页面，该“撤销选择”确认界面包括“接收”选项和“拒绝”选项，当用户选择“接收”选项/“拒绝”选项时，第二控制器控制生成用于表示同意/拒绝撤销的反馈信息，并控制将相应的反馈信息发送至第一显示设备。
123.在一些实施例中，当第一显示设备接收到第二显示设备发送的用于表示同意撤销历史绘画操作的反馈信息后，第一控制器响应于接收到的反馈信息，将历史绘画操作从操作记录列表中删除，根据更新后的操作记录列表中的绘画操作重新绘制第一图层，并向服务器发送同步指令，所述同步指令用于指示服务器向与服务器连接的各第二显示设备发送同步请求，以刷新各第二显示设备的第二电子画板界面，如图16所示，使得第二显示设备和第一显示设备显示相同的内容。
124.在一些实施例中，第一控制器响应于接收到的用于表示同意撤销历史绘画操作的反馈信息，检测在对所述历史绘画操作进行撤销操作之前，是否有其他历史绘画操作在操作记录列表中被删除；若存在，则判定所述第一显示设备中存在撤销记录列表，所述撤销记录列表用于存储在所述操作记录列表中删除的历史绘画操作；若不存，则判定不存在撤销记录列表，生成撤销记录列表，并将所述历史绘画操作存储至所述撤销记录列表中。
125.其中，撤销记录列表可以是一个恢复链，该恢复链包括若干节点，用户从操作记录列表中删除的历史绘画操作将按照删除时间顺次存储在恢复链的节点上，例如，用户对历史绘画操作a、历史绘画操作b以及历史绘画操作c依次进行撤销操作，历史绘画操作a、历史绘画操作b以及历史绘画操作c将顺次从操作记录列表/操作链中被删除，并依次存储在恢复链的节点上，即，历史绘画操作a存储在恢复链的第一个节点上，历史绘画操作b存储在恢复链的第二个节点上，历史绘画操作c存储在恢复链的第三个节点上。
126.在一些实施例中，第一控制器将历史绘画操作存储至撤销记录列表中时，会用第一显示设备的设备标识标记历史绘画操作，以使各第二显示设备在对历史绘画操作进行恢复操作时需向第一显示设备发送恢复请求，所述恢复请求包括恢复所述历史绘画操作的问询指令，在第一显示设备同意所述恢复请求时，第一控制器向第二显示设备反馈用于表示同意恢复的反馈信息，第二显示设备接收所述反馈信息后，第二控制器才能执行对历史绘画操作的恢复操作。
127.在一些实施例中，如图17所示，服务器中也可以存储有操作记录列表和撤销记录列表，服务器接收第一显示设备发送的同步指令后，会将历史绘画操作从服务器中的操作记录列表中删除，并存储至服务器的撤销记录列表中，以根据更新后的服务器的操作记录列表刷新各第二显示设备的第二电子画板界面，使得各第二电子画板界面和第一电子画板界面显示相同的内容。
128.在一些实施例中，如图18所示，第二显示设备的第二存储器中也可以存储有操作记录列表和撤销记录列表，第二控制器接收到第二显示设备发送撤销历史绘画操作的请求后，若用户向第二显示设备发送同意撤销指令，第二控制器响应于用户发送的指令，可以将历史绘画操作从操作记录列表删除并存储在撤销记录列表中，之后，刷新电子画板界面并向服务器发送同步指令，以指示服务器刷新第一显示设备和其余参与协同作画的显示设备的页面，使得参与协同作画的各显示设备显示相同的内容。
129.在一些实施例中，参见图19，如果第一控制器检测到输入待撤销的历史绘画操作的输入设备是第一显示设备，则直接将历史绘画操作从操作记录列表中删除并存储在撤销记录列表中，根据更新后的操作记录列表刷新第一电子画板界面，并向服务器发送同步指令，所述同步指令用于指示服务器向各第二显示设备发送同步请求，以刷新各第二显示设备的第二电子画板界面，使得第二显示设备和第一显示设备显示相同的内容。
130.在一些实施例中，用户可以点击第一电子画板界面上的恢复项目以向第一控制器输入恢复指令，第一控制器响应于用户输入的恢复指令，触发在第一电子画板界面显示撤销记录列表的相关选项，撤销记录列表包括所有在操作记录列表中删除的绘画操作。
131.其中，撤销记录列表可以是以图片的形式显示的缩略图列表，缩略图列表包括以缩略图的形式显示的待恢复的历史绘画操作，其中，撤销记录列表中的任一项均对应一项在撤销记录列表中待恢复的历史绘画操作，每一项历史绘画操作恢复时所执行的内容都会在缩略图中被标注或者显示出来，例如，当撤销记录列表中的历史绘画操作是线条或图形时，待恢复的每一个历史绘画操作均会以虚线的形式显现出来，以提示用户知晓当前缩略图对应的待恢复的历史绘画操作。或者，当待恢复的历史绘画操作是存储滤镜或者填充颜色时，也会有与该历史绘画操作对应的缩略图，在该缩略图中显示有存储滤镜或者填充颜色后的画面。上述缩略图列表设置在时间轴中，时间轴两侧分别设有滚动控件，点击滚动控件可控制时间轴滚动，从而浏览完整的缩略图列表。
132.图20为一些实施例提供的一种恢复历史绘画操作的信息交互图，图21为本技术实施例中的参与协同作画的显示设备进行恢复操作前的界面图，图22为本技术实施例中的参与协同作画的显示设备进行恢复操作后的界面图，如图20所示，当用户想恢复历史绘画操作时，可对图21中所示的缩略图列表中对应的已撤销的至少一个目标历史绘画操作选项进行选中操作，第一控制器响应于用户的选中操作，检测对所述历史绘画操作进行撤销操作的输入设备，向所述输入设备发送恢复目标历史绘画操作的请求，并在请求成功后删除恢复链上的所述历史绘画操作，即删除撤销记录列表中用户选中的历史绘画操作，并将用户选中的历史绘画操作存储到操作记录列表中，之后，刷新第一电子画板界面并向服务器发送同步指令，所述同步指令用于指示服务器向与服务器连接的各第二显示设备发送同步请求，以刷新各第二显示设备的第二电子画板界面，使得第二显示设备和第一显示设备显示如图22所示的相同的内容。
133.在一些实施例中，当第一显示设备向输入设备发送恢复第二目标历史绘画操作的请求后，若用户向第二显示设备发送同意恢复指令，第二控制器响应于用户发送的指令，可以将所述历史绘画操作从操作记录列表删除并存储在撤销记录列表中，之后，刷新电子画板界面并向服务器发送同步指令，以指示服务器刷新第一显示设备和其余参与协同作画的显示设备的页面，使得参与协同作画的各显示设备显示相同的内容。
134.在一些实施例中，如果第一控制器检测到输入待恢复的历史绘画操作的输入设备是第一显示设备，则直接将待恢复的历史绘画操作从撤销记录列表中删除并存储在操作记录列表中，根据更新后的操作记录列表刷新第一电子画板界面，并向服务器发送同步指令，所述同步指令用于指示服务器向各第二显示设备发送同步请求，以刷新各第二显示设备的第二电子画板界面，使得第二显示设备和第一显示设备显示相同的内容。
135.在一些实施例中，本技术还提供了一种显示设备，所述显示设备通过内置的通信器与服务器建立通信连接，以执行上述实施例中第二显示设备参与协同作画时的全部交互内容，本技术不再重复赘述。
136.在一些实施例中，如图23和图24所示，本技术还提供了一种协同作画方法，应用于上述实施例中的第一显示设备，所述方法包括如下步骤：
137.s1：与服务器建立通信连接，以使所述第一显示设备与连接所述服务器的至少一个第二显示设备协同作画；
138.s2：获取用户输入的指示撤销历史绘画操作的控制指令；
139.s3：响应于所述控制指令，检测输入所述历史绘画操作的输入设备；
140.在一些实施例中，在所述检测输入所述历史绘画操作的输入设备还包括：在所述电子画板界面中显示可选择的所述历史绘画操作的操作对象；接收用户针对所述操作对象输入的选中操作；响应于所述选中操作，检测输入所述历史绘画操作的输入设备。
141.在一些实施例中，在所述检测输入所述历史绘画操作的输入设备还包括：在所述电子画板界面显示操作记录列表，所述操作记录列表包括在所述第一显示设备的电子画板界面上输入的至少一次历史绘画操作和在各所述第二显示设备的电子画板界面上输入的至少一次所述历史绘画操作；接收用户针对所述操作记录列表输入的选中操作；响应于所述选中操作，检测输入所述历史绘画操作的输入设备。
142.在一些实施例中，在所述检测输入所述历史绘画操作的输入设备还包括：在所述电子画板界面显示用户列表，所述用户列表包括参与协同作画的各显示设备的标识；接收用户对所述用户列表中的所述显示设备的标识的选中操作；响应于所述选中操作，刷新所述电子画板界面，以在刷新后的所述电子画板界面显示被选中显示设备的操作记录列表，所述被选中显示设备的操作记录列表包括在所述被选中显示设备的电子画板界面上输入的所述历史绘画操作。
143.在一些实施例中，所述检测输入所述历史绘画操作的输入设备还包括：如果所述输入设备为所述第一显示设备，刷新所述电子画板界面；向所述服务器发送同步指令，所述同步指令用于指示所述服务器向各所述第二显示设备发送同步请求，以刷新各所述第二显示设备的电子画板界面。
144.s4：如果所述输入设备为所述第二显示设备，向所述输入设备发送撤销请求，所述撤销请求包括撤销所述历史绘画操作的问询指令，所述撤销请求用于请求所述第二显示设
备在同意撤销所述历史绘画操作后反馈用于表示同意撤销的第一反馈信息；
145.s5：响应于接收到所述第一反馈信息，刷新所述电子画板界面；
146.在一些实施例中，所述向所述输入设备发送撤销请求还包括：接收所述第二显示设备反馈的用于表示拒绝撤销的第二反馈信息；响应于接收到所述第二反馈信息，在所述电子画板界面显示反馈结果。
147.在一些实施例中，刷新所述电子画板界面还包括：删除所述操作记录列表中的被撤销的所述历史绘画操作；将被撤销的所述历史绘画操作存储在撤销记录列表中；根据删除后的所述操作记录列表中的所述历史绘画操作，刷新所述电子画板界面。
148.在一些实施例中，所述方法还包括：获取用户输入的指示恢复所述历史绘画操作的恢复指令；响应于所述恢复指令，检测输入指示撤销所述历史绘画操作控制指令的输入设备；如果所述输入设备为第二显示设备，向所述第二显示设备发送恢复请求，所述恢复请求包括恢复所述历史绘画操作的问询指令，所述恢复请求用于请求所述第二显示设备在同意恢复所述历史绘画操作后反馈用于表示同意恢复的第三反馈信息；响应于接收到所述第三反馈信息，刷新所述电子画板界面；向所述服务器发送同步指令，以指示所述服务器向各所述第二显示设备发送同步复请求。
149.在一些实施例中，所述响应于接收到所述第三反馈信息，还包括：删除所述撤销记录列表中的所述历史绘画操作；将所述历史绘画操作存储在所述操作记录列表中。
150.s6：向所述服务器发送同步指令，所述同步指令用于指示所述服务器向各所述第二显示设备发送同步请求，以刷新各所述第二显示设备的电子画板界面。
151.具体实现中，本发明还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时可包括本发明提供的协同作画方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文：read-only memory，简称：rom)或随机存储记忆体(英文：random access memory，简称：ram)等。
152.本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
153.本说明书中各个实施例之间相同相似的部分互相参见即可。尤其，对于显示设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例中的说明即可。
154.以上所述的本发明实施方式并不构成对本发明保护范围的限定。