Wayland环境下X应用的截图方法、系统及介质与流程

wayland环境下x应用的截图方法、系统及介质
技术领域
1.本发明涉linux操作系统的x应用开发领域，具体涉及一种wayland环境下x应用的截图方法、系统及介质。


背景技术：

2.wayland是一个协议（protocol），它定义了wayland客户端如何与wayland合成器通讯。鉴于wayland协议相对x11协议的优势，特别是在高分辨率、高刷新率方面提供的更好支持，开源社区已经全面转向wayland进行开发，各大系统发行版本也开始使用wayland作为默认的图形显示协议。但一方面大多数用于linux的游戏、图形密集型等专业应用程序仍是使用x11编写，只能通过xwayland（wayland协议的x应用兼容服务模块）进行兼容，xwayland用于提供wayland环境下x应用（基于x11协议开发的各种运行于x window system的应用）兼容运行的一个环境，可以看作是xserver的一个实现。与其他xserver实现的区别在于，在xwayland底层，通过wayland协议与wayland合成器通信，xwayland可以看作是一个wayland客户端；另一方面对于大量的基于gtk2、qt4、x11等开发的应用需要重新基于wayland重构，否则只能通过xwayland进行兼容运行。在wayland环境下，x应用（x11 应用程序）通过xwayland兼容运行的架构如图1所示。xwayland是xserver的一个实现，x应用连接到 xwayland，跟连接到真实的x服务器一样，xwayland 负责处理所有 x11 请求。另一方面，xwayland 同时也是一个连接到 wayland 合成器的 wayland 客户端。x11 窗口管理器 (xwm) 是 wayland 合成器的一个组成部分。 xwm 使用通常的 x11 窗口管理协议来管理 xwayland 中的所有 x11 窗口。同时xwm 充当 xwayland 窗口状态和 wayland 合成器的窗口管理器 (wwm) 之间的桥梁。这样 wwm 可以管理所有窗口，包括原生 wayland 和 x11 (xwayland) 窗口。wayland合成器同时也是一个x11客户端。
3.但是，使用xwayland进行x11应用兼容存在不少问题：1、xwayland是一个wayland客户端，它接收合成器发送过来的输入事件，并转发给对应x11窗口，同时将x11窗口的内容提交给合成器进行显示。2、最终的显示图形由wayland合成器生成，xwayland中不存在途径获取当前的屏幕显示内容。因为上述两点原因，通过x11协议获取窗口或屏幕内容的这类软件将不能正常使用，比如截图、录屏、远程桌面等。


技术实现要素：

4.本发明要解决的技术问题：针对现有技术的上述问题，提供一种wayland环境下x应用的截图方法、系统及介质，本发明能够解决wayland环境下通过x11协议获取窗口或屏幕内容类应用不能使用的问题。
5.为了解决上述技术问题，本发明采用的技术方案为：一种wayland环境下x应用的截图方法，包括：s101，通过xwayland截获x11应用发起针对指定的截图接口的调用请求；s102，通过xwayland判断该调用请求是否为获取根窗口内容，若为获取根窗口内
容，则跳转步骤s103；s103，通过xwayland从wayland合成器获取当前屏幕图像并返回给x11应用。
6.可选地，步骤s101中指定的截图接口是指getimage函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中定制的第73项处理函数，来截获x11应用发起针对getimage函数接口的调用请求。
7.可选地，步骤s101中指定的截图接口是指shmgetimage函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中的mit-shm扩展处理函数中定制的分发函数，来截获x11应用发起针对shmgetimage函数接口的调用请求。
8.可选地，步骤s101中指定的截图接口是指copyarea函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中定制的第62项处理函数，来截获x11应用发起针对copyarea函数接口的调用请求。
9.可选地，步骤s103包括：s201，通过xwayland向wayland合成器发起获取当前屏幕图像的请求并开始计时；s202，判断xwayland在指定时间内是否从wayland合成器获取当前屏幕图像成功，若从wayland合成器获取当前屏幕图像成功，则直接将从wayland合成器获取的当前屏幕图像返回给x11应用；否则将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用。
10.可选地，步骤s202中从wayland合成器获取当前屏幕图像成功时，从wayland合成器获取的当前屏幕图像被存储在指定的共享内存空间中，使得在从wayland合成器获取当前屏幕图像失败时所述共享内存空间中仍然存储有最近一次从wayland合成器获取的当前屏幕图像，所述将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用是指将所述共享内存空间中存储的最近一次从wayland合成器获取的当前屏幕图像当前屏幕图像返回给x11应用。
11.可选地，步骤s102中还包括在该调用请求非获取根窗口内容时，通过xwayland直接将当前窗口内容并返回给x11应用。
12.可选地，步骤s102通过xwayland判断该调用请求是否为获取根窗口内容包括：获取该调用请求所需获取的窗口内容，将该调用请求所需获取的窗口内容与在全局变量中保存的根窗口进行比较以判断两者是否一致，如果两者一致则判定该调用请求为获取根窗口内容，否则判定该调用请求非获取根窗口内容；所述全局变量中保存的根窗口是指xwayland在初始化时所创建的零大小的根窗口。
13.此外，本发明还提供一种wayland环境下x应用的截图系统，包括相互连接的微处理器和存储器，所述微处理器被编程或配置以执行所述wayland环境下x应用的截图方法。
14.此外，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序用于被微处理器编程或配置以执行所述wayland环境下x应用的截图方法。
15.和现有技术相比，本发明主要具有下述优点：获取窗口或屏幕内容的x应用，通常需要截取根（root）窗口内容并及时返回数据，而xwayland中无法获取屏幕显示内容，为了
解决上述问题，本发明wayland环境下x应用的截图方法通过xwayland截获x11应用发起针对指定的截图接口的调用请求；通过xwayland判断该调用请求是否为获取根窗口内容，若为获取根窗口内容，则通过xwayland从wayland合成器获取当前屏幕图像并返回给x11应用，从而在发现x11应用需要获取窗口或屏幕内容时从wayland合成器中获取当前的显示图像然后返回给x11应用，能够解决wayland环境下通过x11协议获取窗口或屏幕内容类应用包括（截图、录屏、远程桌面、会议共享等窗口）不能使用的问题。
附图说明
16.图1为现有技术中x11应用通过xwayland兼容运行的架构示意图。
17.图2为本发明实施例方法的基本流程示意图。
具体实施方式
18.下面参照附图对本发明的实施例进行详细的说明，在描述过程中省略了对于本发明来说不必要的细节和功能，以防止对本发明的理解造成混淆。
19.获取窗口或屏幕内容的x应用，通常需要截取根（root）窗口内容并及时返回数据，而xwayland中无法获取屏幕显示内容，为了解决上述问题，如图2所示，本实施例wayland环境下x应用的截图方法包括：s101，通过xwayland截获x11应用发起针对指定的截图接口的调用请求；s102，通过xwayland判断该调用请求是否为获取根窗口内容，若为获取根窗口内容，则跳转步骤s103；s103，通过xwayland从wayland合成器获取当前屏幕图像并返回给x11应用。
20.作为一种可选的实施方式，步骤s101中指定的截图接口是指getimage函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中定制的第73项处理函数，来截获x11应用发起针对getimage函数接口的调用请求。xwayland处理向量数组procvector的大小为256，其中0到127为核心协议处理函数，通过替换第73项处理函数，可方便实现截获x11应用发起针对getimage函数接口的调用请求。
21.作为一种可选的实施方式，步骤s101中指定的截图接口是指shmgetimage函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中的mit-shm扩展处理函数中定制的分发函数，来截获x11应用发起针对shmgetimage函数接口的调用请求。xwayland处理向量数组procvector的大小为256，从128（extension_base）开始为扩展（extension）处理函数，扩展处理函数实际上是扩展的分发函数，相当于是一个二级分发结构，扩展的分发（dispatch）函数在procvector数组中的位置是由扩展的注册顺序决定的。本实施例中，xwayland处理向量数组procvector中的mit-shm扩展处理函数中定制分发函数包括：步骤1，获取xwayland处理向量数组procvector中的mit-shm扩展处理函数的入口。若获取入口失败，则判定xwayland处理向量数组procvector中不存在mit-shm扩展处理函数，结束并退出；否则，保存原有的分发函数为savedshmdispatch，即：savedshmdispatch = procvector[shm-》index extension_base]
上式中，shm为mit-shm扩展处理函数的入口，shm-》index为入口的索引号，extension_base为常数128，procvector[shm-》index extension_base] mit-shm扩展处理函数中原有的分发函数的位置，记录有原有的分发函数，跳转下一步：步骤2，将mit-shm扩展处理函数中原有的分发函数的位置procvector[shm-》index extension_base]替换为定制的分发函数，即：procvector[shm-》index extension_base] = xwl_proc_shm_dispatch其中，procvector[shm-》index extension_base] 为mit-shm扩展处理函数中原有的分发函数的位置，通过赋值修改为定制的分发函数xwl_proc_shm_dispatch，在定制的分发函数xwl_proc_shm_dispatch中，先判断是否是shmgetimage函数接口的调用请求x_shmgetimage，如果不是则调用原有的分发函数savedshmdispatch处理。
[0022]
作为一种可选的实施方式，步骤s101中指定的截图接口是指copyarea函数接口；步骤s101通过xwayland截获x11应用发起针对指定的截图接口的调用请求是指：通过xwayland处理向量数组procvector中定制的第62项处理函数，来截获x11应用发起针对copyarea函数接口的调用请求，通过替换第62项处理函数，可方便实现截获x11应用发起针对copyarea函数接口的调用请求。
[0023]
需要说明的是，在定时xwayland处理向量数组procvector以通过xwayland截获x11应用发起针对指定的截图接口的调用请求时，定制的处理函数/分发函数在截获处理中同时需要保存原有的处理方式，以便在无需特殊处理的情况下回退到默认处理方式。
[0024]
本实施例中，步骤s102通过xwayland判断该调用请求是否为获取根窗口内容包括：获取该调用请求所需获取的窗口内容，将该调用请求所需获取的窗口内容与在全局变量中保存的根窗口进行比较以判断两者是否一致，如果两者一致则判定该调用请求为获取根窗口内容，否则判定该调用请求非获取根窗口内容；所述全局变量中保存的根窗口是指xwayland在初始化时所创建的零大小的根窗口。本实施例中，步骤s102中还包括在该调用请求非获取根窗口内容时，通过xwayland直接将当前窗口内容并返回给x11应用。
[0025]
wayland作为异步协议，wayland合成器只能通过事件（event）将数据发送给xwayland，不能及时返回获取窗口或屏幕内容的x应用所需要的数据，因此xwayland、wayland合成器之间可能发生死锁。xwayland和wayland合成器之间存在死锁的可能：xwayland发送了一个wayland请求，然后阻塞等待该请求对应的event。而此时xwayland发送的请求还没被wayland合成器处理，wayland合成器还在处理一个x11应用的窗口，向xwayland发送了x11请求，然后等待x11请求的回复。xwayland和wayland合成器相互等待对方，造成了死锁。针对上述问题，本实施例步骤s103中采用了超时机制来解决xwayland、wayland合成器之间发生死锁。具体地，步骤s103包括：s201，通过xwayland向wayland合成器发起获取当前屏幕图像的请求并开始计时；s202，判断xwayland在指定时间内是否从wayland合成器获取当前屏幕图像成功，若从wayland合成器获取当前屏幕图像成功，则直接将从wayland合成器获取的当前屏幕图像返回给x11应用；否则将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用。
[0026]
为了提升将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用的效率，本实施例中步骤s202中从wayland合成器获取当前屏幕图像成功时，从wayland合成器获取的当前屏幕图像被存储在指定的共享内存空间中，使得在从wayland合成器获取当前
屏幕图像失败时所述共享内存空间中仍然存储有最近一次从wayland合成器获取的当前屏幕图像，所述将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用是指将所述共享内存空间中存储的最近一次从wayland合成器获取的当前屏幕图像当前屏幕图像返回给x11应用，从而不需要额外的内存复制操作，即可快速将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用，从而达到提升将最近一次从wayland合成器获取的当前屏幕图像返回给x11应用的效率的目的。通过使用共享内存和请求超时的机制，能够有效避免xwayland和wayland合成器之间的死锁。
[0027]
本实施例中，步骤s103中通过xwayland从wayland合成器获取当前屏幕图像并返回给x11应用后，x11应用可根据需要直接使用当前屏幕图像（例如进行录屏、远程桌面、会议共享操作），或者在当前屏幕图像中截取并使用指定区域的图像（对其他窗口的截屏操作）。
[0028]
此外，本实施例还提供一种wayland环境下x应用的截图系统，包括相互连接的微处理器和存储器，该微处理器被编程或配置以执行前述wayland环境下x应用的截图方法。此外，本实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，该计算机程序用于被微处理器编程或配置以执行前述wayland环境下x应用的截图方法。
[0029]
本领域内的技术人员应明白，本技术的实施例可提供为方法、系统、或计算机程序产品。因此，本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可读存储介质（包括但不限于磁盘存储器、cd-rom、光学存储器等）上实施的计算机程序产品的形式。本技术是参照根据本技术实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
[0030]
以上所述仅是本发明的优选实施方式，本发明的保护范围并不仅局限于上述实施例，凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理前提下的若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。