一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种回复消息的方法、电子设备和系统与流程

2022-03-14 04:28:52 来源:中国专利 TAG:


1.本技术涉及终端领域,并且更具体地,涉及一种回复消息的方法、电子设备和系统。


背景技术:

2.随着智能设备的普及,用户往往同时使用(或佩戴)多个智能设备,形成了一个以手机为中心的个人设备集合。在日常生活、办公等环境中,为了避免遗漏手机端重要的通知消息,人们经常将社交通讯类消息(如微信、qq、会议提醒、闹钟等)实时同步到其他设备上。当有通知消息来的时候,同步的设备端通过振动、响铃等方式提醒用户,用户进而根据消息提醒,决定是否及时回到手机侧处理消息。
3.智能设备有很多具有通知消息的跨设备同步功能,比如苹果的imessage、微软的your phone等程序服务。这些同步方案都有一个共同的特点,他们要求在多个设备上登陆同一账号的应用程序(application,app),然后通过服务器端控制消息的下发,从而将消息送到不同的设备客户端,实现通知消息的跨设备同步。若接收设备没有登录同一账号的app或者接收设备没有安装该app,那么接收设备无法从服务器获取到消息,这样会让用户错过一些重要的信息,从而影响用户体验。


技术实现要素:

4.本技术提供一种回复消息的方法、电子设备和系统,有助于提升多设备下的协同能力,有助于避免用户错过重要的消息,从而提升用户的体验。
5.第一方面,提供了一种系统,该系统包括第一电子设备和第二电子设备,该第一电子设备,用于接收消息;该第一电子设备,还用于在确定该第一电子设备的机主聚焦的设备为该第二电子设备时,向该第二电子设备发送该消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;该第二电子设备,用于显示消息提醒框,该消息提醒框中包括该消息以及该回复控件;该第二电子设备,还用于在检测到用户对该消息进行回复的操作时,向该第一电子设备发送回复内容;该第一电子设备,还用于根据该回复内容,对该消息进行回复。
6.本技术实施例中,第一电子设备在确定第一电子设备的机主聚焦的设备不是第一电子设备而是第二电子设备时,第一电子设备可以向第二电子设备发送消息以及指示信息,从而第二电子设备可以向用户呈现包括该消息以及回复控件的消息提醒框。这样可以方便第一电子设备的机主在第二电子设备上完成对该消息的虚拟回复。第二电子设备可以将回复内容发送给第一电子设备,从而第一电子设备对该消息完成真实回复。这样有助于用户及时接收到消息的提醒并完成对该消息的回复,避免了用户回到第一电子设备上对该消息进行回复的过程,也避免用户错过重要的消息。
7.在一些可能的实现方式中,该第二电子设备可以为第一电子设备中设备列表中的设备;或者,第二电子设备也可以是第一电子设备周围的设备。
8.在一些可能的实现方式中,该第一电子设备,具体用于根据该回复内容以及该消息对应的应用程序提供的api,对该消息进行回复;或者,根据该回复内容以及拖拽事件,对该消息进行回复。
9.在一些可能的实现方式中,该指示信息可以为快捷回复flag属性。
10.结合第一方面,在第一方面的某些实现方式中,该第一电子设备具体用于:向该第二电子设备发送经过标识信息标识后的该消息;该第二电子设备具体用于:向该第一电子设备发送经过该标识信息标识后的该回复内容。
11.本技术实施例中,第一电子设备可以向第二电子设备发送经过标识信息标识后的消息,这样第二电子设备在获取用户的回复内容时,可以使用该标识信息对该消息进行标识,使得第一电子设备明确该回复内容是针对哪一条消息的回复内容。在第一电子设备接收到多条消息的情况下,有助于提升第一电子设备进行消息回复时的准确性。
12.在一些可能的实现方式中,该标识信息可以为通知id属性和/或通知channel属性。
13.结合第一方面,在第一方面的某些实现方式中,该第一电子设备,还用于在接收该消息之前,显示第一界面;在对该消息进行回复之后,显示该第一界面。
14.本技术实施例中,第一电子设备在完成对消息的真实回复后可以恢复到接收该消息前的显示界面,使得第一电子设备对消息的真实回复过程对用户无感,有助于提升用户的体验。
15.结合第一方面,在第一方面的某些实现方式中,该消息的内容为文本信息,该第二电子设备包括语音功能,该第二电子设备还用于:在接收到该消息后,通过语音向用户提示该文本信息。
16.本技术实施例中,对于具备语音功能的第二电子设备,当第二电子设备接收到第一电子设备的消息为文本类消息时,第二电子设备可以通过语音提示用户接收到该消息或者提示用户该消息的内容。这样避免了用户通过查看第二电子设备的屏幕,通过语音提示就可以获知消息的提示,避免用户错过重要的消息,从而提升了用户的体验。
17.在一些可能的实现方式中,该第二电子设备为车机或者智能音箱。
18.结合第一方面,在第一方面的某些实现方式中,该第二电子设备具体用于:在向该第一电子设备发送该回复内容之前,采集用户回复的语音信息;向该第一电子设备发送该语音信息,或者,向该第一电子设备发送该语音信号对应的文本信息。
19.在一些可能的实现方式中,若第二电子设备向第一电子设备发送采集的语音信息,那么第一电子设备可以向该消息回复该语音信息,或者也可以向该消息回复该语音信息对应的文本信息。
20.结合第一方面,在第一方面的某些实现方式中,该回复内容包括文件。
21.本技术实施例中,用户可以在第二电子设备上回复多媒体文件(例如图片、视频)、工作类文件(例如,word文档或者excel文档等等),这样有助于增加用户回复内容的多样性,从而有助于提升用户回复消息时的体验。
22.结合第一方面,在第一方面的某些实现方式中,该第一电子设备还用于:在向该第二电子设备发送该消息和该指示信息之前,确定该消息的类型为用户设置的消息类型;或者,在向该第二电子设备发送该消息和该指示信息之前,确定该消息为即时通讯im类的消
息。
23.本技术实施例中,第一电子设备在向第二电子设备转发消息之前,可以先确定消息为用户设置的消息类型或者为im类消息,这样有助于避免一些不重要的消息也转发给第二电子设备,从而避免了这些不重要的消息对用户造成的干扰,有助于提升用户的体验。
24.结合第一方面,在第一方面的某些实现方式中,该第一电子设备还用于:在向该第二电子设备发送该消息和该指示信息之前,确定该第二电子设备为用户设置的接收消息转发的设备;或者在向该第二电子设备发送该消息和该指示信息之前,确定该第一电子设备上登录的账号和该第二电子设备上登录的账号相关联。
25.本技术实施例中,第一电子设备在向第二电子设备转发消息之前,可以先确定第二电子设备为用户设置的接收消息转发的设备或者确定第一电子设备上登录的账号和第二电子设备上登录的账号相关联,这样有助于避免消息转发给用户未授权的设备,提升了消息转发的安全性,避免了用户隐私的泄露,从而有助于提升用户的体验。
26.结合第一方面,在第一方面的某些实现方式中,该第一电子设备具体用于:在确定该第一电子设备的机主当前聚焦的设备不是该第一电子设备时,向该第二电子设备发送请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第二电子设备,还用于根据该请求信息,向该第一电子设备发送响应信息,该响应信息用于指示该第一电子设备的机主当前聚焦的设备为该第二电子设备;该第一电子设备具体用于:响应于接收到该响应信息,向该第二电子设备发送该消息。
27.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备为同一账号下的设备(或者,第一电子设备和第二电子设备可以保存同一用户的信息),这样第二电子设备在接收到该请求信息后,可以通过采集用户特征并与第二电子设备中预置的用户特征进行匹配,若匹配成功则确定第一电子设备的机主当前聚焦的设备为第二电子设备,从而向第一电子设备发送响应信息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
28.在一些可能的实现方式中,该第二电子设备在接收到该请求信息后,可以先判断第一电子设备与第二电子设备是否为同一账号下的设备。若第二电子设备确定第一电子设备和第二电子设备为同一账号下的设备,那么第二电子设备可以通过用户特征采集装置来采集聚焦第二电子设备的用户的特征信息,并采集到的用户特征信息与第二电子设备中预置的用户特征信息匹配,如果匹配成功,则向第一电子设备发送该响应信息。
29.结合第一方面,在第一方面的某些实现方式中,该第二电子设备包括用户特征采集装置,该第一电子设备具体用于:在确定该第一电子设备的机主当前聚焦的设备不是该第一电子设备时,向该第二电子设备发送请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第二电子设备还用于:根据该请求信息,通过该用户特征采集装置采集用户特征并向该第一电子设备发送该用户特征;该第一电子设备具体用于:在向该第二电子设备发送该消息之前,确定该用户特征与该第一电子设备中预置用户特征匹配。
30.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备不是同一账号下的设备(或者,第一电子设备和第二电
子设备可以保存不同用户的信息);或者,第二电子设备也可以是第一电子设备周围的设备。这样第二电子设备在接收到该请求信息后,可以通过用户特征采集装置来采集正在聚焦第二电子设备的用户的特征信息并向第一电子设备发送该特征信息。第一电子设备根据该特征信息与第一电子设备中预置的用户特征信息匹配,若匹配成功则向第二电子设备转发该消息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
31.结合第一方面,在第一方面的某些实现方式中,该消息为第一应用程序的消息,该第二电子设备为未安装该第一应用程序的设备。
32.本技术实施例中,如果第二电子设备为未安装第一应用程序的设备,那么第二电子设备也可以在接收到该指示信息后,通过在消息提醒框中增加回复控件,使得第二电子设备可以通过用户输入的回复内容以及检测到的点击回复控件的操作来获取用户回复的内容,并向第一电子设备发送该回复的内容。从而在第一电子设备上完成消息的真实回复。这样有助于用户及时接收到消息的提醒,避免用户错过重要的消息,从而有助于提升用户的体验。
33.第二方面,提供了一种回复消息的方法,该方法应用于第一电子设备,该方法包括:该第一电子设备接收消息;在确定该第一电子设备的机主聚焦的设备为第二电子设备时,该第一电子设备向该第二电子设备发送该消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;该第一电子设备接收该第二电子设备发送的对该消息的回复内容;该第一电子设备根据该回复内容,对该消息进行回复。
34.本技术实施例中,第一电子设备在确定第一电子设备的机主聚焦的设备不是第一电子设备而是第二电子设备时,第一电子设备可以向第二电子设备发送消息以及指示信息,从而第二电子设备可以向用户呈现包括该消息以及回复控件的消息提醒框。这样可以方便第一电子设备的机主在第二电子设备上完成对该消息的虚拟回复。第二电子设备可以将回复内容发送给第一电子设备,从而第一电子设备对该消息完成真实回复。这样有助于用户及时接收到消息的提醒并完成对该消息的回复,避免了用户回到第一电子设备上对该消息进行回复的过程,避免用户错过重要的消息。
35.结合第二方面,在第二方面的某些实现方式中,该第一电子设备向该第二电子设备发送该消息,包括:该第一电子设备向该第二电子设备发送经过标识信息标识后的该消息;其中,该第一电子设备接收该第二电子设备发送的对该消息的回复内容,包括:该第一电子设备接收该第二电子设备发送的经过该标识信息标识后的该回复内容。
36.本技术实施例中,第一电子设备可以向第二电子设备发送经过标识信息标识后的消息,这样第二电子设备在获取用户的回复内容时,可以使用该标识信息对该消息进行标识,使得第一电子设备明确该回复内容是针对哪一条消息的回复内容。在第一电子设备接收到多条消息的情况下,有助于提升第一电子设备进行消息回复时的准确性。
37.在一些可能的实现方式中,该标识信息可以为通知id属性和/或通知channel属性。
38.结合第二方面,在第二方面的某些实现方式中,该方法还包括:在接收该消息之前,该第一电子设备显示第一界面;在对该消息进行回复之后,该第一电子设备显示该第一界面。
39.本技术实施例中,第一电子设备在完成对消息的真实回复后可以恢复到接收该消息前的显示界面,使得第一电子设备对消息的真实回复过程对用户无感,有助于提升用户的体验。
40.结合第二方面,在第二方面的某些实现方式中,该回复内容为语音信息,或者,该回复内容为该语音信息对应的文本信息;其中,该语音信息为第二电子设备采集的用户回复的语音信息。
41.本技术实施例中,对于具备语音功能的第二电子设备,当第二电子设备接收到第一电子设备的消息为文本类消息时,第二电子设备可以通过语音提示用户接收到该消息或者提示用户该消息的内容。这样避免了用户通过查看第二电子设备的屏幕,通过语音提示就可以获知消息的提示,避免用户错过重要的消息,从而提升了用户的体验。
42.在一些可能的实现方式中,该第二电子设备为车机或者智能音箱。
43.结合第二方面,在第二方面的某些实现方式中,该回复内容为文件。
44.本技术实施例中,用户可以在第二电子设备上回复多媒体文件(例如图片、视频)、工作类文件(例如,word文档或者excel文档等等),这样有助于增加用户回复内容的多样性,从而有助于提升用户回复消息时的体验。
45.结合第二方面,在第二方面的某些实现方式中,该方法还包括:在向该第二电子设备发送该消息和该指示信息之前,该第一电子设备确定该消息的类型为用户设置的消息类型;或者,在向该第二电子设备发送该消息和该指示信息之前,该第一电子设备确定该消息为即时通讯im类的消息。
46.本技术实施例中,第一电子设备在向第二电子设备转发消息之前,可以先确定消息为用户设置的消息类型或者为im类消息,这样有助于避免一些不重要的消息也转发给第二电子设备,从而避免了这些不重要的消息对用户造成的干扰,有助于提升用户的体验。
47.结合第二方面,在第二方面的某些实现方式中,该方法还包括:在向该第二电子设备发送该消息和该指示信息之前,该第一电子设备确定该第二电子设备为用户设置的接收消息转发的设备;或者在向该第二电子设备发送该消息和该指示信息之前,该第一电子设备确定该第一电子设备上登录的账号和该第二电子设备上登录的账号相关联。
48.本技术实施例中,第一电子设备在向第二电子设备转发消息之前,可以先确定第二电子设备为用户设置的接收消息转发的设备或者确定第一电子设备上登录的账号和第二电子设备上登录的账号相关联,这样有助于避免消息转发给用户未授权的设备,提升了消息转发的安全性,避免了用户隐私的泄露,从而有助于提升用户的体验。
49.结合第二方面,在第二方面的某些实现方式中,该第一电子设备向该第二电子设备发送该消息和指示信息之前,该方法还包括:该第一电子设备在确定该第一电子设备的机主当前聚焦的设备不是该第一电子设备时,向该第二电子设备发送请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第一电子设备接收该第二电子设备发送的响应信息,该响应信息用于指示该第一电子设备的机主当前聚焦的设备为该第二电子设备。
50.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备为同一账号下的设备(或者,第一电子设备和第二电子设备可以保存同一用户的信息),这样第二电子设备在接收到该请求信息后,可以通过采集
用户特征并与第二电子设备中预置的用户特征进行匹配,若匹配成功则确定第一电子设备的机主当前聚焦的设备为第二电子设备,从而向第一电子设备发送响应信息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
51.在一些可能的实现方式中,该第二电子设备在接收到该请求信息后,可以先判断第一电子设备与第二电子设备是否为同一账号下的设备。若第二电子设备确定第一电子设备和第二电子设备为同一账号下的设备,那么第二电子设备可以通过用户特征采集装置来采集聚焦第二电子设备的用户的特征信息,并采集到的用户特征信息与第二电子设备中预置的用户特征信息匹配,如果匹配成功,则向第一电子设备发送该响应信息。
52.结合第二方面,在第二方面的某些实现方式中,该第二电子设备包括用户特征采集装置,该第一电子设备向该第二电子设备发送该消息和指示信息之前,该方法还包括:该第一电子设备在确定该第一电子设备的机主当前聚焦的设备不是该第一电子设备时,向该第二电子设备发送请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第一电子设备接收该第二电子设备发送的用户特征,该用户特征为该第二电子设备通过该用户特征采集装置采集的用户特征;该第一电子设备确定该用户特征与该第一电子设备中预置的用户特征匹配。
53.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备不是同一账号下的设备(或者,第一电子设备和第二电子设备可以保存不同的用户信息);或者,第二电子设备也可以是第一电子设备周围的设备。这样第二电子设备在接收到该请求信息后,可以通过用户特征采集装置来采集正在聚焦第二电子设备的用户的特征信息并向第一电子设备发送该特征信息。第一电子设备根据该特征信息与第一电子设备中预置的用户特征信息匹配,若匹配成功则向第二电子设备转发该消息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
54.第三方面,提供了一种回复消息的方法,该方法应用于第二电子设备,该方法包括:该第二电子设备接收第一电子设备发送的消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;该第二电子设备显示消息提醒框,该消息提醒框中包括该消息以及该回复控件;在检测到用户对该消息进行回复的操作时,该第二电子设备向该第一电子设备发送回复内容。
55.本技术实施例中,第一电子设备在确定第一电子设备的机主聚焦的设备不是第一电子设备而是第二电子设备时,第一电子设备可以向第二电子设备发送消息以及指示信息,从而第二电子设备可以向用户呈现包括该消息以及回复控件的消息提醒框。这样可以方便第一电子设备的机主在第二电子设备上完成对该消息的虚拟回复。第二电子设备可以将回复内容发送给第一电子设备,从而第一电子设备对该消息完成真实回复。这样有助于用户及时接收到消息的提醒并完成对该消息的回复,避免了用户回到第一电子设备上的对该消息进行回复,也避免用户错过重要的消息。
56.结合第三方面,在第三方面的某些实现方式中,该方法还包括:该第二电子设备接收该第一电子设备发送的经过标识信息标识后的该消息;其中,该第二电子设备向该第一电子设备发送回复内容,包括:该第二电子设备向该第一电子设备发送经过该标识信息后
的该回复内容。
57.本技术实施例中,第一电子设备可以向第二电子设备发送经过标识信息标识后的消息,这样第二电子设备在获取用户的回复内容时,可以使用该标识信息对该消息进行标识,使得第一电子设备明确该回复内容是针对哪一条消息的回复内容。在第一电子设备接收到多条消息的情况下,有助于提升第一电子设备进行消息回复时的准确性。
58.在一些可能的实现方式中,该标识信息可以为通知id属性和/或通知channel属性。
59.结合第三方面,在第三方面的某些实现方式中,该消息的内容为文本信息,该第二电子设备包括语音功能,该方法还包括:在接收到该消息后,该第二电子设备通过语音向用户提示该文本信息。
60.本技术实施例中,对于具备语音功能的第二电子设备,当第二电子设备接收到第一电子设备的消息为文本类消息时,第二电子设备可以通过语音提示用户接收到该消息或者提示用户该消息的内容。这样避免了用户通过查看第二电子设备的屏幕,通过语音提示就可以获知消息的提示,避免用户错过重要的消息,从而提升了用户的体验。
61.在一些可能的实现方式中,该第二电子设备为车机或者智能音箱。
62.结合第三方面,在第三方面的某些实现方式中,该第二电子设备向该第一电子设备发送回复内容,包括:该第二电子设备采集用户回复的语音信息;该第二电子设备向该第一电子设备发送该语音信息,或者,向该第一电子设备该语音信号对应的文本信息。
63.在一些可能的实现方式中,若第二电子设备向第一电子设备发送采集的语音信息,那么第一电子设备可以向该消息回复该语音信息,或者也可以向该消息回复该语音信息对应的文本信息。
64.结合第三方面,在第三方面的某些实现方式中,该回复内容包括文件。
65.本技术实施例中,用户可以在第二电子设备上回复多媒体文件(例如图片、视频)、工作类文件(例如,word文档或者excel文档等等),这样有助于增加用户回复内容的多样性,从而有助于提升用户回复消息时的体验。
66.结合第三方面,在第三方面的某些实现方式中,该第二电子设备接收第一电子设备发送的消息和指示信息之前,该方法还包括:该第二电子设备接收该第一电子设备发送的请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第二电子设备根据该请求信息,向该第一电子设备发送响应信息,该响应信息用于指示该第一电子设备的机主当前聚焦的设备为该第二电子设备。
67.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备为同一账号下的设备(或者,第一电子设备和第二电子设备可以保存同一用户的信息),这样第二电子设备在接收到该请求信息后,可以通过采集用户特征并与第二电子设备中预置的用户特征进行匹配,若匹配成功则确定第一电子设备的机主当前聚焦的设备为第二电子设备,从而向第一电子设备发送响应信息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
68.结合第三方面,在第三方面的某些实现方式中,该第二电子设备包括用户特征采集装置,该第二电子设备接收第一电子设备发送的消息和指示信息之前,该方法还包括:该
第二电子设备接收该第一电子设备发送的请求信息,该请求信息用于请求该第二电子设备确定该第一电子设备的机主是否聚焦该第二电子设备;该第二电子设备根据该请求信息,通过该用户特征采集装置采集用户特征并向该第一电子设备发送该用户特征。
69.本技术实施例中,第二电子设备可以是第一电子设备的消息转发列表中的设备且第一电子设备可以和第二电子设备不是同一账号下的设备(或者,第一电子设备和第二电子设备可以保存不同用户的信息);或者,第二电子设备也可以是第一电子设备周围的设备。这样第二电子设备在接收到该请求信息后,可以通过用户特征采集装置来采集正在聚焦第二电子设备的用户的特征信息并向第一电子设备发送该特征信息。第一电子设备根据该特征信息与第一电子设备中预置的用户特征信息匹配,若匹配成功则向第二电子设备转发该消息。这样有助于提升消息转发的安全性,避免了除第一电子设备的机主以外的其他用户接收到该消息的提示,从而有助于提升用户的体验。
70.结合第三方面,在第三方面的某些实现方式中,该消息为第一应用程序的消息,该第二电子设备为未安装该第一应用程序的设备。
71.本技术实施例中,如果第二电子设备为未安装第一应用程序的设备,那么第二电子设备也可以在接收到该指示信息后,通过在消息提醒框中增加回复控件,使得第二电子设备可以通过用户输入的回复内容以及检测到的点击回复控件的操作来获取用户回复的内容,并向第一电子设备发送该回复的内容。从而在第一电子设备上完成消息的真实回复。这样有助于用户及时接收到消息的提醒并完成对该消息的回复,避免用户错过重要的消息,从而有助于提升用户的体验。
72.第四方面,提供了一种回复消息的装置,该回复消息的装置设置在第一电子设备,该装置包括:第一接收单元,用于接收消息;发送单元,用于在确定该第一电子设备的机主聚焦的设备为第二电子设备时,向该第二电子设备发送该消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;第二接收单元,用于接收该第二电子设备发送的对该消息的回复内容;回复单元,用于根据该回复内容,对该消息进行回复。
73.第五方面,提供了一种回复消息的装置,该回复消息的装置设置在第二电子设备,该装置包括:接收单元,用于接收第一电子设备发送的消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;显示单元,用于显示消息提醒框,该消息提醒框中包括该消息以及该回复控件;发送单元,用于在检测到用户对该消息进行回复的操作时,向该第一电子设备发送回复内容。
74.第六方面,提供了一种电子设备,包括:一个或多个处理器;存储器;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述第二方面中任一项可能的实现中的回复消息的方法。
75.第七方面,提供了一种电子设备,包括:一个或多个处理器;存储器;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述第三方面中任一项可能的实现中的回复消息的方法。
76.第八方面,提供了一种包含指令的计算机程序产品,当所述计算机程序产品在第一电子设备上运行时,使得所述第一电子设备执行上述第二方面所述的回复消息的方法;
或者,当所述计算机程序产品在第二电子设备上运行时,使得所述第二电子设备执行上述第三方面所述的回复消息的方法。
77.第九方面,提供了一种计算机可读存储介质,包括指令,当所述指令在第一电子设备上运行时,使得所述第一电子设备执行上述第二方面所述的回复消息的方法;或者,当所述指令在第二电子设备上运行时,使得所述第二电子设备执行上述第三方面所述的回复消息的方法。
78.第十方面,提供了一种芯片用于执行指令,当所述芯片运行时,所述芯片执行上述第二方面所述的回复消息的方法;或者,当所述芯片运行时,所述芯片执行上述第三方面所述的回复消息的方法。
附图说明
79.图1是本技术实施例提供的一种电子设备的硬件结构示意图。
80.图2是本技术实施例提供的软件结构框图。
81.图3是本技术实施例提供的一组图形用户界面。
82.图4是本技术实施例提供的另一组图形用户界面。
83.图5是本技术实施例提供的另一组图形用户界面。
84.图6是本技术实施例提供的另一组图形用户界面。
85.图7是本技术实施例提供的另一组图形用户界面。
86.图8是本技术实施例提供的发送(source)端和接收(sink)端的内部实现过程。
87.图9是本技术实施例提供的另一组图形用户界面。
88.图10是本技术实施例提供的通过音视频采集在sink端重现source端界面的过程。
89.图11是本技术实施例提供的另一组图形用户界面。
90.图12是本技术实施例提供的另一组图形用户界面。
91.图13是本技术实施例提供的另一组图形用户界面。
92.图14是本技术实施例提供的回复消息的方法的示意性流程图。
93.图15是本技术实施例提供的回复消息的装置的示意性框图。
94.图16是本技术实施例提供的回复消息的装置的示意性框图。
95.图17是本技术实施例提供的电子设备的示意性结构图。
具体实施方式
96.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行描述。其中,在本技术实施例的描述中,除非另有说明,“/”表示或的意思,例如,a/b可以表示a或b;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,a和/或b,可以表示:单独存在a,同时存在a和b,单独存在b这三种情况。另外,在本技术实施例的描述中,“复数个”或者“多个”是指两个或多于两个。
97.以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
98.本技术实施例提供的方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,ar)/虚拟现实(virtual reality,vr)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,umpc)、上网本、个人数字助理(personal digital assistant,pda)等电子设备上,本技术实施例对电子设备的具体类型不作任何限制。
99.示例性的,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,usb)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,sim)卡接口195等。其中传感器模块180可以包括压力传感器180a,陀螺仪传感器180b,气压传感器180c,磁传感器180d,加速度传感器180e,距离传感器180f,接近光传感器180g,指纹传感器180h,温度传感器180j,触摸传感器180k,环境光传感器180l,骨传导传感器180m等。
100.可以理解的是,本技术实施例示意的结构并不构成对电子设备100的具体限定。在本技术另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
101.处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,ap),调制解调处理器,图形处理器(graphics processing unit,gpu),图像信号处理器(image signal processor,isp),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/或神经网络处理器(neural-network processing unit,npu)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
102.其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
103.处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
104.在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,i2c)接口,集成电路内置音频(inter-integrated circuit sound,i2s)接口,脉冲编码调制(pulse code modulation,pcm)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,uart)接口,移动产业处理器接口(mobile industry processor interface,mipi),通用输入输出(general-purpose input/output,gpio)接口,用户标识模块(subscriber identity module,sim)接口,和/或通用串行总线(universal serial bus,usb)接口等。
105.i2c接口是一种双向同步串行总线,包括一根串行数据线(serial data line,sda)和一根串行时钟线(derail clock line,scl)。在一些实施例中,处理器110可以包含
多组i2c总线。处理器110可以通过不同的i2c总线接口分别耦合触摸传感器180k,充电器,闪光灯,摄像头193等。例如:处理器110可以通过i2c接口耦合触摸传感器180k,使处理器110与触摸传感器180k通过i2c总线接口通信,实现电子设备100的触摸功能。
106.i2s接口可以用于音频通信。在一些实施例中,处理器110可以包含多组i2s总线。处理器110可以通过i2s总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过i2s接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
107.pcm接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过pcm总线接口耦合。在一些实施例中,音频模块170也可以通过pcm接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述i2s接口和所述pcm接口都可以用于音频通信。
108.uart接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,uart接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过uart接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过uart接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
109.mipi接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。mipi接口包括摄像头串行接口(camera serial interface,csi),显示屏串行接口(display serial interface,dsi)等。在一些实施例中,处理器110和摄像头193通过csi接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过dsi接口通信,实现电子设备100的显示功能。
110.gpio接口可以通过软件配置。gpio接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,gpio接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。gpio接口还可以被配置为i2c接口,i2s接口,uart接口,mipi接口等。
111.usb接口130是符合usb标准规范的接口,具体可以是mini usb接口,micro usb接口,usb type c接口等。usb接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如ar设备等。
112.可以理解的是,本技术实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本技术另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
113.充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
114.电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储
器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
115.电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
116.天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
117.移动通信模块150可以提供应用在电子设备100上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,lna)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
118.调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170a,受话器170b等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
119.无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wireless local area networks,wlan)(如无线保真(wireless fidelity,wi-fi)网络),蓝牙(bluetooth,bt),全球导航卫星系统(global navigation satellite system,gnss),调频(frequency modulation,fm),近距离无线通信技术(near field communication,nfc),红外技术(infrared,ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
120.在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,gsm),通用分组无线服务(general packet radio service,gprs),码分多址接入(code division multiple access,cdma),宽带码分多址(wideband code division multiple access,wcdma),时分码分多址(time-division code division multiple access,td-scdma),长期演进(long term evolution,lte),bt,gnss,wlan,nfc,fm,和/或ir技术等。所述gnss可以包括全球卫星定位系统(global positioning system,gps),全球导航卫星系
统(global navigation satellite system,glonass),北斗卫星导航系统(beidou navigation satellite system,bds),准天顶卫星系统(quasi-zenith satellite system,qzss)和/或星基增强系统(satellite based augmentation systems,sbas)。
121.电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
122.显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,lcd),有机发光二极管(organic light-emitting diode,oled),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,amoled),柔性发光二极管(flex light-emitting diode,fled),miniled,microled,micro-oled,量子点发光二极管(quantum dot light emitting diodes,qled)等。在一些实施例中,电子设备100可以包括1个或n个显示屏194,n为大于1的正整数。
123.电子设备100可以通过isp,摄像头193,视频编解码器,gpu,显示屏194以及应用处理器等实现拍摄功能。
124.isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点,亮度,肤色进行算法优化。isp还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
125.摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,电子设备100可以包括1个或n个摄像头193,n为大于1的正整数。
126.数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
127.视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1,mpeg2,mpeg3,mpeg4等。
128.npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
129.外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
130.内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括
指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,ufs)等。
131.电子设备100可以通过音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,以及应用处理器等实现音频功能。例如音乐播放,录音等。
132.音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
133.扬声器170a,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170a收听音乐,或收听免提通话。
134.受话器170b,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170b靠近人耳接听语音。
135.麦克风170c,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170c发声,将声音信号输入到麦克风170c。电子设备100可以设置至少一个麦克风170c。在另一些实施例中,电子设备100可以设置两个麦克风170c,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170c,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
136.耳机接口170d用于连接有线耳机。耳机接口170d可以是usb接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,omtp)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the usa,ctia)标准接口。
137.压力传感器180a用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180a可以设置于显示屏194。压力传感器180a的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180a,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180a检测所述触摸操作强度。电子设备100也可以根据压力传感器180a的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
138.陀螺仪传感器180b可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180b确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180b可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180b检测电子设备100抖
动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180b还可以用于导航,体感游戏场景。
139.气压传感器180c用于测量气压。在一些实施例中,电子设备100通过气压传感器180c测得的气压值计算海拔高度,辅助定位和导航。
140.磁传感器180d包括霍尔传感器。电子设备100可以利用磁传感器180d检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180d检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
141.加速度传感器180e可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
142.距离传感器180f,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180f测距以实现快速对焦。
143.接近光传感器180g可以包括例如发光二极管(led)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180g检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180g也可用于皮套模式,口袋模式自动解锁与锁屏。
144.环境光传感器180l用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180l也可用于拍照时自动调节白平衡。环境光传感器180l还可以与接近光传感器180g配合,检测电子设备100是否在口袋里,以防误触。
145.指纹传感器180h用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
146.温度传感器180j用于检测温度。在一些实施例中,电子设备100利用温度传感器180j检测的温度,执行温度处理策略。例如,当温度传感器180j上报的温度超过阈值,电子设备100执行降低位于温度传感器180j附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
147.触摸传感器180k,也称“触控面板”。触摸传感器180k可以设置于显示屏194,由触摸传感器180k与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180k也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
148.骨传导传感器180m可以获取振动信号。在一些实施例中,骨传导传感器180m可以获取人体声部振动骨块的振动信号。骨传导传感器180m也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180m也可以设置于耳机中,结合成骨传导耳机。音
频模块170可以基于所述骨传导传感器180m获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180m获取的血压跳动信号解析心率信息,实现心率检测功能。
149.按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
150.马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
151.指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
152.sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195,或从sim卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或n个sim卡接口,n为大于1的正整数。sim卡接口195可以支持nano sim卡,micro sim卡,sim卡等。同一个sim卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。sim卡接口195也可以兼容不同类型的sim卡。sim卡接口195也可以兼容外部存储卡。电子设备100通过sim卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用esim,即:嵌入式sim卡。esim卡可以嵌在电子设备100中,不能和电子设备100分离。
153.电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本技术实施例以分层架构的android系统为例,示例性说明电子设备100的软件结构。
154.图2是本技术实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
155.如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,wlan,蓝牙,音乐,视频,短信息等应用程序。
156.应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface,api)和编程框架。应用程序框架层包括一些预先定义的函数。
157.如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
158.窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
159.内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
160.视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示
界面,可以包括显示文字的视图以及显示图片的视图。
161.电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
162.资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
163.通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
164.android runtime包括核心库和虚拟机。android runtime负责安卓系统的调度和管理。
165.核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
166.应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
167.系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:opengl es),2d图形引擎(例如:sgl)等。
168.表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2d和3d图层的融合。
169.媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:mpeg4,h.264,mp3,aac,amr,jpg,png等。
170.三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
171.2d图形引擎是2d绘图的绘图引擎。
172.内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
173.图3是本技术实施例提供的一组图形用户界面(graphical user interface,gui)。
174.用户lily当前正在使用平板看视频,手机被用户lily放置在一旁的桌子上。
175.参见图3中的(a)所示的gui。手机接收到一条来自于用户tom的社交app消息(例如,happy birthday!)。此时手机可以向用户正在聚焦的平板转发这一条消息,平板可以显示消息提醒框301。其中,消息提醒框301中包含了消息来源(例如,社交app的名称,且该消息来自于用户lily的p40)、发送该消息的用户信息(例如,“tom”以及用户tom的头像)、该消息的内容(例如,happy birthday!)以及控件302。
176.应理解,平板可以是和手机登录了同一社交app的账号;或者,平板也可以是安装有该社交app但是用户未使用与手机相同的账号登录该社交app;或者,平板也可以为未安装该社交app的设备。
177.本技术实施例中,手机在接收到一条通知后,如果手机确定用户当前为聚焦手机
而是聚焦的平板,那么手机可以在向平板发送的信息中携带该消息的内容,发送该消息的用户的信息以及“快捷回复”属性。进一步的,手机还可以在向平板发送的信息中携带手机的信息。从而平板可以根据手机发送的信息,向用户展示提醒框301。
178.应理解,本技术实施例中的手机转发的通知消息可以是用户提前设置好的通知类型的消息,例如,用户可以在系统设置中设置微信、qq、钉钉等等app的通知消息为可以转发的消息;或者,手机转发的通知消息也可以是默认的即时通讯(instant message,im)类消息(如短信、微信、等等)。
179.当平板检测到用户点击控件302的操作后,可以显示如图3中的(b)所示的gui。
180.手机在接收到该消息一段时间后,该消息自动隐藏。用户可以通过进入通知中心,或者下拉菜单的方式来处理该消息。
181.当平板检测到用户点击控件302的操作后,可以在消息提醒框中显示文本输入框303,在文本输入框303中还可以显示发送控件304。同时,平板还可以调起系统输入法。用户可以通过输入法编辑自己需要回复的内容(例如,thank you!),用户回复的内容可以显示在文本输入框303中。
182.当平板检测到用户点击控件304的操作后,平板可以将回复内容发送给手机。同时,平板上的输入法以及消息提醒框可以自动隐藏。手机上的gui的变化可以参见图3中的(c)至(f)。
183.参见图3中的(c)所示的gui,当手机接收到平板发送的用户的回复内容后,手机可以自动启动社交应用app。在该社交应用app的显示界面上可以依照收到消息的时刻的先后顺序,依次显示用户tom、用户sam、用户lucy以及用户mike的历史聊天记录。
184.参见图3中的(d)所示的gui,手机可以自动打开用户tom的聊天界面。在打开该聊天界面时,该聊天界面上可以显示用户tom给用户lily发送的消息(happy birthday!)。
185.参见图3中的(e)所示的gui,手机可以将用户在平板上回复的内容自动回复给用户tom。当手机完成回复后,可以回到接收到该消息之前的状态。参见图3中的(f)所示。手机可以自动从社交app中与用户tom的聊天界面,返回手机的桌面。
186.应理解,本技术实施例中,平板上检测到用户点击控件304的操作后,用户回复的消息并没有完成真实的回复。真实的回复过程实际上是在手机上完成的。例如,当手机显示了如图3中的(e)所示的界面后,手机完成了对该消息的真实回复。
187.还应理解,手机完成对该消息回复的过程也可以是在内部实现的,手机可以在接收到平板发送的用户回复的内容后,自动在后台完成对该消息的回复。也就是说,手机完成对该消息的真实回复的过程可以是对用户无感的。
188.本技术实施例中,用户可以直接在平板上完成对消息的回复,而无需回到手机对该消息进行处理。这样可以避免用户错过重要的信息,同时也避免了用户在回到手机上进行消息处理的过程,有助于提升用户的体验。
189.图4是本技术实施例提供的另一组gui。
190.用户正在房间使用笔记本电脑工作,手机处于锁屏状态且被用户放在另一个房间内。
191.参见图4中的(a)所示的gui,手机接收到一条来自于用户tom的社交app消息(例如,happy birthday!)以及来自于用户amy的社交app消息(例如,happy birthday!)。此时
手机可以向用户正在聚焦的笔记本电脑发送用户tom和用户amy的消息,笔记本电脑可以显示消息提醒框401和消息提醒框402。其中,第一消息提醒框401中包含了消息来源(例如,该消息属于社交app的消息,且该消息来自于用户lily的p40)、发送该消息的用户信息(例如,“tom”以及用户tom的头像)、该消息的内容(例如,happy birthday!)以及控件403。第二消息提醒框402中包含了消息来源(例如,该消息属于社交app的消息,且该消息来自于用户lily的p40)、发送该消息的用户信息(例如,“amy”以及用户amy的头像)、该消息的内容(例如,happy birthday!)以及回复控件。
192.当笔记本电脑检测到用户点击控件403的操作后,可以显示如图4中的(b)所示的gui。
193.笔记本电脑可以在消息提醒框中显示文本输入框404,在文本输入框404中还可以显示发送控件405。同时,笔记本电脑还可以检测用户通过键盘检测用户回复的内容(例如,thank you!),用户回复的内容可以显示在文本输入框404中。
194.当笔记本电脑检测到用户点击控件405的操作后,笔记本电脑可以将回复内容发送给手机。同时,笔记本电脑上的消息提醒框401可以自动隐藏。手机上的gui的变化可以参见图4中的(c)至(f)。
195.参见图4中的(c)所示,手机可以在锁屏界面上直接拉起社交应用app的显示界面。该显示界面上可以依照收到消息的时刻的先后顺序,依次显示用户tom、用户amy、用户sam、用户lucy以及用户mike的历史聊天记录。
196.应理解,某些社交app中好友的视频通话和语音通话的接听界面,可以直接显示在手机的锁屏界面上。本技术实施例中,通过社交app中添加支持锁屏加载的(flags)属性,手机可以在锁屏界面上直接拉起社交app的显示界面。
197.应理解,图4中的(d)至(e)可以参考上述图3中的(d)至(e)的描述,为了简洁,在此不再赘述。
198.参见图4中的(f)所示,手机在完成对该消息的真实回复后,进入锁屏状态。
199.一个实施例中,当笔记本电脑检测到用户点击了控件405的操作后,消息提醒框401可以消失;而消息提醒框402还可以继续显示在笔记本电脑上。一段时间后,如果用户没有在笔记本电脑上对用户amy进行回复,那么消息提醒框402可以自动隐藏。
200.一个实施例中,手机在完成对用户tom的真实回复后,在锁屏界面上用户tom的消息提示信息可以自动隐藏;而用户amy的消息提示可以继续显示在锁屏界面上。
201.一个实施例中,笔记本电脑在检测用户通过键盘检测用户回复的内容的同时,还可以自动开启摄像头来采集用户的人脸信息。笔记本电脑在向用户发送用户回复的内容的同时,还可以向手机发送采集到的人脸信息。当手机确定笔记本电脑采集的人脸信息和手机中预置的人脸信息匹配后,手机可以完成对该消息的真实回复。同时,由于笔记本电脑采集的人脸信息和手机中预置的人脸信息匹配,那么手机可以自动进行解锁操作,并进入非锁屏状态。从而实现如图4中的(c)至(e)所示的回复过程。
202.本技术实施例中,在笔记本电脑在向手机发送用户回复的内容的同时,笔记本电脑还可以向手机发送笔记本电脑采集的用户的人脸信息。手机可以先依据该人脸信息判断是否为用户本人回复。如果是用户本人回复,则手机完成对通知消息真实回复;否则,手机可以不对该通知消息进行回复。这样有助于提高手机对用户隐私的保护,提升了用户的体
验。
203.图5是本技术实施例提供的另一组gui。
204.用户此时正在开车,车机上的显示屏上显示用户正在使用导航。手机被用户放置在车上的储物槽内。
205.手机接收到一条来自于用户tom的社交app消息(例如,happy birthday!)。此时手机可以向用户车机发送这一条消息,车机通过显示屏显示消息提醒框501。其中,消息提醒框501中可以消息来源(例如,该消息属于社交app的消息,且该消息来自于用户lily的p40)、发送该消息的用户信息(例如,“tom”以及用户tom的头像)、该消息的内容(例如,happy birthday!)。同时,车机还可以通过语音提醒的方式向用户提示“tom通过社交app向您发送happy birthday!”。
206.相比于图3或者图4所示的gui,车机的显示屏显示的消息提醒框中可以不包括发送控件。车机在通过语音提醒的方式提示用户后,车机可以通过麦克风采集用户回复的内容。如图所示,用户回复了“thank you!”。此时车机可以通过消息提醒框501显示用户回复的内容。
207.一个实施例中,车机上可以包含数字信号处理器(digital signal processing,dsp)。dsp可以对语音信息进行处理,从而可以分析得到该语音信息对应的文字内容。
208.一个实施例中,车机上可以包括语音识别(automatic speech recognition,asr)模块其中,asr模块主要作用是将用户的语音信息识别为文字内容。
209.一个实施例中,车机的显示屏上显示的消息提醒框中也可以包括发送控件,在用户点击了发送控件后,车机可以将用户回复的内容发送给手机。或者,消息提醒框中也可以不包括发送控件。车机通过麦克风采集到用户的语音信息“给tom回复thank you!”后,车机可以将用户回复的内容发送给手机。
210.一个实施例中,消息提醒框上的回复按键还可以映射到方向盘上的按键,这样用户可以直接通过点击方向盘上的按键进行语音回复,从而可以进一步提升驾驶安全性。
211.本技术实施例中,车机向手机回复的内容中可以为语音信息,也可以为文字内容。
212.参见图5中的(a)所示,手机在接收到车机发送的回复内容后,可以在锁屏界面上直接拉起社交应用app的显示界面。该显示界面上可以依照收到消息的时刻的先后顺序,依次显示用户tom、用户sam、用户lucy以及用户mike的历史聊天记录。
213.参见图5中的(b)所示的gui,手机可以自动打开用户tom的聊天界面。在打开该聊天界面时,该聊天界面上可以显示用户tom给用户lily发送的消息(happy birthday!)。
214.参见图5中的(c)所示的gui,手机可以将语音信息对应的文字内容自动回复给用户tom。或者,参见图5中的(d)所示的gui,手机可以将语音信息回复给用户tom。
215.本技术实施例中,可以在接收端设备中增加文本文字转语音功能。在车机场景下有助于增加用户使用消息通知转发的安全性和便利性,有助于提升用户体验。
216.图6是本技术实施例提供的另一组gui。
217.用户正在房间使用笔记本电脑工作,手机处于锁屏状态且被用户放在另一个房间内。
218.参见图6中的(a)所示的gui,手机接收到一条来自于用户tom的社交app消息(例如,请把项目计划发给我)。此时手机可以向用户正在聚焦的笔记本电脑发送这一条消息,
笔记本电脑可以显示消息提醒框601。其中,消息提醒框601中包含了消息来源(例如,该消息属于社交app的消息,且该消息来自于用户lily的p40)、发送该消息的用户信息(例如,“tom”以及用户tom的头像)、该消息的内容(例如,请把项目计划发给我)以及控件602。
219.参见图6中的(b)所示的gui,当笔记本电脑检测到用户点击控件602的操作后,笔记本电脑可以显示输入框603和发送控件604。笔记本电脑检测到用户将笔记本电脑桌面上的项目计划(word文档)拖拽到输入框603的操作后,笔记本电脑可以将该项目计划(word文档)发送给手机。或者,笔记本电脑检测到用户将笔记本电脑桌面上的项目计划(word文档)拖拽到输入框603且用户点击了控件604的操作后,笔记本电脑可以将该项目计划(word文档)发送给手机。
220.手机在接收到笔记本电脑发送的项目计划(word文档)后的显示界面可以参照如图6中的(c)至(f)所示。
221.参见图6中的(c)所示的gui,手机可以在锁屏界面上直接拉起社交应用app的显示界面。该显示界面上可以依照收到消息的时刻的先后顺序,依次显示用户tom、用户sam、用户lucy以及用户mike的历史聊天记录。
222.参见图6中的(d)所示的gui,手机可以自动打开用户tom的聊天界面。在打开该聊天界面时,该聊天界面上可以显示用户tom给用户lily发送的消息(请把项目计划发给我)。
223.参见图6中的(e)所示的gui,手机可以将项目计划(word文档)给用户tom。当手机完成回复后,可以回到接收到该通知消息之前的状态。
224.参见图6中的(f)所示。手机在完成对该消息的真实回复后,进入锁屏状态。
225.本技术实施例中,接收端(sink)设备可以向发送端(source)设备发送附件。其中,附件可以为图片、视频、音频、文档等等类型的文件。用户可以在通知内完成类似邮件email一样的交互,增加用户使用消息通知转发的便利性,有助于提升用户体验。
226.图7是本技术实施例提供的另一组gui。
227.参见图7中的(a)所示的gui,手机接收到一条来自于用户tom的社交app消息(例如,happy birthday!)。此时手机可以向用户正在聚焦的笔记本电脑发送这一条消息,笔记本电脑可以显示消息提醒框701。当笔记本电脑检测到用户点击了消息提醒框701的操作后,可以显示如图7中的(b)所示的gui。
228.参见图7中的(b)所示的gui,当笔记本电脑检测到用户点击了消息提醒框中的某个位置后,笔记本电脑可以显示另一消息提醒框702。消息提醒框702相比于消息提醒框701,更符合pc端社交app的显示风格。笔记本电脑在检测到用户在消息提醒框702的输入框中输入回复的内容(例如,thank you!)并点击了发送控件的操作后,可以将用户回复的内容发送给手机。
229.参见图7中的(c)所示的gui,手机可以在接收到用户回复的内容后自动拉起与用户tom的聊天界面,从而自动完成对消息的真实回复。同时,笔记本电脑可以继续显示消息提醒框703。该消息提醒框中703可以包含用户刚刚回复的内容(例如thank you!)。
230.应理解,当用户在如图4中的(b)所示的gui上点击了回复控件403的操作后,笔记本电脑可以检测用户输入的回复内容并在检测到用户点击了发送控件404后,将回复内容发送给手机。在发送给手机的同时,该消息提醒框401可以自动消失。当下一次手机接收到消息后,笔记本电脑可以继续显示消息提醒框。而对于图7中的(b)所示的gui中的消息提醒
框,用户在回复消息后可以一直保留下来,当笔记本电脑检测到用户关闭消息提醒框702的操作后,笔记本电脑可以关闭该消息提醒框702。
231.一个实施例中,参见图7中的(d)所示的gui,该消息提醒框702中还包括滚动条704。当笔记本电脑检测到用户使用鼠标向上滑动滚动条704后,笔记本电脑可以向手机请求与用户tom的历史聊天记录。从而可以通过消息提醒框703显示更多的聊天内容。
232.下面结合图8描述本技术实施例中发送(source)端和接收(sink)端的内部实现过程。
233.通知服务用于接收社交应用服务器发送的消息。例如,用户tom在使用设备a向用户lily发送消息时,设备a首先向社交应用服务器发送该消息内容以及用户lily的社交应用账号的标识信息。社交应用服务器中保存登录了用户lily的社交应用账号的设备信息(例如,lily的设备b)。社交应用服务器可以依据用户lily的社交应用账号的标识信息,向用户lily的设备b发送对应的消息。设备b中的通知服务可以用于接收服务器发送的消息以及用户tom的信息。
234.通知监听模块,用于向系统注册监听通知服务,实时获取到通知服务接收到的消息。当某个社交应用服务器发送了一条通知消息时,通知监听器可以获取到该条通知消息体,通知消息体中含有包头、通知id属性、通知channel属性、消息内容等。其中,包头用于确定该通知消息是属于哪一个app的应用程序,通知id属性和通知channel属性可以用于找到对应的通知消息,消息内容可以包括消息的文本信息(例如,图3中的(a)所示的“happy birthday!”)。
235.source端的通知处理模块:source端设备在确定用户当前没有聚焦source端设备且该消息为可以向其他电子设备转发的消息时,对该消息附加“快捷回复”属性。
236.source端可以保存有应用的白名单。source端只有在接收到来自于该白名单中的应用的消息时,才可以进行消息的跨设备转发。示例性的,对于支持拖拽事件响应的三方app都可以加入白名单中。source端可以对应用程序进行测试来确定其是否支持拖拽事件响应。在进行测试时应用程序框架层中的视图系统可以向应用程序层的某个应用程序发送drag and drop事件以及随机生成的内容。应用程序在接收到drag and drop事件以及随机生成的内容后,响应于drag and drop事件,将应用程序启动到前台并随机打开某个联系人的聊天界面,将随机生成的内容回复到聊天界面的相应位置。如果可以回复成功则表示该应用程序支持系统拖拽事件响应;如果回复不成功则表示该应用程序不支持系统拖拽事件响应。
237.一个实施例中,source端也可以根据用户的设置,来判断是否对该消息进行跨设备转发。示例性的,如图11中的(e)所示,用户可以提前设置可以进行跨设备转发的消息对应的app。例如,用户可以设置app5和app7的通知消息转发给其他设备;而对于app4、app6、app8和app9的通知消息不转发给其他设备。
238.本技术实施例中,通知消息体中可以包括通知消息的通知id属性和通知channel属性。其中,通知id属性可以用于区别不同用户发送的通知id属性。例如,对于某个三方app中如果用户有多个联系人,那么这多个联系人可以分别用不同的通知id属性进行区分。表1示出了一种区分方式。
239.表1联系人与联系人对应的通知id属性的对应关系
240.联系人通知id属性联系人1id1联系人2id2联系人3di3
……
241.通知channel属性中的字符串可以用于区分不同的消息类型,示例性的,表2示出了不同消息类型与通知channel属性中的字符串的对应关系。
242.表2消息类型与通知channel属性中的字符串的对应关系
243.消息类型通知channel属性中的字符串文本字符串1语音字符串2视频字符串3文件字符串4
……
244.通过通知id属性以及通知channel属性就可以确定对应的通知消息。例如,对于图4所示的gui,用户tom以及用户amy分别发来了2条通知消息,可以通过通知id属性就可以对其进行区分。又例如,对于tom发送的2条不同消息类型的通知消息,可以通过通知channel属性对其进行区分。对于同一用户发送的同一消息类型的不同通知消息可以不进行区分,或者也可以用其他标识信息进行区分。
245.应理解,对于不同的应用程序,其通知id属性和通知channel属性的描述可以不同,上述仅仅是对某些应用程序中定义的通知id属性和通知channel属性进行的描述,本技术实施例并不限于此。
246.source端的通知处理模块可以在其消息体中增加“快捷回复”的flag属性。sink端在确定通知消息体中携带了“快捷回复”的flag属性时,可以在消息提醒框中增加回复控件。当sink端检测到用户点击了回复控件后,可以显示文本输入框以及回复控件。source端在向sink端发送通知消息体时,可以在通知消息体中携带消息内容以及“快捷回复”的flag属性。
247.一个实施例中,source端还可以在通知消息体中携带通知id属性和/或通知channel属性。携带通知id属性和通知channel属性的目的是sink端获取用户对通知消息的回复内容后,将回复内容、通知id属性和通知channel属性一起发送给source端,从而可以使得source端确定该回复内容是对哪一条通知消息的回复内容。
248.示例性的,source端可以将通知消息体携带在ble数据包中发送给sink端。ble数据包中包括协议数据单元(protocol data unit,pdu),该通知消息体可以携带在pdu中的服务数据(service data)字段中,或者,也可以携带在pdu中厂商特定数据(manufacturer specific data)字段中。例如,服务数据字段的负荷(payload)中可以包括多个比特位,其中,多个比特位中包括可扩展的比特位。sink端和source端可以约定某个可扩展的比特位的内容。source端可以采用gbk、iso8859-1等编码方式对通知消息体进行编码,并将编码后的信息携带在一个或者多个可扩展的比特位上。
249.sink端的通知处理模块:在sink端的通知处理模块接收到该通知消息体后,可以
对该通知消息体进行解析,从而获得通知消息的内容以及该“快捷回复”的flag属性。示例性的,如果source端将通知消息体携带在ble数据包中发送给sink端,那么sink端在接收到该ble数据包之后,可以采用相应的解码方式进行解码,从而获得该通知消息体。
250.通知ui适配模块:在sink端的通知处理模块识别出了通知“快捷回复”flag属性后,通知ui适配模块针对不同操作系统的sink端,适配各个系统对应的系统接口,支持“快捷回复”输入框、ui呈现和用户交互响应等。
251.示例性的,若sink端为android系统的设备,那么sink端可以提供notificationmanager,从而实现消息提醒框的绘制,其中,消息提醒框中包括了通知消息体中的通知内容、notificationmanager绘制的回复控件等。示例性的,如图3中的(a)所示,平板在接收到手机发送的消息体后,可以在消息提醒框中显示回复控件302。如图3中的(b)所示,平板在检测到用户点击控件302的操作后,可以显示输入框303以及发送控件304。
252.当sink端检测到用户输入了回复内容并点击了发送控件后,通过回调接口getresultsfromintent()就可以获取到用户输入的内容了。getresultsfromintent()可以建立发送控件和文本输入框的关联关系。当sink端检测到用户点击回复控件的操作后,就会触发sink端获取文本输入框中的内容。本技术实施例中,在不同的系统上都可以注册回调接口,这样sink端检测到用户回复内容时,通知处理模块就通过回调接口,获取到用户的回复内容。sink端在检测到用户在输入框中输入了回复内容并检测到用户点击了发送控件后,可以触发向source端发送用户的回复内容。
253.sink端的事件处理模块:在识别到用户回复某一条通知消息时,将action响应事件和用户回复的内容,一起打包为一个通知消息体。该通知消息体可以采用和source端向sink端发送的通知消息一样的封装格式,以便于source端进行解析。
254.示例性的,sink端可以将通知消息体携带在ble数据包中发送给source端。ble数据包中包括pdu,该通知消息体可以携带pdu中的服务数据字段中,或者,也可以携带在pdu中厂商特定数据字段中。例如,服务数据字段的负荷中可以包括多个比特位,其中,多个比特位中包括可扩展的比特位。sink端和source端可以约定某个可扩展的比特位的内容。sink端可以采用gbk、iso8859-1等编码方式对通知消息体进行编码,并将编码后的信息携带在一个或者多个可扩展的比特位上。
255.一个实施例中,若source端向sink端发送的通知消息体中携带了通知id属性和通知channel属性,那么sink端可以在通知消息中携带通知id属性、通知channel属性、action响应事件和用户回复的内容。若source端向sink端发送的通知消息体中没有携带通知id属性和通知channel属性,那么sink端向source端发送的通知消息体中也可以不携带通知id属性和通知channel属性。
256.source端的事件处理模块:解析sink端发送的通知消息体,获得action响应事件、通知id属性、通知channel属性和用户回复内容,其中,source端可以通过action响应事件确定sink端对通知消息进行了回复;通过通知id属性和通知channel属性确定是对哪一条通知消息进行的回复。进而通过以下过程完成通知消息的真实回复。
257.(1)拉起社交app显示界面
258.如果source端处于锁屏状态,可以通过以下几种方式进行处理。
259.方式一
260.source端可以先根据通知消息体的包头确定该回复内容是针对哪一个app。若该app提供应用程序接口(application programming interface,api)进行消息的回复,那么该app在获取到用户回复的内容后可以直接通过app提供的api完成对通知消息的真实回复。示例性的,对于短消息应用,其提供了api“sendtextmessage”可以用于通知消息的真实回复。source端在获取到回复内容后,可以先通过该通知消息体的包头确定回复内容是针对短消息应用的回复内容。由于短消息提供了api进行通知消息的回复,source端可以通过通知id属性和通知channel属性确定是对哪一条通知消息的回复,进而source端可以直接通过“sendtextmessage”完成通知消息的真实回复。
261.应理解,对于方式一的回复方式,消息回复的过程是在source端内部实现的,该过程对用户无感。若app不提供api进行消息的回复,那么该app可以采用方式二或者方式三,通过拖拽事件完成回复。
262.方式二
263.app如果支持锁屏加载的flags属性,source端就可以在锁屏界面上直接加载对应的显示界面。如微信的语音通话请求、视频通话请求等等,就是直接显示在锁屏界面上。进而到步骤(2),通过拖拽事件完成消息的回复。
264.方式三
265.方式三的回复方式还可以称之为跨设备解锁方案。方式三中,sink端可以完成对用户身份认证信息的采集,例如,sink端可以获取到用户用于source端解锁的密码信息,例如数字密码、指纹密码、虹膜信息、脸部特征等等身份认证信息。然后,sink端可以将密码信息携带在通知消息体中发送给source端,从而由source端判断是否对设备进行解锁。如果source端根据密码信息确定进行解锁,那么source端可以先进行解锁,进入非锁屏状态,进而到步骤(2),通过拖拽事件完成消息的回复。
266.(2)通过拖拽事件完成回复
267.source端响应于action响应事件,可以确定sink端检测到用户对通知消息回复的操作。source端可以根据通知消息体的包头确定相应的app并将该app启动到前台,并通过通知id属性和通知channel属性找到对应的通知消息。source端的视图系统可以向对应的app发送drag and drop事件以及回复内容。app响应于drag and drop事件,通过通知消息里面的pendingintent拉起具体某个联系人的聊天界面,从而对通知消息进行回复。此时就完成对该通知消息的真实回复。视图系统在向对应的app发送drag and drop事件以及回复内容的同时,还可以向对应的app发送回复内容的内容属性,该内容属性可以用于指示回复内容的类型(例如,文本、图片、语音、视频、文件等等)。app可以根据回复内容的类型,来通知三维图形处理库(opengl es)来绘制不同的显示界面。例如,对于文本内容,在拉起具体某个联系人的聊天界面后,可以直接将文本内容显示在回复的位置。又例如,对于语音信息,在拉起具体某个联系人的聊天界面后,可以显示语音的时长以及接听语音的控件(当source端检测到用户点击该控件的操作时,可以播放该语音的内容)。又例如,对于视频信息,在拉起某个联系人的聊天界面后,可以显示该视频中的第一帧图像并显示播放控件(当source端点击播放控件后,可以播放该视频的内容)。
268.(3)恢复source端现场
269.source端在完成回复后,通过将该app的界面隐藏起来,可以返回启动社交前的显
示界面。如果source端原来是锁屏的,则重新将设备锁屏。通过恢复设备原有的状态,让用户对快捷回复功能的无感知,可以进一步提升了用户体验。
270.一个实施例中,如图8所示的source端和sink端的内部实现过程中,sink端中还可以包括语音模块。示例性的,如图5所示的gui中,车机上可以包括语音模块。在手机将接收到的消息发送给车机后,车机可以通过语音模块将该消息对应的文字信息转化为语音信息,并通过语音提醒的方式向用户提醒该消息。
271.同时,sink端的麦克风可以通过拾音得到用户语音回复的内容。sink端可以将用户语音回复的内容封装到通知消息体中,发送给source端。语音模块也可以将用户语音回复的内容转化为文字信息发送给source端。或者,语音模块也可以不将用户语音回复的内容转化为文字信息,而是直接在通知消息体中携带用户语音回复的内容。从而由source端来确定是否将该语音回复的内容转化为文字信息。
272.由于现在许多汽车中控都是大屏,搭载智能系统,提供非常丰富的娱乐功能和驾驶乐趣。通过各种互联技术可以很好的将智能设备与车机连接起来,同样智能设备上的通知也可以实时同步到车机。将通知内容转换为语音播报交互更加人性化,可以提升车机的安全性要求;同时支持用户进行语音回复,也避免了用户在车机的显示屏上进行消息回复的过程,提升了用户的体验。
273.一个实施例中,sink端还可以支持附件回复的功能。
274.示例性的,如图6所示的gui中,用户可以在笔记本电脑上将附件(项目计划)发送给用户lily。
275.在sink端向source端发送通知消息体时,可以在通知消息体中携带附件的信息。或者,sink端也可以在通知消息体中携带该附件在sink端的路径信息。当用户在source端点击该附件时,source端可以向sink端请求该路径下的附件。sink端从而通过网络传输通道将该附件发送给source端。
276.应理解,sink端向source端发送用户语音回复的内容或者文件时也可以采用ble数据包,具体的发送方式可以参考上述实施例的描述,为了简洁,在此不再赘述。
277.下面对图7所示的gui的实现过程进行详细说明。
278.如图7中的(a)所示的gui,当笔记本电脑检测到用户点击消息提醒框701的操作后,笔记本电脑可以向手机发送请求,该请求用于请求界面元素的配置信息。
279.示例性的,该请求可以携带在ble数据包中发送给手机。ble数据包中包括pdu,该请求可以携带在pdu中的服务数据字段中,或者,也可以携带在pdu中厂商特定数据字段中。例如,服务数据字段的负荷中可以包括多个比特位,其中,多个比特位中包括可扩展的比特位。手机和笔记本电脑可以约定某个可扩展的比特位的内容。示例性的,当某个可扩展的比特位为“1”时,表示请求界面元素的配置信息。
280.source端(例如,手机)可以借助集成开发环境(integrated development environment,ide)工具确定一个或者多个ui界面元素,生成可扩展标记语言(extensible markup language,xml)文件。
281.其中,xml文件中包括:ui界面背景、source端ui元素、ui元素的大小(例如,sink端显示的ui元素是source端的ui元素的2倍)和位置,其中,ui元素位置可以包括ui元素和sink端添加控件、文本输入框的方向关系。
282.示例性的,图9示出了source端上显示的聊天界面,source端可以对该聊天界面上截取ui元素901,source端可以还可以决定sink端上绘制的聊天界面的背景(例如,白色),以及sink端添加的控件(例如,发送控件)以及文本输入框与ui元素的位置。例如,文本输入框可以位于ui元素的正下方居中的位置,发送控件可以位于ui元素的右下方。
283.示例性的,source端可以将xml文件携带在ble数据包中发送给sink端。该请求可以携带在pdu中的服务数据字段中,或者,也可以携带在pdu中厂商特定数据字段中。例如,服务数据字段的负荷中可以包括多个比特位,其中,多个比特位中包括可扩展的比特位。source端可以采用相应的编码技术对该xml文件进行编码,并将编码后的信息携带在一个或者多个可扩展比特位上。sink端通过对相应比特位上的信息进行解码就可以获得该xml文件。
284.sink端可以根据xml文件还原界面。sink端可以根据xml文件中包括的ui界面背景、ui元素的大小以及位置,进行ui界面的绘制,如图7中的(b)所示,笔记本电脑可以绘制出消息提醒框702。
285.当笔记本电脑检测到用户点击发送控件的操作后,笔记本电脑可以将回复内容发送给手机,由手机完成对消息的真实回复。此时,笔记本电脑可以重新向手机请求新的xml文件,手机可以重新向笔记本电脑发送新的xml文件,其中xml文件中可以包括ui元素902。从而笔记本电脑可以根据xml文件中的ui元素902绘制如图7中的(c)所示的消息提醒框。应理解,笔记本电脑将回复内容发送给手机、笔记本电脑可以重新向手机请求新的xml文件以及手机向笔记本电脑发送新的xml文件的具体过程可以参考上述实施例中的描述,为了简洁,在此不在赘述。
286.一个实施例中,当笔记本电脑检测到用户滑动条704,那么笔记本电脑可以向手机请求更多的ui元素。示例性的,手机在接收到该请求后,将ui元素903携带在xml文件中发送给笔记本电脑。笔记本电脑可以根据xml文件绘制如图7中的(d)所示的消息提醒框。
287.本技术实施例中,sink端可以结合dupwight控件实现ui元素的还原,这个控件可以和sink端本地的控件(例如,button控件,text控件,list控件)结合进行消息提醒窗口的绘制。
288.下面对图7所示的gui的另一实现过程进行详细说明。
289.图10示出了通过音视频采集在sink端重现source端界面的过程。source端可以按照一定的采样频率(例如,60hz)的频率对source端的整个显示界面进行采样,并将采样的数据以及聊天界面在source端界面上的位置信息进行数据编码后发送给sink端。sink端首先对source端发送的数据进行解码;sink端根据聊天界面的位置信息对解码后的音视频数据进行裁剪,从而进行图像渲染,这样在sink端可以得到source端聊天界面的镜像。在sink端通过裁剪获得裁剪并进行图像渲染后,sink端还可以增加button控件(例如,发送控件)以及文本输入框。
290.图11示出了本技术实施例提供的另一组gui。
291.参见图11中的(a)所示的gui,该gui为手机的桌面。该gui包括多个应用图标,该多个应用(例如,app1、app2和app3)图标。当手机检测到用户点击桌面上的图标1101的操作后,可以启动设置手机相关功能,显示如图11中的(b)所示的gui。
292.参见图11中的(b)所示的gui,该gui为手机的设置界面。该gui包括多个功能选项,
该多个功能选项中包括无线和网络、设备连接、桌面和壁纸、声音、通知中心、应用和通知等,其中,用户可以通过应用和通知进行权限管理、默认应用和通知管理等功能的设置。当手机检测到与用户点击应用和通知功能1102的操作后,显示如图11中的(c)所示的gui。
293.参见图11中的(c)所示的gui,该gui为手机的应用和通知功能设置界面。该gui包括对无线和网络下多个功能选项,该多个功能选项包括权限管理、默认应用、应用分身和跨设备通知等。当手机检测到用户点击跨设备通知功能1103的操作后,显示如图11中的(d)所示的gui。
294.参见图11中的(d)所示的gui,该gui为手机的跨设备通知功能设置界面。该gui包括跨设备通知下多个功能选项,其中包括跨设备通知的开关控件、通知类型、设备管理以及设备授权。其中跨设备通知的开关控件下包括对跨设备通知的功能描述“当通知来时,若您在使用其他设备,则转发通知到该设备”。当手机检测到用户点击通知类型1104的操作时,手机可以显示如图11中的(e)所示的gui。
295.参见图11中的(e)所示的gui,该gui为手机的通知类型设置界面。用户可以从如图11中的(e)所示的通知类型中选择其希望转发的应用程序的通知消息。示例性的,用户可以选择app5和app7的通知消息的类型作为希望转发的通知消息。
296.本技术实施例中,用户可以通过设置选项选择自己希望转发的应用程序的通知消息,这样可以避免不必要的通知消息转发给用户带来的骚扰。
297.一个实施例中,source端在向sink端发送通知消息之前,确定sink端为用户设置的接收通知消息转发的设备;或者在向第二电子设备发送通知消息之前,确定source端上登录的账号和sink端上登录的账号相关联。
298.下面结合图12和图13介绍source端(例如,手机)选择接收sink端的过程。
299.当手机检测到用户点击了如图12中的(a)所示的设备管理1201后,手机可以显示如图12中的(b)所示的gui。
300.参见图12中的(b)所示的gui,该gui为设备管理功能显示界面。其中设备管理中包括了我的设备和其他设备。其中,我的设备为与手机登录了同一华为id的设备。示例性的,我的设备中包括平板“huawei matepad pro”、智能手表“huawei watch gt 2”、另一手机“huawei p40 pro”、笔记本电脑“huawei matebook x”以及智能音箱“huawei sound x”。当手机选择了以上所有的设备后,手机可以在上述设备转发通知消息。
301.用户可以选择同一华为id下的设备作为通知消息的转发对象,也可以选择不是同一华为id下的设备作为转发对象。示例性的,当手机检测到用户点击了如图13中的(a)所示的设备授权1301后,手机可以显示如图13中的(b)所示的gui。
302.参见图13中的(b)所示的gui,该gui为设备授权功能显示界面。该显示界面下包括添加设备选项以及附近设备选项。其中,对于添加设备的描述为您可以添加其他华为id下的设备添加到其他设备中。例如,用户可以添加家庭群组中其他家庭成员的华为id,那么其他家庭成员的华为id下的设备就可以出现在如图12中的(b)所示的其他设备中。当手机检测到用户打开附近设备的控件的操作后,手机可以搜索附近设备且显示如图13中的(c)所示的gui。
303.参见图13中的(c)所示的gui,该gui为设备授权功能的另一显示界面。该显示界面上显示手机搜索到的附近设备包括iphone 11 pro、ipad pro 11以及小米10pro。当手机检
测到用户点击添加ipad pro 11以及小米10pro的操作后,手机可以将这两个设备添加到设备管理中的其他设备中。
304.参见图13中的(d)所示的gui,该gui为设备管理的另一显示界面。该显示界面上的“其他设备”中增加了附近的两个设备ipad pro 11以及小米10pro。
305.本技术实施例中,手机可以通过蓝牙、wi-fi等短距离通讯的方式搜索到周围的其他设备。示例性的,手机在检测到用户点击添加ipad pro 11以及小米10pro的操作后,可以向这两个设备发送ble数据包,其中ble数据包中可以携带请求添加为通知消息转发的设备的请求信息(该请求信息可以携带在服务数据字段中的可扩展比特位上)。若手机接收到两台设备的响应(例如,ack信息),那么手机可以成功将两台设备添加到“其他设备”中。进一步的,在ipad pro 11以及小米10pro上,可以通过提醒框提示用户是否同意手机的添加请求。若ipad pro 11以及小米10pro检测到用户指示同意添加为通知消息转发的设备的请求,那么这两台设备可以向手机发送响应。
306.图14示出了本技术实施例提供的快捷回复的方法1400的示意性流程图。如图14所示,该方法1400可以由第一电子设备和第二电子设备执行,该第一电子设备可以为上述图8中的source端,该第二电子设备可以为上述图8中的sink端,该方法1400包括:
307.s1401,第一电子设备接收消息。
308.示例性的,如图3中的(a)所示,该第一电子设备可以为手机,手机接收到用户tom发送的消息。
309.示例性的,如图6中的(a)所示,该第一电子设备可以为手机,手机接收到用户tom发送的消息。
310.应理解,本技术实施例中的消息可以是不同应用程序的服务器发送的消息,消息的类型包括但不限于文本、语音、音频、视频、链接、分享(例如,位置分享)、邀请(例如,邀请加入群组)等等类型。
311.s1402,第一电子设备在确定该第一电子设备的机主聚焦的设备为第二电子设备时,向第二电子设备发送该消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件。
312.可选地,该指示信息可以为快捷回复flag属性。
313.应理解,该第一电子设备向第二电子设备发送消息以及指示信息的过程可以参考上述实施例中的描述,为了简洁,在此不再赘述。
314.一个实施例中,第一电子设备在确定第一电子设备的机主的焦点不在第一电子设备上时,第一电子设备可以向周围设备发送请求信息,该请求信息用于请求周围设备确定第一电子设备的机主的焦点是否在周围设备上;或者,第一电子设备也可以保存消息转发的设备列表,第一电子设备在确定第一电子设备的机主焦点不在第一电子设备上时,第一电子设备可以向设备列表中的设备发送请求信息。
315.一个实施例中,若第二电子设备为第一电子设备的设备列表中的电子设备且第二电子设备中保存有第一电子设备机主的用户特征(例如,第二电子设备和第一电子设备为同一用户下的两个设备(登录同一华为id),那么第一电子设备和第二电子设备中可以保存相同的用户特征(例如,指纹信息、人脸信息、声纹信息、虹膜信息等等)),第一电子设备可以通过服务器或者通过短距离通信的方式向第二电子设备发送请求信息。第二电子设备在
接收到第一电子设备发送的请求信息后,可以通过采集用户的特征并判断用户的特征与预置的第一电子设备的机主的用户特征是否匹配。若匹配,则向第一电子设备发送响应信息,该响应信息用于指示第一电子设备的机主正在聚焦第二电子设备。第二电子设备在接收到该响应信息后,可以向第二电子设备发送该消息。
316.示例性的,该请求信息可以携带在ble数据包中。ble数据包中包括pdu,该请求信息可以携带pdu中的服务数据字段中,或者,也可以携带在pdu中厂商特定数据字段中。例如,服务数据字段的负荷(payload)中可以包括多个比特位,其中,多个比特位中包括可扩展的比特位。第一电子设备和第二电子设备可以提前约定某个比特位进行请求信息的传输。当这个可扩展的比特位为预设值(例如,1)时,第二电子设备就可以获知第一电子设备请求其确定用户是否聚焦在该设备上。
317.一个实施例中,第一电子设备可以保存焦点设备判断的优先级。示例性的,优先级排序可以为:
318.(1)视觉焦点;
319.(2)贴身设备;
320.(3)交互焦点。
321.应理解,视觉焦点设备可以是具备摄像头的设备,例如,智能电视、平板电脑、笔记本电脑等等;贴身设备可以是用户的可穿戴设备,例如,vr/ar眼镜、智能手表、智能手环等等;交互设备可以是具有输入操控的设备,例如,具有键盘、鼠标、触控、遥控器、语音输入的设备等。
322.如果第一电子设备中保存有消息转发的设备列表,那么第一电子设备可以向设备列表中的设备发送请求信息。第一电子设备在向设备列表中的设备发送请求信息时,可以是按照设备的优先级来发送。
323.例如,第一电子设备(例如,手机)的设备列表中的设备中包括智能电视和智能手表,那么手机可以先向智能电视(保存有第一电子设备的机主的人脸信息)发送请求信息,该请求信息用于请求智能电视判断第一电子设备的机主当前的焦点是否在智能电视上。智能电视在接收到该请求信息后,可以通过开启摄像头的方式判断手机的机主的焦点是否在智能电视上。若智能电视通过摄像头采集的人脸信息与预置的人脸信息,确定手机的机主当前的焦点设备在智能电视上,那么智能电视可以向手机发送响应,该响应用于指示手机的机主当前的焦点在智能电视上。手机在接收到该响应后,可以不再向设备列表中的其他设备发送请求信息。若手机在预设时长内没有接收到智能电视的响应(或者,手机接收到智能电视发送的响应,该响应指示手机的机主当前的焦点不在智能电视上),那么手机可以继续向智能手表(保存有第一电子设备的机主的心率信息)发送请求信息。智能手表在接收到手机发送的请求信息后,可以基于传感器检测手机的机主是否正在佩戴可穿戴设备。例如,智能手表中的利用光电容积扫描(photo plethysmo graph,ppg)传感器可以通过检测到的心率信息与预置的心率信息,来判断第一电子设备的机主是否正在佩戴智能手表。若智能手表判断手机的机主正在佩戴智能手表,那么智能手表可以向手机发送响应,该响应用于指示手机的机主当前正在佩戴智能手表。
324.第一电子设备在向设备列表中的设备发送请求信息时,也可以是同时向设备列表中的多个设备发送请求信息。
325.例如,手机的设备列表中的设备中包括智能电视和智能手表,那么手机可以先向智能电视和智能手表同时发送请求信息。如果手机只直接收到智能电视的响应,那么手机可以将消息转发给智能电视;或者,如果手机只接收到智能手表的响应,那么手机可以将消息转发给智能手表;或者,如果手机接收到了智能电视和智能手表的响应,那么手机可以根据设备的优先级,向智能电视转发该消息。
326.示例性的,该响应信息可以携带在ble数据包中pdu的服务数据字段或者厂商特定数据字段中。例如,在服务数据字段的负荷中可扩展的比特位上可以携带该响应信息。第一电子设备可以和第二电子设备提前约定某个可扩展比特位进行响应信息的传输。当这个可扩展的比特位为预设值(例如,1)时,表示第二电子设备确定用户聚焦的设备为第二电子设备。
327.一个实施例中,若第二电子设备为第一电子设备的设备列表中的电子设备且第二电子设备中未保存有第一电子设备机主的用户特征,或者,第一电子设备中没有设备列表,第二电子设备为第一电子设备周围的设备。那么第一电子设备在确定第一电子设备的机主没有聚焦在第一电子设备上时,可以向第二电子设备发送该请求信息;第二电子设备在接收到该请求信息后,可以通过用户特征采集装置采集用户特征,并将采集的用户特征发送给第一电子设备。第一电子设备在确定第二电子设备采集的用户特征与第一电子设备中预置的用户特征匹配时,可以向第二电子设备发送该消息。
328.应理解,对于第二电子设备为第一电子设备的设备列表中的电子设备且第二电子设备中保存有第一电子设备机主的用户特征这种情况,第二电子设备在接收到请求信息后也可以采集用户的特征并向第一电子设备发送用户的特征,从而由第一电子设备根据第二电子设备采集的用户的特征以及预置的用户特征来判断第一电子设备的机主是否聚焦第二电子设备。
329.示例性的,第二电子设备向第一电子设备发送的用户特征可以携带pdu中的服务数据字段或者厂商特定字段中。
330.例如,第二电子设备包括摄像头。第二电子设备在接收到该请求信息后,可以通过摄像头采集人脸信息并发送给第一电子设备。第一电子设备根据该人脸信息判断是否为用户本人。例如,第一电子设备可以将第二电子设备采集的人脸信息和第一电子设备中预置的人脸信息进行匹配,若匹配成功,则确定第一电子设备的机主当前聚焦的是第二电子设备。
331.又例如,第二电子设备包括麦克风,第二电子设备在接收到该请求信息后,可以通过麦克风采集用户发送的语音信息并发送给第一电子设备。第一电子设备根据该语音信息判断是否为用户本人。例如,第一电子设备可以提取第二电子设备采集的语音信息中的声纹信息,第一电子设备将提取的声纹信息和第一电子设备中预置的声纹信息进行匹配,若匹配成功,则确定用户当前聚焦的是第二电子设备。
332.本技术实施例中,第一电子设备在向第二电子设备请求第一电子设备的机主是否聚焦第二电子设备时,第二电子设备可以向第一电子设备发送其采集的用户特征,这样可以使得第一电子设备根据接收到的用户特征与预置的用户特征来判断第二电子设备是否为第一电子设备的机主聚焦的设备。这样有利于提升消息转发时的安全性,避免了用户的隐私泄露,从而有助于提升用户体验。
333.s1403,第二电子设备显示消息提醒框,该消息提醒框中包括该消息和该回复控件。
334.示例性的,如图3中的(a)所示,第二电子设备可以为平板。当平板接收到手机发送的消息以及指示信息后,可以显示消息提醒框301,其中消息提醒框301中包括消息“happy birthday!”以及回复控件302。
335.示例性的,如图6中的(a)所示,第二电子设备可以为笔记本电脑。当笔记本电脑接收到手机发送的消息以及指示信息后,可以显示消息提醒框601,其中消息提醒框601中包括消息“请把项目计划发给我”以及回复控件602。
336.s1404,第二电子设备在检测到用户对该消息进行回复的操作时,向第一电子设备发送回复内容。
337.示例性的,如图3中的(b)所示,当平板检测到用户点击控件304的操作后,平板可以将文本输入框303中的回复内容发送给手机。
338.示例性的,如图4中的(b)所示,当笔记本电脑检测到用户点击控件405的操作后,笔记本电脑可以将文本输入框404中的回复内容发送给手机。
339.s1405,第一电子设备根据该回复内容,对该消息进行回复。
340.本技术实施例中,第一电子设备对该消息进行回复的方式可以参照图8中source端的事件处理模块对消息进行真实回复的过程,为了简洁,在此不再赘述。
341.示例性的,如图3中的(c)至(e)所示,或者,如图4中的(c)至(e)所示,手机可以先打开社交app,然后打开与用户tom的聊天界面,最后将回复内容“thank you!”拖拽至对消息“happy birthday!”回复的位置。
342.可选地,该方法1100还包括:第一电子设备向第二电子设备发送该消息的标识信息;该第二电子设备在检测到用户对该消息进行回复的操作时,向第二电子设备发送经过标识信息标识后的回复内容。示例性的,第一电子设备向第二电子设备发送的消息体中可以携带消息的内容、指示信息以及消息的标识信息。
343.可选地,该标识信息可以为消息的通知id属性和/或通知channel属性。
344.示例性的,如图4中的(a)所示,手机接收到两条消息(消息1来自tom,消息2来自amy)。此时,手机在向笔记本电脑发送经过标识信息1标识后的消息1、经过标识信息2标识后的消息2以及该指示信息。
345.这样笔记本电脑在接收到上述信息后,可以显示消息提醒框401和消息提醒框402。当笔记本电脑检测到用户对消息1回复的操作时,笔记本电脑可以向手机发送经过标识信息1标识后的回复内容(例如,“thank you!”)。通过对消息进行标识,可以使得手机明确笔记本电脑发送的回复内容是对哪一条消息的回复。
346.本技术实施例中,当第一电子设备接收到多条消息时,第一电子设备可以对多条消息进行标识,这样可以使得第一电子设备对第二电子设备发送的回复内容进行区分,从而使得第一电子设备可以准确的对多条消息进行回复。
347.可选地,该方法还包括:第一电子设备在接收到消息之前,显示第一界面;第一电子设备在对该消息进行回复之后,显示该第一界面。
348.本技术实施例中,第一电子设备接收到第二电子设备发送的回复内容后,可以完成对该消息的真实回复。在回复完成之后,可以继续显示接收到消息之前的状态。通过恢复
第一电子设备原有的状态,让用户对快捷回复功能无感知,可以进一步提升用户的体验。
349.可选地,该消息的内容为文本信息,该第二电子设备包括语音功能,该第二电子设备在接收到该消息后,通过语音向用户提示该文本信息。
350.示例性的,如图5中的gui所示,车机包括语音功能,那么车机在接收到手机发送的消息后,还可以通过语音向用户提示该文本信息。例如,车机通过语音提示用户“tom通过社交app向您发送happy birthday!”。
351.本技术实施例中,对于第二电子设备为车机的场景,车机可以通过语音播报的方式向用户提示该消息的内容,这样可以避免用户因为查看该消息而造成分神,从而有助于提升用户驾驶的安全性。
352.可选地,该第二电子设备在向用户发送回复内容之前,采集用户回复的语音信息;第二电子设备向第一电子设备发送该语音信息,或者,第二电子设备向第一电子设备发送该语音信息对应的文本信息。
353.示例性的,如图5所示的gui,用户回复了语音信息“thank you!”。车机可以向手机发送该语音信息,或者,车机也可以向手机发送该语音信息对应的文本信息。
354.一个实施例中,第二电子设备也可以向第一电子设备发送该语音信息;该第一电子设备可以根据该语音信息,对该消息进行回复;或者,该第一电子设备可以根据该语音信息对应的文本信息,对该消息进行回复。
355.可选地,该回复内容为文件。
356.示例性的,如图6中的(b)所示,当笔记本电脑检测到用户将word文件(项目计划.doc)拖拽至文本输入框后,笔记本电脑可以向手机发送该word文件。
357.可选地,该文件还可以为多媒体文件,例如,照片、视频、音频等等。
358.本技术实施例中,用户可以直接在第二电子设备上完成对消息的回复,而无需回到第一电子设备对消息进行处理。这样可以避免用户错过重要的信息,同时也避免了用户在回到第一电子设备上进行消息处理的过程,有助于提升用户的体验。
359.图15示出了本技术实施例提供的回复消息的装置1500的示意性框图。该装置1500可以设置于上述第一电子设备中,该装置1500中包括:第一接收单元1510,用于接收消息;发送单元1520,用于在确定该第一电子设备的机主聚焦的设备为第二电子设备时,向该第二电子设备发送该消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;第二接收单元1530,还用于接收该第二电子设备发送的对该消息的回复内容;回复单元1540,用于根据该回复内容,对该消息进行回复。
360.图16示出了本技术实施例提供的回复消息的装置1600的示意性框图。该装置1600可以设置于上述第二电子设备中,该装置1600中包括:接收单元1610,用于接收第一电子设备发送的消息和指示信息,该指示信息用于指示该第二电子设备增加对该消息的回复控件;显示单元1620,用于显示消息提醒框,该消息提醒框中包括该消息以及该回复控件;发送单元1630,用于在检测到用户对该消息进行回复的操作时,向该第一电子设备发送回复内容。
361.图17示出了本技术实施例提供的电子设备1700的示意性结构图。如图17所示,该电子设备包括:一个或多个处理器1710,一个或多个存储器17220,该一个或多个存储器存储1720存储有一个或多个计算机程序,该一个或多个计算机程序包括指令。当该指令被所
述一个或多个处理器1710运行时,使得第一电子设备执行上述实施例中的技术方案;或者,当该指令被所述一个或多个处理器1710运行时,使得第二电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
362.本技术实施例提供了一种回复消息的系统,包括第一电子设备和第二电子设备,该系统用于执行上述实施例中回复消息的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
363.本技术实施例提供一种计算机程序产品,当所述计算机程序产品在第一电子设备运行时,使得第一电子设备执行上述实施例中的技术方案;或者,当所述计算机程序产品在第二电子设备运行时,使得第二电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
364.本技术实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第一电子设备运行时,使得所述第一电子设备执行上述实施例的技术方案;或者,当所述指令在第二电子设备运行时,使得所述第二电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
365.本技术实施例提供一种芯片,所述芯片用于执行指令,当所述芯片运行时,执行上述实施例中的技术方案。其实现原理和技术效果类似,此处不再赘述。
366.本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本技术的范围。
367.所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
368.在本技术所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
369.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
370.另外,在本技术各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
371.所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个
人计算机,服务器,或者网络设备等)执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read-only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
372.以上所述,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以所述权利要求的保护范围为准。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献