用于改进的会议参与度的系统和方法与流程

用于改进的会议参与度的系统和方法
1.相关申请的交叉引用
2.本技术要求在2019年4月2日提交的题为“systems and methods for improved meeting engagement(用于改进的会议参与度的系统和方法)”的美国临时专利申请no.62/828,158和在2019年12月16日提交的题为“systems and methods for improved meeting engagement(用于改进的会议参与度的系统和方法)”的美国专利no.16/715,551的优先权和权益，其各自的内容通过引用整体并入本文。
技术领域
3.本公开涉及被配置为提供改进的会议参与度的现场会议平台。


背景技术：

4.在传统的现场会议环境中，演示者通常使用幻灯片来向观众演示。然而，(1)在演示者的现场演示期间或者(2)在现场演示之后，演示者并不总是被提供关于其演示的反馈。此外，演示者不总是能够分析观众是否参与演示。


技术实现要素：

5.在一些实施例中，根据本公开构建的系统和方法分析观众对演示的参与度，并且可以在演示期间和/或之后向演示者提供反馈。在一些实施例中，所提供的反馈可以包括确定指示参与者参与度水平的一个或更多个度量。参与者参与度水平然后可以用于实时和/或在现场会议结束之后调整现场会议。在一些实施例中，可以向会议的组织者(其可以不同于演示者)提供反馈。
6.在一些实施例中，一种系统可以包括：被配置为显示演示并生成演示数据的一个或更多个演示者计算设备、被配置为生成包括对所显示的演示的一个或更多个参与者反应的参与者数据的一个或更多个参与者计算设备、以及包括一个或更多个处理器和存储器的服务器系统，所述存储器包括指令，所述指令在由所述一个或更多个处理器执行时使得所述一个或更多个处理器：从现场会议环境的参与者计算设备接收参与者数据，从现场会议环境的演示者计算设备接收演示数据，基于所接收的参与者数据和所接收的演示数据中的至少一个来确定现场会议环境的关键度量，以及基于至少一个所确定的关键度量来修改现场会议环境的演示。
7.在一些实施例中，一种方法包含在服务器系统处从现场会议环境的参与者计算设备接收参与者数据，在服务器系统处从现场会议环境的演示者计算设备接收演示数据，基于所接收的参与者数据和所接收的演示数据来确定现场会议环境的一个或更多个关键度量，以及基于所确定的一个或更多个关键度量来修改对现场会议环境的演示。
8.在一些实施例中，一种系统可以包括被配置为显示演示并生成演示数据的演示者计算设备、被配置为生成包括对所显示的演示的一个或更多个参与者反应的参与者数据的参与者计算设备、以及包括一个或更多个处理器和存储器的服务器系统，所述存储器包括
指令，所述指令在由所述一个或更多个处理器执行时使得所述一个或更多个处理器：从现场会议环境的参与者计算设备接收参与者数据；从所述现场会议环境的演示者计算设备接收演示数据；基于所接收的参与者数据和所接收的演示数据中的至少一个来确定现场会议环境的关键度量；以及基于至少一个所确定的关键度量来修改现场会议环境的演示。可选地，参与者数据可以包括参与者参与度数据和参与者反馈中的至少一个。可选地，演示数据可以包括与演示相关联的幻灯片、关于何时将每个幻灯片推送到参与者计算设备的定时信息、以及投票问题中的至少一个。可选地，关键度量可以包括参与者参与度水平、随时间的参与者参与度、会议评级、内容的流行度、关键字、参与者总计数、基于参与度水平的顶级参与者、参与内容的参与者的百分比、高度参与的参与者的百分比、动作总数、按照动作类型的动作、投票问题的响应率、调查问题的响应率、纠正问题的百分比、体验评级、随时间的动作计数、词云、幻灯片参与度水平、问题的响应图、参与者标识和参与者简档中的至少一个。可选地，参与者简档包括参与者人口统计、参与者响应的内容的指示、或参与者正确回答的问题的百分比中的至少一个。可选地，对现场会议环境的演示的修改包括改变幻灯片格式化、幻灯片顺序、幻灯片内容、演示顺序和演示内容中的至少一个。
9.在一些实施例中，一种方法包括以下步骤：在服务器系统处从现场会议环境的参与者计算设备接收参与者数据，在服务器系统处从现场会议环境的演示者计算设备接收演示数据，基于所接收的参与者数据和所接收的演示数据来确定现场会议环境的一个或更多个关键度量，以及基于所确定的一个或更多个关键度量来修改现场会议环境的演示。可选地，参与者数据可以包括参与者参与度数据和参与者反馈中的至少一个。可选地，演示数据可以包括与演示相关联的幻灯片、关于何时将每个幻灯片推送到参与者计算设备的定时信息、以及投票问题中的至少一个。关键度量可以包括参与者参与度水平、随时间的参与者参与度、会议评级、内容的流行度、关键字、参与者总计数、基于参与度水平的顶级参与者、参与内容的参与者的百分比、高度参与的参与者的百分比、动作总数、按照动作类型的动作、投票问题的响应率、调查问题的响应率、纠正问题的百分比、体验评级、随时间的动作计数、词云、幻灯片参与度水平、问题的响应图、参与者标识和参与者简档中的至少一个。参与者简档可以包括参与者人口统计、参与者响应的内容的指示、或者参与者正确回答的问题的百分比中的至少一个。可选地，对现场会议环境的演示的修改可以包括改变幻灯片格式化、幻灯片顺序、幻灯片内容、演示顺序和演示内容中的至少一个。确定现场会议环境的一个或更多个关键度量可以包括：确定特定幻灯片的一个或更多个关键度量，确定跨幻灯片集合的一个或更多个关键度量，以及将所确定的特定幻灯片的关键度量和跨幻灯片集合的关键度量中的至少一个与基准进行比较。
10.本公开的实施例可以包括用于改进现场会议参与度的计算机程序产品。该计算机程序产品可以包括具有用于在计算平台中实现动作的计算机可读代码的计算机可读介质，计算机可读代码诸如用于从现场会议环境的参与者计算设备接收参与者数据的程序代码、用于从现场会议环境的演示者计算设备接收演示数据的程序代码、用于基于所接收的参与者数据和所接收的演示数据中的至少一个来确定现场会议环境的关键度量的程序代码、以及用于基于至少一个所确定的关键度量来修改现场会议环境的演示的程序代码。
11.在这样的实施例中，参与者数据可以包括参与者参与度数据和参与者反馈中的至少一个。可选地，演示数据可以包括与演示相关联的幻灯片、关于何时将每个幻灯片推送到
参与者计算设备的定时信息、以及投票问题中的至少一个。此外，关键度量可以包括参与者参与度水平、随时间的参与者参与度、会议评级、内容的流行度、关键字、参与者的总计数、基于参与度水平的顶级参与者、参与内容的参与者的百分比、高度参与的参与者的百分比、动作的总数、按照动作类型的动作、投票问题的响应率、调查问题的响应率、纠正问题的百分比、体验评级、随时间的动作计数、词云、幻灯片参与度水平、问题的响应图、参与者标识和参与者简档中的至少一个。可选地，参与者简档可以包括参与者人口统计、参与者响应的内容的指示、或参与者正确回答的问题的百分比中的至少一个。此外，该程序代码还可以包括用于通过改变幻灯片格式化、幻灯片顺序、幻灯片内容、演示顺序和演示内容中的至少一个来修改现场会议环境的演示的指令。另外，该程序代码可以通过确定特定幻灯片的一个或更多个关键度量、确定跨幻灯片集合的一个或更多个关键度量、以及将所确定的特定幻灯片的关键度量和跨幻灯片集合的关键度量中的至少一个与基准进行比较，来确定现场会议环境的一个或更多个关键度量。
附图说明
12.附图被并入本说明书并构成本说明书的一部分，附图示出了若干实施例，并且与描述一起用于解释所公开的原理。在附图中：
13.图1示出了根据本公开的一些实施例的用于改进的会议参与度的系统。
14.图2示出了根据本公开的一些实施例的用于改进的会议参与度的方法。
15.图3示出了根据图1所示的系统构建的平台的示意图。
16.图4示出了根据本公开的一些实施例的专用网络。
17.图5a示出了根据本公开的一些实施例构建的平台的视图。
18.图5b示出了根据本公开的一些实施例构建的平台的视图。
19.图5c示出了根据本公开的一些实施例构建的平台的视图。
20.图5d示出了根据本公开的一些实施例构建的平台的视图。
21.图6示出了根据本公开的一些实施例的计算机系统。
具体实施方式
22.在一些实施例中，根据本公开构建的系统和方法可以在现场会议期间分析观众对显示的演示的参与度，并且可以在演示期间和/或之后向演示者提供反馈。在一些实施例中，所提供的反馈可以包括确定指示参与者参与度水平的一个或更多个度量。参与者参与度水平然后可以用于实时和/或在现场会议结束之后调整现场会议。
23.在一些实施例中，现场会议环境可以包括大型会议、研讨会、商务会议、学术环境等。在一些实施例中，现场会议环境可包括用于不同行业(包括但不限于金融服务、制药、教育行业等)的大型会议。
24.参与者可以指观看演示的个人。示例可包括大型会议参与者、学生等。演示者可指提供演示和/或主持现场会议的一个或更多个个体。
25.图1示出了根据本公开的一个方面的用于改进的会议参与度的系统100。系统可包括通信地耦接到网络103的一个或更多个参与者计算设备101
‑
a、101
‑
b等(统称为101)。网络103还可通信地耦接到一个或更多个演示者计算设备115
‑
a、115
‑
b等(统称为115)。网络
103还可通信地耦接到服务器系统105，该服务器系统105配置成包括数据分析模块107和报告生成模块117。进一步，服务器系统105可通信地耦接到配置成存储参与者数据111和演示数据113的数据库109。
26.网络103可以包括被配置成与参与者计算设备101、演示者计算设备115和服务器系统105通信的全服务、专用网络。在一些实施例中，网络103可包括：自组网络、内联网、外联网、虚拟专用网络(vpn)、局域网(lan)、无线lan(wlan)、广域网(wan)、无线wan(wwan)、城域网(man)、互联网、互联网的一部分、公共交换电话网络(pstn)的一部分、普通老式电话服务(pots)网络、蜂窝电话网络、无线网络、网络、另一种类型的网络、或者两个或更多个这样的网络的组合，或者网络103可结合自组网络、内联网、外联网、虚拟专用网络(vpn)、局域网(lan)、无线lan(wlan)、广域网(wan)、无线wan(wwan)、城域网(man)、互联网、互联网的一部分、公共交换电话网络(pstn)的一部分、普通老式电话服务(pots)网络、蜂窝电话网络、无线网络、网络、另一种类型的网络、或者两个或更多个这样的网络的组合进行操作。
27.在一些实施例中，参与者计算设备101可以包括台式计算机、膝上型计算机、蜂窝电话、智能电话、平板计算机等。在一些实施例中，参与者可使用参与者计算设备101中的一个经由计算设备101上的用户接口来访问网页、门户、表单或由服务器系统105生成的其他应用。用户接口可被配置成显示演示和/或显示用于向参与者演示的相关材料。参与者计算设备101上的用户接口可被配置成接收来自用户的输入。示例输入包括注释、保存的幻灯片、排名、投票信息、对所显示的幻灯片的评论、对在用户接口上展现的查询的回答等。
28.在一些实施例中，服务器系统105可基于从演示者计算设备115接收到的命令将一个或更多个幻灯片推送到参与者设备101。例如，演示者可从演示者计算设备115发起用于将在参与者计算设备101上显示的演示移动到下一幻灯片的命令。
29.使用参与者计算设备101，用户可键入注释、保存对幻灯片的评论、通过演示导航、回答展现给用户的问题、和/或对幻灯片评级。这可以形成参与者数据的至少一部分。
30.演示数据可包括与演示相关联的幻灯片、关于何时将每个幻灯片推送到参与者计算设备的定时信息、投票问题等。
31.在一些实施例中，根据本公开构建的平台可以允许用户管理现场会议、使参与者参与跨类型的会议、并且分析单个平台中的现场会议的影响。在一些实施例中，参与者计算设备101可以由参与者以“自带设备”模式(例如，参与者提供个人智能电话或膝上型计算机)提供。替代地或另外，在一些实施例中，参与者计算设备101可由会议组织者(例如，预先指定的膝上型计算机、平板计算机等)提供。
32.在一些实施例中，服务器系统105可配置可由参与者计算设备101和/或演示者计算设备115访问的在线平台。在一些实施例中，在线平台可从软件即服务应用(saas)开发。在一些实施例中，在线平台可被配置来创建和配置新的现场会议，管理现场会议的块区，上传要在现场会议期间共享的演示和文档，定制现场会议体验，审阅参与度会议，运行和/或主持会议，以及同步参与者数据和演示数据。
33.在一些实施例中，服务器系统105可以从演示者计算设备115接收演示数据。演示者计算设备115可生成演示数据，演示数据包括演示中用于每一幻灯片的显示的时间戳。演示数据113然后可以由服务器系统105存储在数据库109上。演示数据113可包括显示给参与
者的内容以及事件的时间戳。例如，演示数据113可包括指示演示的每一幻灯片被显示的时间的时间戳数据。在一些实施例中，数据库109可存储来自不同现场会议的数据的聚集。可基于内容、演示者、参与者等来对现场会议进行分组。
34.进一步地，在一些实施例中，包括参与者数据111和演示数据113的数据可以以能够快速存储和检索的方式存储在数据库109中。例如，只有参与者数据111和演示数据113的段可被存储到被去归一化的读者友好的数据库结构中。另外，数据库可被配置用于项目的快速过滤。
35.参与者计算设备101可以被配置成生成现场会议环境的参与者数据。例如，在一些实施例中，参与者数据可包括反映用户与演示的交互的参与度数据。参与度数据可以包括指示用户点击(例如，总点击、当被点击时)、用户注释(例如，注释的长度、注释的定时)、保存的或收藏的幻灯片、演示者/面板所提问的问题、用户对调查的响应等的数据。
36.参与者数据还可以包括使用演示前/演示后调查、投票问题、参与者问题和参与者注释提供的参与者反馈。参与者数据可以包括对投票问题的响应，投票问题包括单个、多重选择、优先排序、评级和开放式响应问题。数据还可以包括对指示参与者人口统计、知识/置信水平、经验和反馈的调查问题的响应。
37.可根据参与者问题和参与者注释确定参与者参与度。
38.可通过在参与者用户计算设备101上运行的应用的用户收集参与者数据。然后，参与者数据可以被传送到服务器系统105以便存储在数据库109上。
39.在从参与者计算设备101接收到参与者数据以及从演示者计算设备115接收到演示数据时，服务器系统105的数据分析模块107可被配置成基于所接收的参与者数据和/或演示数据来确定现场会议环境的一个或更多个关键度量。
40.在一些实施例中，关键度量可指示参与者参与度水平、随时间的参与者参与度水平、参与者如何评级会议、附加内容的流行度和关键字。在一些实施例中，所公开的系统可以涉及以逐个幻灯片为基础确定参与度度量。在一些实施例中，所公开的系统可以包括所有问题的前后间隔，其使组织者能够在他们会议的整个过程中测量学习和行为中的转换。进一步，数据分析模块107可被配置成执行统计分布并生成所计算的统计分布等的可视化，该可视化随后可由报告生成模块117集成到报告中。
41.在一些实施例中，关键度量可以包括参与者的总计数、基于参与度动作的顶级参与者，参与者基于其动作(例如，保存幻灯片、响应投票问题等)参与内容的百分比，高度参与的参与者(例如，做文本注释、手写注释、提交的问题的参与者)的百分比，动作的总数、按照动作类型的动作、投票问题的响应率、调查问题的响应率，纠正问题的百分比、体验评级、随时间的动作计数、词云、幻灯片参与度水平，问题的响应图、参与者标识、参与者简档等。在一些实施例中，参与者简档可指示参与者响应什么内容、他们如何响应、他们正确回答的问题的百分比等。
42.在一些实施例中，确定关键度量可以包括映射参与度与知识、人口统计概况分析、情感分析、和基准之间的相关性。
43.在一些实施例中，所确定的关键度量可以包括被视为参与的参与者的百分比和被视为高度参与的参与者的百分比。参与度数据的类型、水平和定时可以用于将参与者分类到段(例如，参与或高度参与的段)中，以帮助对用于报告和过滤的数据进行分组。在一些实
施例中，段可重叠。例如，分类为“参与”的参与者可以包括那些发现“高度参与”的参与者。在一些实施例中，“参与”的参与者可以是至少通过执行单次点击参与演示的参与者。在一些实施例中，“高度参与的参与者”可以是至少通过进行多于单次的点击(例如，键入演示者问题或注释)来与演示交互的参与者。在一些实施例中，“参与的百分比”的度量可以通过确定由单击(例如，单击可以对应于保存幻灯片)与演示进行最低限度地交互的参与者的数量，并且除以登录到计算设备中的总参与者来生成。另外，“高度参与的百分比”的度量可以通过确定与演示交互超过最低限度的参与者的数量并且除以登录到设备中的总参与者来生成。例如，这可包括确定作出文本注释、手写注释、评级、提交的演示者问题、对调查或投票问题的响应或与定制按钮内容的交互等的参与者的数量。
44.可替代地，“参与”和“高度参与”的参与者可以通过其响应/动作的定时来确定。例如，在一些实施例中，高度参与的参与者可以被定义为每5分钟采取行动的参与者或基于动作总数处于前10％的参与者。在另一示例中，高度参与的参与者可以被定义为诸如回答调查问题的至少70％和提交问题的组合。基于这些定义，可以在数据库中或在bi工具中应用计算，该计算然后可以用于对数据进行分组和过滤。
45.在对参与者进行分类之后，可以通过计算平均参与百分比或平均高度参与百分比来将基准应用于所有数据。可以基于整个数据集或子集(客户端、系列、会议类型、位置等)计算平均百分比，从而创建基准。
46.例如，在一些实施例中，数据分析模块107可被用于关联和观察会议设置与参与度、参与者获得的知识、以及参与者报告的体验之间的关系。然后，可以使用观察结果来生成可以建议理想会议结构的预测模型。例如，关键度量可以揭示，用于特定地理区域(例如，东欧)中的研讨会的理想会议设计可以具有总长度为4至5小时，允许参与者观看所有幻灯片(即，向前和向后遍历幻灯片叠)，具有更频繁的问答会话，在会议开始之前进行预测试调查，导致更高水平的参与者参与度，并且进而导致更高的知识转移的结构。
47.数据分析模块107可以执行统计分析以确定相关变量。由数据分析模块107执行的统计技术的示例包括但不限于卡方自动交互检测(chaid)、协方差、无监督聚类、分类和回归树(cart)等。在一些实施例中，数据分析模块107可以迭代地执行统计技术，直到确定变量之间的相关性。数据分析模块107可以与统计软件工具(例如，康斯坦茨信息挖掘工具(r,konstanz information miner)(knime))接合。
48.人口统计概况分析(例如，识别参与者的人口统计周围的数据)可以与知识和参与度数据相关联，以确定和识别目标观众在学习中的任何差距。例如，可以针对人口统计(例如，医师助理)来分析知识和参与度数据。例如，与高参与度相关的一组医师助理可能已经满足所有学习目标，而显示平均参与度的第二组医师助理可能仅满足一个学习目标。因此，对演示的修改可以包括修改演示以包括更多时间，使得参与者可以询问更多问题、更高度地参与并且因此示出改进的学习。
49.在一些实施例中，数据分析模块107可以被配置为计算跨客户端、会议类型、治疗领域、协议、演示者等的基准、或参与度和体验分数。以这种方式，如果特定的演示和/或会议格式连续地具有较低的参与度和体验分数，则调查响应可以指示演示者可能没有足够的时间来完成他们的所有内容并且举行问答会话。因此，可以修改演示或会议格式以允许演示者有更多时间以及专用问答会话，以便改进参与者的参与度以及体验，并且还改进他们
的学习目标分数。
50.在一些实施例中，可以通过在整个数据集或其子集上对数据求平均来确定任何度量的基准。例如，对于特定演示，可以确定每个参与者所保存的幻灯片的平均数量。客户端保存的幻灯片基准可以通过合计该客户端针对所有会议所保存的幻灯片的数量并除以那些会议的总参与者来确定。在一些实施例中，如由单个会议所保存的幻灯片所测量的性能可以用于将特定会议与客户端基准进行比较，以便理解会议是否比基准执行得更高(更好)或更低(更差)。基准数据可以存储在数据库中。在一些实施例中，基准数据可以被生成并且被用于更新数据库中先前存储的基准数据。例如，可以提取数据以确定基准并在预定时间跨度(例如，每月、每季度、在指定数量的会议之后等)更新存储的基准信息。或者，可以实时生成基准数据。
51.在一些实施例中，服务器系统可以包括报告生成模块117，报告生成模块117被进一步配置为基于关键度量来修改现场会议环境的演示和/或向现场会议的演示者和/或组织者提供报告。
52.在一些实施例中，报告可以包括可以提供给沿演示者和/或组织者的文档和/或原始数据下载。报告可以提供参与度数据的概要。报告可以包括参与者与之交互的幻灯片和/或演示的可视化、关键度量、参与度的时间线。报告可以自动生成并以可下载的格式展现。
53.报告可以作为在线平台的一部分来提供，该在线平台允许组织者和/或演示者过滤和分类演示及其相应的参与者反馈。例如，在一些实施例中，在线平台可以允许根据不同方面(例如，具有最多问题的幻灯片、具有最多注释的幻灯片、最少参与的幻灯片)对演示进行过滤和分类。报告还可以指示参与者何时参与度最高、哪些参与者参与度最高、参与者如何对会议进行评级、哪些内容最流行以及所提问的问题的关键字。
54.报告可以向组织者提供先进的分析能力，并且允许过滤、组合、分类和分离数据。此外，报告可以允许跨来自各种现场会议的演示和参与者数据的交叉比较。报告可以包括可视化、屏幕截图、可分类的和/或可过滤的度量、参与度统计的时间线等。
55.图2示出了根据本公开的一个方面的用于改进的会议参与度的方法。一种方法可以包括以下步骤：从现场会议环境的至少一个参与者接收参与者数据201，从现场会议环境的演示者接收演示数据203，基于所接收的参与者数据和所接收的演示数据确定演示的一个或更多个关键度量205，以及基于所确定的关键度量来修改现场会议环境的演示207。
56.图3示出了根据图1所示的系统构建的平台的示意图。该平台可由会议组织者用来创建高参与度的会议体验。该平台可以在saas环境中实施。平台可以被配置为允许创建和配置新会议、管理会议的块区、上传要在会议期间共享的演示和文档、与会议的参与者通信、创建会议后内容等。
57.具体地，图3示出了被配置成构建现场会议环境并经由在线平台提供会议计划生存期的平台300。如图3所示，平台300可包括请求/命令阶段301、构建/审阅阶段303、运行/监控阶段305、共享/跟踪阶段307和分析/报告阶段309。
58.在请求/命令阶段301期间，组织者可以请求会议，并且定义参与度目标。例如，用户可请求由平台300组织的全服务会议。或者，用户可请求由平台300组织的会议块区。在一些实施例中，平台300可集成到客户关系管理(crm)系统中。因此，在这样的实施例中，可以自动处理请求/命令，并且可以适当地通知合适的利益相关者。
59.在构建/审阅阶段303，组织者可以上传资源/幻灯片、与参与者和/或演示者的聊天和/或消息、审阅和编辑幻灯片的内容等。上传的文档还可以包括幻灯片演示、资源文档、调查问题等。此外，在构建/审阅阶段303期间，组织者能够与关联于平台300的服务提供商通信以使通信流线化。
60.在运行/监控阶段305中，组织者可以将演示下载和/或同步到服务器系统，并且监控现场会议度量。在运行/监控阶段305期间，平台300可以被配置成处理演示数据和参与者数据和/或将演示数据和参与者数据存储在相关数据库中。
61.例如，在一些实施例中，组织者可以实时地监视登录的参与者的数量、现场连接的数量、所有参与度度量的计数(保存的幻灯片的数量、演示者问题等)、对参与者正在提交的投票的响应、在幻灯片上花费的时间、自从上次参与动作以来的时间、幻灯片叠中剩余的幻灯片的数量等。这些被监视的因素也可以被离线监视，或者用于被监视的因素的数据可以在离线时被存储和检索。
62.在共享/跟踪阶段307中，组织者可以向参与者电子邮件发送注释和资源、发送证书和跟踪调查。这可以包括给参与者生成自动电子邮件。在一些实施例中，电子邮件可以包括参与者注释和保存的来自会议的内容以及基于参与者如何参与会议的目标通信。在分析/报告阶段309中，组织者可以提供数据分析和趋势。在一些实施例中，这些可以包括上面讨论的报告。
63.如图3中所示，在一些实施例中，系统可以被配置成使得参与者可以携带他们自己的设备并且访问基于云的服务器系统311。在其他实施例中，全服务企业预置型专用网络可以提供有计算设备313。
64.图4示出了根据本公开的实施例的专用网络设置的示例。专用网络400可包括分布在整个场所会议空间中的无线接入点401以及企业预置型服务器403。专用网络400的使用可允许参与者计算设备的更可靠的连接以及演示数据和参与者数据的安全转移。
65.图5a
‑
5d示出了根据本公开的一个方面的由平台生成的报告的示例。
66.具体地，图5a示出了与现场会议演示相关联的报告501，该报告501包括顶级参与者列表503、响应率511、问题校正513、演示评级515、包括来自所提问问题的关键词的词云521等。如所示出的，每个度量可以与幻灯片在演示中过渡的时间(例如，在时间戳519上的动作517)相联系。还可以显示参与度度量529，并且参与度度量可以包括按钮点击、所提问的问题、响应、保存的幻灯片、手写注释、文本注释等。例如，所显示的参与度度量529可以包括参与百分比505、高度参与百分比507、总动作509、按钮点击议程523、按钮点击视图525、参与度时间线图形的图例527等。
67.例如，如上所述，参与百分比505可以通过确定由单击(例如，单击可以对应于保存幻灯片)与演示最低限度地交互的参与者的数目并且除以登录到计算设备中的总参与者来生成。另外，可以通过确定与演示交互超过最低限度的参与者的数量并除以登录到设备中的总参与者来生成高度参与百分比507的度量。
68.总动作509可以指示会议的所有参与度动作。参与度度量529还可以显示响应率，该响应率可以指示对每个问题的响应的总的唯一数目、所提问题的总数和/或会议的总参与者。还可以显示评级。在一些实施例中，评级可以是对由用于每个答案选择的尺度加权的答案选择的响应的总数的总和，评级在1
‑
10尺度上被归一化。
69.图5b示出了与现场会议相关联的报告551，该报告551包括保存最多或参与最多的幻灯片列表。如所示出的，报告可提供所选的演示的关键设计方面的协议543，包含例如幻灯片545、何时显示幻灯片545以及哪些参与者保存所显示的幻灯片547。进一步，在时间线551中说明随着时间具有相同演示的参与度553。报告551还可以显示参与者的数目533、总幻灯片交互535、总平均幻灯片评级537、与演示交互最多的参与者539、以及参与度的分布541。
70.图5c示出了报告555，该报告555示出了反馈和参与者体验，包括例如由参与者提供的评级567。例如，用户可对会议的后勤要素(包括酒店住宿、交通等)进行评级569。进一步，报告可以允许用户过滤问题列表以搜索体验565。报告555可以包括体验问题557、参与者559、经调整的评级561和平均响应率563。
71.图5d示出了可以被提供的报告571或，提供参与度活动与现场会议的概述573的组织者或其他利益相关者。
72.可对用户显示的数据的示例可包括包含参与度水平575的图形指示的总体会议概述。例如，概述可显示参与或高度参与的参与者的百分比。此外，在一些实施例中，报告可以包括人口统计特征(例如，来自心脏病学、内分泌学、急诊医生、血液学、家庭医学和胃肠病学中的每一个的参与者的数目)。医学会议中的人口统计特征还可以包括专业、平均实践年数、以及每周见到的患者的平均数目的细分。进一步地，人口统计特征还可以包括地理信息，如每个参与者位于的区域。
73.报告还可以包括由学习目标进行的知识转换的概述。换言之，调查响应和投票数据可被用来确定参与者是否从演示中获得知识并是否与演示期间他们的参与度相关。
74.报告还可包括净会议分数。净会议分数可以是基于参与者体验(如何感知会议)、知识(如由参与者的事前/事后结果所确定的，转移了多少知识)和参与度(基于高度参与/未参与的人的百分比)的会议的总体成功的指示符。
75.例如，在一些实施例中，净会议分数可以是会议水平的体验、知识和参与度的个体分数的聚集，并且作为反映会议/演示的质量的单个数据点来提供。使用单个数据点可允许更容易地比较跨会议的数据。
76.在另一个示例中，在一些实施例中，体验分数可以基于净推荐值
tm
(nps)来确定。净推荐值(
‑
100至100)基于提问特定问题并在0
‑
10尺度上收集数据来确定。体验分数还可以基于其他评级尺度(1
‑
5或1
‑
6)来计算，并且可以应用不同的计算，诸如5和6的评级数目减去1和2的评级数目。
77.在一些实施例中，知识分数可以基于针对所提问的具有正确回答的每个问题将参与者分类为“不受影响”、“增强”、或“改进”来确定。在一些实施例中，可以在演示前和演示后提问参与者问题。因此，知识分数可以通过添加改进和增强的百分比并且减去不受影响的百分比来确定，因此产生在
‑
100与100之间的分数。在一些实施例中，不受影响的分数可对应于在演示之前和演示之后对问题的错误回答，增强的分数可对应于在演示之前和演示之后对问题的正确回答，并且改进的分数可以对应于在演示前对问题的错误回答，随后在演示后对问题的正确回答。
78.因此，在一些示例中，净会议分数可以是nps、净知识分数和净参与度分数的总和。例如，净会议分数可以是
‑
300和300之间的数字。
79.报告还可包含参与度时间线577，参与度时间线577示出了随着时间的演示的参与度。
80.关于图5a
‑
5d所描述的关键度量允许不仅在会议水平上而且跨会议以及随着时间的数据的聚集。另外，演示数据还可用于在不同水平过滤数据。例如，可以通过过滤其他数据来改变关键度量，诸如显示通过对人口统计问题(如位置、角色等)的响应划分的特定问题的正确的百分比。以此方式，关键度量可被更改以满足演示者的需要，并且可基于会议的目的而改变。度量可被聚集、过滤、划分、排除、随时间显示、与基准进行比较等，以及在单个参与者水平、幻灯片图像水平、演示等处被查看。因而，根据本公开的系统和方法可以允许查看不同水平和分组的数据。
81.根据本公开构建的实施例还可以包括被配置成通过利用人工智能方法来智能地标识改进领域并且提供对现有演示的修改的建议的系统。这样的系统可被配置成将人工智能应用于关键度量、度量的组合和模式，以提供演示改进的领域的概述和建议。例如，在一些实施例中，自然语言处理、情感分析和主题建模可用于审阅每个会议的评估的评级和评论并生成数据。基于所生成的数据，系统可以自动地确定哪些会话或领域表现不足，并且向客户端提供警告。另外，一些系统可用于分析跨多个会议的数据，以便标识跨会议的模式，诸如与另一演示者相比，关于特定主题的特定演示者可能正在进行演示。例如，这种系统可以被配置成跨多个会议审阅评论，标记“否定”评论并且标识特定演示者由于他或她说话太快而是无效的。
82.对演示的修改可基于审阅每一幻灯片的所确定的关键度量。例如，通过审阅具有大多数动作和/或参与度的顶级幻灯片，演示者可确定具有最重要内容的幻灯片不与参与者产生共鸣，并因此审阅和更新所指示的幻灯片。在一些实施例中，系统可以提供最可能需要修改的幻灯片列表。在另一示例中，演示者可基于带有随其提交的大多数问题的幻灯片来确定幻灯片需要的更多细节。在另一示例中，在审阅与特定幻灯片相关联的注释之后，演示者可确定幻灯片上的内容的格式(即，高亮、加粗)或顺序需要更新。
83.还可以通过审阅对投票问题的响应来做出对演示的修改。例如，如果对投票问题的响应指示参与者不理解与投票问题相关的内容，则演示者可创建新幻灯片、改变现有幻灯片等。或者，可以向演示者演示参与者的联系信息，使得演示者可以跟踪到提问该问题的参与者。
84.修改还可以基于不存在数据。例如，不引起参与度或最少引起参与度的幻灯片可被移除、重新排序或编辑，视情况而定。
85.图6示出了根据本公开的一些实施例的计算机系统。
86.图6示出了以计算机系统600的示例形式的机器的功能框图，在该机器内，可以执行用于使所述机器执行本文所讨论的方法、过程或功能中的任何一个或更多个的指令集。在一些示例中，机器可连接(例如，联网)到如上所述的其他机器。机器可在客户端
‑
服务器网络环境中以服务器或客户端机器的能力操作，或在对等(或分布式)网络环境中作为对等机器操作。该机器可以是能够(顺序的或以其他方式)执行指令集的任何专用机器，该指令集指定该机器将采取的用于执行本文描述的功能的动作。进一步地，虽然仅示出了单个机器，但术语“机器”还应被视为包括单独或共同执行一个(或多个)指令集以执行本文讨论的方法中的任何一种或多种方法的机器的任何集合。在一些示例中，图1的参与者计算设备
101、演示者计算设备115和服务器系统105中的每一个可由图6中所示的示例机器(或此类机器中的两个或更多个的组合)来实现。
87.示例计算机系统600可以包括处理设备603、存储器607、数据存储设备609和通信接口615，其可以经由数据和控制总线601彼此通信。在一些示例中，计算机系统600还可包含显示设备613和/或用户接口611。
88.处理设备603可以包括但不限于微处理器、中央处理单元、专用集成电路(asic)、现场可编程门阵列(fpga)、数字信号处理器(dsp)和/或网络处理器。处理设备603可被配置为执行用于执行本文描述的操作的处理逻辑605。通常，处理设备603可以包括专门编程有处理逻辑605以执行本文描述的操作的任何合适的专用处理设备。
89.存储器607可包括，例如但不限于，存储可由处理设备603执行的计算机可读指令617的只读存储器(rom)、随机存取存储器(ram)、闪存、动态ram(dram)和静态ram(sram)中的至少一个。通常，存储器607可包含存储可由处理设备603执行以用于执行本文中所描述的操作的计算机可读指令617的任何合适的非暂时性计算机可读存储介质。尽管图6中示出了一个存储器设备607，但在一些示例中，计算机系统600可包括两个或更多个存储器设备(例如，动态存储器和静态存储器)。
90.计算机系统600可以包括通信接口设备611，用于与其他计算机直接通信(包括有线和/或无线通信)，和/或用于与网络103通信(参见图1)。在一些示例中，计算机系统600可包含显示设备613(例如，液晶显示器(lcd)、触敏显示器等)。在一些示例中，计算机系统600可包含用户接口611(例如，字母数字输入设备、光标控制设备等)。
91.在一些示例中，计算机系统600可包含数据存储设备609，数据存储设备609存储用于执行本文中所描述的功能中的任一个或更多个的指令(例如，软件)。数据存储设备609可包含任何合适的非暂时性计算机可读存储介质，包含(但不限于)固态存储器、光学介质和磁性介质。
92.在一些实施例中，现场会议技术参与度平台可以充当用户访问各种参与度系统以测量他们的现场会议的有效性的中心。系统可以通过配置的软件选项使观众参与，然后将度量发送到包括分析模块的服务器以用于分析目的。
93.本文描述的系统和技术的各种实现可以在数字电子电路、集成电路、专门设计的asic(专用集成电路)、计算机硬件、固件、软件和/或其组合中实现。这些各种实现方式可以包括在可编程系统上可执行和/或可解释的一个或更多个计算机程序中的实现方式，所述可编程系统包括至少一个可编程处理器、至少一个输入设备和至少一个输出设备，所述至少一个可编程处理器可以是专用或通用的，被耦接以从存储系统接收数据和指令以及向存储系统发送数据和指令。这些计算机程序(也称为程序、软件，软件应用或代码)包括用于可编程处理器的机器指令，并且可以以高级程序化和/或面向对象的编程语言和/或汇编/机器语言来实现。如本文所使用的，术语“机器可读介质”、“计算机可读介质”是指用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备(例如，磁盘、光盘、存储器、可编程逻辑器件(pld))，包括接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”是指用于向可编程处理器提供机器指令和/或数据的任何信号。为了提供与用户的交互，本文描述的系统和技术可以在具有用于向用户显示信息的显示设备(例如，crt(阴极射线管)或lcd(液晶显示器)监视器)以及用户可以通过其向计算机提供输
入的键盘和指示设备(例如，鼠标或轨迹球)的计算机上实现。其他种类的设备也可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的感觉反馈(例如，视觉反馈、听觉反馈或触觉反馈)；并且可以以任何形式(包括声音、语音或触觉输入)接收来自用户的输入。
94.本文描述的系统和技术可以在计算系统中实现，该计算系统包括后端组件(例如，作为数据服务器)，或者包括中间件组件(例如，应用服务器)，或者包括前端组件(例如，具有图形用户接口或web浏览器的客户端计算机，通过该图形用户接口或web浏览器，用户可以与本文描述的系统和技术的实现进行交互)，或者这样的后端、中间件或前端组件的任何组合。系统的组件可以通过数字数据通信(例如，通信网络)的任何形式或介质互连。通信网络的示例包括局域网(“lan”)、广域网(“wan”)和因特网。计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离，并且通常通过通信网络进行交互。客户端和服务器的关系借助于在相应计算机上运行并且彼此具有客户端
‑
服务器关系的计算机程序而产生。已经描述了多个实施例。然而，应当理解，在不背离本发明的精神和范围的情况下，可以进行各种修改。例如，本文档大部分是关于电视广告描述的，但是也可以用于将来的其它形式的，基于收视率的广告。例如无线电广告和在线视频广告。另外，附图中描绘的逻辑流程不需要所示的特定顺序或连续顺序来实现期望的结果。另外，可以提供其它步骤，或者可以从所描述的流程中去除步骤，并且可以向所描述的系统添加其它组件，或者从所描述的系统中去除其它组件。因此，其它实施例也在所附权利要求的范围内。
95.尽管本公开可以提供一系列步骤，但是应当理解，在一些实施例中，可以添加附加步骤，可以省略所描述的步骤等。另外，所描述的步骤序列可以以任何合适的顺序执行。
96.尽管本文已经描述了说明性实施例，但其范围包括具有等同元件、修改、省略、组合(例如，跨各种实施例的方面的组合)、改编和/或更改的任何和所有实施例，如本领域技术人员基于本公开将理解的。例如，可以修改示例性系统中所示的组件的数量和取向。
97.因此，为了说明的目的已经给出了前面的描述。其并非详尽的且并非限于所披露的精确形式或实施例。通过考虑说明书和所公开的实施例的实践，修改和改编对于本领域技术人员将是显而易见的。