一种智慧型无纸化会议系统的制作方法

本发明涉及智能会议设备，具体而言，涉及一种智慧型无纸化会议系统。

背景技术：

1、传统的会议记录都是通过会议记录人员手写记录的，该方式十分低效。后续又出现了使用会议录像、会议录音等方式的会议记录方式，但这些方式得到的音视频数据中会包含较多的非必要信息，不利于后续的查看使用，需要后续二次处理加工（主要是回放音视频数据再手动誊写至纸件之上），导致会议记录人员的工作量十分之大。本发明的方案旨在解决该技术问题。

技术实现思路

1、本发明的第一方面提供了一种智慧型无纸化会议系统，包括摄取模块、提取模块及记录模块，所述提取模块分别与所述摄取模块与所述记录模块电连接；其中，所述摄取模块，用于获取会议区域内的音频数据及视频数据；所述提取模块，用于对所述音频数据进行音频解析以获得对话数据，对所述视频数据进行人脸识别以获得发言人员数据，将所述对话数据和所述发言人员数据进行关联得到有效对话数据；以及，按照时间顺序将所述有效对话数据进行整理得到数字化会议记录档案；所述记录模块，存储和/或输出所述数字化会议记录档案。

2、在一些实施例中，所述摄取模块获取会议区域内的音频数据及视频数据，包括：所述摄取模块获取第一会议区域内的第一音频数据和第一视频数据；根据所述第一音频数据提取得到第一发言人员集合，根据所述第一视频数据提取得到第二发言人员集合，对所述第二发言人员集合与所述第一发言人员集合进行差处理；若差处理结果为空，则将所述第一音频数据和所述第一视频数据分别作为所述音频数据、所述视频数据；若差处理结果不为空，则所述摄取模块根据所述差处理结果确定第二会议区域，并获取所述第二会议区域内的第二音频数据和第二视频数据，将所述第二音频数据和所述第二视频数据分别作为所述音频数据、所述视频数据。

3、在一些实施例中，所述摄取模块根据所述差处理结果确定第二会议区域，包括：根据所述差处理结果中涉及的发言人员的所述第一音频数据确定若干第一音源位置；根据所述第一发言人员集合和所述第二发言人员集合的交集所涉及的发言人员的所述第一视频数据确定若干第二音源位置；根据各所述第一音源位置和各所述第二音源位置确定所述第二会议区域。

4、在一些实施例中，所述摄取模块在获取第一会议区域内的第一音频数据和第一视频数据之前，还包括：获取第三会议区域内的第三视频数据，并对所述第三视频数据中的标定发言人员进行轨迹跟踪；若任一所述标定发言人员进入所述第三会议区域的指定边缘区域内，则所述摄取模块根据全部标定发言人员的轨迹位置确定第一会议区域；否则，将所述第三会议区域作为所述第一会议区域。

5、在一些实施例中，所述指定边缘区域通过如下方式确定：识别所述第三视频数据中的座椅，根据各所述座椅的位置及朝向预测得出就座人员在就座后的头部所处区域；若所述头部所处区域的指定比例的区域位于所述第三会议区域外，则将其作为所述指定边缘区域。

6、在一些实施例中，所述提取模块将所述对话数据和所述发言人员数据进行关联得到有效对话数据，包括：对第一发言人员的第一对话数据进行语义分析，评估所述第一对话数据的语义完整度；若所述语义完整度大于或等于第一阈值，则将所述第一对话数据和第一发言人员数据进行关联得到第一有效对话数据；以及，按照时间顺序将所述第一有效对话数据记录于所述数字化会议记录档案；若所述语义完整度小于第一阈值，则获取第一指定时长内的所述第一发言人员的第二对话数据，评估所述第一对话数据和所述第二对话数据的语义关联度；若所述语义关联度大于或等于第二阈值，则将所述第一对话数据和所述第二对话数据进行整合得到第三对话数据，并将所述第三对话数据与所述第一发言人员数据关联后记录于所述第一对话数据在所述数字化会议记录档案中的位置；若所述语义关联度小于第二阈值，则将所述第一对话数据和所述第二对话数据与所述第一发言人员数据关联后，分别记录于所述数字化会议记录档案中各自的位置。

7、在一些实施例中，在所述语义完整度小于第一阈值时，还包括：计算第二指定时长内所述语义完整度小于第一阈值的情况出现的次数；若所述次数大于第三阈值，则将所述第二指定时长内全部对话数据与对应的发言人员进行关联后，以候选形式分别记录于所述数字化会议记录档案中各自的位置。

8、本发明的第二方面提供了一种电子设备，该电子设备应用于前述的智慧型无纸化会议系统；该电子设备包括摄取模块、提取模块、存储模块，所述提取模块与所述摄取模块及所述存储模块连接；其中，所述存储模块，用于存储可执行的计算机程序代码，以及存储所述提取模块生成的数字化会议记录档案；所述摄取模块，用于获取会议区域内的音频数据及视频数据，并将其发送给所述提取模块；所述提取模块，用于通过调用所述存储模块中的所述可执行的计算机程序代码，以生成数字化会议记录档案。

9、本发明的第三方面提供了一种电子设备，其应用于前述的智慧型无纸化会议系统，包括：至少一个处理器、存储器以及存储在所述存储器中并可在所述至少一个处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现前述摄取模块、提取模块的对应功能。

10、本发明的第四方面提供了一种计算机存储介质，其应用于前述的智慧型无纸化会议系统，所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行时实现前述摄取模块、提取模块的对应功能。

11、本发明的第五方面提供了一种计算机程序产品，当计算机程序产品在终端上运行时，使得终端执行时实现可实现前述摄取模块、所述提取模块的对应功能。

12、本发明的有益效果在于：本发明的方案可通过对会议现场的音频数据进行解析而自动生成数字化的会议记录，不再需要会议记录人员手动实施会议记录，提升了会议记录的效率和准确性。

技术特征：

1.一种智慧型无纸化会议系统，其特征在于：包括摄取模块、提取模块及记录模块，所述提取模块分别与所述摄取模块与所述记录模块电连接；其中，所述摄取模块，用于获取会议区域内的音频数据及视频数据；所述提取模块，用于对所述音频数据进行音频解析以获得对话数据，对所述视频数据进行人脸识别以获得发言人员数据，将所述对话数据和所述发言人员数据进行关联得到有效对话数据；以及，按照时间顺序将所述有效对话数据进行整理得到数字化会议记录档案；所述记录模块，存储和/或输出所述数字化会议记录档案；所述摄取模块获取会议区域内的音频数据及视频数据，包括：所述摄取模块获取第一会议区域内的第一音频数据和第一视频数据；根据所述第一音频数据提取得到第一发言人员集合，根据所述第一视频数据提取得到第二发言人员集合，对所述第二发言人员集合与所述第一发言人员集合进行差处理；若差处理结果为空，则将所述第一音频数据和所述第一视频数据分别作为所述音频数据、所述视频数据；若差处理结果不为空，则所述摄取模块根据所述差处理结果确定第二会议区域，并获取所述第二会议区域内的第二音频数据和第二视频数据，将所述第二音频数据和所述第二视频数据分别作为所述音频数据、所述视频数据。

2.根据权利要求1所述的一种智慧型无纸化会议系统，其特征在于：所述摄取模块根据所述差处理结果确定第二会议区域，包括：根据所述差处理结果中涉及的发言人员的所述第一音频数据确定若干第一音源位置；根据所述第一发言人员集合和所述第二发言人员集合的交集所涉及的发言人员的所述第一视频数据确定若干第二音源位置；根据各所述第一音源位置和各所述第二音源位置确定所述第二会议区域。

3.根据权利要求1所述的一种智慧型无纸化会议系统，其特征在于：所述摄取模块在获取第一会议区域内的第一音频数据和第一视频数据之前，还包括：获取第三会议区域内的第三视频数据，并对所述第三视频数据中的标定发言人员进行轨迹跟踪；若任一所述标定发言人员进入所述第三会议区域的指定边缘区域内，则所述摄取模块根据全部标定发言人员的轨迹位置确定第一会议区域；否则，将所述第三会议区域作为所述第一会议区域。

4.根据权利要求3所述的一种智慧型无纸化会议系统，其特征在于：所述指定边缘区域通过如下方式确定：识别所述第三视频数据中的座椅，根据各所述座椅的位置及朝向预测得出就座人员在就座后的头部所处区域；若所述头部所处区域的指定比例的区域位于所述第三会议区域外，则将其作为所述指定边缘区域。

5.根据权利要求1所述的一种智慧型无纸化会议系统，其特征在于：所述提取模块将所述对话数据和所述发言人员数据进行关联得到有效对话数据，包括：对第一发言人员的第一对话数据进行语义分析，评估所述第一对话数据的语义完整度；若所述语义完整度大于或等于第一阈值，则将所述第一对话数据和第一发言人员数据进行关联得到第一有效对话数据；以及，按照时间顺序将所述第一有效对话数据记录于所述数字化会议记录档案；若所述语义完整度小于第一阈值，则获取第一指定时长内的所述第一发言人员的第二对话数据，评估所述第一对话数据和所述第二对话数据的语义关联度；若所述语义关联度大于或等于第二阈值，则将所述第一对话数据和所述第二对话数据进行整合得到第三对话数据，并将所述第三对话数据与所述第一发言人员数据关联后记录于所述第一对话数据在所述数字化会议记录档案中的位置；若所述语义关联度小于第二阈值，则将所述第一对话数据和所述第二对话数据与所述第一发言人员数据关联后，分别记录于所述数字化会议记录档案中各自的位置。

6.根据权利要求5所述的一种智慧型无纸化会议系统，其特征在于：在所述语义完整度小于第一阈值时，还包括：计算第二指定时长内所述语义完整度小于第一阈值的情况出现的次数；若所述次数大于第三阈值，则将所述第二指定时长内全部对话数据与对应的发言人员进行关联后，以候选形式分别记录于所述数字化会议记录档案中各自的位置。

7.一种电子设备，该电子设备应用于如权利要求1-6任一项所述的智慧型无纸化会议系统；其特征在于：该电子设备包括摄取模块、提取模块、存储模块，所述提取模块与所述摄取模块及所述存储模块连接；其中，所述存储模块，用于存储可执行的计算机程序代码，以及存储所述提取模块生成的数字化会议记录档案；所述提取模块，用于获取会议区域内的音频数据及视频数据，并将其发送给所述提取模块；所述提取模块，用于通过调用所述存储模块中的所述可执行的计算机程序代码，以生成数字化会议记录档案。

8.一种电子设备，其应用于如权利要求1-6任一项所述的智慧型无纸化会议系统，包括：至少一个处理器、存储器以及存储在所述存储器中并可在所述至少一个处理器上运行的计算机程序，其特征在于：所述处理器执行所述计算机程序时实现前述摄取模块、提取模块的对应功能。

9.一种计算机存储介质，其应用于如权利要求1-6任一项所述的智慧型无纸化会议系统，所述计算机存储介质存储有计算机程序，其特征在于：所述计算机程序被处理器执行时实现前述摄取模块、提取模块的对应功能。

技术总结
本发明属于智能会议设备技术领域。本发明提供了一种智慧型无纸化会议系统，包括摄取模块、提取模块及记录模块；摄取模块，用于获取会议区域内的音频数据及视频数据；提取模块，用于对音频数据进行音频解析以获得对话数据，对视频数据进行人脸识别以获得发言人员数据，将对话数据和发言人员数据进行关联得到有效对话数据；以及，按照时间顺序将有效对话数据进行整理得到数字化会议记录档案；记录模块，存储和/或输出数字化会议记录档案。本发明的方案可通过对会议现场的音频数据进行解析而自动生成数字化的会议记录，不再需要会议记录人员手动实施会议记录，提升了会议记录的效率和准确性。

技术研发人员：黄政
受保护的技术使用者：杭州讯意迪科技有限公司
技术研发日：
技术公布日：2024/2/21