[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN109361825A - 会议纪要记录方法、终端及计算机存储介质 - Google Patents

会议纪要记录方法、终端及计算机存储介质 Download PDF

Info

Publication number
CN109361825A
CN109361825A CN201811345220.2A CN201811345220A CN109361825A CN 109361825 A CN109361825 A CN 109361825A CN 201811345220 A CN201811345220 A CN 201811345220A CN 109361825 A CN109361825 A CN 109361825A
Authority
CN
China
Prior art keywords
information
user
processing
conference
text information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811345220.2A
Other languages
English (en)
Inventor
陈小翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201811345220.2A priority Critical patent/CN109361825A/zh
Publication of CN109361825A publication Critical patent/CN109361825A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/568Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • G06F40/117Tagging; Marking up; Designating a block; Setting of attributes
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/563User guidance or feature selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请实施例公开了一种会议纪要记录方法、终端及计算机存储介质,应用于音频转换技术领域。其中会议纪要记方法包括:采集用户在会议过程中发表的语音信息;对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息;确定所述用户的身份信息,并将所述文本信息与所述身份信息进行相关存储;对所述文本信息进行预设处理,并输出预设处理后的文本信息,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。本申请实施例可以在完整、高效、准确地记录会议内容的前提下让相关人员能够迅速、完整、清晰地了解会议内容。

Description

会议纪要记录方法、终端及计算机存储介质
技术领域
本发明涉及音频转换技术领域,尤其涉及一种会议纪要记录方法、终端及计算机存储介质。
背景技术
目前,很多办公人员经常会参与现场会议或者视频会议。但当参会者人数较多或者参会者的发言速度较快时,会议记录人员往往不能完整地记录会议过程中讨论的所有关键信息,导致最后有会议内容的遗漏;此外,会议记录人员往往不能完整地记录每条发言具体是哪个参会者说的,以至于针对某些有争议的内容不清楚找谁沟通,导致会后沟通成本比较大。可见,通过人工记录会议内容的方式不仅记录效率非常低下,也不能保证记录的会议内容的准确性。即使会议记录人员完整地记录了每个参会者的发言,会后相关人员(参会者或者其他需要了解会议内容的人员)也难以从会议主持人记录的诸多内容中抽离出重点信息,阅读起来非常困难。
发明内容
本申请所要解决的技术问题在于,如何在完整、高效、准确地记录会议内容的前提下让相关人员能够迅速、完整、清晰地了解会议内容。
第一方面,本申请实施例提供了一种会议纪要记录方法,所述方法包括:
采集用户在会议过程中发表的语音信息;
对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息;
确定所述用户的身份信息,并将所述文本信息与所述身份信息进行相关存储;
对所述文本信息进行预设处理,并输出预设处理后的文本信息,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
作为一种可选的实施方式,所述对所述文本信息进行预设处理,包括:
获取所述文本信息中的目标内容,所述目标内容包括非有效内容、关键字、争议性内容、结论性内容中的任意一种或多种;
根据所述目标内容对所述文本信息进行删除处理或标记处理。
作为一种可选的实施方式,所述对所述文本信息进行预设处理,包括:
获取所述用户的表情信息,所述表情信息是根据所述用户对应的人脸视频或人脸图像获取的;
根据所述表情信息对所述文本信息进行标记处理。
作为一种可选的实施方式,所述对所述文本信息进行预设处理,包括:
根据所述语音信息中的语速信息和/或音量信息,确定所述语音信息中的语气信息;
根据所述语气信息对所述文本信息进行标记处理。
作为一种可选的实施方式,所述对所述文本信息进行预设处理,包括:
获取会议过程中分享的展示内容,并检测所述展示内容在预先存储的展示资料中的展示进度信息,其中,所述展示资料包括所述展示内容;
将所述文本信息与所述展示进度信息进行关联处理。
作为一种可选的实施方式,所述确定所述用户的身份信息,包括:
根据所述语音信息中的特征信息确定所述用户的身份信息。
作为另一种可选的实施方式,所述确定所述用户的身份信息,包括:
根据所述用户对应的人脸图像中的特征信息确定所述用户的身份信息。
作为一种可选的实施方式,所述方法还包括:
将所述语音信息与所述身份信息进行相关存储。
第二方面,本申请实施例提供了一种会议纪要记录终端,所述会议纪要记录终端包括用于执行上述第一方面的方法的模块和单元。
第三方面,本申请实施例提供了另一种会议纪要记录终端,所述会议纪要记录终端包括总线、处理器和存储器,所述处理器和存储器通过所述总线相互连接,其中,所述存储器用于存储支持所述会议纪要记录终端执行上述方法的计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行上述第一方面的方法。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述第一方面的方法。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等预设处理,还可以让相关人员能够迅速、完整、清晰地了解会议内容,从而提高相关人员获取会议内容的效率。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种会议纪要记录方法的示意流程图;
图2是本申请实施例提供的另一种会议纪要记录方法的示意流程图;
图3是本申请实施例提供的一种会议纪要记录终端的示意性框图;
图4是本申请实施例提供的另一种会议纪要记录终端的示意性框图;
图5是本申请实施例提供的又一种会议纪要记录终端的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例进行说明。
首先请参见图1,图1是本申请实施例提供的一种会议纪要记录方法的示意流程图。具体实现中,该方法包括的各个步骤可以由会议纪要记录终端执行。如图1所示的会议纪要记录方法可以包括:
S11、采集用户在会议过程中发表的语音信息。
其中,该会议纪要记录终端中可以设置语音采集装置。通过该语音采集装置,该会议纪要记录终端可以采集用户(如会议主持者、其他参会成员等参会者)的语音信息。在会议过程中的任一时刻,有可能是一个参会者在单独发言,如会议主持者发言,或者是会议主持者对其他参会成员的单独提问,或者是每个参会成员轮流发言;也有可能是两个甚至是两个以上参会者在同时发言,如多个参会者针对同一问题进行辩论,或者是全部参会者分为几个小组,各小组内部进行讨论。当多个参会者同时发言时,手写会议纪要就会变得非常困难,会议记录者往往很难完整记录所有的发言内容,也很难完整记录每一条发言内容具体是哪个参会者说的,而本申请实施例通过语音采集装置自动采集用户的语音信息就能完整、高效、准确地记录会议内容,保证信息透明性。
S12、对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息。
具体地,在本申请的实施例中,该会议纪要记录终端可以使用语音翻译技术对采集的语音信息进行翻译处理得到该语音信息对应的文本信息。
具体地,该会议纪要记录终端对采集的语音信息进行翻译处理可以是在采集到每一条语音信息时对其进行实时翻译处理,也可以是在采集到所有的语音信息后依次对每一条语音信息进行翻译处理或者同步对每一条语音信息进行翻译处理。
S13、确定所述用户的身份信息,并将所述文本信息与所述身份信息进行相关存储。
在本申请的实施例中,该会议纪要记录终端可以通过语音识别确定该用户的身份信息,或者可以通过人脸识别确定该用户的身份信息,还可以通过语音识别与人脸识别相结合的方式确定该用户的身份信息。
通过将用户在会议过程中发表的文本信息与该用户的身份信息进行相关存储,在会议结束后,相关人员(如需要重温会议内容的参会者,或者中途离开的参会者,或者需要了解会议内容的领导等)不仅可以查看各个参会者在会议过程中发表的文本信息,还可以明确每条文本信息具体是哪个参会者说的,或者说可以明确每个参会者具体发表了哪些言论。
S14、对所述文本信息进行预设处理,并输出预设处理后的文本信息。
在本申请实施例中,上述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
其中,删除处理指的是对该文本信息中不包含有效信息的词汇或句子(如叹气词、客套话等)进行删除;标记处理指的是对该文本信息中需要用户特别留意的词汇或句子(如出现频率较高的关键字、争议性内容、结论性内容、指示性内容等)进行高亮显示、加粗、标红等标记;关联处理指的是将该文本信息与该用户发表该文本信息时会议过程中分享的展示内容(如试题、论文、视频等)进行关联。
通过对该文本信息进行预设处理,该会议纪要记录终端可以生成重点突出的会议纪要。通过输出该预设处理后的文本信息,可以提高相关人员获取会议内容的效率。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性,从而可以避免会议过程中手写会议纪要造成会议效率低下的问题。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等后期处理,可以生成重点突出的会议纪要,从而可以让相关人员能够迅速、完整、清晰地了解会议内容,进而提高相关人员获取会议内容的效率。
请参见图2,是本申请实施例提供的另一种会议纪要记录方法的示意流程图。具体实现中,该方法包括的各个步骤可以由会议纪要记录终端执行。如图2所示的会议纪要记录方法可以包括:
S21、采集用户在会议过程中发表的语音信息。
其中,该会议纪要记录终端中可以设置语音采集装置。通过该语音采集装置,该会议纪要记录终端可以采集用户(如会议主持者、其他参会成员等参会者)的语音信息。
S22、对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息。
具体地,在本申请的实施例中,该会议纪要记录终端可以使用语音翻译技术对采集的语音信息进行翻译处理得到该语音信息对应的文本信息。
具体地,该会议纪要记录终端对采集的语音信息进行翻译处理可以是在采集到每一条语音信息时对其进行实时翻译处理,也可以是在采集到所有的语音信息后依次对每一条语音信息进行翻译处理或者同步对每一条语音信息进行翻译处理。
S23、确定所述用户的身份信息。
作为一种可选的实施方式,该会议纪要记录终端可以通过语音识别确定该用户的身份信息。具体地,该会议纪要记录终端可以将该用户的声音特征信息(如音色等)与预先存储的声音特征库进行匹配,以确定该用户的身份信息。
在该实施方式中,该会议纪要记录终端可以预先获取每个参会者的声音特征信息和身份信息,并将获取的声音特征信息和身份信息相关存储在声音特征库中。例如,该会议纪要记录终端可以在会前获取每个参会者的一段语音信息(如每个参会者对着该会议纪要记录终端朗读一句相同的话以向该会议纪要记录终端输入语音信息),并从这段语音信息中提取参会者的声音特征信息。其中,该声音特征库中存储的声音特征信息和身份信息具有一一对应的关系。当在会议过程中采集到用户的语音信息时,该会议纪要记录终端可以从采集的语音信息中提取该用户的声音特征信息,并将提取的声音特征信息与该声音特征库中存储的声音特征信息进行匹配比较;若提取的声音特征信息与该声音特征库中存储的目标声音特征信息的匹配程度满足第一预设条件,则将该声音特征库中存储的与该目标声音特征信息相关联的身份信息作为该用户的身份信息。其中,提取的声音特征信息与该目标声音特征信息的匹配程度例如可以用相似度来衡量,对应地,该第一预设条件可以为提取的声音特征信息与目标声音特征信息的相似度超过预设阈值(如90%)。
例如,当声音特征库中相关存储有用户A的身份信息和用户A的声音特征信息,用户B的身份信息和用户B的声音特征信息,以及用户C的身份信息和用户C的声音特征信息时,若从该用户的语音信息中提取的声音特征信息与用户A的声音特征信息的匹配程度满足第一预设条件时,则该会议纪要记录终端可以将用户A的身份信息作为该用户的身份信息。
作为另一种可选的实施方式,该会议纪要记录终端可以通过人脸识别确定该用户的身份信息。具体地,该会议纪要记录终端可以将该用户的人脸特征信息与预先存储的人脸特征库进行匹配,以确定该用户的身份信息。
在该实施方式中,该会议纪要记录终端可以预先采集每个参会者的人脸特征信息和身份信息,并将采集的人脸特征信息和身份信息相关存储在声音特征库中。例如,该会议纪要记录终端可以在会前获取每个参会者的人脸图像,并从人脸图像中提取参会者的人脸特征信息。具体地,该会议纪要记录终端可以从身份证头像中获取每个参会者的人脸图像。或者,该会议纪要记录终端中可以设置图像采集装置(如摄像头等)以采集每个参会者的人脸图像。其中,该人脸特征库中存储的特征信息和身份信息具有一一对应的关系。当在会议过程中采集到用户的语音信息时,该会议纪要记录终端可以首先确认(或锁定)发表该语音信息的具体是哪个用户(如在视频会议中确认是从哪台设备采集到的语音信息,或者在现场会议中确认是从哪个位置采集到的语音信息),再采集该用户的人脸图像,并从采集的人脸图像中提取人脸特征信息,将提取的人脸特征信息与该人脸特征库中存储的人脸特征信息进行匹配比较;若提取的人脸特征信息与该人脸特征库中存储的目标人脸特征信息的匹配程度满足第二预设条件,则将该人脸特征库中存储的与该目标人脸特征信息相关联的身份信息作为该用户的身份信息。其中,提取的人脸特征信息与该目标人脸特征信息的匹配程度例如可以用相似度来衡量,对应地,该第二预设条件可以为提取的人脸特征信息与目标人脸特征信息的相似度超过预设阈值(如90%)。
例如,当人脸特征库中相关存储有用户A的身份信息和用户A的人脸特征信息,用户B的身份信息和用户B的人脸特征信息,以及用户C的身份信息和用户C的人脸特征信息时,若在视频会议中确认从设备X采集到语音信息,则该会议纪要记录终端可以采集当前使用设备X的用户的人脸图像,如果从该用户的人脸图像中提取的人脸特征信息与用户A的人脸特征信息的匹配程度满足第二预设条件时,则该会议纪要记录终端可以将用户A的身份信息作为该用户的身份信息。
作为又一种可选的实施方式,该会议纪要记录终端可以通过语音识别与人脸识别相结合的方式确定该用户的身份信息。具体地,该会议纪要记录终端可以将该用户的声音特征信息和人脸特征信息分别与预先存储的声音特征库和人脸特征库进行匹配,以确定该用户的身份信息。
在该实施方式中,通过同时对该用户进行语音识别与人脸识别以确定该用户的身份信息,该会议纪要记录终端可以对确认的身份信息的准确性进行双重保障。
S24、将所述文本信息与所述身份信息进行相关存储。
通过将用户在会议过程中发表的文本信息与该用户的身份信息进行相关存储,在会议结束后,相关人员不仅可以查看各个参会者在会议过程中发表的文本信息,还可以明确每条文本信息具体是哪个参会者说的,或者说可以明确每个参会者具体发表了哪些言论。
S25、对所述文本信息进行预设处理。
在本申请实施例中,上述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
作为一种可选的实施方式,该会议纪要记录终端对所述文本信息进行预设处理可以具体包括:获取所述文本信息中的目标内容;根据所述目标内容对所述文本信息进行删除处理或标记处理。在该实施方式中,该目标内容包括非有效内容、关键字、争议性内容、结论性内容中的任意一种或多种。
例如,该会议纪要记录终端可以删除该文本信息中不包含有效信息的词汇或句子,如叹气词、客套话等;或者,该会议纪要记录终端可以将出现频率超过阈值的关键字进行高亮显示,并且,将不同关键字使用不同颜色进行高亮显示,以区分不同的关键信息;或者,该会议纪要记录终端还可以将争议较大(如赞同和反对的观点都较多)或者经过小组讨论的文本信息标红;或者,该会议纪要记录终端还可以将结论性的文本信息(如“下面我们总结一下”、“方案定下来为”、“需求确定为”、“经过讨论得出”等引导语后面的总结性内容)加粗;或者,该会议纪要记录终端还可以将同一用户发表的文本信息存储放在一起等。
作为另一种可选的实施方式,该会议纪要记录终端对所述文本信息进行预设处理可以具体包括:获取所述用户的表情信息,所述表情信息是根据所述用户对应的人脸视频或人脸图像获取的;根据所述表情信息对所述文本信息进行标记处理。在该实施方式中,该表情信息是根据该用户对应的人脸视频或人脸图像获取的。
在该实施方式中,该会议纪要记录终端在采集该用户的语音信息时需要同时获取该用户的表情信息。具体地,该会议纪要记录终端在采集该用户的语音信息时可以首先确认(或锁定)发表该语音信息的具体是哪个用户,再采集该用户的静态图像或动态视频,并根据采集的静态图像或动态视频获取该用户的表情信息。
在该实施方式中,该会议纪要记录终端还需要根据时间对获取的表情信息与用户发表的文本信息进行匹配,即该会议纪要记录终端根据表情信息对获取该表情信息的时刻下(即该表情信息对应的表情的持续时间内)该用户发表的本文信息进行标记处理。例如,若该用户发言时的表情很激动,则对该用户此时(即该激动表情的持续时间内)发表的文本信息添加下划线等。
作为又一种可选的实施方式,该会议纪要记录终端对所述文本信息进行预设处理可以具体包括:根据所述语音信息中的语速信息和/或音量信息,确定所述语音信息中的语气信息;根据所述语气信息对所述文本信息进行标记处理。
在该实施方式中,该会议纪要记录终端在采集该用户的语音信息时需要同时获取该用户的语气信息。其中,该用户的语气信息可以通过该语音信息中的语速信息、音量信息或者语速信息与音量信息相结合来确定。具体地,当该用户在发言过程中语速变化较大时,可以认为语速较慢的部分是比较重要的部分,则该会议纪要记录终端可以将语速较慢的语音信息对应的文本信息进行加粗;或者,当该用户在发言过程中音量变化较大时,可以认为音量较高的部分是比较重要的部分,则该会议纪要记录终端可以将音量较高的语音信息对应的文本信息进行加粗;或者,当该用户在发言过程中语速和音量的变化均较大时,可以认为语速较慢且音量较高的部分是比较重要的部分,则该会议纪要记录终端可以将语速较慢且音量较高的语音信息对应的文本信息进行加粗。
在该实施方式中,该会议纪要记录终端还需要根据时间对获取的语气信息与用户发表的文本信息进行匹配,即该会议纪要记录终端根据语气信息对获取该语气信息的时刻下(即该语气信息对应的语气的持续时间内)该用户发表的本文信息进行标记处理。例如,若该用户发言时的语气很坚定,则对该用户此时(即该坚定语气的持续时间内)发表的文本信息加粗等等。
作为再一种可选的实施方式,该会议纪要记录终端对所述文本信息进行预设处理可以具体包括:获取会议过程中分享的展示内容,并检测所述展示内容在预先存储的展示资料中的展示进度信息;将所述文本信息与所述展示进度信息进行关联处理。
其中,该展示资料例如可以是演示文稿(PowerPoint,PPT),对应地,该展示内容可以是某一页PPT,该展示进度信息可以是该页PPT的页码。或者,该展示资料例如可以是诸如试题、论文、视频等可用于展示的其他会议资料。举例来说,当该展示资料为视频时,该展示内容可以是某一帧视频,该展示进度信息可以是该帧视频的播放时间。具体地,该会议纪要记录终端可以从展示设备(如会议室的主机、个人电脑等)中获取发言时刻会议过程中分享的展示内容。
在该实施方式中,该会议纪要记录终端可以预先存储会议过程中使用的各个展示资料。从而,在对该文本信息进行关联处理时,该会议纪要记录终端可以将在发言时刻获取的展示内容与预先存储的展示资料进行匹配,以确定该展示内容所属的展示资料以及该展示内容在该展示资料中的展示进度信息。
在本申请的实施例中,该会议纪要记录终端获取展示内容与采集该用户的语音信息可以分别进行,再根据时间进行匹配。
例如,该会议纪要记录终端可以分别获取展示内容以及采集语音信息,并将10点整采集的语音信息转换得到的文本信息与10点整获取的展示内容在预先存储的展示资料中的展示进度信息进行关联处理。如此,会后相关人员就可以知道文本信息是针对哪一部分展示内容的,具体在述说哪些问题,从而可以帮助相关人员理解会议内容。
需要说明的是,本申请实施例对步骤S24与步骤S25的执行顺序不做具体限定。例如,步骤S24可以在步骤S25之前执行,也可以在步骤S25之后执行。
S26、输出预设处理后的文本信息。
通过对该文本信息进行预设处理,该会议纪要记录终端可以生成重点突出的会议纪要。通过输出该预设处理后的文本信息,可以提高相关人员获取会议内容的效率。
S27、将所述语音信息与所述身份信息进行相关存储。
需要说明的是,本申请实施例对步骤S24与步骤S27的执行顺序不做具体限定。例如,步骤S24可以在步骤S27之前执行,也可以在步骤S27之后执行,还可以和步骤S27同步执行。
进一步地,该会议纪要记录终端还可以将该语音信息与展示内容在预先存储的展示资料中的展示进度信息进行关联处理。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等预设处理,还可以让相关人员能够迅速、完整、清晰地了解会议内容,从而提高相关人员获取会议内容的效率。
本申请实施例提供一种会议纪要记录终端,该会议纪要记录终端包括用于执行本申请图1所示的方法的模块。具体地,请参见图3,是本申请实施例提供的一种会议纪要记录终端30的示意性框图。如图3所示的会议纪要记录终端30可以包括:采集模块31、翻译模块32、确定模块33、存储模块34、处理模块35和输出模块36。
其中,所述采集模块31,用于采集用户在会议过程中发表的语音信息。
所述翻译模块32,用于对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息。
所述确定模块33,用于确定所述用户的身份信息。
所述存储模块34,用于将所述文本信息与所述身份信息进行相关存储。
所述处理模块35,用于对所述文本信息进行预设处理。在本申请实施例中,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
所述输出模块36,用于输出预设处理后的文本信息。
需要说明的是,本申请实施例提供的会议纪要记录终端30的具体工作流程请参考本申请实施例提供的方法流程部分,在此不再赘述。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等预设处理,还可以让相关人员能够迅速、完整、清晰地了解会议内容,从而提高相关人员获取会议内容的效率。
本申请实施例还提供另一种会议纪要记录终端,该会议纪要记录终端包括用于执行本申请图2所示的方法的模块和单元。具体地,请参见图4,是本申请实施例提供的另一种会议纪要记录终端40的示意性框图。如图4所示的会议纪要记录终端40可以包括:采集模块41、翻译模块42、确定模块43、存储模块44、处理模块45和输出模块46。
其中,所述采集模块41,用于采集用户在会议过程中发表的语音信息。
所述翻译模块42,用于对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息。
所述确定模块43,用于确定所述用户的身份信息。
作为一种可选的实施方式,所述确定模块43,具体用于根据所述语音信息中的特征信息确定所述用户的身份信息。
作为另一种可选的实施方式,所述确定模块43,具体用于根据所述用户对应的人脸图像中的特征信息确定所述用户的身份信息。
所述存储模块44,用于将所述文本信息与所述身份信息进行相关存储。
所述处理模块45,用于对所述文本信息进行预设处理。在本申请实施例中,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
作为一种可选的实施方式,所述处理模块45可以包括:第一获取单元451和第一处理单元452。
其中,所述第一获取单元451,用于获取所述文本信息中的目标内容。在本申请实施例中,所述目标内容包括非有效内容、关键字、争议性内容、结论性内容中的任意一种或多种。
所述第一处理单元452,用于根据所述目标内容对所述文本信息进行删除处理或标记处理。
作为另一种可选的实施方式,所述处理模块45可以包括:第二获取单元453和第二处理单元454。
其中,所述第二获取单元453,用于获取所述用户的表情信息。在本申请实施例中,所述表情信息是根据所述用户对应的人脸视频或人脸图像获取的。
所述第二处理单元454,用于根据所述表情信息对所述文本信息进行标记处理。
作为又一种可选的实施方式,所述处理模块45可以包括:确定单元455和第三处理单元456。
其中,所述确定单元455,用于根据所述语音信息中的语速信息和/或音量信息,确定所述语音信息中的语气信息。
所述第三处理单元456,用于根据所述语气信息对所述文本信息进行标记处理。
作为再一种可选的实施方式,所述处理模块45可以包括:第三获取单元457、检测单元458和存储单元459。
其中,所述第三获取单元457,用于获取会议过程中分享的展示内容。
所述检测单元458,用于检测所述展示内容在预先存储的展示资料中的展示进度信息。在本申请的实施例中,所述展示资料包括所述展示内容。
所述存储单元459,用于将所述文本信息与所述展示进度信息进行关联处理。
所述输出模块46,用于输出预设处理后的文本信息。
需要说明的是,本申请实施例提供的会议纪要记录终端40的具体工作流程请参考本申请实施例提供的方法流程部分,在此不再赘述。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性,从而可以避免会议过程中手写会议纪要造成会议效率低下的问题。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等后期处理,可以生成重点突出的会议纪要,从而可以让相关人员能够迅速、完整、清晰地了解会议内容,进而提高相关人员获取会议内容的效率。
请参见图5,是本申请实施例提供的又一种会议纪要记录终端50的示意性框图。如图5所示的本实施例中的会议纪要记录终端50可以包括:总线51、处理器52、存储器53及输入/输出接口54。其中,所述总线51用于将所述处理器52、存储器53及输入/输出接口54相互连接起来并使得上述元件可以相互通信。所述存储器53用于存储一个或多个计算机程序,所述计算机程序包括程序指令。所述输入/输出接口54用于控制会议纪要记录终端50与其他设备(如服务器)之间的通信连接。
具体地,所述处理器51被配置用于调用所述程序指令执行:
采集用户在会议过程中发表的语音信息;
对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息;
确定所述用户的身份信息,并将所述文本信息与所述身份信息进行相关存储;
对所述文本信息进行预设处理,并输出预设处理后的文本信息,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述对所述文本信息进行预设处理时具体执行:
获取所述文本信息中的目标内容,所述目标内容包括非有效内容、关键字、争议性内容、结论性内容中的任意一种或多种;
根据所述目标内容对所述文本信息进行删除处理或标记处理。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述对所述文本信息进行预设处理时具体执行:
获取所述用户的表情信息,所述表情信息是根据所述用户对应的人脸视频或人脸图像获取的;
根据所述表情信息对所述文本信息进行标记处理。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述对所述文本信息进行预设处理时具体执行:
根据所述语音信息中的语速信息和/或音量信息,确定所述语音信息中的语气信息;
根据所述语气信息对所述文本信息进行标记处理。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述对所述文本信息进行预设处理时具体执行:
获取会议过程中分享的展示内容,并检测所述展示内容在预先存储的展示资料中的展示进度信息,其中,所述展示资料包括所述展示内容;
将所述文本信息与所述展示进度信息进行关联处理。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述确定所述用户的身份信息具体执行:
根据所述语音信息中的特征信息确定所述用户的身份信息。
作为另一种可选的实施方式,所述处理器51被配置用于调用所述程序指令执行所述确定所述用户的身份信息具体执行:
根据所述用户对应的人脸图像中的特征信息确定所述用户的身份信息。
作为一种可选的实施方式,所述处理器51被配置用于调用所述程序指令还执行:
将所述语音信息与所述身份信息进行相关存储。
在本申请实施例中,所述处理器51可以是任意类型的处理器,例如可以是中央处理单元(Central Processing Unit,CPU)、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)等等。所述存储器53可以是任意类型的存储器,例如可以是只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random AccessMemory,RAM)和非易失性随机存取存储器等等。
在本申请实施例中,通过自动采集用户的语音信息以及确定用户的身份信息,可以完整、高效、准确地记录会议内容,保证信息透明性。通过对采集的语音信息转换成文本信息,并对文本信息进行删除、标记、关联等预设处理,还可以让相关人员能够迅速、完整、清晰地了解会议内容,从而提高相关人员获取会议内容的效率。
在本申请的实施例中还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序中包括程序指令,所述处理器51被配置用于调用所述程序指令,执行本申请图1或图2所示的会议纪要记录方法。
所述计算机可读存储介质可以是前述任一实施例所述的会议纪要记录终端的内部存储单元,例如所述会议纪要记录终端的硬盘或内存。所述计算机可读存储介质也可以是所述会议纪要记录终端的外部存储设备,例如所述会议纪要记录终端上配备的插接式硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(Secure Digital,SD)卡、闪存卡(Flash Card)等等。
以上所述,仅为本申请的部分实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种会议纪要记录方法,其特征在于,所述方法包括:
采集用户在会议过程中发表的语音信息;
对所述语音信息进行翻译处理,以将所述语音信息转换成文本信息;
确定所述用户的身份信息,并将所述文本信息与所述身份信息进行相关存储;
对所述文本信息进行预设处理,并输出预设处理后的文本信息,所述预设处理包括删除处理、标记处理、关联处理中的任意一种或多种。
2.根据权利要求1所述的方法,其特征在于,所述对所述文本信息进行预设处理,包括:
获取所述文本信息中的目标内容,所述目标内容包括非有效内容、关键字、争议性内容、结论性内容中的任意一种或多种;
根据所述目标内容对所述文本信息进行删除处理或标记处理。
3.根据权利要求1所述的方法,其特征在于,所述对所述文本信息进行预设处理,包括:
获取所述用户的表情信息,所述表情信息是根据所述用户对应的人脸视频或人脸图像获取的;
根据所述表情信息对所述文本信息进行标记处理。
4.根据权利要求1所述的方法,其特征在于,所述对所述文本信息进行预设处理,包括:
根据所述语音信息中的语速信息和/或音量信息,确定所述语音信息中的语气信息;
根据所述语气信息对所述文本信息进行标记处理。
5.根据权利要求1所述的方法,其特征在于,所述对所述文本信息进行预设处理,包括:
获取会议过程中分享的展示内容,并检测所述展示内容在预先存储的展示资料中的展示进度信息,其中,所述展示资料包括所述展示内容;
将所述文本信息与所述展示进度信息进行关联处理。
6.根据权利要求1~5任一项所述的方法,其特征在于,所述确定所述用户的身份信息,包括:
根据所述语音信息中的特征信息确定所述用户的身份信息;或者,
根据所述用户对应的人脸图像中的特征信息确定所述用户的身份信息。
7.根据权利要求1~6任一项所述的方法,其特征在于,所述方法还包括:
将所述语音信息与所述身份信息进行相关存储。
8.一种会议纪要记录终端,其特征在于,包括用于执行如权利要求1~7任一项所述的方法的模块和/或单元。
9.一种会议纪要记录终端,其特征在于,包括处理器和存储器,所述处理器和存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器被配置用于调用所述程序指令,执行如权利要求1~7任一项所述的方法。
10.一种计算机存储介质,其特征在于,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1~7任一项所述的方法。
CN201811345220.2A 2018-11-12 2018-11-12 会议纪要记录方法、终端及计算机存储介质 Pending CN109361825A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811345220.2A CN109361825A (zh) 2018-11-12 2018-11-12 会议纪要记录方法、终端及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811345220.2A CN109361825A (zh) 2018-11-12 2018-11-12 会议纪要记录方法、终端及计算机存储介质

Publications (1)

Publication Number Publication Date
CN109361825A true CN109361825A (zh) 2019-02-19

Family

ID=65344875

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811345220.2A Pending CN109361825A (zh) 2018-11-12 2018-11-12 会议纪要记录方法、终端及计算机存储介质

Country Status (1)

Country Link
CN (1) CN109361825A (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109949887A (zh) * 2019-03-18 2019-06-28 深圳安泰创新科技股份有限公司 会诊记录方法、装置及计算机可读存储介质
CN110232925A (zh) * 2019-06-28 2019-09-13 百度在线网络技术(北京)有限公司 生成会议记录的方法、装置和会议终端
CN110351507A (zh) * 2019-08-08 2019-10-18 常州市小先信息技术有限公司 一种应用于会议的智能辅助设备及应用方法
CN110427099A (zh) * 2019-06-28 2019-11-08 广东虚拟现实科技有限公司 信息记录方法、装置、系统、电子设备以及信息获取方法
CN110588524A (zh) * 2019-08-02 2019-12-20 精电有限公司 一种信息显示的方法及车载辅助显示系统
CN110619897A (zh) * 2019-08-02 2019-12-27 精电有限公司 一种会议纪要生成的方法及车载录音系统
CN111432157A (zh) * 2020-02-18 2020-07-17 视联动力信息技术股份有限公司 基于视联网的会议处理方法、装置、设备及存储介质
WO2020220546A1 (zh) * 2019-04-30 2020-11-05 平安科技(深圳)有限公司 一种基于人脸识别的会议管理方法、系统和可读存储介质
CN112466306A (zh) * 2019-08-19 2021-03-09 中国科学院自动化研究所 会议纪要生成方法、装置、计算机设备及存储介质
CN112599130A (zh) * 2020-12-03 2021-04-02 安徽宝信信息科技有限公司 一种基于智慧屏的智能会议系统
CN112786045A (zh) * 2021-01-04 2021-05-11 上海明略人工智能(集团)有限公司 用于会议记录的设备、服务器、方法及系统
CN113326678A (zh) * 2021-06-24 2021-08-31 深圳前海微众银行股份有限公司 会议纪要的生成方法、装置、终端设备及计算机存储介质
WO2021218981A1 (zh) * 2020-04-30 2021-11-04 北京字节跳动网络技术有限公司 互动记录的生成方法、装置、设备及介质
CN113766170A (zh) * 2021-09-18 2021-12-07 苏州科天视创信息科技有限公司 基于音视频的在线会议多端资源共享方法及系统
CN113794853A (zh) * 2021-09-07 2021-12-14 广州朗堃电子科技有限公司 一种远程视频会议会议纪要生成方法及会议终端
CN114491144A (zh) * 2022-01-14 2022-05-13 维沃移动通信有限公司 会话记录输出方法和电子设备
CN117764307A (zh) * 2023-11-21 2024-03-26 南京南瑞水利水电科技有限公司 一种电力保供决策分析系统及其方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102572372A (zh) * 2011-12-28 2012-07-11 中兴通讯股份有限公司 会议纪要的提取方法和装置
US20130113804A1 (en) * 2011-11-06 2013-05-09 Ahmet Mufit Ferman Methods, Systems and Apparatus for Summarizing a Meeting
CN105895085A (zh) * 2016-03-30 2016-08-24 科大讯飞股份有限公司 一种多媒体转写方法和系统
CN106782545A (zh) * 2016-12-16 2017-05-31 广州视源电子科技股份有限公司 一种将音视频数据转化成文字记录的系统和方法
CN107360007A (zh) * 2017-06-26 2017-11-17 珠海格力电器股份有限公司 一种会议实现方法、装置及电子设备
CN107451110A (zh) * 2017-07-10 2017-12-08 珠海格力电器股份有限公司 一种生成会议纪要的方法、装置及服务器
CN107733666A (zh) * 2017-10-31 2018-02-23 珠海格力电器股份有限公司 一种会议实现方法、装置及电子设备
CN107818785A (zh) * 2017-09-26 2018-03-20 平安普惠企业管理有限公司 一种从多媒体文件中提取信息的方法及终端设备
CN108022583A (zh) * 2017-11-17 2018-05-11 平安科技(深圳)有限公司 会议纪要生成方法、应用服务器及计算机可读存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130113804A1 (en) * 2011-11-06 2013-05-09 Ahmet Mufit Ferman Methods, Systems and Apparatus for Summarizing a Meeting
CN102572372A (zh) * 2011-12-28 2012-07-11 中兴通讯股份有限公司 会议纪要的提取方法和装置
CN105895085A (zh) * 2016-03-30 2016-08-24 科大讯飞股份有限公司 一种多媒体转写方法和系统
CN106782545A (zh) * 2016-12-16 2017-05-31 广州视源电子科技股份有限公司 一种将音视频数据转化成文字记录的系统和方法
CN107360007A (zh) * 2017-06-26 2017-11-17 珠海格力电器股份有限公司 一种会议实现方法、装置及电子设备
CN107451110A (zh) * 2017-07-10 2017-12-08 珠海格力电器股份有限公司 一种生成会议纪要的方法、装置及服务器
CN107818785A (zh) * 2017-09-26 2018-03-20 平安普惠企业管理有限公司 一种从多媒体文件中提取信息的方法及终端设备
CN107733666A (zh) * 2017-10-31 2018-02-23 珠海格力电器股份有限公司 一种会议实现方法、装置及电子设备
CN108022583A (zh) * 2017-11-17 2018-05-11 平安科技(深圳)有限公司 会议纪要生成方法、应用服务器及计算机可读存储介质

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109949887A (zh) * 2019-03-18 2019-06-28 深圳安泰创新科技股份有限公司 会诊记录方法、装置及计算机可读存储介质
WO2020220546A1 (zh) * 2019-04-30 2020-11-05 平安科技(深圳)有限公司 一种基于人脸识别的会议管理方法、系统和可读存储介质
CN110232925A (zh) * 2019-06-28 2019-09-13 百度在线网络技术(北京)有限公司 生成会议记录的方法、装置和会议终端
CN110427099A (zh) * 2019-06-28 2019-11-08 广东虚拟现实科技有限公司 信息记录方法、装置、系统、电子设备以及信息获取方法
CN110588524A (zh) * 2019-08-02 2019-12-20 精电有限公司 一种信息显示的方法及车载辅助显示系统
CN110619897A (zh) * 2019-08-02 2019-12-27 精电有限公司 一种会议纪要生成的方法及车载录音系统
CN110351507A (zh) * 2019-08-08 2019-10-18 常州市小先信息技术有限公司 一种应用于会议的智能辅助设备及应用方法
CN112466306B (zh) * 2019-08-19 2023-07-04 中国科学院自动化研究所 会议纪要生成方法、装置、计算机设备及存储介质
CN112466306A (zh) * 2019-08-19 2021-03-09 中国科学院自动化研究所 会议纪要生成方法、装置、计算机设备及存储介质
CN111432157A (zh) * 2020-02-18 2020-07-17 视联动力信息技术股份有限公司 基于视联网的会议处理方法、装置、设备及存储介质
CN111432157B (zh) * 2020-02-18 2023-04-07 视联动力信息技术股份有限公司 基于视联网的会议处理方法、装置、设备及存储介质
US12087285B2 (en) 2020-04-30 2024-09-10 Beijing Bytedance Network Technology Co., Ltd. Method and apparatus for generating interaction record, and device and medium
WO2021218981A1 (zh) * 2020-04-30 2021-11-04 北京字节跳动网络技术有限公司 互动记录的生成方法、装置、设备及介质
CN112599130A (zh) * 2020-12-03 2021-04-02 安徽宝信信息科技有限公司 一种基于智慧屏的智能会议系统
CN112786045A (zh) * 2021-01-04 2021-05-11 上海明略人工智能(集团)有限公司 用于会议记录的设备、服务器、方法及系统
CN112786045B (zh) * 2021-01-04 2024-03-12 上海明略人工智能(集团)有限公司 用于会议记录的设备、服务器、方法及系统
WO2022267322A1 (zh) * 2021-06-24 2022-12-29 深圳前海微众银行股份有限公司 会议纪要的生成方法、装置、终端设备及计算机存储介质
CN113326678A (zh) * 2021-06-24 2021-08-31 深圳前海微众银行股份有限公司 会议纪要的生成方法、装置、终端设备及计算机存储介质
CN113794853A (zh) * 2021-09-07 2021-12-14 广州朗堃电子科技有限公司 一种远程视频会议会议纪要生成方法及会议终端
CN113766170A (zh) * 2021-09-18 2021-12-07 苏州科天视创信息科技有限公司 基于音视频的在线会议多端资源共享方法及系统
CN114491144A (zh) * 2022-01-14 2022-05-13 维沃移动通信有限公司 会话记录输出方法和电子设备
CN117764307A (zh) * 2023-11-21 2024-03-26 南京南瑞水利水电科技有限公司 一种电力保供决策分析系统及其方法

Similar Documents

Publication Publication Date Title
CN109361825A (zh) 会议纪要记录方法、终端及计算机存储介质
CN111883123B (zh) 基于ai识别的会议纪要生成方法、装置、设备及介质
CN110517689B (zh) 一种语音数据处理方法、装置及存储介质
CN110444198B (zh) 检索方法、装置、计算机设备和存储介质
US11315366B2 (en) Conference recording method and data processing device employing the same
WO2021175019A1 (zh) 音视频录制引导方法、装置、计算机设备及存储介质
US10270736B2 (en) Account adding method, terminal, server, and computer storage medium
CN108986826A (zh) 自动生成会议记录的方法、电子装置及可读存储介质
CN108920640B (zh) 基于语音交互的上下文获取方法及设备
CN105975569A (zh) 一种语音处理的方法及终端
CN107451110A (zh) 一种生成会议纪要的方法、装置及服务器
US11281707B2 (en) System, summarization apparatus, summarization system, and method of controlling summarization apparatus, for acquiring summary information
KR20070118038A (ko) 정보처리 장치 및 정보처리 방법과 컴퓨터·프로그램
CN110598008B (zh) 录制数据的数据质检方法及装置、存储介质
CN110853646A (zh) 会议发言角色的区分方法、装置、设备及可读存储介质
KR102548365B1 (ko) 회의 기록 자동 생성 방법 및 그 장치
CN110265032A (zh) 会议数据分析处理方法、装置、计算机设备和存储介质
CN111415128B (zh) 控制会议的方法、系统、装置、设备和介质
CN113095204B (zh) 双录数据质检方法、装置及系统
US8868419B2 (en) Generalizing text content summary from speech content
CN112397052B (zh) Vad断句测试方法、装置、计算机设备及存储介质
CN111223487B (zh) 一种信息处理方法及电子设备
CN110460798B (zh) 视频访谈服务处理方法、装置、终端与存储介质
CN113782026A (zh) 一种信息处理方法、装置、介质和设备
TWI769520B (zh) 多國語言語音辨識及翻譯方法與相關的系統

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190219