一种自适应架构语义分布文本理解方法及系统转让专利

申请号 : CN202010661152.1

文献号 : CN111814468B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 庞文君杨猛黄志青

申请人 : 前海企保科技(深圳)有限公司

摘要 :

本发明涉及一种自适应架构语义分布文本理解方法及系统,该自适应架构语义分布文本理解系统包括的主要模块有文本基础编码器、语义关联关键分布表示模块、架构自适应分类网络模块。本发明利用语义关联关键分布表示模块中的上下文多头注意力语义分布表示,可以更好的利用上下文信息,消除上下文表述的歧义问题;同时通过关键信息多头注意力语义分布表示,可以提取关键词、短语等关键信息,解决细分领域关键信息对分类任务敏感的问题。而架构自适应分类网络模块,可根据分类类别的相近程度自适应的选择分类网络层,从而使相近的分类共用权重参数,分类类别相差较大的分类不共用权重,从而能更好的解决分类类别无法完全独立的问题。