来源 :金融界2023-11-24
据国家知识产权局公告,科大讯飞股份有限公司取得一项名为“一种系统回复质量的评价方法及装置”,授权公告号CN109472030B,申请日期为2018年11月。
专利摘要显示,本申请公开了一种系统回复质量的评价方法及装置,该方法包括:首先生成目标对话系统的系统评价指标,包括根据目标对话系统的每一选定回复与对应问题之间的主题相关度生成的第一评价指标、根据目标对话系统的每一选定回复与对应人工回复之间的语义相似度生成的第二评价指标、以及根据目标对话系统的每一选定回复为通用回复的可能性生成的第三评价指标中的至少一个,然后根据生成的系统评价指标,确定出目标对话系统的回复质量,可见,本申请在对目标对话系统的回复质量进行评价时,考虑了系统回复与问题之间的主题相关度、系统回复与人工回复之间的语义相似度以及系统回复为通用回复的可能性,从而能够更准确地评价目标对话系统的回复质量。