来源 :金融界2024-01-29
2024年1月29日消息,据国家知识产权局公告,杭州海康威视数字技术股份有限公司取得一项名为“一种无数据知识蒸馏的方法、装置和存储介质“,授权公告号CN117035052B,申请日期为2023年10月。
专利摘要显示,本申请公开了一种无数据知识蒸馏的方法、装置和存储介质,包括:获取任务的各个目标类别的文本提示;对于每个目标类别的文本提示,将其输入文本?图像生成模型,经过所述文本?图像生成模型的处理生成与该文本提示语义相关的所述每个目标类别的训练图像;将视觉语言预训练模型作为教师模型,利用所有目标类别的训练图像蒸馏生成学生模型。应用本申请,能够蒸馏得到较强域泛化能力的学生模型。