首站-论文投稿智能助手
典型文献
基于多模态模式迁移的知识图谱实体配图
文献摘要:
构建多模态知识图谱的核心在于为知识图谱中的实体匹配正确合适的图像.现有的实体配图方法主要将百科图谱以及图像搜索引擎作为实体候选图像的来源,但对图像数据元的应用方式比较简单,不能准确把握图像数据来源的特点,且可扩展性较差.提出一种基于多模态模式迁移的知识图谱实体配图方法,从不同类别的头部实体中抽取对应的语义模板及视觉模式迁移到同类非头部实体的图像获取过程中,其中语义模板用于构建搜索引擎检索关键词,视觉模式用于对检索结果去噪,最终为WikiData中25类共1.278×105个实体收集1.8×106幅图像.实验结果表明,与IMGpedia、VisualSem、Richpedia和MMKG这4种多模态知识图谱相比,利用该方法构建所得的知识图谱中实体对应的图像在准确性和多样性上更具优势,在下游任务链接预测中,通过引入该方法收集到的图像可使模型的预测链接准确性得到显著提升,在Hits@10的指标上取得59.74%的准确率,较对比方法提高12.7个百分点以上.
文献关键词:
多模态知识图谱;符号接地;模式迁移;链接预测;实体配图
作者姓名:
蒋雪瑶;力维辰;刘井平;李直旭;肖仰华
作者机构:
复旦大学软件学院,上海200433;华东理工大学信息科学与工程学院,上海200237
文献出处:
引用格式:
[1]蒋雪瑶;力维辰;刘井平;李直旭;肖仰华-.基于多模态模式迁移的知识图谱实体配图)[J].计算机工程,2022(08):70-76
A类:
实体配图,WikiData,IMGpedia,VisualSem,Richpedia,MMKG,符号接地
B类:
多模态模式,模式迁移,多模态知识图谱,实体匹配,百科,搜索引擎,选图,图像数据,数据元,应用方式,比较简单,数据来源,可扩展性,去噪,建所,任务链,链接预测,Hits,比方,百分点
AB值:
0.216646
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。