Knowledge Commons of Institute of Automation，CAS
| 自适应特征融合的多模态实体对齐研究 | |
郭浩 ; 李欣奕; 唐九阳; 郭延明; 赵翔
| |
| 发表期刊 | 自动化学报
 |
| ISSN | 0254-4156 |
| 2024 | |
| 卷号 | 50期号:4页码:758-770 |
| 摘要 | 多模态数据间交互式任务的兴起对于综合利用不同模态的知识提出了更高的要求, 因此融合不同模态知识的多模态知识图谱应运而生. 然而, 现有多模态知识图谱存在图谱知识不完整的问题, 严重阻碍对信息的有效利用. 缓解此问题的有效方法是通过实体对齐进行知识图谱补全. 当前多模态实体对齐方法以固定权重融合多种模态信息, 在融合过程中忽略不同模态信息贡献的差异性. 为解决上述问题, 设计一套自适应特征融合机制, 根据不同模态数据质量动态融合实体结构信息和视觉信息. 此外, 考虑到视觉信息质量不高、知识图谱之间的结构差异也影响实体对齐的效果, 本文分别设计提升视觉信息有效利用率的视觉特征处理模块以及缓和结构差异性的三元组筛选模块. 在多模态实体对齐任务上的实验结果表明, 提出的多模态实体对齐方法的性能优于当前最好的方法. |
| 关键词 | 多模态知识图谱 实体对齐 预训练模型 特征融合 |
| DOI | 10.16383/j.aas.c210518 |
| 引用统计 | |
| 文献类型 | 期刊论文 |
| 条目标识符 | http://ir.ia.ac.cn/handle/173211/56119 |
| 专题 | 学术期刊_自动化学报 |
| 推荐引用方式 GB/T 7714 | 郭浩,李欣奕,唐九阳,等. 自适应特征融合的多模态实体对齐研究[J]. 自动化学报,2024,50(4):758-770. |
| APA | 郭浩,李欣奕,唐九阳,郭延明,&赵翔.(2024).自适应特征融合的多模态实体对齐研究.自动化学报,50(4),758-770. |
| MLA | 郭浩,et al."自适应特征融合的多模态实体对齐研究".自动化学报 50.4(2024):758-770. |
| 条目包含的文件 | 下载所有文件 | |||||
| 文件名称/大小 | 文献类型 | 版本类型 | 开放类型 | 使用许可 | ||
| AAS-CN-2021-0518.pdf（7063KB） | 期刊论文 | 出版稿 | 开放获取 | CC BY-NC-SA | 浏览 下载 | |
| 个性服务 |
| 推荐该条目 |
| 保存到收藏夹 |
| 查看访问统计 |
| 导出为Endnote文件 |
| 谷歌学术 |
| 谷歌学术中相似的文章 |
| [郭浩]的文章 |
| [李欣奕]的文章 |
| [唐九阳]的文章 |
| 百度学术 |
| 百度学术中相似的文章 |
| [郭浩]的文章 |
| [李欣奕]的文章 |
| [唐九阳]的文章 |
| 必应学术 |
| 必应学术中相似的文章 |
| [郭浩]的文章 |
| [李欣奕]的文章 |
| [唐九阳]的文章 |
| 相关权益政策 |
| 暂无数据 |
| 收藏/分享 |
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。
修改评论