ULTRA:知识图谱推理的预训练基础模型

极客号(Daydx.com)10月31日 消息:ULTRA是一个旨在推理知识图谱(KGs)的预训练基础模型。ULTRA的关键创新在于它能够学习通用和可迁移的图表示,而无需依赖文本信息。它通过在不同KG中创建关系图,能够在各种实体和关系词汇下进行推理,甚至在零样本情况下表现出色,常常超越专门的基准模型。

ULTRA:知识图谱推理的预训练基础模型

项目地址:https://github.com/DeepGraphLearning/ULTRA

研究人员通过三步算法实现了ULTRA的功能,包括提升图、根据查询获取关系表示以及预测链接。ULTRA在57个KG上的性能表现出色,特别是在零样本推理方面。通过微调,ULTRA的性能进一步提升,与基准模型相媲美甚至优于那些仅在特定图上训练的模型。

总的来说,ULTRA提供了通用和可迁移的图表示,对于多关系图的训练和推理非常出色,而无需输入特征。它不仅在各种KG上表现出色,甚至在零样本情况下也能实现卓越的性能。未来的研究将探索更多捕捉关系之间互动的策略,以及更全面的评估指标。

这项研究鼓励深入研究迁移学习对KG表示学习的潜在益处,并建议研究归纳学习方法,以实现对具有不同关系集的KGs的泛化。

总之,ULTRA的通用性和可迁移性使其成为归纳和可迁移的知识图谱推理的有望选择,对于各种不同关系结构的新KGs都能表现出色。

声明:本文内容整理自网络,观点仅代表原作者本人,投稿号仅提供信息发布服务。如有侵权,请联系管理员。

(0)
上一篇 2023年10月31日 12:17
下一篇 2023年10月31日 12:17

热点推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注