基于循环相关和重要性采样的知识表示算法研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:erwewrasfrfa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
知识图谱是由实体和关系组成的语义网络,可以用来结构化地描述现实世界中的各种事物及其之间的关系。但是知识图谱通常是不完备的,因而知识图谱的补全是知识图谱中的一个重要问题,解决这一问题的主要方法就是知识表示学习。知识表示学习通过将知识图谱中的实体和关系嵌入到一个连续的向量空间,既保持了知识图谱的结构又能简化操作。Simpl E模型[1]作为目前最先进的基于乘积的知识表示模型,虽然表现出了不错的效果,但是它仅在实体之间进行了简单的哈达马积运算,这限制了它的表达能力,使其不能捕获到实体之间更深层次的联系。本文在研究了多种乘积运算的基础上提出了使用循环相关运算的Simpl E模型(Simple Embedding with Circular Correlation,Simpl E CC),并证明了Simpl E CC模型具有完全表达性,且可以通过参数绑定将背景知识融入到模型中。由于目前知识图谱中只包含正三元组,因而在知识表示学习中有一个负采样的过程来生成对应的负三元组,然而通过随机均匀采样生成负三元组的方式极易造成零损失问题。本文提出了基于重要性采样的负采样框架(Negative Sampling based on Importance Sampling,NSIS),通过扩大采样范围在一定程度上可以减少零损失问题发生的概率。链接预测实验证明了Simpl E CC模型优于包括Simpl E模型在内的大多数知识表示模型,基于重要性采样的负采样框架也能显著改善现有的知识表示模型的训练效果。
其他文献
双曲型方程是偏微分方程的一个重要内容,在现今数学研究领域占有重要地位,可用来描述自然界及工程技术中大量存在的振动或波动现象.1746年,达朗贝尔在他的论文《张紧的弦振动
本论文主要研究Navier-Stokes-Voight(简称NSV)方程,该方程在1973年由Oskolkov教授作为粘弹性不可压流体模型被提出.我们首先关注一维确定NSV方程的精确解.其次研究在随机扰
本文对南海北部冷泉区一个长550 cm的岩心进行微生物计数和微生物多样性分析。使用吖啶橙直接计数法统计微生物的数量并比较微生物丰度与甲烷浓度的变化关系,综合地球化学数
本文研究了有限环Z2a + uZ2a上线性码的若干问题及有限环GR(q,qm)+uGR(q,qm 上斜循环码.具体内容如下:(1)第一部分主要考虑环Z2a + uZ2a上线性码的MacWilliams恒等式及其自对偶码
本文研究下截断Webull分布和Pareto分布的最大和最小次序统计量随机比较.第二章中,我们讨论由独立不同分布的下截断Weibul;元件构成的串联和并联系统,当系统中不同分布的形状
人类社会实践中,各种看似不确定的现象在某种意义下隐含着必然的规律性.人们试图用数学的方法研究随机事件发生的可能性大小,概率论学科因此诞生.以测度论为基础,二十世纪初,
微分方程解的动力学性态一直是微分方程理论研究的一个重要内容,传染病动力学研究更是对其的有力推广,通过建造传染病动力学特征的数学模型,可以依此进行动力学性态分析,从而
令Z表示全体整数所组成的集合.对集合A(?)Z及n∈Z,令r(A,n)=#{(a,a’)∈A×A:a+a’= n}.函数r(A,n)被称为集合A的加法表示函数.设整数k1,k2满足(k1,k2)=1.对集合A(?)Z及n∈Z,
近年来,混沌系统和切换系统作为非线性科学的重要分支,得到了长足的发展,尤其是二者的结合:混沌切换系统,更是开创了混杂系统研究的新篇章。混沌切换系统较单纯的混沌系统和
醇腈酶(hydroxynitrile lyase,HNL;Oxynitrilase,E.C.4.1.2.x),作为一种生物催化剂,能可逆地催化氰化氢(HCN)和醛或酮类化合物反应生成手性氰醇化合物或手性药物。根据其催化