(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210735568.2 (22)申请日 2022.06.27 (71)申请人 深圳集智数字科技有限公司 地址 518000 广东省深圳市南 山区南山街 道南山社区南 新路1003号103 (72)发明人 曾山松　 (74)专利代理 机构 北京嘉科知识产权代理事务 所(特殊普通 合伙) 11687 专利代理师 杨波 (51)Int.Cl. G06F 16/36(2019.01) G06N 3/08(2006.01) (54)发明名称 知识图谱嵌入表示方法及装置 (57)摘要 本公开涉及人工智能技术领域， 提供了一种 知识图谱嵌入表示方法及装置。 该方法包括： 定 义知识图谱嵌入表示， 并基于知识图谱嵌入表示 中实体的名称获取第一文档； 利用预设算法初始 化知识图谱嵌入表示， 得到第一表示和第二表 示； 利用语言表征模型初始化第一文档， 得到第 二文档； 根据第一表示和第二表示， 计算第三表 示； 根据第一表示和第二文档， 计算第四表 示； 根 据第三表示和第四表示， 计算第五表示， 根据第 二表示和第四表示， 计算第六表示； 根据第五表 示和第六表 示计算损失值， 并基于损失值训练知 识图谱嵌入模 型； 利用知识图谱嵌入模型提供知 识图谱嵌入服 务。 权利要求书2页 说明书13页 附图3页 CN 115098700 A 2022.09.23 CN 115098700 A 1.一种知识图谱嵌入表示方法， 其特 征在于， 包括： 定义知识图谱嵌入表示， 并基于所述知识图谱嵌入表示中实体的名称获取第一文档； 利用预设算法初始化所述知识图谱嵌入表示， 得到第一表示和第二表示； 利用语言表征模型初始化所述第一文档， 得到第二文档； 根据所述第一表示和所述第二表示， 计算第三表示； 根据所述第一表示和所述第二文档， 计算第四表示； 根据所述第三表示和所述第 四表示， 计算第五表示， 根据所述第二表示和所述第 四表 示， 计算第六表示； 根据所述第五表示和所述第六表示计算损失值， 并基于所述损失值训练知识图谱嵌入 模型； 利用所述知识图谱嵌入 模型提供知识图谱嵌入服 务。 2.根据权利要求1所述的方法， 其特征在于， 所述利用语言表征模型初始化所述第 一文 档， 得到第二文档， 包括： 对所述第一文档中的实体进行 标注处理； 利用所述语言表征模型初始化经 过所述标注处 理后的第一文档， 得到所述第二文档。 3.根据权利要求1所述的方法， 其特征在于， 所述根据所述第一表示和所述第二表示， 计算第三表示， 包括： 计算所述第一表示的转置矩阵； 基于所述第一表示、 所述转置矩阵、 所述第二表示、 第一权重矩阵、 第二权重矩阵和第 一预设偏差， 利用双曲正切函数进行计算， 得到第一计算结果； 基于所述第一计算结果和第三权 重矩阵进行计算， 得到第二计算结果； 基于所述第二计算结果确定第一注意力权 重； 基于所述第一注意力权重、 所述第一表示和和第 四权重矩阵进行计算， 得到所述第三 表示。 4.根据权利要求1所述的方法， 其特征在于， 所述根据所述第一表示和所述第二文档， 计算第四表示， 包括： 基于所述第 一表示、 所述第 二文档和第二预设偏差， 利用双曲正切函数进行计算， 得到 第三计算结果； 基于所述第三计算结果和第五权 重矩阵进行计算， 得到第四计算结果； 基于所述第四计算结果确定第二注意力权 重； 基于所述第 二注意力 权重、 所述第 一表示、 所述第 二文档和第六权重矩阵进行计算， 得 到第七表示； 将所述第七表示输入所述语言表征模型， 输出 所述第四表示。 5.根据权利要求1所述的方法， 其特征在于， 所述根据所述第三表示和所述第 四表示， 计算第五表示， 根据所述第二表示和所述第四表示， 计算第六表示， 包括： 根据第四权重矩阵、 所述第 三表示、 所述第四表示和第 二注意力 权重， 计算所述第五表 示； 基于第七权重矩阵、 所述第 二表示、 所述第四表示和第 三预设偏差， 利用双曲正切函数 进行计算， 得到第五计算结果；权　利　要　求　书 1/2 页 2 CN 115098700 A 2基于所述第五计算结果和第八权 重矩阵进行计算， 得到第六计算结果； 基于所述第六计算结果确定第三注意力权 重； 基于所述第 三注意力 权重、 所述第 二表示、 所述第四表示和第一权重矩阵进行计算， 得 到所述第六表示。 6.根据权利要求1所述的方法， 其特征在于， 所述根据所述第五表示和所述第六表示计 算损失值， 包括： 根据所述第五表示和所述第六表示， 利用合理性度量评价函数进行计算， 得到第七计 算结果和第八计算结果； 根据所述第七计算结果和所述第八计算结果， 利用所述知识图谱嵌入模型的损失函数 进行计算， 得到所述损失值。 7.根据权利要求1所述的方法， 其特征在于， 所述利用所述知识图谱嵌入模型提供知识 图谱嵌入服 务， 包括： 在接收到目标对象发送的知识图谱嵌入请求的情况下， 向所述目标对象获取第 一目标 文档； 利用所述语言表征模型初始化所述第一目标文档， 得到第二目标文档； 利用所述知识图谱嵌入 模型处理所述第二目标文档， 得到目标知识图谱嵌入表示。 8.一种知识图谱嵌入表示装置， 其特 征在于， 包括： 定义模块， 被配置为定义知识图谱嵌入表示， 并基于所述知识图谱嵌入表示中实体的 名称获取第一文档； 第一初始化模块， 被配置为利用预设算法初始化所述知识图谱嵌入表示， 得到第一表 示和第二表示； 第二初始化模块， 被 配置为利用语言表征模型初始化所述第一文档， 得到第二文档； 第一计算模块， 被 配置为根据所述第一表示和所述第二表示， 计算第三表示； 第二计算模块， 被 配置为根据所述第一表示和所述第二文档， 计算第四表示； 第三计算模块， 被配置为根据 所述第三表示和所述第四表示， 计算第五表示， 根据 所述 第二表示和所述第四表示， 计算第六表示； 第四计算模块， 被配置为根据所述第五表示和所述第六表示计算损 失值， 并基于所述 损失值训练知识图谱嵌入 模型； 服务模块， 被 配置为利用所述知识图谱嵌入 模型提供知识图谱嵌入服 务。 9.一种电子设备， 包括存储器、 处理器以及存储在所述存储器中并且可在所述处理器 上运行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求 1至 7中任一项所述方法的步骤。 10.一种计算机可读存储介质， 所述计算机可读存储介质存储有计算机程序， 其特征在 于， 所述计算机程序被处 理器执行时实现如权利要求1至7中任一项所述方法的步骤。权　利　要　求　书 2/2 页 3 CN 115098700 A 3