(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211298601.6 (22)申请日 2022.10.24 (71)申请人 山东建筑大学 地址 250100 山东省济南市历城区临港开 发区凤鸣路10 00号 (72)发明人 刘兴波　李佳敏　聂秀山　王少华　 尹义龙　 (74)专利代理 机构 济南圣达知识产权代理有限 公司 372 21 专利代理师 于凤洋 (51)Int.Cl. G06F 16/2455(2019.01) G06F 16/22(2019.01) G06F 17/16(2006.01) G06F 17/18(2006.01)G06K 9/62(2022.01) (54)发明名称 基于三重矩阵分解的数据检索方法、 系统及 设备 (57)摘要 本公开提供了一种基于三重矩阵分解的数 据检索方法、 系统及设备， 属于信息检索领域， 包 括获取待检索 的图像和文本两种模态的数据样 本， 对数据样本进行三重矩阵分解， 设定对数据 样本进行三重矩阵分解的约束值， 构建目标函 数； 基于目标函数得到哈希函数， 再根据哈希函 数对数据 样本进行投影， 对应生成数据样本的哈 希编码； 计算数据样本的哈希编码和已经训练好 的哈希编码之间的汉明距离， 并进行排序， 得到 数据样本的检索结果， 有效的挖掘到模态内的多 样性和模态间的一致性信息， 从而提升哈希函数 和哈希编码的判别性， 具有训练和检索速度快、 检索性能高的特点。 权利要求书2页 说明书7页 附图2页 CN 115374165 A 2022.11.22 CN 115374165 A 1.基于三重矩阵分解的数据检索方法， 其特 征在于， 包括以下步骤： 获取待检索的图像和文本 两种模态的数据样本， 并进行 预处理； 对数据样本进行三重矩阵分解， 设定对数据样本进行三重矩阵分解的约束值， 构建目 标函数； 基于目标函数得到哈希函数， 再根据哈希函数对数据样本进行投影， 对应生成数据样 本的哈希编码； 计算数据样本的哈希编码和已经训练好的哈希编码之间的汉明距离， 并进行排序， 得 到数据样本的检索结果。 2.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 所述预处理包 括对两种模态的数据样 本进行中心 化和核化处理， 得到核化的图像数据以及核化的文本数 据。 3.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 在构建的目标 函数中， 三重矩阵分解的目标为： 将异构的数据样本从高维投影到低维公共子空间中， 保持 原空间的相似信息， 使其每 个样本所属类型不变。 4.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 引入柯西损失 函数对数据样本三重矩阵分解中的异常值进行约束。 5.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 在所述目标函 数中， 通过最小化实值公共表示与哈希编码之间的量化误差， 将公共子空间中包含的语义 信息传递到汉明空间。 6.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 对一致投影矩 阵施加核范 数， 对特定投影矩阵施加F 范数。 7.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 所述目标函数 由四项构成， 第一项为通过三重矩阵分解得到的潜在类属 性特征和低 维公共表示； 第二项 为最小化公共表示和哈希码之间的量化误差， 将公共表示的语义信息嵌入到哈希编码； 第 三项为学习的两种投影矩阵， 即模态特定和模态一致的哈希函数， 并对分别其进行平滑和 低秩约束； 第四项是正则化项。 8.如权利要求1所述的基于三重矩阵分解的数据检索方法， 其特征在于， 最终构建的目 标函数为： 其中， 表示模态特定的映射矩阵， 表示模态间一致的映射矩阵， , 和 是超权　利　要　求　书 1/2 页 2 CN 115374165 A 2参数， 为类属性矩阵， 为公共表示矩阵， 是一个常数， 是训练 样本统一的哈希编码， 是超参数， Ui表示基矩阵， 为训练样本的数量。 9.基于三重矩阵分解的数据检索系统， 其特 征在于， 包括： 数据采集模块， 用于获取待检索的图像和文本 两种模态的数据样本， 并进行 预处理； 模型构建模块， 用于对数据样本进行三重矩阵分解， 设定对数据样本进行三重矩阵分 解的约束值， 构建目标函数； 哈希码矩阵和哈希函数生成模块， 用于基于目标函数得到哈希函数， 再根据哈希函数 对数据样本进行投影， 对应生成数据样本的哈希编码； 检索结果获取模块， 用于计算数据样本的哈希编码和已经训练好的哈希编码之间的汉 明距离， 并进行排序， 得到数据样本的检索结果。 10.一种电子设备， 包括存储器、 处理器及存储在存储器上并可在处理器上运行的程 序， 其特征在于， 所述处理器执行所述程序时实现如权利要求 1‑8任一项所述的基于三重矩 阵分解的数据检索方法中的步骤。权　利　要　求　书 2/2 页 3 CN 115374165 A 3