一种面向中文用户的隐私保护的跨模态图文检索方法技术

技术编号:43776320 阅读:30 留言:0更新日期:2024-12-24 16:14
本申请提出了一种面向中文用户的隐私保护的跨模态图文检索方法,该方法包括:用户向私有服务器提交图文数据,通过高效参数微调方法设计的特征提取模型将图文特征映射至同一语义空间并采用非对称标量积技术加密;将加密后的图文数据与图文数据特征一同上传至云服务器,云服务器构建加密数据的分层图索引;当用户查询时,私有服务器提取并加密查询特征,云服务器通过已建好的索引结构执行近似最近邻搜索,返回加密结果给私有服务器解密,最终将明文结果送达用户。本申请可以实现在保护用户数据隐私安全的同时,为用户提供针对其存储于第三方云服务器上的图文数据的跨模态检索服务,并且具有较高的检索精度和检索效率,以及较低的训练开销。

【技术实现步骤摘要】

本申请涉及跨模态检索领域,尤其涉及一种面向中文用户的隐私保护的跨模态图文检索方法


技术介绍

1、随着互联网和信息技术的快速发展,个人以图片和文本为主要类型的多媒体数据呈现爆炸式的增长,与之而来的是对数据存储空间日益扩大的需求。因此,越来越多的用户倾向于将私人的多媒体数据存储在第三方云服务器中以节约本地存储空间,伴随而来的是用户的数据隐私安全问题,如何在有效保护用户数据隐私的同时,为用户提供准确、快速的跨模态数据检索服务已成为隐私保护领域亟需研究的热点问题。

2、此外,现有的隐私保护的跨模态检索方案都是基于英文数据集进行设计和测试的,这限制了中文社区用户的使用。虽然可以将中文用户的数据先翻译成英文再进行存储和检索,但这造成了计算资源的浪费,且在机器翻译下难免会产生语义的失真和错误。


技术实现思路

1、本申请旨在至少在一定程度上解决相关技术中的技术问题之一。

2、本申请提出了一种面向中文用户的隐私保护的跨模态图文检索方法。

3、根据本申请实施例的第一方面,提供一种面向中文用户本文档来自技高网...

【技术保护点】

1.一种面向中文用户的隐私保护的跨模态图文检索方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,还包括:

3.根据权利要求2所述的方法,其特征在于,所述特征提取模型的训练过程,包括:

4.根据权利要求3所述的方法,其特征在于,所述利用非对称标量积保留加密技术对提取到的图文数据的特征进行加密,还包括:

5.根据权利要求4所述的方法,其特征在于,所述响应于用户发起查询请求,对用户输入的查询内容进行特征提取和加密,得到加密的查询陷门并将其发送至云服务器,包括:

6.一种面向中文用户的隐私保护的跨模态图文检索方法,包括...

【技术特征摘要】

1.一种面向中文用户的隐私保护的跨模态图文检索方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,还包括:

3.根据权利要求2所述的方法,其特征在于,所述特征提取模型的训练过程,包括:

4.根据权利要求3所述的方法,其特征在于,所述利用非对称标量积保留加密技术对提取到的图文数据的特征进行加密,还包括:

5.根据权利要求4所述的方法,其特征在于,所述响应于用户发起查询请求,对用户输入的查询内容进行特征提取和加密,得到加密的查询...

【专利技术属性】
技术研发人员:张克君徐少飞李鹏程王文彬王钧邹兵杨翔宋宇拓徐凌韵韩朋志
申请(专利权)人:北京电子科技学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1