画作推荐方法、终端设备、服务器、计算机设备及介质技术

本发明专利技术公开一种画作推荐方法、终端设备、服务器、计算机设备及介质。该方法的一具体实施方式包括：终端设备采集画作图像；所述终端设备将画作图像发送至服务器，以使得所述服务器提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。该实施方式可以基于用户利用终端设备采集的画作图像直接在画作库中高效精确的进行相同画作检索和相似画作检索，并根据检索结果进行精确的画作推荐，可大幅提升用户的体验，特别是电子画屏用户的体验。

Recommended methods of painting, terminal equipment, server, computer equipment and media

【技术实现步骤摘要】
画作推荐方法、终端设备、服务器、计算机设备及介质
本专利技术涉及图像处理
更具体地，涉及一种画作推荐方法、终端设备、服务器、计算机设备及介质。
技术介绍
目前的画作推荐方式需要用户在终端设备输入画作相关信息的文字描述，例如画作的名称、作者、风格等，服务器根据接收到的画作相关信息将推荐画作发送至用户的终端设备。此画作推荐方式在用户发现了现实环境中不知道名称、作者等相关信息的画作，却想要利用电子画屏等显示设备欣赏时无法实现。因此，需要提供一种新的画作推荐方法、终端设备、服务器、计算机设备及介质。
技术实现思路
本专利技术的目的在于提供一种画作推荐方法、终端设备、服务器、计算机设备及介质，以解决现有技术存在的问题中的至少一个。为达到上述目的，本专利技术采用下述技术方案：本专利技术第一方面提供了一种画作推荐方法，包括：终端设备采集画作图像；所述终端设备将画作图像发送至服务器，以使得所述服务器提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。本专利技术第一方面提供的画作推荐方法，可以基于用户利用终端设备采集的画作图像直接在画作库中高效精确的进行相同画作检索和相似画作检索，并根据检索结果进行精确的画作推荐，可大幅提升用户的体验，特别是电子画屏用户的体验。其中，一方面，尺度不变特征对旋转、尺度缩放、亮度变化保持不变性，对视角变化、仿射变换、噪声也保持一定程度的稳定性，因此本专利技术第一方面提供的画作推荐方法根据画作图像的尺度不变特征进行需要精确匹配的相同画作检索；另一方面，多尺度特征能够更好的表征画作颜色、内容等信息，并且用于画作相似度匹配时的鲁棒性较高，因此本专利技术第一方面提供的画作推荐方法根据画作图像的多尺度特征进行相似画作检索，由此可见，本专利技术第一方面提供的画作推荐方法可实现精确的画作推荐。可选地，该方法还包括：所述终端设备呈现所述推荐画作和/或所述终端设备将所述推荐画作发送至显示设备以使得所述显示设备呈现所述推荐画作。采用此可选方式，用户可直接利用终端设备欣赏推荐画作，也可利用电子画屏等显示设备欣赏推荐画作。可选地，在所述终端设备将画作图像发送至服务器之前，该方法还包括：所述终端设备对采集的画作图像进行基于畸变校正算法的图像处理。采用此可选方式，可保证相同画作检索和相似画作检索及后续的画作推荐的精确性。进一步，由于畸变校正算法的计算量较小，因此此可选方式利用终端设备对采集的画作图像进行基于畸变校正算法的图像处理不会影响图像处理速度，且避免了由服务器对画作图像进行基于畸变校正算法的图像处理所带来的如下弊端：若终端设备采集的画作图像不经过压缩而直接发送至服务器，则传输速度较慢且浪费传输资源；若终端设备采集的画作图像不经过压缩而直接发送至服务器，则会存在一定的图像失真，从而影响畸变矫正的效果。本专利技术第二方面提供了一种画作推荐方法，包括：服务器接收终端设备采集的画作图像，提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。本专利技术第二方面提供的画作推荐方法，可以基于用户利用终端设备采集的画作图像直接在画作库中高效精确的进行相同画作检索和相似画作检索，并根据检索结果进行精确的画作推荐，可大幅提升用户的体验，特别是电子画屏用户的体验。其中，一方面，尺度不变特征对旋转、尺度缩放、亮度变化保持不变性，对视角变化、仿射变换、噪声也保持一定程度的稳定性，因此本专利技术第二方面提供的画作推荐方法根据画作图像的尺度不变特征进行需要精确匹配的相同画作检索；另一方面，多尺度特征能够更好的表征画作颜色、内容等信息，并且用于画作相似度匹配时的鲁棒性较高，因此本专利技术第二方面提供的画作推荐方法根据画作图像的多尺度特征进行相似画作检索，由此可见，本专利技术第二方面提供的画作推荐方法可实现精确的画作推荐。可选地，所述提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索进一步包括：提取画作图像的SIFT(Scale-InvariantFeatureTransform，尺度不变特征转换)特征并根据画作图像的SIFT特征进行相同画作检索，提取画作图像的Resnet特征并根据画作图像的Resnet(残差网络)特征进行相似画作检索。可选地，所述提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索，提取画作图像的Resnet特征并根据画作图像的Resnet特征进行相似画作检索进一步包括：利用CPU提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索，利用GPU提取画作图像的Resnet特征并利用CPU根据画作图像的Resnet特征进行相似画作检索。由于Resnet网络相对较为复杂，利用CPU提取画作图像的Resnet特征会影响运行速度，因此此可选方式利用GPU提取画作图像的Resnet特征，可提升Resnet特征的提取效率，缩短Resnet特征提取的响应时间。此外，利用GPU提取画作图像的Resnet特征还可与利用CPU根据画作图像的Resnet特征进行相似画作检索实现相对的并行处理，可进一步保证相似画作检索的效率。可选地，提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索进一步包括：提取画作图像的SIFT特征点；将画作图像的SIFT特征点与画作库中各标准画作的SIFT特征点进行比对，获取与画作图像相同SIFT特征点最多的标准画作；判断获取的标准画作与画作图像的相同SIFT特征点个数是否大于预设阈值：若是，则相同画作检索结果为该获取的标准画作；若否，则相同画作检索结果为不存在相同画作。可选地，所述提取画作图像的Resnet特征并根据画作图像的Resnet特征进行相似画作检索进一步包括：提取画作图像的Resnet特征；对画作图像的Resnet特征进行降维和哈希量化，得到画作图像的哈希编码；计算画作图像的哈希编码与画作库中各标准画作的哈希编码的汉明距离，并按所述汉明距离由小到大排在前预设个数的标准画作作为相似画作检索结果。由于直接采用Resnet特征进行匹配的运算量较大，因此此可选方式采用哈希量化后利用哈希编码进行匹配的方式，可使得相似画作检索的效率大幅提升。本专利技术第三方面提供了一种执行本专利技术第一方面提供的画作推荐方法的终端设备，包括：图像采集模块和第一传输模块；所述图像采集模块，用于采集画作图像；所述第一传输模块，用于将画作图像发送至服务器，以使得所述服务器提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述第一传输模块发送至少一个推荐画作。本专利技术第四方面提供了一种执行本专利技术第二方面提供的画作推荐方法的服务器，包括：第二传输模块、相同画作检索模块、相似画作检索模块和推荐模块；所述第二传输模本文档来自技高网...

【技术保护点】
1.一种画作推荐方法，其特征在于，包括：终端设备采集画作图像；所述终端设备将画作图像发送至服务器，以使得所述服务器提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。

【技术特征摘要】
1.一种画作推荐方法，其特征在于，包括：终端设备采集画作图像；所述终端设备将画作图像发送至服务器，以使得所述服务器提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。2.根据权利要求1所述的方法，其特征在于，该方法还包括：所述终端设备呈现所述推荐画作和/或所述终端设备将所述推荐画作发送至显示设备以使得所述显示设备呈现所述推荐画作。3.根据权利要求1所述的方法，其特征在于，在所述终端设备将画作图像发送至服务器之前，该方法还包括：所述终端设备对采集的画作图像进行基于畸变校正算法的图像处理。4.一种画作推荐方法，其特征在于，包括：服务器接收终端设备采集的画作图像，提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索，根据相同画作检索结果和相似画作检索结果向所述终端设备发送至少一个推荐画作。5.根据权利要求4所述的方法，其特征在于，所述提取画作图像的尺度不变特征并根据画作图像的尺度不变特征进行相同画作检索，提取画作图像的多尺度特征并根据画作图像的多尺度特征进行相似画作检索进一步包括：提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索，提取画作图像的Resnet特征并根据画作图像的Resnet特征进行相似画作检索。6.根据权利要求5所述的方法，其特征在于，所述提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索，提取画作图像的Resnet特征并根据画作图像的Resnet特征进行相似画作检索进一步包括：利用CPU提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索，利用GPU提取画作图像的Resnet特征并利用CPU根据画作图像的Resnet特征进行相似画作检索。7.根据权利要求5所述的方法，其特征在于，提取画作图像的SIFT特征并根据画作图像的SIFT特征进行相同画作检索进一步包括：提取画作图像的SIFT特征点；将画作图像的SIFT特征点与画作库中各标准画作的SIFT特征点进行比对，获取与画作图像相同SIFT特征点...

【专利技术属性】
技术研发人员：许景涛，索健文，刘向阳，王婷婷，张绍楠，徐博，
申请(专利权)人：京东方科技集团股份有限公司，
类型：发明
国别省市：北京,11