基于照片库的旅游攻略编辑方法、系统、设备及存储介质技术方案

本发明专利技术提供了基于照片库的旅游攻略编辑方法、系统、设备及存储介质，该方法包括：基于旅游攻略的文本在预的旅游关键词集合中获得关联度最高的至少一个关键词，形成关键词组合；查找满足关键词组合的图片形成照片库；通过经过训练的图片质量网络对目标照片库中图片的质量进行排序；以及将排序靠前的至少一图片加入到旅游攻略的文本中的预设位置。本发明专利技术能够实现对图片的质量评估，对图片从用户角度进行多方面的整体评估使最吸引人的图片排在首位，增强用户体验。增强用户体验。增强用户体验。

【技术实现步骤摘要】
基于照片库的旅游攻略编辑方法、系统、设备及存储介质


[0001]本专利技术涉及图片评估领域，具体地说，涉及基于照片库的旅游攻略编辑方法、系统、设备及存储介质。

技术介绍

[0002]在当前信息爆炸的环境中，人们读取信息的时间缩短，想要吸引用户，需要在第一时间展示最有吸引力的部分，图片是用户接触到的最多的了解信息的媒介，但图片包含信息复杂繁多，很难第一时间传达有效且正向的信息，并且旅游攻略的图片包含官方和用户图片等，来源多样，质量参差不齐，数量庞大。并且用户在撰写旅游攻略时还需要自行检索相关照片进行配图，降低了效率，用户体验不佳。
[0003]因此，本专利技术提供了一种基于照片库的旅游攻略编辑方法、系统、设备及存储介质。

技术实现思路

[0004]针对现有技术中的问题，本专利技术的目的在于提供基于照片库的旅游攻略编辑方法、系统、设备及存储介质，克服了现有技术的困难，能够实现对图片的质量评估，对图片从用户角度进行多方面的整体评估，快速准确的获取图片质量，可以使最吸引人的图片排在首位，用户在获取信息时往往能第一时间获取最好看的图片，增强用户体验。
[0005]本专利技术的实施例提供一种基于照片库的旅游攻略编辑方法，包括以下步骤：
[0006]S110、基于旅游攻略的文本在预的旅游关键词集合中获得关联度最高的至少一个关键词，形成关键词组合；
[0007]S120、查找满足所述关键词组合的图片形成照片库；
[0008]S130、通过经过训练的图片质量网络对目标照片库中图片的质量进行排序；以及
[0009]S140、将排序靠前的至少一图片加入到所述旅游攻略的文本中的预设位置。
[0010]优选地，所述步骤S110中，所述旅游关键词集合包括地点关键词子集和主题关键词子集，基于旅游攻略的文本分别在地点关键词子集中获得至少一个地点关键词、在主题关键词子集中获得至少一个主题关键词；
[0011]所述步骤S120中，查找同时满足所述地点关键词和主题关键词的图片形成照片库。
[0012]优选地，所述步骤S120中，所述图片满足所述地点关键词的条件为：
[0013]所述图片的拍摄地点信息命中所述地点关键词；或者
[0014]所述图片的拍摄地点GPS定位信息在所述地点关键词对应的GPS定位范围内。
[0015]优选地，所述步骤S120中，所述图片满足所述主题关键词的条件为：
[0016]所述图片通过训练后的图片分别标签网络，每个所述图片获得至少一个标签；
[0017]所述图片的至少一个所述标签命中所述主题关键词。
[0018]优选地，所述图片分别标签网络根据所述预的旅游关键词集合进行图片标签分类
的训练，对所述图片输出所述预的旅游关键词集合中的至少一个所述旅游关键词。
[0019]优选地，将满足所述地点关键词的所述图片形成过程照片库，在所述过程照片库中查找满足所述主题关键词的图片形成照片库。
[0020]优选地，所述步骤S120中查找照片的范围为当前用户账户对应的至少一云端照片库或是用户当前使用的移动终端中储存的照片库。
[0021]优选地，所述步骤S110中，所述旅游攻略的文本为用户当前编辑中的自然文本段落；
[0022]所述步骤S140中，将被选中的图片加入到用户当前编辑中的自然文本段落之前。
[0023]优选地，所述步骤S130中训练图片质量网络，包括以下步骤：
[0024]S131、通过查找不同类型和风格的线上图片，聚类出高频图片类型；
[0025]S132、建立基于多尺度特征的图像信息挖掘模型，对查找的攻略图片信息进行多维度评估，所述维度包括清晰度、布局、色彩、饱和度；以及
[0026]S133将所述挖掘模型的结果转化为小数并保留固定位数，根据最终的质量分进行排序。
[0027]优选地，所述步骤S132中包括：
[0028]基于预设关键词，分别找出不同关键词下图片信息，生成质量评估数据集，评估标准包括清晰度、饱和度、构图、色彩等；
[0029]对数据集中图片做预处理操作，所有图像的尺寸被统一调整至固定长宽，并对图像像素点进行归一化操作；对调整后固定大小图片进行批处理输入后续网络；对于部分图片较少的分数段，将图片水平翻转后形成新的图片，放入数据集；
[0030]根据图片特点，搭建对应的深度卷积神经网络，本专利技术针对攻略图片特点，设计了基于多尺度的多层复杂网络(MultiNet)；整个网络由两部分组成，第一部分是骨干网络，骨干网络使用密集卷积网络(densenet121网络)，由4个区块(block)组成，每个区块包含多个卷积层、激活层等，共121层卷积层，每个层的特征大小均相同，所以每一层均可与前面所有层的特征进行通道上的连接，实现特征重用，提升效率；对每个区块的最后一层，进行模型压缩，降低特征大小，然后将其特征平均池化到1*1大小，四个区块均进行此操作，最后将四个特征进行通道上的结合，实现多尺度；第二部分为全连接网络，对抽取的特征进行单独训练，全连接网络包含3个全连接层和多个激活层、池化层等，最后输出预测层，输出8个类别，然后将8个类别进行概率结合，输出最终分数；
[0031]其中，针对类别预测使用了交叉熵损失函数，公式定义如下，其中p
t
为类别预测概率，y为图像类别标签
[0032]loss＝∑y log(p
t
)
[0033]将获取的数据集进行训练集、验证集和测试集的划分，然后使用基于大规模场景数据集训练得到的模型进行迁移学习，在迁移学习的过程中，对图片进行缩放、归一化等操作增强模型鲁棒性，然后使用迁移学习后的网络进行多尺度特征提取，将提取后的特征进行训练，迭代模型至模型在验证集上的测试效果达到最优；
[0034]利用训练好的模型在线上攻略图片上做前向预测，输出图像在各个分数段上的预测概率；
[0035]利用预测概率，预测概率与分数进行结合，得到最终的数分，公式如下，其中i为分
数，p(i)为该分数的预测概率；
[0036][0037]将所述数分输出作为所述挖掘模型的结果。
[0038]本专利技术的实施例还提供一种基于照片库的图片质量排序系统，用于实现上述的基于照片库的旅游攻略编辑方法，所述基于照片库的图片质量排序系统包括：
[0039]关键词获得模块，基于旅游攻略的文本在预的旅游关键词集合中获得关联度最高的至少一个关键词，形成关键词组合；
[0040]照片查找模块，查找满足所述关键词组合的图片形成照片库；
[0041]质量排序模块，通过经过训练的图片质量网络对目标照片库中图片的质量进行排序；以及
[0042]图片插入模块，将排序靠前的至少一图片加入到所述旅游攻略的文本中的预设位置。
[0043]本专利技术的实施例还提供一种基于照片库的图片质量排序设备，包括：
[0044]处理器；
[0045]存储本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于照片库的旅游攻略编辑方法，其特征在于，包括以下步骤：S110、基于旅游攻略的文本在预的旅游关键词集合中获得关联度最高的至少一个关键词，形成关键词组合；S120、查找满足所述关键词组合的图片形成照片库；S130、通过经过训练的图片质量网络对目标照片库中图片的质量进行排序；以及S140、将排序靠前的至少一图片加入到所述旅游攻略的文本中的预设位置。2.根据权利要求1所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S110中，所述旅游关键词集合包括地点关键词子集和主题关键词子集，基于旅游攻略的文本分别在地点关键词子集中获得至少一个地点关键词、在主题关键词子集中获得至少一个主题关键词；所述步骤S120中，查找同时满足所述地点关键词和主题关键词的图片形成照片库。3.根据权利要求2所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S120中，所述图片满足所述地点关键词的条件为：所述图片的拍摄地点信息命中所述地点关键词；或者所述图片的拍摄地点GPS定位信息在所述地点关键词对应的GPS定位范围内。4.根据权利要求3所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S120中，所述图片满足所述主题关键词的条件为：所述图片通过训练后的图片分别标签网络，每个所述图片获得至少一个标签；所述图片的至少一个所述标签命中所述主题关键词。5.根据权利要求4所述的基于照片库的旅游攻略编辑方法，其特征在于，所述图片分别标签网络根据所述预的旅游关键词集合进行图片标签分类的训练，对所述图片输出所述预的旅游关键词集合中的至少一个所述旅游关键词。6.根据权利要求4所述的基于照片库的旅游攻略编辑方法，其特征在于，将满足所述地点关键词的所述图片形成过程照片库，在所述过程照片库中查找满足所述主题关键词的图片形成照片库。7.根据权利要求1所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S120中查找照片的范围为当前用户账户对应的至少一云端照片库或是用户当前使用的移动终端中储存的照片库。8.根据权利要求1所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S110中，所述旅游攻略的文本为用户当前编辑中的自然文本段落；所述步骤S140中，将被选中的图片加入到用户当前编辑中的自然文本段落之前。9.根据权利要求1所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤S130中训练图片质量网络，包括以下步骤：S131、通过查找不同类型和风格的线上图片，聚类出高频图片类型；S132、建立基于多尺度特征的图像信息挖掘模型，对查找的攻略图片信息进行多维度评估，所述维度包括清晰度、布局、色彩、饱和度；以及S133将所述挖掘模型的结果转化为小数并保留固定位数，根据最终的质量分进行排序。10.根据权利要求9所述的基于照片库的旅游攻略编辑方法，其特征在于，所述步骤
S132中包括：基于预设关键词，分...

【专利技术属性】
技术研发人员：彭佳慧，成丹妮，罗超，胡泓，李巍，
申请(专利权)人：携程计算机技术上海有限公司，
类型：发明
国别省市：