一种语义与图像匹配处理方法、装置及终端设备制造方法及图纸

本发明专利技术提供一种语义与图像匹配处理方法、装置及终端设备，其中，方法包括：获得输入的语句；对所述语句进行语义分析，得到多个特征词；根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。本发明专利技术的方案可以得到与语义相匹配的图像，达到图文并茂的效果。

【技术实现步骤摘要】

本专利技术涉及图像信息处理领域，特别是指一种语义与图像匹配处理方法、装置及终端设备。
技术介绍
随着互联网和移动互联网的发展，即时通讯，微博，社区都成为人们在线交流的主要平台。目前，在互联网和移动互联网上的主流的交流方式是以文字和语音的形式为主。用图片进行表达和交流的情况主要体现在聊天或发表文章时应用的非个性化卡通形象表情，卡通形式的礼物，或照片。这种图像表达形式，是非个性化的，即没有用户本人 的形象参与到图像中进行的表达，使图像不能丰富准确地表达用户的意思。而且也无法体现用户人本在图像中的参与。当前图片的使用都是用户手动拼接图片或扫描上传人工画好的图片和照片。人们在表达自己的意思的时候，如果有配图需求，则需要通过在网上或自己的图库中找到自己满意的图片。这样，一是效率低下，二是很难找到自己满意的图片。通常，图片和文字不相匹配，达不到图文并茂的效果。
技术实现思路
本专利技术要解决的技术问题是提供一种语义与图像匹配处理方法、装置及终端设备，可以得到与语义相匹配的图像，达到图文并茂的效果。为解决上述技术问题，本专利技术的实施例提供一种语义与图像匹配处理方法，包括获得输入的语句；对所述语句进行语义分析，得到多个特征词；根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。其中，所述语句为文字形式的语句，或者语音形式的语句，或者将输入的语音转换成文字形式的语句。其中，对所述语句进行语义分析，得到多个特征词的步骤包括判断所述语句是否是常见短语，若是，将所述常见短语作为所述特征词；若否，对所述语句按照标点符号进行断句分割，得到多个短句；对所述短句按照虚词进行分割，得到多个特征词。其中，根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素的步骤包括根据所述特征词，从图像元素库中查找图像元素的名称包括所述特征词的图像元素，若查找到，则认为该查找到的至少一个图像元素与所述特征词匹配。其中，从所述查找到的至少一个图像元素中，确定图像元素的名称与所述特征词完全相同的图像元素为与所述特征词相匹配的图像元素，否则，从所述查找到的至少一个图像元素中任选一个图像元素作为与所述特征词相匹配的图像元素。其中，按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序的步骤包括按照所述多个特征词之间的语义关系，将与所述特征词相匹配的图像元素分为多层； 按照图像元素显示的效果，确定与所述特征词匹配的多层图像元素之间的组合顺序。其中，与所述特征词匹配的图像元素之间的组合顺序为至少一种。其中，按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像的步骤包括按照所述组合顺序，依次获得所述组合顺序中，与所述特征词匹配的所有图像元素对应的显示区域；按照所述显示区域确定的位置，将所述图像元素显示在所述显示区域中；将所有显示区域中显示的所述图像元素组合成所述新的图像。其中，所述图像元素库包括第一人称相应的特征词对应的图像元素；所述图像元素为平面图像、动态图像和/或三维图像。本专利技术的实施例还提供一种语义与图像匹配处理装置，包括输入模块，用于获得输入的语句；分析模块，用于对所述语句进行语义分析，得到多个特征词；匹配模块，用于根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；确定模块，用于按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；图像生成模块，用于按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。其中，所述确定模块包括划分模块，用于将图像元素库中的图像元素分为多层；第一确定子模块，用于按照图像元素显示的效果，确定多层图像元素之间的组合顺序；第二确定子模块，用于按照多层图像元素之间的组合顺序，确定与所述特征词匹配的图像元素之间的组合顺序。其中，所述图像生成模块包括获得子模块，用于按照所述组合顺序，依次获得所述组合顺序中，与所述特征词匹配的所有图像元素对应的显示区域；第一处理子模块，用于按照所述显示区域确定的位置，将所述图像元素显示在所述显示区域中；第二处理子模块，用于将所有显示区域中显示的所述图像元素组合成所述新的图像。本专利技术的实施例还提供一种终端设备，包括显示模块，以及如上所述的语义与图像匹配处理装置；其中，所述显示模块用于显示所述新的图像。本专利技术的上述技术方案的有益效果如下上述方案中，通过对输入的语句进行语义分析，得到多个特征词，并从图像元素库中查找与所述特征词相匹配的图像元素，并按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序，按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像；使得该新的图像是根据用户临时输入的语句而产生与该语句的语义相匹配的图像，从而达到图文并茂的效果，并增加用户的使用乐趣。附图说明图I为本专利技术的实施例语义与图像匹配处理方法的流程示意图；图2为图I所示方法中，语义分析结果的示意图；图3为图I所示方法中，按照语义分析结果进行图像帧组合的示意图；图4为图I所示方法中，图像元素为动态图像时的组合示意图；图5为图I所示方法中，特征词对应的图像元素之间为连续动态图像时的组合示意图；图6为反映图像元素层之间关系的一种方式图；图7为反映图像元素层之间关系的另一种方式图；图8为本专利技术的实施例语义与图像匹配处理装置的结构示意图；图9为本专利技术的实施例终端设备的结构示意图。具体实施例方式为使本专利技术要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。如图I所示，本专利技术的实施例一种语义与图像匹配处理方法，包括步骤11，获得输入的语句；步骤12，对所述语句进行语义分析，得到多个特征词；步骤13，根据所述特征词，从图像元素库中查找与所述特征词相匹配的图像元素；步骤14，按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序；步骤15，按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像。 本专利技术的实施例通过对输入的语句进行语义分析，得到多个特征词，并从图像元素库中查找与所述特征词相匹配的图像元素，并按照所述多个特征词之间的语义关系，确定与所述特征词相匹配的图像元素之间的组合顺序，按照所述组合顺序，将与所述特征词相匹配的图像元素组合成一新的图像；使得该新的图像是根据用户临时输入的语句而产生与该语句的语义相匹配的图像，从而达到图文并茂的效果，并增加用户的使用乐趣。其中，所述语句为文字形式的语句，或者语音形式的语句，或者将输入的语音转换成文字形式的语句。优选的，上述步骤12的具体实现过程包括步骤121，对所述语句进行语义分析，得到多个特征词的步骤包括步骤122，判断所述语句是否是常见短语，若是，将所述常见短语作为所述特征词；若否，对所述语句按照标点符号进行断句分割，得到多个短句；步骤123，对所述短句按照虚词进行分割，得到多个特征词。具体地，以对输入的文字语句“我在海边吃烧烤，很开心”为例进行语义分析；如图2所示，首先，根据输入的文字内容进行语义判断，包括这段文字表达的意思是什么，表述的何种语本文档来自技高网...

【技术保护点】

【技术特征摘要】

【专利技术属性】
技术研发人员：任晓倩，
申请(专利权)人：北京百舜华年文化传播有限公司，
类型：发明
国别省市：