声音弹幕的应用方法、装置、设备及可读存储介质制造方法及图纸

本发明专利技术公开了一种声音弹幕的应用方法、装置、设备及可读存储介质。该方法包括：根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；在当前视频的视频播放窗口中，展示与目标声音弹幕对应的声音弹幕波形；根据接收的声音弹幕播放指示，播放目标声音弹幕。

【技术实现步骤摘要】
声音弹幕的应用方法、装置、设备及可读存储介质
本专利技术涉及互联网
，更具体地，涉及一种声音弹幕的应用方法、装置、设备及可读存储介质。
技术介绍
随着视频播放技术的飞速发展，时下提供视频播放服务的视频应用通常都向用户提供弹幕功能，令用户在视频播放过程中，可以通过在视屏播放界面上弹出评论性字幕，发表自身对视频内容的观感、与同看视频的其他用户进行互动，增加趣味性。目前，视频应用提供的弹幕功能，只能展示用户输入的文字内容，但文字内容并不具有直观的用户情感体现功能，难以真实、完整地表达用户在输出弹幕时的情绪或情感，影响用户的弹幕使用体验。
技术实现思路
本专利技术的一个目的是提供一种用于应用声音弹幕的新技术方案。根据本专利技术的第一方面，提供了一种声音弹幕的应用方法，其中，包括：根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；在所述当前视频的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；根据接收的声音弹幕播放指示，播放所述目标声音弹幕。可选地，所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；所述在与所述目标声音弹幕关联的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形的步骤包括：根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征；根据所述目标声音弹幕的声音特征以及情感特征，生成所述声音弹幕波形；根据所述弹幕展示时序，在所述视频播放窗口中展示所述声音弹幕波形。可选地，所述声音特征包括音量特征以及节奏特征；所述情感特征包括情感类型以及情感程度；所述根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征的步骤包括：对所述声音弹幕内容进行语音分析，提取对应的音量特征以及节奏特征；将所述声音弹幕内容转换为对应的声音弹幕文本，根据预先构建的情感词库从所述声音弹幕文本中提取情感关键词，通过情感结构化模型，对所述情感关键词进行结构化分析，得到所述情感关键词的情感类型以及情感程度，作为所述目标声音弹幕的情感特征；其中，所述情感结构化模型是通过对采集的与情感相关的情感词汇进行分类并结构化组织得到的词汇模型；所述情感结构化模型中包括的每个情感词汇都具有对应的情感类型以及情感程度。可选地，所述根据所述目标声音弹幕的声音特征以及情感特征，生成所述声音弹幕波形的步骤包括：根据所述目标声音弹幕的声音特征，设置所述声音弹幕波形的显示形状，以及，根据所述目标声音弹幕的情感特征，设置所述声音弹幕波形的显示颜色；根据所述声音弹幕波形的显示形状、显示颜色，生成所述声音弹幕波形。可选地，所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；所述声音弹幕播放指示用于指示将所述目标声音弹幕与其他弹幕混合播放；所述根据接收的声音弹幕播放指示，播放所述目标声音弹幕的步骤包括：获取与所述目标声音弹幕的弹幕展示时序处于相同的弹幕播放时段的同时段弹幕；所述同时段弹幕包括文字弹幕或者声音弹幕；将所述同时段弹幕包括的文字弹幕进行转换处理，得到对应的声音弹幕；将进行所述转换处理后的所述同时段弹幕与所述目标声音弹幕，根据对应的弹幕展示时序进行声音合成后播放；和/或，所述声音弹幕播放指示用于指示将所述目标声音弹幕通过文字形式显示实现播放；所述根据接收的声音弹幕播放指示，播放所述目标声音弹幕的步骤包括：将所述目标声音弹幕转换为对应的文字弹幕后，在所述视频播放窗口中显示。可选地，所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；所述根据在视频播放过程中接收的用户声音数据，生成对应的声音弹幕的步骤包括：根据接收到所述用户声音数据时的所述当前视频的视频播放时刻，确定所述弹幕展示时序；根据所述用户声音数据，生成所述声音弹幕内容。可选地，所述用户声音数据至少包括用户语音数据以及声音表情其中之一；所述声音表情包括语音表情以及音效表情；所述根据所述用户声音数据，生成所述声音弹幕内容的步骤包括：所述用户声音数据中仅包括所述用户语音数据或仅包括所述声音表情时，将所述用户声音数据作为所述声音弹幕内容；所述用户声音数据包括所述用户语音数据以及所述语音表情时，在所述用户语音数据的相应位置插入所述语音表情，合成所述声音弹幕内容；所述用户声音数据包括所述用户语音数据以及所述音效表情时，将所述用户语音数据与所述音效表情，混音合成所述声音弹幕内容。根据本专利技术的第二方面，提供一种声音弹幕的应用装置，其中，包括：弹幕生成单元，用于根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；弹幕展示单元，用于在所述当前视频的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；弹幕播放单元，用于根据接收的声音弹幕播放指示，播放所述目标声音弹幕。根据本专利技术的第三方面，提供一种声音弹幕的应用设备，其中，包括：显示装置；存储器，用于存储可执行的指令；处理器，用于根据所述可执行的指令的控制，运行所述声音弹幕的应用设备执行如本专利技术第一方面所述的任意一项所述声音弹幕的应用方法。根据本专利技术的第四方面，提供一种可读存储介质，所述可读存储介质存储有可被计算机读取执行的计算机程序，所述计算机程序用于在被所述计算机读取运行时，执行如本专利技术第一方面所述的声音弹幕的应用方法。根据本专利技术的第五方面，提供了一种声音弹幕的应用方法，其中，包括：根据在当前音频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；在所述当前音频的音频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；根据接收的声音弹幕播放指示，播放所述目标声音弹幕。可选地，所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；所述在与所述目标声音弹幕关联的音频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形的步骤包括：根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征；根据所述目标声音弹幕的声音特征以及情感特征，生成所述声音弹幕波形；根据所述弹幕展示时序，在所述音频播放窗口中展示所述声音弹幕波形。可选地，所述声音特征包括音量特征以及节奏特征；所述情感特征包括情感类型以及情感程度；所述根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征的步骤包括：对所述声音弹幕内容进行语音分析，提取对应的音量特征以及节奏特征；将所述声音弹幕内容转换为对应的声音弹幕文本，根据预先构建的情感词库从所述声音弹幕文本中提取情感关键词，通过情感结构化模型，对所述情感关键词进行结构化分析，得到所述情感关键词的情感类型以及情感程度，作为所本文档来自技高网...

【技术保护点】
1.一种声音弹幕的应用方法，其中，包括：/n根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；/n在所述当前视频的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；/n根据接收的声音弹幕播放指示，播放所述目标声音弹幕。/n

【技术特征摘要】
20190321 CN 20191021687241.一种声音弹幕的应用方法，其中，包括：
根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；
在所述当前视频的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；
根据接收的声音弹幕播放指示，播放所述目标声音弹幕。


2.根据权利要求1所述的方法，其中，
所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；
所述在与所述目标声音弹幕关联的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形的步骤包括：
根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征；
根据所述目标声音弹幕的声音特征以及情感特征，生成所述声音弹幕波形；
根据所述弹幕展示时序，在所述视频播放窗口中展示所述声音弹幕波形。


3.根据权利要求2所述的方法，其中，
所述声音特征包括音量特征以及节奏特征；所述情感特征包括情感类型以及情感程度；
所述根据所述目标声音弹幕的声音弹幕内容，获取所述目标声音弹幕的声音特征以及情感特征的步骤包括：
对所述声音弹幕内容进行语音分析，提取对应的音量特征以及节奏特征；
将所述声音弹幕内容转换为对应的声音弹幕文本，根据预先构建的情感词库从所述声音弹幕文本中提取情感关键词，通过情感结构化模型，对所述情感关键词进行结构化分析，得到所述情感关键词的情感类型以及情感程度，作为所述目标声音弹幕的情感特征；
其中，所述情感结构化模型是通过对采集的与情感相关的情感词汇进行分类并结构化组织得到的词汇模型；所述情感结构化模型中包括的每个情感词汇都具有对应的情感类型以及情感程度。


4.根据权利要求2所述的方法，其中，
所述根据所述目标声音弹幕的声音特征以及情感特征，生成所述声音弹幕波形的步骤包括：
根据所述目标声音弹幕的声音特征，设置所述声音弹幕波形的显示形状，以及，根据所述目标声音弹幕的情感特征，设置所述声音弹幕波形的显示颜色；
根据所述声音弹幕波形的显示形状、显示颜色，生成所述声音弹幕波形。


5.根据权利要求1所述的方法，其中，
所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；
所述声音弹幕播放指示用于指示将所述目标声音弹幕与其他弹幕混合播放；
所述根据接收的声音弹幕播放指示，播放所述目标声音弹幕的步骤包括：
获取与所述目标声音弹幕的弹幕展示时序处于相同的弹幕播放时段的同时段弹幕；所述同时段弹幕包括文字弹幕或者声音弹幕；
将所述同时段弹幕包括的文字弹幕进行转换处理，得到对应的声音弹幕；
将进行所述转换处理后的所述同时段弹幕与所述目标声音弹幕，根据对应的弹幕展示时序进行声音合成后播放；
和/或，
所述声音弹幕播放指示用于指示将所述目标声音弹幕通过文字形式显示实现播放；
所述根据接收的声音弹幕播放指示，播放所述目标声音弹幕的步骤包括：
将所述目标声音弹幕转换为对应的文字弹幕后，在所述视频播放窗口中显示。


6.根据权利要求1所述的方法，其中，
所述目标声音弹幕具有对应的弹幕展示时序以及声音弹幕内容；
所述根据在视频播放过程中接收的用户声音数据，生成对应的声音弹幕的步骤包括：
根据接收到所述用户声音数据时的所述当前视频的视频播放时刻，确定所述弹幕展示时序；
根据所述用户声音数据，生成所述声音弹幕内容。


7.根据权利要求6所述方法，其中，
所述用户声音数据至少包括用户语音数据以及声音表情其中之一；所述声音表情包括语音表情以及音效表情；
所述根据所述用户声音数据，生成所述声音弹幕内容的步骤包括：
所述用户声音数据中仅包括所述用户语音数据或仅包括所述声音表情时，将所述用户声音数据作为所述声音弹幕内容；
所述用户声音数据包括所述用户语音数据以及所述语音表情时，在所述用户语音数据的相应位置插入所述语音表情，合成所述声音弹幕内容；
所述用户声音数据包括所述用户语音数据以及所述音效表情时，将所述用户语音数据与所述音效表情，混音合成所述声音弹幕内容。


8.一种声音弹幕的应用装置，其中，包括：
弹幕生成单元，用于根据在当前视频的播放过程中接收的用户声音数据，生成对应的目标声音弹幕；
弹幕展示单元，用于在所述当前视频的视频播放窗口中，展示与所述目标声音弹幕对应的所述声音弹幕波形；
弹幕播放单元，用于根据接收的声音弹幕播放指示，播放所述目标声音弹幕。


9.一种声音弹幕的应用设备，其中，包括：
显示装置；
存储器，用于存储可执行的指令；
处理器，用于根据所述可执行的指令的控制，运行所述声音弹幕的应用设备执行如权利要求1-7所述的任意一项所述声音弹幕的应用方法。


10.一种可读存储介质，其中，所述可读存储介质存储有可被计算机读取执行的计算机程序，所述计算机程序用于在被所述计算机读取运行时，执行如权利要求1-7所述的...

【专利技术属性】
技术研发人员：贾锦杰，廖多依，邹可心，
申请(专利权)人：阿里巴巴集团控股有限公司，
类型：发明
国别省市：开曼群岛;KY