The invention discloses a method, system, device and storage medium for assisting visually impaired persons to watch video. The invention determines whether scene switching exists between the current video frame and the previous video frame of the current playing video; obtains the current scene marker corresponding to the current video frame when scene switching exists; and makes the current scene marker corresponding to the current narration in the mapping relationship. When the matching is successful, the current narration is played by voice, which realizes the narration corresponding to the scene when there is scene switching in the video. It helps the visually impaired users to understand the video content and keep up with the plot. At the same time, it improves the accuracy of the narration and greatly improves the user experience by grasping and matching the video-related content in the network public information.
【技术实现步骤摘要】
辅助视力障碍者观看视频的方法、系统、设备及存储介质
本专利技术涉及视频分析领域,尤其涉及一种辅助视力障碍者观看视频的方法、系统、设备及存储介质。
技术介绍
中国有1400万的视力障碍人群,因为视力很低,他们往往没有办法与家人一起自在地享受观看视频的乐趣,而是只能靠听来“观看”电视,但由于“听”电视无法知道视频场景的切换,很难了解节目情节,导致很多视力障碍人群直接放弃了剧情复杂的影视节目。目前有部分手机带有“旁白”功能,但只是简单的针对系统菜单进行语音播报,无法针对视频中的场景切换进行提示。上述内容仅用于辅助理解本专利技术的技术方案,并不代表承认上述内容是现有技术。
技术实现思路
本专利技术的主要目的在于提供一种辅助视力障碍者观看视频的方法、系统、设备及存储介质,旨在解决现有技术中电子设备无法针对视频场景切换给予视力障碍者提示的技术问题。为实现上述目的,本专利技术提供一种辅助视力障碍者观看视频的方法,所述方法包括以下步骤:判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换;在所述当前播放视频的当前视频帧和上一视频帧之间存在场景切换时,获取所述当前视频帧对应的当 ...
【技术保护点】
1.一种辅助视力障碍者观看视频的方法,其特征在于,所述辅助视力障碍者观看视频的方法包括以下步骤:判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换;在所述当前播放视频的当前视频帧和上一视频帧之间存在场景切换时,获取所述当前视频帧对应的当前场景标记;将所述当前场景标记与映射关系中对应的当前旁白进行匹配,所述映射关系包括场景标记和旁白之间的对应关系;在匹配成功时,对所述当前旁白通过语音进行播放。
【技术特征摘要】
1.一种辅助视力障碍者观看视频的方法,其特征在于,所述辅助视力障碍者观看视频的方法包括以下步骤:判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换;在所述当前播放视频的当前视频帧和上一视频帧之间存在场景切换时,获取所述当前视频帧对应的当前场景标记;将所述当前场景标记与映射关系中对应的当前旁白进行匹配,所述映射关系包括场景标记和旁白之间的对应关系;在匹配成功时,对所述当前旁白通过语音进行播放。2.如权利要求1所述的辅助视力障碍者观看视频的方法,其特征在于,所述判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换,具体包括:获得所述当前播放视频的当前视频帧的第一灰度值和上一视频帧的第二灰度值;在所述第一灰度值与所述第二灰度值差在第一预设阈值内时,判定所述当前播放视频的当前视频帧和上一视频帧之间存在场景切换。3.如权利要求1所述的辅助视力障碍者观看视频的方法,其特征在于,所述将所述当前场景标记与映射关系中对应的当前旁白进行匹配,具体包括:将所述当前场景标记与映射关系中对应的当前旁白进行字符串相似度匹配;在所述当前场景标记与所述当前旁白的字符串相似度在第二预设阈值内时,判定匹配成功。4.如权利要求1所述的辅助视力障碍者观看视频的方法,其特征在于,所述判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换之前,所述方法还包括:获取待播放视频的剧集信息;根据所述剧集信息从网络信息中抓取所述待播放视频的影评或书评;从所述影评或书评中按场景变化顺序提取旁白。5.如权利要求4所述的辅助视力障碍者观看视频的方法,其特征在于,所述判断当前播放视频的当前视频帧和上一视频帧之间是否存在场景切换之前,所述方法还包括:判断当前播放视频是否存在场景切换,在所述当前...
【专利技术属性】
技术研发人员:陈俊嘉,
申请(专利权)人:深圳TCL新技术有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。