一种在视频中植入广告的方法及装置制造方法及图纸

本发明专利技术实施例公开了一种在视频中植入广告的方法及装置，涉及视频处理技术领域，该方法包括：检测视频帧中的占位标件；根据检测结果和占位标件的特征参数，计算占位标件对应的模型参数；根据模型参数和待植入广告对象的特征参数，计算待植入广告对象在视频帧中对应的像素点坐标和像素值；根据计算得到的像素点坐标和像素值，在视频帧中植入待植入广告对象。应用本发明专利技术实施例提供的方法，植入待植入广告对象后，该广告对象可以较好的融入到视频帧中、与视频帧中的周围拍摄物协调过渡，提高了用户体验效果。

Method and device for implanting advertisement in video

The embodiment of the invention discloses a method in the video ads and device, and relates to the technical field of video processing, the method includes: detecting video frames in occupying standard parts; according to the test results and the characteristic parameters of a for standard parts, standard parts for calculation of model parameters according to model parameters and the corresponding; the placement of object parameters, calculate the placement of objects in the video frame corresponding to the pixel coordinates and pixel values of pixels; according to the calculated coordinates and pixel values in the video frame in the object to be implanted into advertising. The application method provided by the embodiment of the invention, to implant placement after the object, the object of advertising can better into the video frame, and around the video frames of the object coordinate transition, improving the user experience.

【技术实现步骤摘要】
一种在视频中植入广告的方法及装置
本专利技术涉及视频处理
，特别涉及一种在视频中植入广告的方法及装置。
技术介绍
由于视频，例如电视剧、电影、娱乐节目等的受众群体较大，越来越多用户倾向于在视频中投放广告。现有技术中，一种常见的在视频中植入广告的方式是通过将视频帧中的特定区域直接替换为广告对象，实现广告植入，应用该方法可以便捷的完成广告植入。但是，实际拍摄视频的过程中，拍摄物受光照、摄像机位置等因素的影响，拍摄物表面会形成不同的光照分布、不同的纹理清晰度和不同的阴影区域等等，而应该方法直接将视频帧中的特定区域替换为广告对象时，由于未考虑光照、摄像机位置等因素，替换后的广告对象表面的光照分布、纹理清晰度、阴影区域等等往往与替换前的区域不一致，所以替换后的广告对象不能很好的融入视频帧中、与视频帧中的周围拍摄物不协调，影响用户体验效果。
技术实现思路
本专利技术实施例公开了一种在视频中植入广告的方法及装置，以使得所植入的广告对象能够较好的融入到视频帧中、与视频帧中的周围拍摄物协调过渡，提高用户体验效果。为达到上述目的，本专利技术实施例公开了一种在视频中植入广告的方法，所述方法包括：检测视频帧中的占位标件，所述占位标件是视频拍摄场景中的一个拍摄物，用于在拍摄得到的视频帧中标识植入广告的位置；根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，其中，所述模型参数，包括摄像机参数矩阵M、光源的位置和光源的颜色组成分量，所述占位标件的特征参数，包括所述占位标件的尺寸和所述占位标件的表面对光的吸收率；根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，其中，所述待植入广告对象的特征参数，包括所述待植入广告对象的尺寸和所述待植入广告对象的表面对光的吸收率；根据计算得到的像素点坐标和像素值，在所述视频帧中植入所述待植入广告对象。较佳的，所述占位标件，表面带有标识性图案，其中，所述标识性图案用于提高在所述视频帧中检测所述占位标件的成功率。较佳的，所述待植入广告对象的尺寸大于所述占位标件的尺寸。较佳的，所述根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，包括：根据所述视频帧中预设数量的所述占位标件上的标线交叉点的坐标和所述占位标件的尺寸，计算摄像机参数矩阵M；根据所述摄像机参数矩阵M和所述占位标件在所述视频帧中的阴影区域，计算光源的位置；根据所述光源的位置和所述占位标件的表面对光的吸收率，计算光源的颜色组成分量。较佳的，所述根据所述视频帧中预设数量的所述占位标件上的标线交叉点的坐标和所述占位标件的尺寸，计算摄像机参数矩阵M，包括：以所述占位标件的底面中心点为坐标原点、底面所在平面为XY平面，确定所述占位标件所在的三维坐标系，其中，所述三维坐标系的X轴和Y轴分别与所述占位标件的两条相邻边平行；在所述三维坐标系中，按照如下关系式计算摄像机参数矩阵M，其中，(ui，vi)为所述视频帧中所述占位标件上的标线交叉点的坐标，(Xwi，Ywi，Zwi)为所述占位标件上的标线交叉点(ui，vi)在所述三维坐标系中的坐标，根据(ui，vi)和所述占位标件的尺寸计算得到，m11......m34为所述摄像机参数矩阵M的元素，Zci为标线交叉点(Xwi，Ywi，Zwi)在以摄像机镜头的光心位置为坐标原点的坐标系中的Zc轴方向上的坐标值，n为计算所述摄像机参数矩阵M所需的所述视频帧中占位标件上的标线交叉点的个数。较佳的，所述根据所述摄像机参数矩阵M和所述占位标件在所述视频帧中的阴影区域，计算光源的位置，包括：确定所述视频帧中所述占位标件的阴影区域；在所述三维坐标系中，根据如下关系式，分别确定所述阴影区域中的n个阴影点在所述占位标件上的对应点的坐标；其中，M为所述摄像机参数矩阵，(u'i，v'i)为所述阴影区域中阴影点在所述视频帧中的坐标，(X'wi，Y'wi，Z'wi)为点(u'i，v'i)在所述三维坐标系中的坐标，Z'ci为(X'wi，Y'wi，Z'wi)在以摄像机镜头的光心位置为坐标原点的坐标系中的Z'c轴方向上的坐标值；根据所确定的n个坐标，计算光源的位置(Xl，Yl，Zl)。较佳的，所述根据所述光源的位置和所述占位标件的表面对光的吸收率，计算光源的颜色组成分量，包括：确定所述占位标件中预设的光源计算面中心点的坐标；获得所述光源计算面中心点和光源之间的连线与所述光源计算面所在平面之间的夹角θ；计算所述光源计算面与所述光源之间的距离d；根据所述光源计算面中各个像素点的颜色值，获得该光源计算面的平均颜色值；根据所述光源计算面的平均颜色值、夹角θ、距离d和所述占位标件的表面对光的吸收率，确定光源的颜色组成分量。较佳的，所述根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，包括：根据所述模型参数和所述待植入广告对象的尺寸，计算所述待植入广告对象的各个表面上的点在所述视频帧中对应的像素点坐标；计算所述待植入广告对象的各个表面上的点与所述光源之间的距离；计算所述待植入广告的各个表面上的点与所述光源的连线与该点所在切平面之间的夹角；根据所述待植入广告对象的表面对光的吸收率和上述计算得到的距离、夹角，计算所述待植入广告对象的各个表面上的点的像素值。为达到上述目的，本专利技术实施例公开了一种在视频中植入广告的装置，所述装置包括：占位标件检测模块，用于检测视频帧中的占位标件，所述占位标件是视频拍摄场景中的一个拍摄物，用于在拍摄得到的视频帧中标识植入广告的位置；模型参数计算模块，用于根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，其中，所述模型参数，包括摄像机参数矩阵M、光源的位置和光源的颜色组成分量，所述占位标件的特征参数，包括所述占位标件的尺寸和所述占位标件的表面对光的吸收率；坐标和像素值计算模块，用于根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，其中，所述待植入广告对象的特征参数，包括所述待植入广告对象的尺寸和所述待植入广告对象的表面对光的吸收率；广告对象植入模块，用于根据计算得到的像素点坐标和像素值，在所述视频帧中植入所述待植入广告对象。较佳的，所述占位标件，表面带有标识性图案，其中，所述标识性图案用于提高在所述视频帧中检测所述占位标件的成功率。较佳的，所述待植入广告对象的尺寸大于所述占位标件的尺寸。较佳的，所述模型参数计算模块，包括：摄像机参数矩阵计算子模块，用于根据所述视频帧中预设数量的所述占位标件上的标线交叉点的坐标和所述占位标件的尺寸，计算摄像机参数矩阵M；光源位置计算子模块，用于根据所述摄像机参数矩阵M和所述占位标件在所述视频帧中的阴影区域，计算光源的位置；光源颜色组成分量计算子模块，用于根据所述光源的位置和所述占位标件的表面对光的吸收率，计算光源的颜色组成分量。较佳的，所述摄像机参数矩阵计算子模块，包括：三维坐标系确定单元，用于以所述占位标件的底面中心点为坐标原点、底面所在平面为XY平面，确定所述占位标件所在的三维坐标系，其中，所述三维坐标系的X轴和Y轴分别与所述占位标件的两条相邻边平行；摄像机参数矩阵计算单元，用于在本文档来自技高网...

【技术保护点】
一种在视频中植入广告的方法，其特征在于，所述方法包括：检测视频帧中的占位标件，所述占位标件是视频拍摄场景中的一个拍摄物，用于在拍摄得到的视频帧中标识植入广告的位置；根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，其中，所述模型参数，包括摄像机参数矩阵M、光源的位置和光源的颜色组成分量，所述占位标件的特征参数，包括所述占位标件的尺寸和所述占位标件的表面对光的吸收率；根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，其中，所述待植入广告对象的特征参数，包括所述待植入广告对象的尺寸和所述待植入广告对象的表面对光的吸收率；根据计算得到的像素点坐标和像素值，在所述视频帧中植入所述待植入广告对象。

【技术特征摘要】
1.一种在视频中植入广告的方法，其特征在于，所述方法包括：检测视频帧中的占位标件，所述占位标件是视频拍摄场景中的一个拍摄物，用于在拍摄得到的视频帧中标识植入广告的位置；根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，其中，所述模型参数，包括摄像机参数矩阵M、光源的位置和光源的颜色组成分量，所述占位标件的特征参数，包括所述占位标件的尺寸和所述占位标件的表面对光的吸收率；根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，其中，所述待植入广告对象的特征参数，包括所述待植入广告对象的尺寸和所述待植入广告对象的表面对光的吸收率；根据计算得到的像素点坐标和像素值，在所述视频帧中植入所述待植入广告对象。2.根据权利要求1所述的方法，其特征在于，所述占位标件，表面带有标识性图案，其中，所述标识性图案用于提高在所述视频帧中检测所述占位标件的成功率。3.根据权利要求1所述的方法，其特征在于，所述待植入广告对象的尺寸大于所述占位标件的尺寸。4.根据权利要求1-3中任一项所述的方法，其特征在于，所述根据检测结果和所述占位标件的特征参数，计算所述占位标件对应的模型参数，包括：根据所述视频帧中预设数量的所述占位标件上的标线交叉点的坐标和所述占位标件的尺寸，计算摄像机参数矩阵M；根据所述摄像机参数矩阵M和所述占位标件在所述视频帧中的阴影区域，计算光源的位置；根据所述光源的位置和所述占位标件的表面对光的吸收率，计算光源的颜色组成分量。5.根据权利要求4所述的方法，其特征在于，所述根据所述视频帧中预设数量的所述占位标件上的标线交叉点的坐标和所述占位标件的尺寸，计算摄像机参数矩阵M，包括：以所述占位标件的底面中心点为坐标原点、底面所在平面为XY平面，确定所述占位标件所在的三维坐标系，其中，所述三维坐标系的X轴和Y轴分别与所述占位标件的两条相邻边平行；在所述三维坐标系中，按照如下关系式计算摄像机参数矩阵M，其中，(ui，vi)为所述视频帧中所述占位标件上的标线交叉点的坐标，(Xwi，Ywi，Zwi)为所述占位标件上的标线交叉点(ui，vi)在所述三维坐标系中的坐标，根据(ui，vi)和所述占位标件的尺寸计算得到，m11......m34为所述摄像机参数矩阵M的元素，Zci为标线交叉点(Xwi，Ywi，Zwi)在以摄像机镜头的光心位置为坐标原点的坐标系中的Zc轴方向上的坐标值，n为计算所述摄像机参数矩阵M所需的所述视频帧中占位标件上的标线交叉点的个数。6.根据权利要求5所述的方法，其特征在于，所述根据所述摄像机参数矩阵M和所述占位标件在所述视频帧中的阴影区域，计算光源的位置，包括：确定所述视频帧中所述占位标件的阴影区域；在所述三维坐标系中，根据如下关系式，分别确定所述阴影区域中的n个阴影点在所述占位标件上的对应点的坐标；其中，M为所述摄像机参数矩阵，(u'i，v'i)为所述阴影区域中阴影点在所述视频帧中的坐标，(X'wi，Y'wi，Z'wi)为点(u'i，v'i)在所述三维坐标系中的坐标，Z'ci为(X'wi，Y'wi，Z'wi)在以摄像机镜头的光心位置为坐标原点的坐标系中的Z'c轴方向上的坐标值；根据所确定的n个坐标，计算光源的位置(Xl，Yl，Zl)。7.根据权利要求6所述的方法，其特征在于，所述根据所述光源的位置和所述占位标件的表面对光的吸收率，计算光源的颜色组成分量，包括：确定所述占位标件中预设的光源计算面中心点的坐标；获得所述光源计算面中心点和光源之间的连线与所述光源计算面所在平面之间的夹角θ；计算所述光源计算面与所述光源之间的距离d；根据所述光源计算面中各个像素点的颜色值，获得该光源计算面的平均颜色值；根据所述光源计算面的平均颜色值、夹角θ、距离d和所述占位标件的表面对光的吸收率，确定光源的颜色组成分量。8.根据权利要求1所述的方法，其特征在于，所述根据所述模型参数和待植入广告对象的特征参数，计算所述待植入广告对象在所述视频帧中对应的像素点坐标和像素值，包括：根据所述模型参数和所述待植入广告对象的尺寸，计算所述待植入广告对象的各个表面上的点在所述视频帧中对应的像素点坐标；计算所述待植入广告对象的各个表面上的点与所述光源之间的距离；计算所述待植入广告的各个表面上的点与所述光源的连线与该点所在切平面之间的夹角；根据所述待植入广告对象的表面对光的吸收率和上述计算得到的距离、夹角，计算所述待植入广告对象的各个表面上的点的像素值。9.一种在视频中植入广告的装置，其特征在于，所述装置包括：占位标件检测模块，用于检测视频帧中的占位标件，...

【专利技术属性】
技术研发人员：李典，
申请(专利权)人：北京奇艺世纪科技有限公司，
类型：发明
国别省市：北京,11