图像处理装置、图像处理方法和图像处理程序制造方法及图纸

可以增强在书写表面上书写的书写内容的书写内容图像的可见性。提供一种包括处理电路的图像处理装置。处理电路被配置成修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性。对所述书写内容图像的一个或多个特性的修改基于与所述书写表面相关的信息。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法和图像处理程序相关申请的交叉引用本申请要求2018年12月17日提交的日本优先权专利申请JP2018-235747的权益，其全部内容通过引用并入本文。
本公开涉及图像处理装置、图像处理方法和程序。
技术介绍
近年来，已经开发了用于在黑板、白板等上提取书写(writing即，笔迹)并输出指示提取的书写的信息的技术。例如，PTL1公开了一种用于拍摄黑板、白板等的图像，从拍摄图像中提取与书写相对应的图像，并输出所提取的图像的技术。引文列表专利文献PTL1：JP2016-30369A
技术实现思路
技术问题然而，根据PTL1中描述的技术，提取的图像被输出为单色图像数据，因此认为图像的可见性差。此外，即使在提取的图像作为彩色图像输出的情况下，在物理空间中直接观看书写的情况和在显示器上观看书写的情况之间看起来也可能不同，因此认为图像的可见性差。此外，通常使书写适应于待书写对象。因此，在提取书写图像并且将其与不同于要书写的对象的背景的图像组合以作为输出图像输出的情况下，认为输出图像中的书写图像的可见性差。针对问题的技术方案根据本公开，提供了一种包括处理电路的图像处理装置。处理电路被配置成修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。此外，根据本公开，提供了一种图像处理方法。该图像处理方法包括通过图像处理装置的处理电路，修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。此外，根据本公开，提供了一种存储指令的非暂时性计算机可读存储介质，所述指令在由计算机执行时使计算机执行一种方法。该方法包括修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。附图说明图1是用于说明根据本公开的实施例的图像处理装置100和输入装置200的概要的图。图2是用于说明根据本实施例的系统1的示例性功能配置的图。图3是用于说明由根据本实施例的获取单元11获取的示例性图像的图。图4是用于说明由根据本实施例的提取单元14进行的示例性提取处理的图。图5是用于说明由根据本实施例的提取单元14进行的示例性待书写对象区域提取处理的图。图6是用于说明由根据本实施例的提取单元14进行的待书写对象区域提取处理的示例性结果的图。图7是用于说明根据本实施例的校正单元15的示例性校正方法的图。图8是用于说明根据本实施例的校正单元15的示例性校正方法的图。图9是用于说明根据本实施例的校正单元15的示例性校正方法的图。图10是用于说明根据本实施例的校正单元15以50度到70度的色调角按色调中的二次曲线的示例性校正的图。图11是用于说明由根据本实施例的校正单元15使用过滤器执行校正处理的具体示例的图。图12是用于说明由根据本实施例的校正单元15校正书写内容图像22的轮廓的示例性处理的图。图13是用于说明根据本实施例的输出装置300的示例性输出的图。图14是用于说明根据本实施例的系统1的示例性操作流程的图。图15A是用于说明根据本实施例的由校正单元15进行的基于行为检测信息的示例性校正处理的图，该行为检测信息指示书写者是否正在待书写对象2上书写。图15B是用于说明根据本实施例的由校正单元15进行的基于行为检测信息的示例性校正处理的图，该行为检测信息指示书写者是否正在待书写对象2上书写。图16是用于说明根据本实施例的由校正单元15进行的基于书写者3和待书写对象2之间的位置关系的书写内容图像校正处理的图。图17是示出包括根据本公开的实施例的系统1的信息处理装置的示例性硬件配置的框图。具体实施方式下面将参考附图详细描述本公开的实施例。另外，在本说明书和附图中，用相同的附图标记表示具有基本相同功能配置的组件，并且将省略对其的重复描述。此外，将按以下顺序进行描述。1.实施例1-1.背景1-2.示例性整体配置1-3.示例性功能配置2.示例性操作3.应用3-1.应用13-2.应用24.示例性硬件配置5.结论<1.实施例><<1-1.背景>>将首先描述本公开的实施例的背景。近年来，已经开发了一种技术，用于从黑板、白板等(以下表示为待书写对象2或书写表面)的图像拍摄提取待书写对象2上的书写(以下表示为书写内容4)，并将提取的书写内容4输出为图像。例如，在讲座、会议等场景中的显示器等上输出书写内容4的图像(在下面表示为书写内容图像22)，以便远程参与者可以容易地确认书写内容。顺便提一下，在拍摄书写内容4被输出为书写内容图像22的情况下，认为书写内容图像22的可见性差。这可能是因为，例如，在物理空间中直接观看书写内容的情况下、在显示器上观看书写内容图像22的情况下等之间，书写内容看起来可能不同。此外，对于每种待书写对象2，用于书写的常用颜色通常可能不同。因此，取决于用于书写的颜色和输出图像的背景颜色的组合，认为包括在输出图像中的书写内容图像22的可见性差。根据上述要点，设想了根据本公开的实施例的技术精神，其使得能够校正书写内容图像的形式，以获得书写内容图像的更好的可见性。下面将顺序地详细描述根据本公开的实施例的示例性配置和示例性操作。<<1-2.示例性整体配置>>随后将参考图1描述根据本公开的实施例的图像处理装置100和输入装置200的概要。图1是用于说明根据本公开的实施例的图像处理装置100和输入装置200的概要的图。图1示出了图像处理装置100和连接到图像处理装置100的输入装置200。待书写对象2是在其上书写诸如点、线、字符、句子、数学表达式、符号、图片、图形或图像之类的视觉信息(书写内容4)的对象。待书写对象2(或书写表面)是黑板、白板、电子纸、触摸面板等。书写者3操作待书写对象2。例如，书写者3在待书写对象2上书写书写内容4。书写内容4是书写在待书写对象2上的视觉信息。如上所述，使用粉笔、马克笔(marker)、触笔(styluspen)、手指等在待书写对象2上书写所述书写内容4。此外，书写内容4可以是各种颜色的。例如，在待书写对象2是黑板的情况下，书写内容4是白色、红色、黄色等的。输入装置200是用于输入关于安装输入装置200的物理空间的信息的装置。输入装置200包括例如拍摄装置和语音输入装置。拍摄装置包括由拍摄透镜、光圈、变焦透镜、聚焦透镜等构成的透镜系统，用于使透镜系统执行聚焦操作或变焦操作的驱动系统，用于光电转换由透镜系统获得的拍摄光从而产生拍摄信号本文档来自技高网...

【技术保护点】
1.一种图像处理装置，包括：/n处理电路，被配置为/n修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对所述书写内容图像的所述一个或多个特性的修改基于与所述书写表面相关的信息。/n

【技术特征摘要】
【国外来华专利技术】20181217 JP 2018-2357471.一种图像处理装置，包括：
处理电路，被配置为
修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对所述书写内容图像的所述一个或多个特性的修改基于与所述书写表面相关的信息。


2.根据权利要求1所述的图像处理装置，
其中，所述处理电路还被配置成基于输出图像的背景颜色修改所述书写内容图像的所述一个或多个特性。


3.根据权利要求1所述的图像处理装置，其中所述书写内容图像的所述一个或多个特性包括颜色。


4.根据权利要求3所述的图像处理装置，其中所述处理电路被配置成修改所述颜色以提高所述书写内容的可见性。


5.根据权利要求1所述的图像处理装置，其中
所述书写内容图像的所述一个或多个特性包括书写内容图像的色调、亮度或饱和度中的至少一个，以及
处理电路被配置成修改书写内容图像的色调、亮度或饱和度中的所述至少一个。


6.根据权利要求1所述的图像处理装置，
其中
书写内容图像的所述一个或多个特性包括书写内容图像的第一颜色的亮度，以及
处理电路被配置成修改书写内容图像的第一颜色的亮度，以便增大书写内容图像的第一颜色和第二颜色之间的亮度差。


7.根据权利要求6所述的图像处理装置，其中
书写内容图像的第一颜色具有在50度到70度的范围内的色调角，并且
处理电路被配置成增大第一颜色的亮度。


8.根据权利要求1所述的图像处理装置，
其中
所述书写内容图像的所述一个或多个特性包括所述书写内容图像的多个颜色的亮度，以及
在修改所述一个或多个特性之后，反转在修改所述一个或多个特性之前的书写内容图像的所述多个颜色的亮度顺序。


9.根据权利要求1所述的图像处理装置，其中
所述书写内容图像的所述一个或多个特性包括所述书写内容图像的颜色的亮度，
书写表面的特性是书写表面的颜色的亮度，以及
处理电路被配置成基于书写表面的颜色的亮度和输出图像的背景颜色的亮度之间的差来修改书写内容图像的颜色的亮度。


10.根据权利要求1所述的图像处理装置，其中
书写内容图像的所述一个或多个特性包括书写内容图像的颜色的亮度，以及
处理电路被配置成基于书写内容图像的颜色的色调来修改书写内容图像的颜色的亮度。


11.根据权利要求1所述的图像处理装置，其中
书写内容图像的所述一个或多个特性包括书写内容图像的颜色的亮度，以及
处理电路被配置成当书写内容图像的颜色的亮度和输出图像的背景颜色的亮度之间的差为第一预定值或更小时，修改书写内容图像的颜色的亮度，使得背景颜色的亮度和书写内容图像的颜色的亮度之间的差为第二预定值或更高。


12.根据权利要求1所述的图像处理装置，其中
所述书写内容图像的所述一个或多个特性包括所述书写内容图像的多个颜色...

【专利技术属性】
技术研发人员：高梨省吾，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：日本;JP