图像处理设备和图像处理方法技术

公开了一种图像处理设备。该图像处理设备包括：缩小部分，用于生成由多个缩小线数据构成的缩小数据的缩小线数据，并每隔预定定时顺序输出该缩小线数据，该缩小数据是通过缩小利用广角镜头捕获的具有失真的宽视野图像而获得的；切换部分，用于响应于该预定定时而执行从宽视野图像数据的输出到缩小线数据的输出的切换；和缓冲器，用于暂时存储宽视野图像数据和由在该切换之后输出的多个缩小数据构成的缩小数据。

【技术实现步骤摘要】

本专利技术涉及用于处理利用广角镜头捕获的图像的。
技术介绍
过去，已提出了这样的技术，其中用户指定例如利用鱼眼镜头捕获的图像中的必要区域，校正所指定的区域中的鱼眼图像数据的失真变形，并在监视器上显示所校正的图像。所捕获的图像不仅是静止图像而且是运动图像(例如，见专利文献1)。 在该专利文献1中，在监视器(28)的一部分上显示鱼眼图像数据(24)，并通过利用控制杆(27)指定所显示的数据的一部分而指定显示区域(25)。在监视器(28)上显示通过校正所指定的鱼眼图像数据(24)的失真变形而获得的平面再现图像(29)。当试图将鱼眼图像数据(24)添加到刚刚描述的平面再现图像(29)的一部分上时，必须读取平面再现图像(29)的像素数据并重构该图像。 专利文献1日本专利申请公开No.2000-324386(段落、图1、图2)
技术实现思路
当在将例如鱼眼图像数据的数据添加到上述整个屏幕的一部分上时、将高像素传感器用作图像捕获传感器时，读取以上像素数据花费时间。 考虑到以上情况，期望提供一种当将利用广角镜头捕获的宽视野图像添加到整个屏幕的一部分上时能够有效执行处理的技术。 根据本专利技术的实施例，提供了一种图像处理设备。该图像处理设备包括缩小(thinning-out)部分，用于生成由多个缩小线数据构成的缩小数据的缩小线数据，并每隔预定定时顺序输出该缩小线数据，该缩小数据是通过缩小利用广角镜头捕获的具有失真的宽视野图像而获得的；切换部分，用于响应于该预定定时而执行从宽视野图像数据的输出到缩小线数据的输出的切换；和缓冲器，用于暂时存储宽视野图像数据和由在该切换之后输出的多个缩小线数据构成的缩小数据。 在本专利技术的实施例中，在从宽视野图像数据切换到缩小线数据之后，将该缩小部分生成的缩小线数据输出到缓冲器。由此，有效生成了与该宽视野图像数据对应的缩小数据。 根据本专利技术的实施例，该缩小部分包括第一相加部分，用于沿线方向以预定数目像素为单位将构成该宽视野图像数据的各像素的像素数据相加，并输出通过相加获得的相加后的像素数据；和第二相加部分，用于沿列方向以预定数目线为单位将由顺序输出的预定数目的相加后的像素数据构成的线数据相加，并输出通过相加获得的缩小线数据。在本专利技术的实施例中，线方向和列方向之间的分离使得可能进行有效缩小处理。 根据本专利技术的实施例，该图像处理设备还包括变换部分，用于将宽视野图像的RGB数据变换为包括亮度数据和色差数据的亮度/色差数据，并且该缩小部分生成通过变换部分的变换获得的亮度/色差数据的缩小线数据。在本专利技术的实施例中，在变换为比RGB数据具有更小数据量的亮度/色差数据之后，生成缩小数据，这使得可能降低计算量并实现有效处理。 根据本专利技术的实施例，该缩小部分以与通过变换部分的变换获得的亮度/色差数据相同的格式生成该缩小线数据。结果，可将经过缩小处理的亮度/色差数据如实再现为缩小线数据。 根据本专利技术的实施例，该图像处理设备还包括校正部分，用于校正从该宽视野图像中选择出的选定区域的图像的失真；和合成部分，用于合成该校正部分获得的失真校正后的图像和包括通过加亮该选定区域获得的加亮区域的缩小数据，作为一个屏幕的图像数据。在本专利技术的实施例中，在缩小数据中包括该加亮区域，使得用户可识别出加亮了宽视野整体图像中的哪部分(缩小数据的图像)。另外，合成通过校正该选定区域图像的失真而获得的图像和该缩小图像，使得用户可在看见缩小图像的同时看见失真校正后的图像。 根据本专利技术实施例的图像处理方法包括生成由多个缩小线数据构成的缩小数据的缩小线数据，该缩小数据是通过缩小利用广角镜头捕获的具有失真的宽视野图像而获得的；每隔预定定时顺序输出该缩小线数据；响应于该预定定时而执行从宽视野图像数据的输出到缩小线数据的输出的切换；和暂时存储宽视野图像数据和由在该切换之后输出的多个缩小线数据构成的缩小数据。 如上所述，根据本专利技术的实施例，在其中向宽视野图像的一部分添加缩小数据的处理中，可执行有效处理。 附图说明 图1是示出了根据本专利技术实施例的图像处理系统的配置的方框图； 图2A到2C是示出了由图像处理设备进行图像处理并在显示单元中显示的各种图像的示例的图； 图3是示出了由球代表的视野的图； 图4A到4C是各自示出当相机利用广角镜头捕获图像时的视野(捕获范围)的图； 图5是示出了该图像处理设备的操作的流程图； 图6A和6B是解释座标变换的原理的示例的图； 图7A到7D是解释座标变换的原理的示例的图； 图8是解释座标变换的原理的示例的图； 图9是解释座标变换的原理的示例的图； 图10是示出了响应于来自输入装置的输入信号更新所选择的区域图像的操作的流程图； 图11是示出了缩小处理电路的硬件配置的方框图； 图12是示出了缩小电路的硬件配置的方框图； 图13A是示出了像素数据相加电路的配置的图，而图13B是示出了线数据相加电路的配置的图； 图14是示出了第一计数器(第二计数器)的配置的图； 图15是示出了第一指示器(pointer)(第二指示器)的配置的图； 图16是示出了当缩小电路生成缩小线数据时的操作的流程图； 图17是示出了相加像素数据的方式的图； 图18是示出了相加线数据的方式的图； 图19是示出了在帧缓冲器和帧存储器中存储的图像的图； 图20是示出了相加YCrCb像素数据的方式的图； 图21是示出了4:2:0 YCrCb像素数据的图；和 图22是示出了在维持图21中的像素数据的格式的同时生成缩小数据的方式的图。 具体实施例方式 下面将参考附图来描述本专利技术的实施例。 图1是示出了根据本专利技术实施例的图像处理系统的配置的方框图。图像处理系统包括广角镜头1、图像处理设备10、和显示单元12，另外还包括外部装置13、输入装置14等。图像处理设备10包括图像传感器2、颜色处理电路3、失真校正处理电路4、缩小处理电路15、控制器5、存储器6、图像压缩电路7、显示接口8、USB(通用串行总线)接口9、和输入装置接口11。 图像传感器2是将通过广角镜头1接受的光变换为电信号的传感器。例如，使用CMOS(互补金属氧化物半导体)传感器、CCD(电荷耦合器件)等。作为广角镜头1，使用具有宽视角或宽场角(field angle)的镜头，并例如使用具有45度或更大场角的镜头，但是广角镜头1不限于此。作为广角镜头1的示例，列出鱼眼镜头、可获得环形图像的PAL(全景环形镜头)(环形镜头)等。作为选择，通过使用具有大约180°场角的两个鱼眼镜头，可捕获具有全面(all-round)(球面空间(360°))视野的图像。 颜色处理电路3包括YCrCb变换电路(未示出)，用于将从图像传感器2输出的RGB数据变换为包括亮度数据和色差数据的YCrCb数据(YUV数据)。颜色处理电路3另外包括(尽管未示出)用于控制光强的AE(自动曝光)操作电路、用于控制白平衡的AWB(自动白平衡)操作电路、和用于对通过非线性表过滤的每一RGrGbB像素执行增益调节的增益调节电路。 如图2C所示，缩小处理电路15是生成通过缩小宽视野图像25所获得的宽视野图像(其后称为缩小图像)45的电路。 失真校正处理电路4主本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：　　　　缩小部分，用于生成由多个缩小线数据构成的缩小数据的缩小线数据，并每隔预定定时顺序输出该缩小线数据，该缩小数据是通过缩小利用广角镜头捕获的具有失真的宽视野图像而获得的；　　　　切换部分，用于响应于该预定定时而执行从宽视野图像数据的输出到缩小线数据的输出的切换；和　　　　缓冲器，用于暂时存储宽视野图像数据和由在该切换之后输出的多个缩小线数据构成的缩小数据。

【技术特征摘要】
JP 2006-11-22 315164/061.一种图像处理设备，包括缩小部分，用于生成由多个缩小线数据构成的缩小数据的缩小线数据，并每隔预定定时顺序输出该缩小线数据，该缩小数据是通过缩小利用广角镜头捕获的具有失真的宽视野图像而获得的；切换部分，用于响应于该预定定时而执行从宽视野图像数据的输出到缩小线数据的输出的切换；和缓冲器，用于暂时存储宽视野图像数据和由在该切换之后输出的多个缩小线数据构成的缩小数据。2.根据权利要求1的图像处理设备，其中该缩小部分包括第一相加部分，用于沿线方向以预定数目像素为单位将构成该宽视野图像数据的各像素的像素数据相加，并输出通过相加获得的相加后的像素数据；和第二相加部分，用于沿列方向以预定数目线为单位将由顺序输出的预定数目的相加后的像素数据构成的线数据相加，并输出通过相加获得的缩小线数据。3.根据权利要求1的图像处理设备，还包括变换...

【专利技术属性】
技术研发人员：神谷了，伊藤政幸，
申请(专利权)人：索尼株式会社，OPT株式会社，
类型：发明
国别省市：JP[日本]