用于生成数字处理图片的方法、电子装置和服务器制造方法及图纸

本发明专利技术公开了用于生成数字处理图片的方法、电子装置和服务器。该用于生成数字处理图片的方法包括：从电子装置接收由电子装置的图像传感器生成的原始图像数据和由在电子装置处的辅助传感器产生的辅助传感器数据。该方法还包括在考虑所述辅助传感器数据的情况下处理所述原始图像数据以生成将数字处理图片。

【技术实现步骤摘要】

本公开内容一般涉及用于生成数字处理图片的方法、电子装置和服务器。电子装置可以是例如，手持相机、数码单镜头反光(DSLR)相机、或智能手机。服务器可以是互联网中提供云服务的服务器系统的一部分。
技术介绍
数码摄影和数码录像通常由以下基本部分组成:光学器件、图像传感器和信号处理。光学系统将入射光聚焦到电子图像传感器上。图像传感器转换照射光用于引起可测量的电效应。由模拟至数字转换器采样可测量的电效应。信号处理组件通过转换和处理由图像传感器获得的数据来重建图像并且将数字表示转换成可视格式。重建步骤通常包括以下处理步骤:去马赛克或去拜耳(debayering)，将传感器数据转换成可以由监控器显示的RGB格式。后续处理步骤可包括伽玛校正、色度子采样、降噪和JPEG编码。所得到的图像通常存储在如闪速存储器、光盘、或硬盘驱动器等的记录介质上。多年来，以自动聚焦传感器(AF传感器)开始，除图像传感器之外的额外传感器已集成到电子装置和相机。这些额外传感器(例如陀螺仪传感器、加速计、GPS接收器、温度传感器)或者直接用于图像处理步骤，或者他们的数据与图像数据一起被传送为元数据，用于允许用户端的更多功能，例如通过GPS，GLONASS，伽利略的定位跟踪。存储的图像的质量取决于各个组件的质量。最近，称为“计算摄影学(CP) ”的趋势已引入新设计范例，根据该设计范例核心部分(光学器件、传感器、信号处理)是共同设计的，用于允许通过计算补偿光学器件和传感器的不足。
技术实现思路
根据本公开的一个方面，提供一种方法包括:从电子装置接收由电子装置的图像传感器生成的原始图像数据和由在电子装置处的辅助传感器产生的辅助传感器数据，并且在考虑所述辅助传感器数据的情况下来处理所述原始图像数据以生成将数字处理图片。根据本公开的另一方面，提供一种电子装置包括:图像传感器，用于感测图像并且用于生成表示所述图像的原始图像数据；辅助传感器，用于获取辅助传感器数据；以及发送器，用于将所述原始图像数据和所述辅助传感器数据传输至远程图像处理服务器，其中所述远程图像处理服务器被配置为在考虑所述辅助传感器数据的情况下来处理所述原始图像数据以生成将数字处理图片。根据本公开的另一方面，提供一种服务器包括处理器，该处理器被配置为:接收原始图像数据；接收辅助传感器数据；并且在考虑所述辅助传感器数据的情况下来处理所述原始图像数据以生成将数字处理图片。另外的方面在从属权利要求、以下描述和附图中进行阐述。【附图说明】参照附图通过示例的方式说明实施方式，其中:图1示意性地示出一种电子装置的实施方式，这里是数码相机；图2示意性地示出当处理原始图像数据以生成数字处理图片时执行的操作的示例性顺序；图3示意性地示出生成数字处理图片的系统；图4示意性地示出将数据从数码相机传输至图像处理服务器用于生成数字处理图片的两个模式；以及图5a示意性地示出由重建部(图像处理服务器)执行的用于生成数字处理图片的方法的实施方式，以及图5b示意性地示出由获取部(电子装置)执行的用于生成数字处理图片的方法的实施方式。【具体实施方式】现在描述电子装置、云服务、服务器、和用于生成数字处理图片的方法的实施方式的实施例。一种用于生成数字处理图片的方法可以包括:从电子装置接收由电子装置的图像传感器生成的原始图像数据和由在电子装置处的辅助传感器产生的辅助传感器数据；并且考虑辅助传感器数据的情况下处理原始图像数据以生成将数字处理图片。电子装置可以是，例如，包括图像传感器的任何装置，如数码相机，尤其是数码袖珍相机、数码单镜头反光相机(DSLR)、或具有集成的相机的智能手机。接收原始图像数据和辅助传感器数据以及处理所述原始图像数据以生成数字处理图片可以通过远程图像处理服务器来执行。该方法可进一步包括:通过所述电子装置使用图像传感器生成原始图像数据；通过所述电子装置从辅助传感器获取辅助传感器数据；并且通过所述电子装置将所述原始图像数据和所述辅助传感器数据传输到远程图像处理服务器。原始图像数据通常包括来自图像传感器的未处理的或最低程度处理的数据。最低处理可以包括:例如，包含用于解释原始传感器信号的传感器元数据，包含例如传感器的尺寸和滤色器阵列的属性及其颜色配置文件。一些原始图像数据包括具有Exif格式的数据的标准化的元数据部分。同样，为了压缩目的，原始图像数据可以是编码的数据。原始图像数据通常需要通过所谓的原始转换器进行一些进一步处理以便获得可以在显示装置上查看的数字处理图片。在下文中使用的术语数字处理图片用于界定从原始图像数据数字处理过的图像数据。例如，为了获得数字处理图片，原始图像数据可被转换成宽色域颜色空间，其中在转换成如TIFF或JPEG的数字处理的图片的文件格式之前可以进行精确地调整。进一步处理可以包括:在设备相关颜色空间中编码数字处理图片。当将原始图像数据转换成数字处理图片的标准化的、准备将要使用的格式时，可以进行许多操作。这样的操作可以包括预处理(包括去马赛克或去拜耳)、伽马校正、颜色空间转换、YUV空间处理、和图像压缩中的至少一个。在以下更详细描述的实施方式中，考虑了辅助传感器数据来处理原始图像数据以生成数字处理图片。辅助传感器数据可包括音频数据、电子装置设置、操作电子装置数据、用户数据、位置数据、移动数据、温度数据、气象数据、和无线电数据中的至少一个。该方法可以进一步包括通过所述远程图像处理服务器发送所述数字处理图片到电子装置。在可替换的实施方式中，数字处理图片被发送至与生成原始图像数据的电子装置不同的再现装置。处理所述原始图像数据以生成数字处理图片可包括:原始图像数据的装置类型相关处理，原始图像数据的基于加速计的处理，原始图像数据的基于位置的处理，原始图像数据的温度相关处理，或者原始图像数据的装置设置相关处理。同样公开一种服务器包括处理器，该处理器被配置为接收原始图像数据，接收辅助传感器数据，并且将所述辅助传感器数据纳入考虑来处理所述原始图像数据以生成数字处理图片。处理器可以是单个处理器或包括位于不同位置的多个处理单元的分布式处理器。提供处理原始图像数据的云服务的云服务器系统可包括一个或多个如上所述的图像处理服务器。现在参考附图更详细地描述电子装置、云服务、服务器、和用于生成数字处理图片的方法的实施方式。图1示意性地示出了电子装置101的框图。电子装置101具有光学器件103、图像传感器105、GPS接收器107、陀螺仪109、加速计111、麦克风113、用于音频信号的模拟至数字转换器115、内部处理器117、和发送器119。发送器119被设置用于将原始图像数据传输至远程图像处理服务器，该远程图像处理服务器被配置用于将由图像传感器105生成的原始图像数据转换为数字处理图片。传感器107、109、111产生辅助传感器数据，该辅助传感器数据同样通过发送器119被发送到远程图像处理服务器。远程图像处理服务器可以是提供图像处理的云服务的云系统的一部分。图2示出了由位于远程图像处理服务器的原始转换器完成的用来根据从电子装置(如参考图1描述的电子装置)接收的原始图像数据获得数字处理图片的处理的实施方式。在图2的处理中，进行许多操作。这些操作包括去马赛克201 (或去拜耳)、伽马校正203、颜色空间转换本文档来自技高网...

【技术保护点】
一种方法，包括：从电子装置接收由所述电子装置的图像传感器生成的原始图像数据和由在所述电子装置处的辅助传感器产生的辅助传感器数据；以及在考虑所述辅助传感器数据的情况下处理所述原始图像数据以生成数字处理图片。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：皮尔乔治·萨托，卡劳斯·齐默尔曼，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP