排除明暗、呼吸和脉搏的影响的观看者情绪判定装置、观看者情绪判定系统和程序制造方法及图纸

测定排除了明暗、呼吸和脉搏的影响的瞳孔直径，更准确地判定观看者的情绪。基准数据测定部(22)按每种画面整体亮度和视点亮度，测定基准瞳孔直径(Csk)、呼吸瞳孔直径(Dskt)和脉搏瞳孔直径(Eskt)作为基准数据。测定部(23)确定与内容的经过时间对应的基准瞳孔直径(Csk)、呼吸瞳孔直径(Dskt)和脉搏瞳孔直径(Eskt)。测定部(23)在两次呼吸时间以上(T1)的情况下，将瞳孔直径(Bt)设定为注视瞳孔直径(A1t)，在两次脉搏时间以上且低于两次呼吸时间(T2)的情况下，从瞳孔直径(Bt)中减去呼吸瞳孔直径(Dskt)来求出注视瞳孔直径(A1t)，在低于两次脉搏(T3)的情况下，进一步减去脉搏瞳孔直径(Eskt)来求出注视瞳孔直径(A1t)。测定部(23)从注视瞳孔直径(A1t)中减去基准瞳孔直径Csk来求出基于注视的瞳孔直径(A2t)，将注视瞳孔直径(A1t)和基于注视的瞳孔直径(A2t)除以基准瞳孔直径(Csk)，来求出注视度(P1t，P2t)。

Spectator emotion judgment device excluding spectator, respiration and pulse effects, viewer emotion judgment system and program

The pupil diameter that excludes the influence of light and dark, respiration and pulse is measured and the mood of the viewer is judged more accurately. The datum data measurement department (22) measured the baseline pupil diameter (Csk), the pupil diameter (Dskt) and the pulse pupil diameter (Eskt) as datum data according to the overall brightness and point of view of each picture. The measurement unit (23) determines the baseline pupil diameter (Csk), respiratory pupil diameter (Dskt) and pulse pupil diameter (Eskt) corresponding to the duration of the content. The measurement department (23) set the pupil diameter (Bt) as the fixation of pupil diameter (A1t) over two times of breathing time (T1). Under the two pulse time and lower than two breaths (T2), the pupil diameter (Dskt) was subtracted from the pupil diameter (Bt) to determine the pupil diameter (A1t), at less than two pulse (T3). Further, the pupil diameter (Eskt) was further reduced to calculate the pupil diameter (A1t). The measurement department (23) subtracted the baseline pupil diameter (Csk) from the gaze pupil diameter (A1t) to find the pupil diameter (A2t) based on the fixation. The fixation of the pupil diameter (A1t) and the pupil diameter (A2t) based on the gaze (A2t) were divided by the baseline pupil diameter (Csk) to determine the fixation (P1t, P2t).

【技术实现步骤摘要】
【国外来华专利技术】排除明暗、呼吸和脉搏的影响的观看者情绪判定装置、观看者情绪判定系统和程序
本专利技术涉及一种利用了当观看者注视视觉对象时瞳孔直径会放大的现象的观看者情绪判定装置、观看者情绪判定系统和程序(vieweremotiondeterminationapparatusthateliminatesinfluenceofbrightness,breathing,andpulse,vieweremotiondeterminationsystem,andprogram)，涉及一种在测定面对视觉对象的观看者的瞳孔直径时，排除视觉对象的明暗以及观看者的呼吸和脉搏的影响的技术。
技术介绍
在现有技术中，作为判定人正在观看哪里的技术，测定视点位置且计算对视觉对象的视点停留时间，来测定对视觉对象的注视度。在该方法中，即使在只是心不在焉地目视着视觉对象的情况下，当视点的停留时间长时也会被误判为对该视觉对象的注视度高。另外，虽然能对静止图像(stillimage)测量视点停留，但难以对动态视频测量视点的停留。为了解决这样的问题，已知一种同时利用人注视视觉对象时瞳孔直径会放大的现象，来判定对视觉对象的注视度高低的技术(例如参照专利文献1、2)。在专利文献1、2的技术中，拍摄眼球运动，测定视线的移动、瞳孔直径等来测定对视觉对象的注视度。具体而言，就对内容(content)的明暗反应，按每一观看者来预先测定显示器的亮度与瞳孔直径的关系。然后，测定在观看实际内容时的显示器亮度，参照预先测定的亮度与瞳孔直径的关系，从实际测定的瞳孔直径中减去与该亮度相当的仅基于明暗反应的瞳孔直径。据此，能准确测定与注视显示器上显示的内容相当的(基于注视的)观看者的瞳孔直径。【现有技术文献】【专利文献】专利文献1：日本专利技术专利授权公报特许第5445981号专利文献2：国际公开第2015/056742号
技术实现思路
【专利技术要解决的技术问题】然而，与注视度同样，虽然存在瞳孔直径在亮的场所缩小而在暗的场所放大的现象，但存在个人差异。为了消除该个人差异，使用成为基准的明暗画面(基准明暗画面)，以观看最暗的画面时的瞳孔直径与观看最亮的画面时的瞳孔直径之间的差为分母，以观看实际的视觉对象时的瞳孔直径与观看亮度条件与其相同的基准明暗画面时的瞳孔直径之间的差(与注视相当程度的瞳孔直径)为分子，而得到比值，根据该比值来评定注视度的等级。在该情况下，在计算用于确定注视度等级的分子时，即使是同一的注视尺寸，有时暗的画面中的与注视相当程度的瞳孔直径和亮的画面中的与注视相当程度的瞳孔直径也会不同。因此，也存在没有正确地表示注视度的等级的情况，需要明暗共同的正确地表示注视度的方法。另外，在观看者无聊地目视着视觉对象的情况下，有时注视度的数值为负(-)，有时无法将该数值直接使用于应用程序的计算。因此，需要将注视度的数值用正数进行处理。并且，瞳孔直径由于呼吸和脉搏而周期性变化。因此，为了更准确地测定对视觉对象的注视度，期望在测定瞳孔直径时，排除视觉对象的明暗、以及观看者的呼吸和脉搏的影响。因此，本专利技术是为了解决上述技术问题而做出的，其目的在于提供一种对排除了明暗、呼吸和脉搏的影响的瞳孔直径进行测定，而能够更准确地判定观看者的情绪的观看者情绪判定装置、观看者情绪判定系统和程序。【用于解决技术问题的技术方案】本专利技术的第1技术方案涉及一种观看者情绪判定装置。该观看者情绪判定装置是根据观看显示器上显示的内容的观看者的瞳孔直径，来判定观看者的情绪的观看者情绪判定装置。而且，观看者情绪判定装置具有存储部和测定部。存储部存储与观看者的瞳孔直径有关的基准数据，该基准数据是基于按以下方式测定出的观看者的瞳孔直径的数据：在第1画面上显示着规定的基准明暗画面且使第1画面的亮度和当使观看者的视点对准第1画面的规定部位时的视点位置的亮度变化的情况下，按每种基准明暗画面中的第1画面的亮度与视点位置的亮度的组合来测定出观看者的瞳孔直径。在显示器上显示着内容的情况下，测定部测定观看者的瞳孔直径而得到实际测定的瞳孔直径，并且，根据被存储于存储部的基准数据来确定与显示着内容的显示器的亮度和显示着内容的显示器内的视点位置的亮度对应的基准数据，且根据实际测定的瞳孔直径和经确定的基准数据来补正实际测定的瞳孔直径而得到补正后的瞳孔直径。上述观看者情绪判定装置的优选例为，基准数据由基准数据测定部测定。而且，基准数据测定部具有基准明暗反应测定单元，该基准明暗反应测定单元以观看者的呼吸周期为1次呼吸时间来设定在两次呼吸时间以上的规定的时间间隔，按每种基准明暗画面中的第1画面的亮度与视点位置的亮度的组合，以该时间间隔对瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，以显示着基准明暗画面的时间对移动平均后的瞳孔直径进行平均来求出基准瞳孔直径，生成基准明暗反应表，该基准明暗反应表由按每种基准明暗画面中的第1画面的亮度与视点位置的亮度的组合的基准瞳孔直径构成。另外，测定部具有基准瞳孔直径等确定单元和求出基于注视的瞳孔直径的单元，其中，基准瞳孔直径等确定单元根据由基准明暗反应测定单元生成的基准明暗反应表，来确定与显示着内容的显示器的亮度和显示着内容的显示器内的视点位置的亮度对应的基准瞳孔直径；求出基于注视的瞳孔直径的单元设定在两次呼吸时间以上的规定的时间间隔，以该时间间隔对瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，将移动平均后的瞳孔直径作为注视瞳孔直径，从移动平均后的瞳孔直径中减去由基准瞳孔直径等确定单元确定的基准瞳孔直径，求出基于注视的瞳孔直径。上述观看者情绪判定装置优选为：具有测定呼吸状态数据的解析部，其中呼吸状态数据包含观看者的呼吸中的吸气开始点和吐气开始点的时机，基准数据测定部还具有基准呼吸反应测定单元，该基准呼吸反应测定单元以观看者的呼吸周期为1次呼吸时间且以观看者的脉搏周期为1次脉搏时间，来设定在两次脉搏时间以上且低于两次呼吸时间的规定的时间间隔，按每种基准明暗画面中的第1画面的亮度与视点位置的亮度的组合，以该时间间隔对瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，以显示着基准明暗画面的时间对移动平均后的瞳孔直径进行平均来求出平均值，从移动平均后的瞳孔直径中减去平均值，求出作为减法结果的仅受到呼吸的影响的瞳孔直径，使用由解析部测定的呼吸状态数据，来从仅受到呼吸的影响的瞳孔直径的时间变化中提取出包含吸气开始点和吐气开始点的1个呼吸周期的时间内的呼吸瞳孔直径，生成基准呼吸反应表，该基准呼吸反应表由按每种基准明暗画面中的第1画面的亮度与视点位置的亮度的组合的呼吸瞳孔直径构成，测定部的基准瞳孔直径等确定单元确定基准瞳孔直径，并且，根据由基准明暗反应测定单元生成的基准呼吸反应表来确定与显示着内容的显示器的亮度和显示着内容的显示器内的视点位置的亮度对应的呼吸瞳孔直径，测定部的注视瞳孔直径等计算单元设定在两次脉搏时间以上且低于两次呼吸时间的规定的时间间隔，以该时间间隔对瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，且从移动平均后的瞳孔直径中减去由基准瞳孔直径等确定单元确定的呼吸瞳孔直径来求出注视瞳孔直径，且进一步减去由基准瞳孔直径等确定单元确定的基准瞳孔直径，来求出基于注视的瞳孔直径。上述观看者情绪判定装置优选为：解析部除了测定呼吸状态本文档来自技高网...

【技术保护点】
1.一种观看者情绪判定装置，其根据观看显示器上显示的内容的观看者的瞳孔直径来判定所述观看者的情绪，其特征在于，具有存储部和测定部，其中，所述存储部存储与所述观看者的瞳孔直径有关的基准数据，该基准数据是基于按以下方式测定出的所述观看者的瞳孔直径的数据：在第1画面上显示着规定的基准明暗画面且使第1画面的亮度和当使所述观看者的视点对准第1画面的规定部位时的视点位置的亮度变化的情况下，按每种所述基准明暗画面中的第1画面的亮度与所述视点位置的亮度的组合来测定出所述观看者的瞳孔直径；在所述显示器上显示着所述内容的情况下，所述测定部测定所述观看者的瞳孔直径而得到实际测定的瞳孔直径，并且，根据被存储于所述存储部的所述基准数据来确定与显示着所述内容的所述显示器的亮度和显示着所述内容的所述显示器内的视点位置的亮度对应的所述基准数据，且根据实际测定的所述瞳孔直径和经确定的所述基准数据来补正实际测定的所述瞳孔直径而得到补正后的瞳孔直径。

【技术特征摘要】
【国外来华专利技术】2015.10.01 JP 2015-195572;2016.04.01 JP 2016-074011.一种观看者情绪判定装置，其根据观看显示器上显示的内容的观看者的瞳孔直径来判定所述观看者的情绪，其特征在于，具有存储部和测定部，其中，所述存储部存储与所述观看者的瞳孔直径有关的基准数据，该基准数据是基于按以下方式测定出的所述观看者的瞳孔直径的数据：在第1画面上显示着规定的基准明暗画面且使第1画面的亮度和当使所述观看者的视点对准第1画面的规定部位时的视点位置的亮度变化的情况下，按每种所述基准明暗画面中的第1画面的亮度与所述视点位置的亮度的组合来测定出所述观看者的瞳孔直径；在所述显示器上显示着所述内容的情况下，所述测定部测定所述观看者的瞳孔直径而得到实际测定的瞳孔直径，并且，根据被存储于所述存储部的所述基准数据来确定与显示着所述内容的所述显示器的亮度和显示着所述内容的所述显示器内的视点位置的亮度对应的所述基准数据，且根据实际测定的所述瞳孔直径和经确定的所述基准数据来补正实际测定的所述瞳孔直径而得到补正后的瞳孔直径。2.根据权利要求1所述的观看者情绪判定装置，其特征在于，所述基准数据由基准数据测定部测定，所述基准数据测定部具有基准明暗反应测定单元，该基准明暗反应测定单元以所述观看者的呼吸周期为1次呼吸时间来设定在两次呼吸时间以上的规定的时间间隔，按每种所述基准明暗画面中的第1画面的亮度与所述视点位置的亮度的组合，以所述时间间隔对所述瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，以显示着所述基准明暗画面的时间对所述移动平均后的瞳孔直径进行平均来求出基准瞳孔直径，生成基准明暗反应表，该基准明暗反应表由按每种所述基准明暗画面中的第1画面的亮度与所述视点位置的亮度的组合的所述基准瞳孔直径构成，所述测定部具有基准瞳孔直径等确定单元和求出基于注视的瞳孔直径的单元，其中，所述基准瞳孔直径等确定单元根据由所述基准明暗反应测定单元生成的基准明暗反应表，来确定与显示着所述内容的所述显示器的亮度和显示着所述内容的所述显示器内的视点位置的亮度对应的所述基准瞳孔直径；所述求出基于注视的瞳孔直径的单元设定在所述两次呼吸时间以上的规定的时间间隔，以所述时间间隔对所述瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，将所述移动平均后的瞳孔直径作为注视瞳孔直径，从所述移动平均后的瞳孔直径中减去由所述基准瞳孔直径等确定单元确定的所述基准瞳孔直径，求出基于注视的瞳孔直径。3.根据权利要求2所述的观看者情绪判定装置，其特征在于，具有测定呼吸状态数据的解析部，其中所述呼吸状态数据包含所述观看者的呼吸中的吸气开始点和吐气开始点的时机，所述基准数据测定部还具有基准呼吸反应测定单元，该基准呼吸反应测定单元以所述观看者的呼吸周期为1次呼吸时间且以所述观看者的脉搏周期为1次脉搏时间，来设定在两次脉搏时间以上且低于两次呼吸时间的规定的时间间隔，按每种所述基准明暗画面中的所述第1画面的亮度与所述视点位置的亮度的组合，以所述时间间隔对所述瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，以显示着所述基准明暗画面的时间对所述移动平均后的瞳孔直径进行平均来求出平均值，从所述移动平均后的瞳孔直径中减去所述平均值，求出作为减法结果的仅受到呼吸的影响的瞳孔直径，使用由所述解析部测定的所述呼吸状态数据，来从所述仅受到呼吸的影响的瞳孔直径的时间变化中提取出包含吸气开始点和吐气开始点的1个呼吸周期的时间内的呼吸瞳孔直径，生成基准呼吸反应表，该基准呼吸反应表由按每种所述基准明暗画面中的所述第1画面的亮度与所述视点位置的亮度的组合的所述呼吸瞳孔直径构成，所述测定部的基准瞳孔直径等确定单元确定所述基准瞳孔直径，并且，根据由所述基准明暗反应测定单元生成的基准呼吸反应表来确定与显示着所述内容的所述显示器的亮度和显示着所述内容的所述显示器内的视点位置的亮度对应的所述呼吸瞳孔直径，所述测定部的注视瞳孔直径等计算单元设定在所述两次脉搏时间以上且低于两次呼吸时间的规定的时间间隔，以所述时间间隔对所述瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，且从所述移动平均后的瞳孔直径中减去由所述基准瞳孔直径等确定单元确定的所述呼吸瞳孔直径来求出注视瞳孔直径，且进一步减去由所述基准瞳孔直径等确定单元确定的所述基准瞳孔直径，来求出基于注视的瞳孔直径。4.根据权利要求3所述的观看者情绪判定装置，其特征在于，所述解析部除了测定所述呼吸状态数据之外，还测定脉搏状态数据，该脉搏状态数据包含所述观看者的脉搏中的脉搏开始点的时机，所述基准数据测定部还具有基准脉搏反应测定单元，该基准脉搏反应测定单元以所述观看者的呼吸周期为1次呼吸时间，且以所述观看者的脉搏周期为1次脉搏时间，来设定在两次脉搏时间以上且低于两次呼吸时间的规定的时间间隔，以所述时间间隔对所述瞳孔直径进行移动平均来求出移动平均后的瞳孔直径，从所述瞳孔直径中减去所述移动平均后的瞳孔直径，来求出作为减法结果的仅受到脉搏的影响的瞳孔直径，使用由所述解析部测定的所述脉搏状态数据，来从所述仅受到脉搏的影响的瞳孔直径的时间变化中提取出包括脉搏开始点的1个脉搏周期的时间内的脉搏瞳孔直径，生成基准脉搏反应表，该基准脉搏反应表由按每种所述基准明暗画面中的第1画面的亮度与所述视点位置的亮度的组合的所述脉搏瞳孔直径构成，所述测定部的基准瞳孔直径等确定单元确定所述基准瞳孔直径和所述呼吸瞳孔直径，并且，根据由所述基准明暗反应测定单元生成的基准脉搏反应表，来确定与显示着所...

【专利技术属性】
技术研发人员：仓岛渡，菊池光一，
申请(专利权)人：株式会社夏目综合研究所，
类型：发明
国别省市：日本,JP