辉度控制装置、辉度控制系统以及辉度控制方法专利检索-辉度光学专利检索查询-专利查询网

积极推动地理标志专门立法

2022-03-10 地理标志，立法，知识产权
保护知识产权是对创新最大的激励

2022-03-10 保护知识产权，创新，激励
谢商华：加快制定知识产权基本法

2022-03-10 知识产权基本法
擦亮“双奥之城”品牌

2022-03-10 双奥，知识产权
让冰雪运动“热”力全开

2022-03-10 冰雪运动，知识产权
携手共奋进　走好强国路

2022-03-10 强国，知识产权
坚持创新引领　方能稳中求进

2022-03-10 创新，稳中求进，知识产权
答好“两张卷” 奋进新征程

2022-03-10 知识产权
专家解读政府工作报告中的创新和知识产权相关部署

2022-03-10 政府工作报告，创新，知识产权
今年政府工作报告指出：加强知识产权保护和运用

2022-03-10 政府工作报告，知识产权保护

辉度控制装置、辉度控制系统以及辉度控制方法

阅读：214发布：2020-05-13

IPRDB可以提供辉度控制装置、辉度控制系统以及辉度控制方法专利检索，专利查询，专利分析的服务。并且辉度控制装置(1)执行如下辉度控制方法：在计算由测定部(11)测定出的瞳孔直径(R)与由瞳孔直径推断部(13)推断出的瞳孔直径(r)之差亦即瞳孔直径差，基于该瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆(8)的周围的图像的至少一个显示区域的辉度。，下面是辉度控制装置、辉度控制系统以及辉度控制方法专利的具体信息内容。

权利要求

1.一种辉度控制装置，其中，具备：

测定部，其基于拍摄有驾驶员的面部的图像测定所述驾驶员的瞳孔直径；

辉度推断部，其基于所述图像推断射入到所述驾驶员的瞳孔的光的辉度；

瞳孔直径推断部，其根据将辉度与瞳孔直径建立了关联的辉度对应关系推断相对于推断出的辉度的瞳孔直径；

瞳孔直径差计算部，其计算由所述测定部测定出的瞳孔直径与由所述瞳孔直径推断部推断出的瞳孔直径之差亦即瞳孔直径差；以及控制部，其在基于所述瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆的周围的图像的至少一个显示区域的辉度。

2.根据权利要求1所述的辉度控制装置，其中，具备视线计算部，该视线计算部计算所述驾驶员的视线，所述控制部根据所述瞳孔直径差表示正注视暗部、且所述驾驶员的视线正朝向显示有所述车辆的周围的图像的所述至少一个显示区域，而判定为正注视暗部。

3.根据权利要求1或2所述的辉度控制装置，其中，所述控制部在所述瞳孔直径差大于规定的阈值的情况下，判定为正注视所述暗部。

4.根据权利要求1或2所述的辉度控制装置，其中，所述控制部在所述瞳孔直径差不表示正观看暗部的情况下，将显示有所述车辆的周围的图像的所述至少一个显示区域的辉度返回到初始值。

5.根据权利要求1或2所述的辉度控制装置，其中，所述控制部对所述控制对象进行反馈控制，直至所述瞳孔直径差变成规定的范围内为止。

6.根据权利要求2所述的辉度控制装置，其中，所述控制部将所述视线相交的所述至少一个显示区域中的包含视觉确认点在内的低辉度区域作为所述控制对象进行控制。

7.根据权利要求2或6所述的辉度控制装置，其中，所述控制部将具有所述视线相交的所述至少一个显示区域的显示装置作为所述控制对象进行控制以提高辉度。

8.根据权利要求2或6所述的辉度控制装置，其中，所述控制部将对显示于所述视线相交的所述至少一个显示区域的图像进行拍摄的拍摄装置作为所述控制对象进行控制以提高辉度。

9.根据权利要求1～8中的任一项所述的辉度控制装置，其中，所述辉度推断部基于所述驾驶员的眼睛的周围的辉度推断射入到所述驾驶员的瞳孔的光的辉度。

10.根据权利要求1～9中的任一项所述的辉度控制装置，其中，所述瞳孔直径推断部按照每个所述驾驶员创建所述辉度对应关系，并按照每个所述驾驶员推断瞳孔直径。

11.一种辉度控制系统，其中，具备：

权利要求1～10中的任一项所述的辉度控制装置；

驾驶员拍摄装置，其拍摄所述驾驶员的面部；

所述至少一个拍摄装置，其拍摄所述车辆的周围；以及至少一个显示装置，其具有显示由所述至少一个拍摄装置拍摄到的图像的所述至少一个显示区域。

12.一种辉度控制方法，其中，

基于拍摄有驾驶员的面部的图像测定所述驾驶员的瞳孔直径；

基于所述图像推断射入到所述驾驶员的瞳孔的光的辉度；

根据将辉度与瞳孔直径建立了关联的辉度对应关系推断相对于推断出的辉度的瞳孔直径；

计算由测定出的瞳孔直径与推断出的瞳孔直径之差亦即瞳孔直径差；

在基于所述瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆的周围的图像的至少一个显示区域的辉度。

说明书全文

辉度控制装置、辉度控制系统以及辉度控制方法

[0001] 相关申请的交叉引用

[0002] 本申请要求日本专利申请2016-181870号的优先权，并将日本专利申请2016-181870号的全部内容以引用方式并入本申请。

技术领域

[0003] 本发明涉及辉度控制装置、辉度控制系统以及辉度控制方法。

背景技术

[0004] 已知一种周边监视装置，其具备：提示单元，其拍摄车辆的周边，并将拍摄到的图像提示给驾驶员；获取单元，其获取使用提示单元时的驾驶员进行的驾驶操作的操作时机；以及修正单元，其与通过获取单元获取到的操作时机相应地修正由提示单元提示给驾驶员的图像(例如，参照专利文献1。)。

[0005] 该周边监视装置与使用提示单元时的驾驶员进行的驾驶操作的操作时机相应地修正提示给驾驶员的图像。因此周边监视装置考虑驾驶员的操作时机来修正驾驶员感到的距离感、速度感，因而能够抑制针对距离感、速度感的不适感。

[0006] 专利文献1：日本特开2012-227605号公报

[0007] 专利文献1所公开的周边监视装置在拍摄到的图像的辉度较低的情况下，有可能发生变黑而使驾驶员难以识别出所呈现的图像。

发明内容

[0008] 本发明的目的在于提供能够使得显示易识别的图像的辉度控制装置、辉度控制系统以及辉度控制方法。

[0009] 本发明的一个实施方式所涉及的辉度控制装置具有：测定部，其基于拍摄有驾驶员的面部的图像测定驾驶员的瞳孔直径；辉度推断部，其基于图像推断射入到驾驶员的瞳孔的光的辉度；瞳孔直径推断部，其根据将辉度与瞳孔直径建立了关联的辉度对应关系推断相对于推断出的辉度的瞳孔直径；瞳孔直径差计算部，其计算由测定部测定出的瞳孔直径与由瞳孔直径推断部推断出的瞳孔直径之差亦即瞳孔直径差；以及控制部，其在基于瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆的周围的图像的至少一个显示区域的辉度。

[0010] 根据本发明的一个实施方式，能够提高能够使得显示易识别的图像的辉度控制装置、辉度控制系统以及辉度控制方法。

附图说明

[0011] 图1A是表示实施方式所涉及的辉度控制装置的框图。

[0012] 图1B是表示包含辉度控制装置的辉度控制系统的框图。

[0013] 图2A是表示搭载有实施方式所涉及的辉度控制装置的车辆的说明图。

[0014] 图2B是表示车辆内部的说明图。

[0015] 图3A是表示实施方式所涉及的辉度控制装置的驾驶员拍摄装置等的配置的说明图。

[0016] 图3B是表示辉度与瞳孔直径的对应关系的曲线图。

[0017] 图4A是表示用于说明实施方式所涉及的辉度控制装置的视线计算的眼球周边的说明图。

[0018] 图4B是表示用于说明视线计算的系统的说明图。

[0019] 图5是表示基于实施方式所涉及的辉度控制装置的辉度控制方法的动作的流程图。

具体实施方式

[0020] (实施方式的摘要)

[0021] 实施方式所涉及的辉度控制装置具有：测定部，其基于拍摄有驾驶员的面部的图像测定驾驶员的瞳孔直径；辉度推断部，其基于图像推断射入到驾驶员的瞳孔的光的辉度；瞳孔直径推断部，其根据将辉度与瞳孔直径建立了关联的辉度对应关系推断相对于推断出的辉度的瞳孔直径；瞳孔直径差计算部，其计算由测定部测定出的瞳孔直径与由瞳孔直径推断部推断出的瞳孔直径之差亦即瞳孔直径差；以及控制部，其在基于瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆的周围的图像的至少一个显示区域的辉度。

[0022] 辉度控制装置对控制对象的辉度进行控制以抑制瞳孔直径差，因此与不采用该结构的情况相比，即使驾驶员正注视的显示区域的辉度较低，也能够进行控制以变成适当的辉度而使得显示易识别的图像。

[0023] [实施方式]

[0024] (辉度控制装置1的概要)

[0025] 图1A是表示实施方式所涉及的辉度控制装置的框图，图1B是表示包含辉度控制装置的辉度控制系统的框图。图2A是表示搭载有实施方式所涉及的辉度控制装置的车辆的说明图，图2B是表示车辆内部的说明图。图3A是表示实施方式所涉及的辉度控制装置的驾驶员拍摄装置等的配置的说明图，图3B是表示辉度与瞳孔直径的对应关系的曲线图。图3B的纵轴是瞳孔直径，横轴是辉度。此外，在以下记载的实施方式所涉及的各图中，会存在图形间的比率与实际的比率不同的情况。另外，在图1A及图1B中，用箭头示出主要的信息的流向。

[0026] 如图1A所示，辉度控制装置1具有视线计算部10、测定部11、辉度推断部12、瞳孔直径推断部13、瞳孔直径差计算部14以及控制部15。如图2A所示，该辉度控制装置1例如构成为主要对车辆8的左拍摄装置22及右拍摄装置23拍摄的图像的辉度进行控制。该左拍摄装置22及右拍摄装置23构成车辆8的电子反光镜装置的一部分。

[0027] 另外，如图1B所示，辉度控制装置1与左拍摄装置22及右拍摄装置23一起构成辉度控制系统2的一部分。该辉度控制系统2是电子反光镜装置的一个例子。

[0028] 以下，首先对于辉度控制装置1的结构具体地进行说明。

[0029] (视线计算部10的结构)

[0030] 图4A是表示用于说明实施方式所涉及的辉度控制装置的视线计算的眼球周边的说明图，图4B是表示用于说明视线计算的系统的说明图。

[0031] 如图3A、图4A及图4B所示，视线计算部10基于从驾驶员拍摄装置21输出的拍摄信息S1获取拍摄了坐在驾驶席86上的驾驶员9的眼睛91周边的图像211，进而基于该图像211检测驾驶员9的视线95与显示区域260的交点亦即视觉确认点96。此外，作为一个例子，视觉确认点96为作为图2B所示的左显示装置26的显示画面的显示区域260与视线95的交点。

[0032] 视线计算部10例如构成为对眼球92照射近红外线，根据在角膜表面的反射光(普尔钦斑94)及瞳孔93的位置计算视线95与包含左显示装置26的显示区域260的平面261的交点亦即视觉确认点96。视线计算部10按相似辉度的区域对获得的图像211进行划分，从被划分后的各区域中根据区域形状利用图案匹配法等决定瞳孔区域。

[0033] 接下来，视线计算部10根据瞳孔93的轮廓集合求出椭圆中心，将从该椭圆中心起一定范围内作为对象进行普尔钦斑94的检测。接下来，视线计算部10根据得到的瞳孔93及普尔钦斑94进行视线95的计算。

[0034] 图4B所示的图像坐标系(XbYb坐标系)中的坐标例如可以将图像坐标系的坐标转换成世界坐标系的坐标。另外，视线计算部10计算照相机坐标系(xayaza坐标系)中的角膜曲率中心和瞳孔中心的坐标，并将各坐标坐标转换成世界坐标系的坐标来求出世界坐标系中的视线矢量。

[0035] 视线计算部10通过将该视线矢量投影到平面261，来求出平面261上的视觉确认点96的坐标。此外，计算视线的方法并不限于利用上述的普尔钦斑94的方法，也可以是基于瞳孔中心的朝向的推断方法、基于面部朝向的推断方法、基于眼角(或者内眼角)与瞳孔中心的位置关系的推断方法或其他方法。

[0036] 视线计算部10生成与视觉确认点96的坐标相关的视线信息S21并输出至控制部15。控制部15基于计算出的视觉确认点96判定驾驶员9正观看的显示区域。此外，控制部15在未计算出视觉确认点96的情况下，判定为未观看任何显示区域。

[0037] 视线计算部10也可以按照每个显示区域显示点等，并使驾驶员9观看该点，从而按照每个驾驶员9进行校准。作为一个例子，该校准为了修正视线95的误差而进行，并在驾驶员9乗车并接通车辆8的电源之后，作为行驶前的确认在观看左显示装置26及右显示装置27时进行。

[0038] (测定部11的结构)

[0039] 如图4A和图4B所示，测定部11构成为基于图像211测定驾驶员9的瞳孔直径R。作为一个例子，该瞳孔直径R考虑到可能由于眼睑的眼影而产生测定误差而优选为图4A的纸面的横向的直径，但并不限于此。

[0040] 作为一个例子，瞳孔直径R的测定通过在二值化的图像中提取相当于瞳孔93的区域，并基于该区域的像素数测定区域的宽度而进行。测定部11将该宽度设为瞳孔直径R。此外，瞳孔直径R的测定方法并不限于此，可以应用各种方法。

[0041] 测定部11基于从驾驶员拍摄装置21获取到的拍摄信息S1测定瞳孔直径R来生成测定信息S22，并输出至控制部15。

[0042] (辉度推断部12的结构)

[0043] 辉度推断部12构成为基于图像211推断射入到驾驶员9的瞳孔93的光的辉度。具体地，辉度推断部12基于驾驶员9的眼睛91的周围的辉度推断射入到驾驶员9的瞳孔93的光的辉度α。如图4A所示，作为一个例子，该眼睛91的周围是接近眼睛91的下方的泪囊周边的区域121。

[0044] 该辉度的测定例如利用对应表120来进行。作为一个例子，该对应表120利用辉度计测定被照明的对象物的辉度并且进行对象物的拍摄，使测定出的辉度与图像的灰度对应而被预先创建。辉度推断部12基于区域121的灰度与对应表120来推断辉度α。此外，辉度α的推断方法并不限于此，也可以是使用函数的方法等。

[0045] 辉度推断部12基于从驾驶员拍摄装置21获取到的拍摄信息S1推断辉度α，并基于推断出的辉度α生成辉度推断信息S23并输出至控制部15。

[0046] (瞳孔直径推断部13的结构)

[0047] 瞳孔直径推断部13构成为具有将辉度α与瞳孔直径r建立了关联的辉度表130，对推断出的辉度α与辉度表130进行比较来推断相对于推断出的辉度α的瞳孔直径r。

[0048] 作为一个例子，如在图3B中用曲线图所示那样，辉度与瞳孔直径已知有若辉度变大则瞳孔直径变小，若辉度变小则瞳孔直径变大的关系。辉度表130是将该辉度与瞳孔直径建立了关联的辉度对应关系的一个例子。瞳孔直径推断部13从辉度表130提取与推断出的辉度α对应的瞳孔直径r。进而，瞳孔直径推断部13基于推断出的瞳孔直径r生成瞳孔直径推断信息S24并输出至控制部15。此外，瞳孔直径r的推断方法例如也可以是利用函数的推断方法等。

[0049] 此外，作为变形例，瞳孔直径推断部13也可以构成为按照每个驾驶员测定瞳孔直径来创建辉度对应关系，并按照每个驾驶员推断瞳孔直径r。该情况下，驾驶员的识别例如利用生物体信息、电子钥匙来进行。该生物体信息例如是指纹、静脉等。作为一个例子，生物体信息由设置于方向盘84的传感器获取。另外，作为其他变形例，辉度对应关系例如也可以按照年龄、人种来创建。

[0050] 进一步，瞳孔直径推断部13也可以按照每个驾驶员的属性进行瞳孔直径r的推断。该属性例如由年龄、人种规定。

[0051] (瞳孔直径差计算部14的结构)

[0052] 瞳孔直径差计算部14构成为计算由测定部11测定出的瞳孔直径R与由瞳孔直径推断部13推断出的瞳孔直径r之差(＝R-r)亦即瞳孔直径差。

[0053] 由瞳孔直径推断部13推断出的瞳孔直径r例如根据辉度推断出正视觉确认由来自车辆8的外部的光、车辆8内的照明等照亮的物体的情况下的瞳孔直径。另一方面，由测定部11测定出的瞳孔直径R是根据拍摄到的图像211测定出的瞳孔直径，接近于实际的瞳孔直径。

[0054] 在驾驶员9观看与周围的亮度接近的亮度的地方的情况下，测定出的瞳孔直径R与推断出的瞳孔直径r的瞳孔直径差较小。

[0055] 但是，在驾驶员9例如观看比周围暗的地方的情况下，因为要捕捉较少的光量，所以瞳孔直径变大。即瞳孔直径与观看周围的情况相比，观看比周围暗的地方的情况下变大，因此由测定部11测定出的瞳孔直径R变得比推断的瞳孔直径r大。

[0056] 在驾驶员9例如观看左显示装置26的显示区域260的情况下，若以适当的辉度将图像显示于显示区域260，则测定出的瞳孔直径R与推断出的瞳孔直径r的瞳孔直径差较小。另一方面，在显示的图像较暗的情况下，与推断出的瞳孔直径r相比，测定出的瞳孔直径R较大。即，在瞳孔直径差较大的情况下，很可能正观看较暗的地方。

[0057] 瞳孔直径差计算部14从测定出的瞳孔直径R减去推断出的瞳孔直径r来生成瞳孔直径差信息S25，并输出至控制部15。

[0058] (控制部15的结构)

[0059] 控制部15例如是由按照所存储的程序对获取到的数据进行运算、加工等的CPU(Central Processing Unit：中央处理单元)、作为半导体存储器的RAM(Random Access Memory：随机存取存储器)及ROM(Read Only Memory：只读存储器)等构成的微型计算机。在该ROM中，例如储存有用于控制部15进行动作的程序、判定阈值150、以及控制表151等。另外，RAM例如用作临时储存运算结果等的存储区域。

[0060] 控制部15构成为在判定为视线95相交于显示有由多个拍摄装置拍摄到的车辆8的周围的图像的多个显示区域中的任一个显示区域，且基于瞳孔直径差判定为正注视视线95相交的显示区域的情况下，输出对控制对象进行控制的控制信息以提高视线95相交的显示区域的辉度来抑制瞳孔直径差。

[0061] 多个拍摄装置在为电子反光镜装置的情况下，是左拍摄装置22及右拍摄装置23。另外，作为一个例子，如图2B所示，多个显示区域在电子反光镜装置的情况下，是左显示装置26的显示区域260、及右显示装置27的显示区域270。

[0062] 另外，控制部15可以将具有视线95相交的显示区域的显示装置作为控制对象进行控制以提高辉度，也可以将拍摄显示于视线95相交的显示区域的图像的拍摄装置作为控制对象进行控制以提高辉度，还可以将显示装置及拍摄装置双方作为控制对象。换言之，控制部15可以在显示区域的辉度较低的情况下，进行控制以提高显示区域本身的辉度，也可以以控制拍摄装置的光阑等来提高拍摄到的图像的辉度的方式进行控制以成为适当的辉度，还可以组合这两者而进行。

[0063] 判定阈值150是与瞳孔直径差相关的阈值。作为一个例子，该判定阈值150是0.5mm。该判定阈值150例如根据正观看周围时的瞳孔直径与正观看比周围暗的暗部时的瞳孔直径的瞳孔直径差而设定，通过实验、模拟而规定。作为一个例子，控制部15在瞳孔直径差为0.5mm以上的情况下，判定为正观看比周围暗的暗部。此外，暗部是识别为比周围暗的空间，例如是照度与周围的照度相比为预先规定的阈值以下的空间。

[0064] 控制表151是用于生成对控制对象进行控制的控制信息的表。控制表151将瞳孔直径差与控制对象的控制信息建立关联并储存。控制部15在得到瞳孔直径差并且确定控制对象之后，基于该瞳孔直径差和控制表151提取控制对象的控制信息。进而，控制部15输出控制信息。

[0065] 控制部15基于视线信息S21确定控制对象。即，控制部15在存在视觉确认点96、即存在视线95相交的显示区域的情况下，控制拍摄显示于该显示区域的图像的拍摄装置、及具有该显示区域的显示装置中的至少一方。

[0066] 控制部15在控制左拍摄装置22的情况下，输出控制信息S11。控制部15在控制右拍摄装置23的情况下，输出控制信息S12。另外，控制部15在控制左显示装置26的情况下，输出控制信息S15。进一步，控制部15在控制右显示装置27的情况下，输出控制信息S16。

[0067] 接着，以下对于辉度控制系统2进行说明。

[0068] (辉度控制系统2的结构)

[0069] 作为一个例子，如图1B所示，辉度控制系统2具有：辉度控制装置1；驾驶员拍摄装置21，其拍摄驾驶员9的面部90；多个拍摄装置，它们拍摄车辆8的周围；以及至少一个显示装置，其具有显示由多个拍摄装置拍摄到的图像的多个显示区域。

[0070] 如图3A所示，驾驶员拍摄装置21例如构成为配置在转向柱85上，对拍摄范围210进行拍摄并输出拍摄信息S1。该驾驶员拍摄装置21例如是利用CCD图像传感器(Charge Coupled Device：电荷耦合器件)、CMOS(Complementary Metal Oxide Semiconductor：互补金属氧化物半导体)图像传感器等固体拍摄元件的拍摄装置。此外，驾驶员拍摄装置21的配置并不限于转向柱85上，只要是可以拍摄驾驶员的面部的位置即可。

[0071] 另外，本实施方式的多个拍摄装置如上述那样，是左拍摄装置22及右拍摄装置23。如图2A所示，该左拍摄装置22配置于车辆8的车身80的左侧面，拍摄车身80的左后方亦即拍摄范围220并输出拍摄信息S2。另外，右拍摄装置23配置于车身80的右侧面，拍摄车身80的右后方亦即拍摄范围230并输出拍摄信息S3。

[0072] 该左拍摄装置22及右拍摄装置23例如是利用CCD图像传感器、CMOS图像传感器等固体拍摄元件的拍摄装置。

[0073] 另外，如图2B所示，本实施方式的多个显示区域是左显示装置26的显示区域260、及右显示装置27的显示区域270。作为一个例子，左显示装置26配置于车辆8的左侧的柱81。作为一个例子，右显示装置27配置于右侧的柱82。该左显示装置26及右显示装置27例如是液晶显示器。

[0074] 左显示装置26例如使基于由左拍摄装置22获取到的拍摄信息S2的图像显示于显示区域260。另外，右显示装置27例如使基于由右拍摄装置23获取到的拍摄信息S3的图像显示于显示区域270。

[0075] 此外，显示区域260及显示区域270也可以将车辆8的后视镜87构成为液晶显示器，分割该液晶显示器的显示区域的至少一部分来分配成左右的区域。另外，显示区域260及显示区域270还可以是将中央显示装置28的显示区域280分割成左右的区域。

[0076] 该辉度控制系统2为了相互交换信号、信息，而借助车辆LAN(Local Area Network：局域网)20将辉度控制装置1与驾驶员拍摄装置21等电磁连接。

[0077] 以下，参照图5的流程图，对本实施方式的辉度控制装置1的动作的一个例子进行说明。

[0078] (动作)

[0079] 辉度控制装置1执行如下辉度控制方法：在获取拍摄有驾驶员9的面部90的图像211，并基于获取到的图像211计算驾驶员9的视线95，基于图像211测定驾驶员9的瞳孔直径R，基于图像211推断射入到驾驶员9的瞳孔93的光的辉度α，对推断出的辉度α、和将辉度与瞳孔直径建立了关联的辉度表130进行比较来推断相对于推断出的辉度α的瞳孔直径r，计算由测定部11测定出的瞳孔直径R与由瞳孔直径推断部13推断出的瞳孔直径r之差亦即瞳孔直径差，判定为视线95相交于显示有由多个拍摄装置(左拍摄装置22及右拍摄装置23)拍摄到的车辆8的周围的图像的多个显示区域(显示区域260及显示区域270)中的任一个显示区域，且基于瞳孔直径差判定为正注视视线95相交的显示区域的情况下，输出对控制对象进行控制的控制信息以提高视线95相交的显示区域的辉度来抑制瞳孔直径差。

[0080] 首先，辉度控制装置1的控制部15获取拍摄有驾驶员9的面部90的图像211(步骤1)。该图像211是基于从驾驶员拍摄装置21借助车辆LAN20获取到的拍摄信息S1的图像。

[0081] 接下来，视线计算部10基于获取到的图像211计算驾驶员9的视线95(步骤2)。视线计算部10借助控制部15获取拍摄信息S1来计算视线95。进而，视线计算部10将基于计算出的视线95的视线信息S21输出至控制部15。

[0082] 接下来，测定部11基于图像211测定驾驶员9的瞳孔直径R(步骤3)。测定部11借助控制部15获取拍摄信息S1来测定瞳孔直径R。测定部11将基于计算出的瞳孔直径R的测定信息S22输出至控制部15。

[0083] 接下来，辉度推断部12基于图像211推断射入到驾驶员9的瞳孔93的光的辉度(步骤4)。辉度推断部12根据基于借助控制部15获取到的拍摄信息S1的图像211和对应表120推断辉度。辉度推断部12生成基于推断出的辉度α的辉度推断信息S23并输出至控制部15。

[0084] 接下来，瞳孔直径推断部13对推断出的辉度α、和将辉度与瞳孔直径建立了关联的辉度表130进行比较来推断相对于推断出的辉度α的瞳孔直径r(步骤5)。瞳孔直径推断部13对基于借助控制部15获取到的辉度推断信息S23的推断出的辉度α与辉度表130进行比较来推断瞳孔直径。进而，瞳孔直径推断部13生成基于推断出的瞳孔直径r的瞳孔直径推断信息S24并输出至控制部15。

[0085] 接下来，瞳孔直径差计算部14计算由测定部11测定出的瞳孔直径R与由瞳孔直径推断部13推断出的瞳孔直径r之差亦即瞳孔直径差(步骤6)。具体地，瞳孔直径差计算部14借助控制部15获取测定信息S22及瞳孔直径推断信息S24来计算瞳孔直径差。瞳孔直径差计算部14基于计算出的瞳孔直径差生成瞳孔直径差信息S25并输出至控制部15。

[0086] 接下来，控制部15判定视线95是否相交于显示有由左拍摄装置22及右拍摄装置23拍摄到的车辆8的周围的图像的显示区域260及显示区域270中的任一个显示区域。控制部15在基于视线信息S21判定为视线95与显示区域260及显示区域270中的任一个交叉的情况下(步骤7：是)，继续基于瞳孔直径差判定视线95是否正注视相交的显示区域。

[0087] 接下来，控制部15对基于获取到的瞳孔直径差信息S25的瞳孔直径差与判定阈值150进行比较，在瞳孔直径差为判定阈值150以上的情况下(步骤8：是)，判定为正注视视线
95相交的显示区域，即正注视暗部。

[0088] 接下来，控制部15输出对控制对象进行控制的控制信息以提高视线95相交的显示区域的辉度来抑制瞳孔直径差(步骤9)。具体地，控制部15例如在控制左显示装置26或者右显示装置27的情况下，基于瞳孔直径差和控制表151生成控制信息S15或者控制信息S16，并借助车辆LAN20输出至对应的左显示装置26或者右显示装置27。左显示装置26或者右显示装置27基于获取到的控制信息将辉度高的图像显示于显示区域。

[0089] 另外，控制部15例如在控制左拍摄装置22或者右拍摄装置23的情况下，基于瞳孔直径差和控制表151生成控制信息S15或者控制信息S16，并借助车辆LAN20输出至对应的左拍摄装置22或者右拍摄装置23。左拍摄装置22或者右拍摄装置23拍摄辉度高的图像来生成拍摄信息，并借助车辆LAN20输出至对应的左显示装置26或者右显示装置27。

[0090] 这里，作为变形例，控制部15也可以为如下结构：在构成为能够修正左显示装置26及右显示装置27所显示的图像的情况下，修正拍摄信息S2及拍摄信息S3来生成与辉度高的图像相应的拍摄信息，并输出至对应的显示装置。显示装置获取修正后的拍摄信息并将辉度高的图像显示于显示区域。

[0091] 接下来，控制部15在满足了结束条件的情况下(步骤10：是)，结束动作。作为一个例子，该结束条件是指车辆8的点火开关被断开、对指示该辉度控制装置1的接通、断开的开关进行操作而使之断开等。

[0092] 这里，在步骤7中，控制部15在判定为视线95不与任何显示区域交叉的情况下(步骤7：否)，进行辉度的初始化(步骤11)。具体地，控制部15对作为控制对象的显示装置及拍摄装置中的至少一方进行控制来将辉度返回到初始值。此外，控制部15例如也可以进行控制以返回到提高辉度之前的辉度。

[0093] 另外，在步骤8中，控制部15在瞳孔直径差比判定阈值150小的情况下(步骤8：否)，作为辉度合适并进入步骤1来获取下一图像211。

[0094] 另外，在步骤10中，控制部15在不满足结束条件的情况下(步骤10：否)，进入步骤1并获取下一图像211。

[0095] 此外，至少步骤2～步骤5的顺序可以是不同的顺序。另外，步骤7及步骤8的顺序可以是相反的。进一步也可以将步骤7省略。

[0096] 这里，作为变形例，控制部15也可以构成为进行反馈控制，直至变成设为目标的瞳孔直径差为止。该反馈控制例如是以变成设为目标的瞳孔直径差的方式反复进行瞳孔直径差的计算、控制信息的输出等的控制。

[0097] (实施方式的效果)

[0098] 本实施方式所涉及的辉度控制装置1能够使得显示易识别的图像。具体地，辉度控制装置1能够计算测定出的瞳孔直径R与根据周围的辉度推断的瞳孔直径r之差亦即瞳孔直径差，在该瞳孔直径差表示正注视暗部的情况下，提高显示区域的辉度，因此与不采用该结构的情况相比，能够使得显示驾驶员易识别的图像。

[0099] 辉度控制装置1对控制对象的辉度进行控制以抑制瞳孔直径差，因此与不采用该结构的情况相比，即使驾驶员正注视的显示区域的辉度低，也能够进行控制以变成合适的辉度而使得显示易识别的图像。

[0100] 对于辉度控制装置1而言，由于图像的辉度提高，所以在辉度动态范围较广的对象中，对于驾驶员而言为暗部的视觉确认变得容易。

[0101] 辉度控制装置1能够控制拍摄装置的光阑等而使得生成辉度高的图像，因此与不采用该结构的情况相比，即使拍摄较暗的地方，也能够拍摄S/N比高的图像。

[0102] 辉度控制装置1与瞳孔直径差相应地控制显示装置及拍摄装置，因此与不采用该结构的情况相比，能够使得显示更加合适的辉度的图像。

[0103] 这里，作为其他实施方式，辉度控制装置1也可以构成为执行如下辉度控制方法：在基于拍摄有驾驶员9的面部90的图像211测定驾驶员9的瞳孔直径R，基于图像211推断射入到驾驶员9的瞳孔93的光的辉度，根据将辉度与瞳孔直径建立了关联的辉度对应关系推断相对于推断出的辉度α的瞳孔直径r，计算测定出的瞳孔直径R与推断出的瞳孔直径r之差亦即瞳孔直径差，基于瞳孔直径差判定为正注视暗部的情况下，输出对控制对象进行控制的控制信息以提高显示有由至少一个拍摄装置拍摄到的车辆8的周围的图像的至少一个显示区域的辉度。

[0104] 进一步，作为其他实施方式，如图1B所示，辉度控制系统2也可以还具备前方拍摄装置24、后方拍摄装置25、及中央显示装置28。

[0105] 前方拍摄装置24及后方拍摄装置25例如是利用CCD图像传感器、CMOS图像传感器等固体拍摄元件的拍摄装置。如图2A所示，前方拍摄装置24例如配置在车室内，拍摄车辆8的前方的拍摄范围240并输出拍摄信息S4。后方拍摄装置25例如配置在车辆8的后方，拍摄车辆8的后方的拍摄范围250并输出拍摄信息S5。

[0106] 作为一个例子，该前方拍摄装置24及后方拍摄装置25拍摄到的图像显示于在中心控制台83配置的中央显示装置28的显示画面(显示区域280)。即，中央显示装置28基于获取到的拍摄信息S4及拍摄信息S5显示图像。因此，在该辉度控制系统2中，例如将车辆8的周围显示于左显示装置26、右显示装置27及中央显示装置28。该中央显示装置28例如是液晶显示器。

[0107] 控制部15在判定为视线95相交于显示有由多个拍摄装置(左拍摄装置22、右拍摄装置23、前方拍摄装置24及后方拍摄装置25)拍摄到的车辆8的周围的图像的多个显示区域(显示区域260、显示区域270及显示区域280)中的任一个显示区域，且基于瞳孔直径差判定为正注视视线95相交的显示区域的情况下，输出对控制对象进行控制的控制信息以提高视线95相交的显示区域的辉度来抑制瞳孔直径差。

[0108] 如图1B所示，该控制信息例如在控制前方拍摄装置24的情况下是控制信息S13，在控制后方拍摄装置25的情况下是控制信息S14，在控制中央显示装置28的情况下是控制信息S17。

[0109] 这里，作为变形例，辉度控制装置1也可以使左拍摄装置22、右拍摄装置23、前方拍摄装置24及后方拍摄装置25的图像显示于在中央显示装置28设定的多个显示区域。另外，显示装置例如也可以构成为使图像显示于车辆8的前窗的平视显示器。

[0110] 进一步，如图4B所示，作为其他变形例，辉度控制装置1也可以构成为提高包含视线95相交的视觉确认点96在内的低辉度区域97的辉度。

[0111] 上述的实施方式及变形例所涉及的辉度控制装置1例如根据用途使其一部分可以通过计算机执行的程序、ASIC(Application Specific Integrated Circuit：专用集成电路)以及FPGA(Field Programmable Gate Array：现场可编程门阵列)等实现。

[0112] 以上，对本发明的若干实施方式及变形例进行了说明，但这些实施方式及变形例不过是一个例子，并不限定权利要求书所涉及的技术方案。这些新的实施方式及变形例能够以其他各种方式实施，在不脱离本发明的主旨的范围内，能够进行各种省略、置换、及变更等。另外，在这些实施方式及变形例中说明的所有特征的组合对于用于解决发明的课题的手段并不是必须的。进一步，这些实施方式及变形例包含于发明的范围及主旨，并且包含于与权利要求书所记载的发明均等的范围。

[0113] 附图标记说明

[0114] 1…辉度控制装置；2…辉度控制系统；8…车辆；9…驾驶员；10…视线计算部；11…测定部；12…辉度推断部；13…瞳孔直径推断部；14…瞳孔直径差计算部；15…控制部；21…驾驶员拍摄装置；90…面部；93…瞳孔；95…视线；97…低辉度区域；260…显示区域。

标题	发布/更新时间	阅读量
辉度测试装置-专利编号CN102591043A	2020-05-12	270
高辉度导光板-专利编号CN101324681A	2020-05-13	338
高辉度背光模块-专利编号CN1746741A	2020-05-13	729
辉度测试装置-专利编号CN102141693B	2020-05-11	992
高辉度导光板-专利编号CN102901050A	2020-05-11	270
辉度测试装置-专利编号CN102141693A	2020-05-11	992
高辉度导光板-专利编号CN101324681B	2020-05-11	469
辉度控制装置、辉度控制系统以及辉度控制方法-专利编号CN109415020A	2020-05-13	212
辉度测量系统-专利编号CN102506997A	2020-05-12	436
辉度测量系统-专利编号CN102506997B	2020-05-12	652

辉度控制装置、辉度控制系统以及辉度控制方法

辉度控制装置、辉度控制系统以及辉度控制方法

技术领域

背景技术

发明内容

附图说明

具体实施方式

IPRDB

热门服务

关于我们

友情链接

联系方式