信息系统、信息处理方法以及非临时性存储介质转让专利

申请号 : CN201910778977.9

文献号 : CN110858445A

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 市川真士齐藤晴信兼市大辉藤原亮太郎天野萌远藤雅人杉村多恵

申请人 : 丰田自动车株式会社

摘要 :

本发明涉及一种信息系统、信息处理方法以及非临时性存储介质,并提供一种对实时发生的事态进行探测而使之内容化而进行显示的技术。信息系统具备控制部,所述控制部执行如下的操作,即:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像;对随着影像的时间经过的正在行驶的车辆处于危险驾驶状态的情况进行检测;将与被检测出处于危险驾驶状态的车辆相关的信息显示在电子看板装置上。

权利要求 :

1.一种信息系统,其中,

具备控制部,所述控制部执行如下的操作,即:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像;

对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测;

将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上。

2.如权利要求1所述的信息系统,其中,所述控制部还执行如下的操作,即:

根据所述车辆的速度、加速度、所述车辆与所述车辆前后的其它车辆之间的距离、所述车辆的姿态、车道变更的频率、在行驶限制区域内的行驶的有无中的至少一个信息,来对危险驾驶状态进行检测。

3.如权利要求2所述的信息系统,其中,所述控制部还执行如下的操作,即:

基于所述信息而对处于所述危险驾驶状态的所述车辆的危险程度进行判断,并将被判断出的所述危险程度显示在所述电子看板装置上。

4.一种信息处理方法,其使计算机执行如下的步骤,即:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像的步骤;

对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测的步骤;

将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上的步骤。

5.一种非临时性存储介质,其存储有使计算机执行如下的步骤的信息处理程序,所述步骤包括:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像的步骤;

对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测的步骤;

将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上的步骤。

说明书 :

信息系统、信息处理方法以及非临时性存储介质

技术领域

[0001] 本发明涉及一种显示数字电子看板的信息系统、信息处理方法以及非临时性存储介质。

背景技术

[0002] 近年来,在地下街道、道路沿线、商业设施等各种各样的场所,将电子广告显示在显示设备上的、所谓的数码电子看板(电子广告牌)这类的广告形式逐渐普及。专利文献1公开了一种自动生成针对数码电子看板的、预先存储的内容并使之显示的技术。另一方面,在道路交通网的发达的同时,也希望使之与安全驾驶相配合。
[0003] 在先技术文献
[0004] 专利文献
[0005] 专利文献1:日本特开2012-226017号公报

发明内容

[0006] 发明所要解决的课题
[0007] 然而,在上述背景技术中,并未考虑到对实时发生的事态进行探测从而有助于安全驾驶的情况。本发明的目的在于,提供一种通过对实时发生的事态进行探测而使之内容化并显示在电子看板装置上从而促进安全驾驶的技术。
[0008] 用于解决课题的方法
[0009] 本发明的一个方式作为信息系统而被例示。本信息系统具备控制部,所述控制部执行如下的操作,即:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像;对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测;将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上。
[0010] 此外,本发明的其它方式作为一种信息处理方法而被例示。所述信息处理方法使计算机执行如下的步骤,即:取得经由拍摄部而拍摄到的、正在车道上行驶的车辆的影像的步骤;对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测的步骤;将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上的步骤。
[0011] 此外,本发明的其它方式作为信息处理程序或存储了该信息处理程序的非临时性存储介质而被例示。该情况下的信息处理程序也可以被构成为,使计算机执行如下的步骤,即:取得经由拍摄部而拍摄到的、在车道上行驶的车辆的影像的步骤;对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测的步骤;将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上的步骤。
[0012] 发明效果
[0013] 根据本发明,能够提供一种对实时发生的事态进行探测而使之内容化而进行显示的技术。

附图说明

[0014] 图1为表示第一实施方式所涉及的安全驾驶推进系统的系统结构的一个示例的图。
[0015] 图2为对伴随有危险驾驶的车辆的检测进行说明的图。
[0016] 图3为对伴随有危险驾驶的车辆的其它方式的检测进行说明的图。
[0017] 图4为对伴随有危险驾驶的车辆的其它方式的检测进行说明的图。
[0018] 图5为表示显示画面的一个示例的图。
[0019] 图6为表示显示画面的一个示例的图。
[0020] 图7为表示管理服务器、车载装置、电子看板装置的各硬件结构的一个示例的图。
[0021] 图8为表示管理服务器的功能结构的一个示例的图。
[0022] 图9为表示被存储于显示信息DB中的显示信息的一个示例的图。
[0023] 图10为表示被存储于图像信息DB中的图像信息的一个示例的图。
[0024] 图11为表示被存储于车辆影像DB中的车辆影像信息的一个示例的图。
[0025] 图12为表示图像信息的取得处理的一个示例的流程图。
[0026] 图13为表示图像处理的一个示例的流程图。
[0027] 图14为表示图像处理的一个示例的流程图。
[0028] 图15为表示显示信息输出处理的一个示例的流程图。
[0029] 图16为表示伴随有危险驾驶的车辆的影像输出处理的一个示例的流程图。
[0030] 图17为表示第二实施方式所涉及的电子看板装置的结构的一个示例的图。

具体实施方式

[0031] 本实施方式的第一方式所涉及的安全驾驶推进系统具备控制部,所述控制部执行如下的操作,即:取得通过拍摄部而拍摄到的、正在车道上行驶的车辆的影像;对随着所述影像的时间经过的正在行驶的所述车辆处于危险驾驶状态的情况进行检测;将与被检测出处于危险驾驶状态的所述车辆相关的信息显示在电子看板装置上。
[0032] 根据这样的方式,安全驾驶推进系统能够根据正在车道上行驶的车辆的影像,而对处于危险状态的车辆进行检测而使之内容化,并显示在电子看板装置上。在被内容化了的信息中,例如能够包含记录有处于危险状态的车辆的举动的影像、该车辆的行驶位置或行驶路径、汽车登记号码这类的对该车辆进行确定的信息。在这样的方式中,能够对实时发生的事态进行探测并使之内容化而进行显示。
[0033] 在第一方式中,也可以采用如下方式,即,控制部还执行如下的操作,即,根据所述车辆的速度、加速度、所述车辆与所述车辆前后的其它车辆之间的距离、所述车辆的姿态、车道变更的频率、在行驶限制区域内的行驶的有无中的至少一个信息,来对危险驾驶状态进行检测。根据这样的方式,安全驾驶推进系统能够根据随着影像的时间经过的车辆的速度、加速度,而对超速驾驶这类的危险驾驶状态进行检测。同样地,能够根据车辆与该车辆前后的车辆之间的距离,而对挑衅驾驶这类的危险驾驶状态进行检测。而且,能够根据车辆的姿态,而对例如使前轮从地面翘起而进行后轮行驶的两轮机动车的危险驾驶状态进行检测。能够根据车道变更的频率,而对反复进行频繁的车道变更而行驶的危险驾驶状态进行检测。能够根据在行驶限制区域内的行驶的有无,而对路侧带的行驶这类的危险驾驶状态进行检测。
[0034] 在第一方式中,也可以采用如下方式,即,控制部还执行如下的操作,即,基于所述信息而对处于所述危险驾驶状态的所述车辆的危险程度进行判断,并将被判断出的所述危险程度显示在所述电子看板装置上。根据这样的方式,由于能够同时显示处于危险状态的车辆的影像和被判断出的危险程度,因此能够期待使危险驾驶行为的情况被众所周知的效果。在第一方式中,能够提高安全驾驶的推进。
[0035] 以下,参照附图,而对一个实施方式进行说明。以下的实施方式的结构为例示,用于实施发明的方式并未被限定于以下所说明的实施方式的结构。
[0036] <第一实施方式>
[0037] (系统概要)
[0038] 图1为,表示第一实施方式所涉及的安全驾驶推进系统1的系统结构的一个示例的图。图1的安全驾驶推进系统1为,将基于正在道路上行驶的伴随有危险驾驶的车辆的影像而生成的内容输出至电子看板装置的系统。这里,“危险驾驶”是指,使正在行驶的道路上的交通产生危险的车辆的驾驶行为。典型而言,例示了因某些原因或目的而相对于周围的其他正在行驶的车辆缩小车距而异常接近,或者妨碍该其它车辆的行进的驾驶行为,即所谓的挑衅驾驶。以下,也将危险驾驶行为称为“危险驾驶”。安全驾驶推进系统1(以下,也简称为“推进系统1”)为“信息系统”的一个示例。
[0039] 第一实施方式所涉及的推进系统1包含通过网络N1而被相互连接的管理服务器10、车载装置20、多个电子看板装置(30#1~30#3)、出资者服务器40。网络N1例如为互联网等公众网络。网络N1也可以包含WiFi等无线通信、LTE、LTE-Advanced、3G等移动电话网的无线网络、VPN(Virtual PrivateNetwork,虚拟局域网)等专用网络、LAN(Local Area Network,局域网)等网络。
[0040] 另外,在图1中,代表性地例示了一台管理服务器10、车载装置20、出资者服务器40、和三台电子看板装置(30#1~30#3)。多个管理服务器10、车载装置20、出资者服务器40可以与网络N1连接。此外,与网络N1相连接的电子看板装置的数量并未被限定于例示的台数,其为几台装置均可。以下,也将可以与网络N1连接的多个电子看板装置统称为“电子看板装置30”。
[0041] 出资者服务器40为,作为广告主的企业或广告代理商等所运营的服务器装置。另外,在广告主中,包含有地方自治团体等公共机关。广告主例如为,对于电子看板装置30的运用的费用负担者。赞同安全驾驶的推进的广告主的显示信息、例如包含由静止图像或动态图像等而构成的内容在内的显示数据,经由出资者服务器40而被登记在管理服务器10中。在显示信息中,包含对于安全驾驶的标语或赞同安全驾驶的广告主的消息等。显示信息例如与对设置有电子看板装置30的区域、或使该显示信息显示的期间或时间段等进行指定的信息一起被登记在管理服务器10中。
[0042] 电子看板装置30为,接收从管理服务器10被输出的显示信息并将该显示信息显示在显示设备上的装置。显示设备既可以与电子看板装置30一体地构成,也可以与该电子看板装置以分体的形式而构成。显示设备例如由液晶显示器、有机EL(Electroluminescence,电致发光)显示器、LED矩阵、投影仪等构成。
[0043] 另外,由电子看板装置30显示的显示信息的显示方式例如也可以为,将利用CG(Computer Graphics,计算机图形)等而生成的视觉信息重叠于设置有该电子看板装置的场所的实际存在的风景上而进行显示的AR(Augmented Reality,增强现实)方式。同样地,例如也可以为,将利用CG等而生成的视觉信息投影到接近于设置有电子看板装置30的场所的建筑物或物体、空间上的投影映射(Projection Mapping)方式。
[0044] 车载装置20为被搭载于车辆V1上的装置。搭载了车载装置20的车辆V1通过提供在行驶过程中拍摄到的影像的提供者(以下,也称为“用户”),从而被预先登记在管理服务器10中。用户例如经由自身所拥有的智能手机等终端装置,来实施与影像的提供相关的事前的登记。在第一实施方式中,经由被搭载于正在行驶的车辆V1上的车载装置20,从而拍摄到在车辆V1周边的道路上行驶的车辆的影像。
[0045] 在用户所拥有的终端装置中,例如安装有用于对与影像的提供相关的信息进行登记的应用程序(以下,也称为“应用”)。用户经由该应用的执行,从而将与影像的提供相关的用户信息与关于车载装置20的信息一起登记在管理服务器10中。如后文所述,被登记在管理服务器10中的车载装置20定期地向管理服务器10发送由该车载装置所拍摄到的正在道路上行驶的影像。管理服务器10将从车载装置20被发送的影像记录在预定的数据库(DB)中。
[0046] 第一实施方式所涉及的管理服务器10取得从车载装置20定期地被发送的影像。而且,管理服务器10基于所取得的影像,而对正在道路上行驶的伴随有危险驾驶的车辆进行检测。管理服务器10在检测到伴随有危险驾驶的车辆时,生成包含与该车辆相关的信息(例如,拍摄到该车辆的影像等)的显示内容,并输出至电子看板装置30。在显示内容中,例如包含有赞同安全驾驶的推进的广告主的消息(显示信息)等。在电子看板装置30中,例如,赞同安全驾驶的推进的广告主的显示信息等与伴随有危险驾驶的车辆相关的信息一起被显示。根据第一实施方式,由于能够将对实时发生的事态进行探测并被内容化了的显示信息显示在电子看板装置上,因此能够促进安全驾驶。
[0047] 图2为,对伴随有危险驾驶的车辆的检测进行说明的图。在图2中,车辆V1为搭载了车载装置20的车辆,并且沿着白色箭头标记所示的行进方向而行驶在道路R1上。道路R1为,行驶车道按前进方向而被中心线HM1划分形成的两车道道路。在图2(1)中,在车辆V1的前方,车辆V2、V3先行行驶在道路R1上。此外,图2(2)中,车辆V4先行行驶在车辆V1的前方,车辆V5后续在车辆V1的后方。
[0048] 在图2(1)中,最近的车辆V2以在使道路上的行驶位置如虚线箭头所示的那样左右移动的同时缩小与先行的车辆V3之间的车距的方式而进行行驶。车载装置20以预定的帧周期(例如,30fps)而对在车辆V1的前方先行行驶的车辆V2、V3的影像进行拍摄,并将该影像发送至管理服务器10。
[0049] 管理服务器10例如通过对于以预定的帧周期而被拍摄到的帧图像的模型匹配等,来对先行的车辆V2、V3进行确定。而且,基于伴随着帧图像间的车辆V2、V3的特征点的时间推移的光流等,而对影像内的该车辆V2、V3的举动进行检测。例如,检测出接近车辆V3的后方而行驶的车辆V2的举动、在使本车辆的行驶位置左右移动的同时而行驶的这类车辆V2的举动。管理服务器10基于检测出的车辆V2的举动,而对该车辆为伴随有挑衅驾驶这类的危险驾驶的车辆进行确定。例如,在被检测出的举动满足车辆V2与车辆V3之间的车距在阈值以下、车辆V2与中心线HM1之间的距离在阈值以上等条件的情况下,能够推断出车辆V2伴随有使交通危险产生的挑衅驾驶。
[0050] 接着,在图2(2)中,后续于车辆V1的车辆V5以在使道路上的行驶位置左右移动的同时缩小与车辆V1之间的车距的方式而进行行驶。车载装置20以预定的帧周期而对后续于车辆V1的后方而行驶的车辆V5的影像进行拍摄,并将该影像发送至管理服务器10。在图2(2)中,也与图2(1)同样地,能够根据被拍摄到的影像来对车辆V5的举动进行检测,并根据该举动而对后续于车辆V1而行驶的车辆V5的挑衅驾驶进行推断。如图2(1)、(2)所例示的那样,基于经由车载装置20而被拍摄到的前方方向上的影像或后方方向上的影像,而对伴随有挑衅驾驶的车辆V2、V5的举动进行检测。
[0051] 图3至图4为对伴随有危险驾驶的车辆的其它方式的检测进行说明的图。图3的道路R1、车辆V1与图2相同。在图3(1)中,在车辆V1的前方,以超过限制速度的速度而行驶的车辆V6处于先行中。以超过限制速度的速度而行驶的车辆V6(车辆V6→虚线车辆V6a)的影像通过被搭载于跟在车辆V6的后方的车辆V1上的车载装置20而被拍摄到,并被发送至管理服务器10。
[0052] 在管理服务器10中,与图2同样地,通过模型匹配等而对影像内的车辆V6进行确定。而且,基于伴随着帧图像间的车辆V6的特征点的时间推移的光流等,而对影像内的该车辆的举动进行检测。例如,根据帧图像间的上述特征点的变化幅度,而对与车辆V6的行驶速度相对应的举动进行检测。在图3(1)中,基于上述变化幅度超过预定的阈值(例如,与限制速度相对应的变化幅度)的车辆V6的举动,而推断出超过限制速度的行驶。
[0053] 接着,在图3(2)中,车辆V7后续于车辆V1而进行行驶。车辆V7接近车辆V1,并向对向车道侧越过中心线HM1,从而实施(虚线车辆V7a)车辆V1的超越。车辆V7在不闪烁方向指示器的条件下进行车道变更并超越车辆V1,并且在超越之后,先于车辆V1而行驶在行驶车道上(虚线车辆V7b)。车载装置20对接近于车辆V1并在不闪烁方向指示器的条件下向对向车道侧越过的车辆V7(车辆V7→虚线车辆V7a)的影像进行拍摄,并发送至管理服务器10。此外,车载装置20对在不闪烁方向指示器的条件下从对向车道侧回到行驶车道侧的车辆V7(虚线车辆V7a→虚线车辆V7b)的影像进行拍摄,并发送至管理服务器10。
[0054] 在管理服务器10中,与图2同样地,对影像内的车辆V7进行确定,并对该车辆的举动进行检测。例如,检测出从后方接近车辆V1并向对向车道侧越过的虚线车辆V7a。此外,检测出在车道变更时未闪烁方向指示器的情况。同样地,检测出在不闪烁方向指示器的条件下从对向车道侧回到行驶车道侧的虚线车辆V7b。在图3(2)中,根据所检测到的举动,而对车辆V7的伴随着超越行驶的驾驶操作(转向操作、方向指示器操作)进行推断。
[0055] 在图4中,例示了在发生了交通堵塞的道路R1的路侧带行驶的车辆V11。车辆V11例如为两轮机动车。车辆V11以超过车辆V1等的行驶速度的速度,而在车辆V1、V8、V9、V10所行驶的道路R1的、左侧的路侧带行驶。被搭载于车辆V1上的车载装置20对在路侧带行驶的车辆V11的影像进行拍摄,并发送至管理服务器10。
[0056] 在管理服务器10中,与图2同样地,对影像内的车辆V11进行确定,并对该车辆的举动进行检测。例如,对超过车辆V1的左侧而行驶的车辆V11的行驶速度等进行检测。此外,根据路侧带的构造物(侧沟或白线等)而对车辆V11的行驶区域进行检测。在图4中,根据被检测到的举动,来对车辆V11的行驶状态(转向操作、行驶速度等)进行推断。
[0057] 另外,管理服务器10能够根据被拍摄到的两轮机动车的影像,而将该两轮车的行驶过程中的状态作为举动来进行检测。例如,能够检测出以使前轮从地面翘起的状态进行后轮行驶(所谓的wheelie run)的两轮机动车的姿态。在该情况下,管理服务器10也能够经由由车载装置20拍摄到的影像,而对作为两轮机动车的车辆V11的、基于姿态的行驶状态进行推断。
[0058] 图5至图6为,表示被显示在电子看板装置30上的显示画面的一个示例的图。图5的显示画面为,对该车辆进行了检测而得到的位置信息、赞同安全驾驶的推进的广告主的消息与伴随有危险驾驶行为的车辆的影像一起被显示的方式的一个示例。
[0059] 在图5中,在显示区域30a中,显示有由被搭载于正在行驶的车辆V1上的车载装置20所拍摄到的、伴随有危险驾驶行为的车辆的影像。例如,显示有拍摄到在图2(1)中所说明的、接近先行车辆的后方并使本车辆的行驶位置左右移动的同时进行行驶的车辆的影像。
另外,在被显示于显示区域30a中的影像中,也可以针对确定车辆或驾驶该车辆的驾驶员的信息,实施虚化等掩模处理。作为对驾驶员进行确定的信息,例如例示了车辆的汽车登记号码(标记在车牌上的号码)的图像、以及能够确定驾驶员或同乘于副驾驶座上的共乘者的脸部图像等的个人的信息。管理服务器10从被检测到的车辆的影像中对拍摄到上述信息的图像区域进行确定,并针对该图像区域而实施虚化等掩模处理。而且,管理服务器10只需使实施了掩模处理的伴随有危险驾驶行为的车辆的影像显示在电子看板装置30的显示区域30a中即可。
[0060] 在显示区域30b中,例如,表示伴随有危险驾驶行为的车辆的行驶位置的地图信息作为静止图像而被显示。显示区域30b可以为预先分配给电子看板装置30的固定的区域,也可以为与影像一起重叠显示的显示区域30a的部分区域。在被显示于显示区域30b中的地图信息中,既可以包含被检测出的车辆的行驶位置或移动历史(30c),也可以包含表示该电子看板装置30的位置的信息(30d)。通过地图信息的显示,从而电子看板装置30的阅览者能够对该车辆所行驶的路径或场所等进行目视确认。
[0061] 在显示区域30e中,显示有赞同安全驾驶的推进的广告主的消息或标语等。关于显示区域30e,也是既可以为预先分配给电子看板装置30的固定的区域,也可以为与影像一起重叠显示的显示区域30a的部分区域。在图5中,在显示区域30e中显示有“T**公司推进安全驾驶”这类的消息。
[0062] 此外,在第一实施方式中,在检测出伴随有危险驾驶行为的车辆的情况下,也能够将根据该车辆的影像而被判断出的、表示危险程度的信息显示在电子看板装置30上。图6的显示画面为,表示该车辆的危险程度的信息与检测到伴随有危险驾驶的行为的车辆的影像一起被显示的方式的一个示例。另外,图6中的、显示区域30a、30b、30c、30d、30e与图5相同。
[0063] 在图6中,在显示区域30f中,显示有被显示在显示区域30a中的车辆的、表示危险程度的信息。显示区域30f与显示区域30b同样地,既可以为预先分配给电子看板装置30的固定的区域,也可以为与影像一起重叠显示的显示区域30a的部分区域。管理服务器10基于拍摄到车辆的影像,而对被检测出的车辆的危险程度进行判断,并将该判断结果输出至电子看板装置30。表示危险程度的信息例如能够根据检测到的举动而以“A”、“B”、“C”等这类的多个阶段的指标(危险等级)来表示。在图6中,利用多个阶段的指标而被判断出的“危险等级**”等信息被显示在显示区域30f中。
[0064] 能够根据被拍摄到的影像内的车辆的举动,来对危险程度进行判断。例如,在检测出符合挑衅驾驶的举动时,判断为危险度最高的“危险等级A”状态。此外,对于超过限制速度的车辆,在该车辆的速度超过一定范围(例如,相对于限制速度而为20km/h)时判断为“危险等级B”状态,且在处于一定范围内时判断为“危险等级C”状态。这样的对危险程度进行判断的条件只需预先存储于软件程序中即可。另外,对危险程度进行判断的条件也能够根据高速公路或一般道路、堵塞的有无这类的交通环境或天气等而改变。
[0065] (硬件结构)
[0066] 图7为表示管理服务器10、车载装置20、电子看板装置30的各硬件结构的一个示例的图。由于出资者服务器40具有与管理服务器10相同的硬件结构,因此在图7中被省略。
[0067] 管理服务器10例如为通用或专用的计算机。管理服务器10在结构要素方面具备通过总线而被相互连接的处理器101、主存储部102、辅助存储部103、通信部104。主存储部102以及辅助存储部103为管理服务器10可读取的记录介质。上述的结构要素既可以被分别设置多个,也可以不设置一部分的结构要素。管理服务器10的处理器101为“控制部”的一个示例。
[0068] 处理器101例如为CPU(Central Processing Unit,中央处理单元)。处理器101执行在主存储部102的工作区中以可执行的方式而被展开的计算机程序,并实施管理服务器10整体的控制。处理器101通过利用计算机程序的执行来实施周边设备的控制,从而提供符合了预定的目的功能。但是,处理器101并未被限定于单一的处理器,也可以为多处理器结构。此外,利用单一的插口而被连接的单一的CPU也可以为多核结构。此外,管理服务器10所提供的处理功能的一部分也可以通过DSP(Digital Signal Processor,数字信号处理)、ASIC(Application Specific Integrated Circuit,专用集成电路)、GPU Graphics Processing Unit,图形处理单元)等而被提供。此外,处理功能的至少一部分也可以为FPGA(Field-Programmable Gate Array,现场可编程门阵列)、数值运算处理器、图像处理处理器等专用LSI(large scale integration,大规模集成电路)、其它数字电路、模拟电路。
[0069] 主存储部102对处理器101所执行的计算机程序、处理器101所处理的数据等进行存储。主存储部102例如为闪存、RAM(Random Access Memory,随机存取存储器)或ROM(Read Only Memory,只读存储器)等。辅助存储部103为,以读写自如的方式而将各种程序以及各种数据存储在记录介质中的非易失性的存储装置。辅助存储部103也被称为外部存储装置。辅助存储部103例如为闪存、硬盘驱动器(HDD,Hard Disk Drive)、SSD(Solid State Drive,固态驱动器)等。在被存储于辅助存储部103中的各种程序中,例如包括OS(Operating System,操作系统)。OS包含通信接口程序,其中,所述通信接口程序实施与经由通信部104而连接的外部装置等的数据的接收和发送。
[0070] 通信部104为与网络N1通信的接口。通信部104例如包含LAN(Local Area Network,局域网)接口板、用于无线通信的无线通信电路。管理服务器10经由通信部104而与网络N1连接,并通过该网络而与车载装置20、电子看板装置30等进行通信。
[0071] 另外,管理服务器10的硬件结构并不限定于图7所示的结构。管理服务器10例如能够读取被记录在可移动介质中的程序,并将其在主存储部102中展开来执行。可移动介质例如为,如USB(Universal Serial Bus)存储器、CD(Compact Disc)、DVD(Digital Versatile Disc,数字视频光盘)、蓝光(注册商标)光盘这样的盘片记录介质。
[0072] 车载装置20具有处理器201、主存储部202、辅助存储部203、显示部204、输入部205、通信部206、位置信息检测部207、摄像机208、车速传感器209。关于处理器201、主存储部202、辅助存储部203、通信部206,由于与管理服务器10的处理器101、主存储部102、辅助存储部103、通信部104相同,因此省略说明。上述的结构要素既可以被分别设置多个,也可以不设置一部分的结构要素。
[0073] 显示部204例如为LCD(Liquid  Crystal  Display,液晶显示器)、EL(Electroluminescence,电致发光)面板等。另外,也可以在显示部204中设置用于语音引导或报知消息等的扬声器。输入部205例如包括能够输入文字等记号的触摸面板或按钮、能够输入语音的话筒。
[0074] 位置信息检测部207例如基于来自绕地球的周围旋转的多个GPS(Global Positioning Satellite,全球定位系统)卫星的GPS信号,来对本装置的位置信息(纬度、经度)进行检测。位置信息检测部207以预定的周期间隔而取得检测到的位置信息,并与时刻信息相对应地进行记录。通过位置信息检测部207而被记录的信息定期地、或者根据管理服务器10的请求,而被发送至经由通信部206而与网络N1连接的管理服务器10中。
[0075] 另外,车载装置20例如也可以为,与被搭载于用户或对象者所驾驶的车辆上的导航装置等协同工作的方式。在该情况下,能够将导航装置等所具备的显示部、输入部等分配给可共享而使用的结构要素。此外,能够将该导航装置等所具备的GPS接收单元分配给位置信息检测部207。
[0076] 摄像机208例如为,由CCD(Charged-Coupled Devices,电子耦合组件)、CMOS(Complementary Metal-Oxide-Semiconductor,互补金属氧化物半导体)等图像传感器实现的拍摄装置。摄像机208既可以为单反相机,也可以为立体摄像机。此外,摄像机208也可以为红外线摄像机。摄像机208以预定的帧周期而对视角内(水平视角、垂直视角、对角视角)的影像进行拍摄。例如,可经由摄像机208来对车辆的前方方向(行进方向)、后方方向、车辆周围的影像进行拍摄。由摄像机208所拍摄到的影像例如被记录在辅助存储部203等中。由摄像机208所拍摄到的影像例如与车辆V1的位置信息、速度信息或时刻信息等一起定期地、或者根据管理服务器10的请求而被发送至经由通信部206而与网络N1连接的管理服务器10中。车载装置20将上述信息与本装置的识别信息一起发送至管理服务器10。
[0077] 另外,车载装置20也能够代替摄像机208而与被搭载于车辆V1上的行车记录仪等协同工作,从而取得经由该行车记录仪等所具备的拍摄单元而被拍摄到的车外的影像信息。车载装置20例如只需通过CAN(Controller Area Network,控制局域网)等车内网络来取得利用行车记录仪等而被拍摄到的车外的影像信息即可。
[0078] 车速传感器209例如为,基于根据车轴的转数而产生的车速信号来对车辆V1的速度进行检测的传感器。由车速传感器209所检测出的被拍摄到的车辆V1的速度信息例如与时刻信息一起被记录在辅助存储部203等中,并与位置信息和经由摄像机208而被拍摄到的影像一起被发送至管理服务器10。
[0079] 电子看板装置30包含处理器301、主存储部302、辅助存储部303、显示部304、通信部305。由于处理器301、主存储部302、辅助存储部303的说明与管理服务器10的处理器101、主存储部102、辅助存储部103的说明相同,因此被省略。此外,由于显示部304、通信部305的说明与车载装置20的显示部204、通信部206的说明相同,因此被省略。但是,如图1中所说明的那样,在显示部304中,包含LED矩阵、投影仪等结构要素。此外,显示部304既可以与电子看板装置30的框体一体地被设置,也可以与电子看板装置30的框体分体地被设置。
[0080] (功能结构)
[0081] 图8为表示管理服务器10的功能结构的一个示例的图。管理服务器10作为功能结构要素而包括接受部11、登记部12、图像信息取得部13、图像处理部14、显示信息输出部15。此外,作为其它的功能结构要素而包含电子看板装置数据库(DB)16、显示信息DB17、用户信息DB18、地图信息DB19、图像信息DB1A、对照模型DB1B、车辆影像DB1C。在地图信息DB19中,存储有包含地物位置的地图数据、表示该地图数据上的各个地点的特性的文字或照片等的包含POI(Point of interest,兴趣点)信息的地图信息。另外,地图信息DB19也可以由与网络N1连接的其它系统、例如GIS(Geographic Information System,地理信息系统)来提供。
这些功能结构要素例如为,通过管理服务器10的处理器101执行被存储于辅助存储部103中的各种程序从而被提供的功能结构要素。但是,功能结构要素中的任意一个、或其处理的一部分也可以通过硬件电路而被执行。此外,各功能结构素中的任意一个、或其处理的一部分也可以通过与网络N1连接的其它计算机而被执行。
[0082] 接受部11经由出资者服务器40来接受赞同安全驾驶的推进的广告主委托在电子看板装置30上显示的显示信息。在显示信息中,包含有静止图像、动态图像或幻灯片放映的显示内容,或者地方自治团体等公共机关所刊登的标语或赞同安全驾驶的推进的企业等的消息。接受部11将接受到的显示信息存储于显示信息DB17中。
[0083] 图9为,表示被存储于显示信息DB17中的显示信息的一个示例的图。经由接受部11而接受到的显示信息如图9所例示的那样,作为显示信息图表而被管理。另外,被登记在显示信息表中的信息也能够适当地进行字段的追加、变更、删除。
[0084] 图9所例示的显示信息表具有广告主ID、区域ID、装置ID、设置位置、显示信息号码、显示数据、消息信息、显示期间、时间段、类别的各字段。在广告主ID字段中,存储有对广告主进行识别的识别信息(例如,企业代码等)。在区域ID字段中,存储有表示设置有电子看板装置30的区域的信息(区域ID)。在装置ID字段中,存储有电子看板装置30的识别信息。在设置位置字段中,存储有电子看板装置30被设置的地点的位置信息(纬度、经度)。
[0085] 在显示信息号码字段中,存储有表示作为显示信息而被显示的显示数据的识别号码。在识别号码中,包含有在检测到伴随着危险驾驶行为的车辆时用于使该车辆的影像显示的专用的识别号码。在图9中,作为专用的识别号码而例示了“PPPPPP”。另外,当在该字段中存储有专用的识别号码时,被存储于消息信息字段中的消息与上述车辆的影像一起被显示。
[0086] 在显示数据字段中,存储有显示内容的数据。在消息信息字段中,作为文字信息而存储有通过广告主而被指定了的消息。该消息与伴随有危险驾驶行为的车辆的影像一起被显示在电子看板装置30上。另外,也可以存储有对被存储于其它图表等中的文字信息进行识别的识别号码,以代替文字信息。此外,当不存在需要显示的消息的情况下,存储有表示不存在该消息的信息(例如,“---”或空栏等)。
[0087] 在显示期间字段中,存储有表示对显示信息进行显示的期间的信息。在时间段字段中,存储有表示使显示信息显示的时间段的信息。在图9中,关于装置ID“D00A”,例示了从“2018/04/01”到“2018/04/28”的期间。此外,对于该装置ID的显示信息号码“P000A1”而存储有以“11:00-14:00”而被指定的时间段。在类别字段中,存储有表示作为显示信息而被显示的内容的显示方式的信息。作为内容的显示方式,例示了静止图像、幻灯片放映、动态图像等。另外,在显示方式中,也可以包含在内容中含有由CG(Computer Graphics)等所生成的视觉信息的AR(Augmented Reality)或投影映射(Projection Mapping)等。
[0088] 另外,使显示信息显示的电子看板装置30通过电子看板装置DB16而被管理。电子看板装置DB16例如具备电子看板装置30的每个装置ID的记录。在该记录中,存储有表示电子看板装置30的管理者的信息(管理者ID)、表示与电子看板装置30的使用相关的合同期间的信息、区域ID、设置部位的位置信息(纬度、经度)。此外,在该记录中,存储有表示能够进行显示的显示方式(静止图像、幻灯片放映、动态图像等)、与显示相关的限制事项(例如,不可显示期间等)。
[0089] 登记部12将在应用的下载时经由终端装置而接受到的、与影像的提供相关的用户信息和与车载装置20相关的信息登记在用户信息DB18中。用户信息DB18例如具备对用户进行唯一识别的每个识别信息(用户ID)的记录。在该记录中,存储有用户的名字、性别、下载了应用的终端装置的识别信息(IP地址等)、对用户的车载装置20进行识别的识别信息(IP地址、MAC地址等)。
[0090] 图像信息取得部13取得从车载装置20被发送的图像信息,并将之存储于图像信息DB1A中。在图像信息中,包含有以一定的周期间隔经由车载装置20的摄像机208而拍摄到的影像、车辆V1的位置信息、速度信息、时刻信息。图像信息取得部13将图像信息与车载装置20的识别信息一起存储于图像信息DB1A中。
[0091] 图10为,表示被存储于图像信息DB1A中的图像信息的一个示例。经由图像信息取得部13而接受到的图像信息如图10所例示的那样,作为每个用户ID的图像信息表而被管理。被登记在图像信息图表中的信息也能够适当地进行字段的追加、变更、删除。
[0092] 图10所例示的图像信息表具有取得编号(No)、取得日期和时间、图像信息、处理状态的各字段。在取得编号字段中,存储有在图像信息的接受时被赋予的取得号码。在取得日期和时间字段中,存储有表示接受到图像信息的日期和时间的信息。在图像信息字段中,存储有从车载装置20定期地被发送的图像信息。图像信息字段具有影像、位置、速度的副字段,并且在各个副字段中存储有图像信息中所包含的影像信息、位置信息、速度信息的数据号码。在处理状态字段中,存储有表示由图像处理部14实施的图像处理已完成的信息。例如,在图像处理未完成时,存储有表示未完成的状态的信息(例如,“空栏”)。在图像处理完成时,存储有“完成”这类的信息。
[0093] 图8的图像处理部14基于从车载装置20取得的影像,而对在道路上行驶中的伴随有危险驾驶的车辆进行检测。图像处理部14例如通过模型匹配,而对影像内被拍摄到的车辆或构造物(车道外侧线、中心线等的道路显示、侧沟、邮筒等)进行确定。模型匹配参照对照模型DB1B而被实施。在对照模型DB1B中,存储有用于对车辆的举动进行确定的对照模型数据。
[0094] 图像处理部14基于伴随着被确定的车辆的时间推移的光流等,而对影像内的该车辆的举动进行检测。图像处理部14基于检测出的举动,而对该车辆为伴随有危险驾驶的车辆进行确定。此外,图像处理部14基于被检测出的举动,而对针对于该车辆的驾驶行为的危险程度进行判断。图像处理部14将伴随有危险驾驶的车辆的影像与表示危险程度的信息或拍摄到该车辆的部位的位置信息一起存储于车辆影像DB1C中。此外,图像处理部14将表示该处理已完成的信息(“完成”等)记录在被存储于图像信息DB1A中的、图像处理已完成的图像信息的处理状态字段中。
[0095] 图11为,表示被存储于车辆影像DB1C中的车辆影像信息的一个示例的图。通过图像处理部14而被确定的车辆的影像信息如图11所例示的那样,作为车辆影像信息图表而被管理。被登记在车辆影像信息图表中的信息也能够适当地进行字段的追加、变更、删除。
[0096] 图11所例示的车辆影像信息图表具有显示管理编号、取得日期和时间、影像、车辆信息、危险等级的各字段。关于取得日期和时间,由于与图10的图像信息图表相同,因此省略说明。
[0097] 在显示管理编号字段中,存储有对车辆信息进行管理的号码。显示管理编号以连续编号的方式被管理。图像处理部14在影像信息的登记时,将与被赋予给最近的车辆信息的号码连续的显示管理号码赋予该影像信息,并存储于车辆影像信息图表中。在影像字段中,存储有成为图像处理的对象的影像信息的数据号码。
[0098] 在车辆信息字段中,存储有伴随有危险驾驶的车辆的车辆信息。车辆信息字段具有期间、数据、车辆号码、脸部信息、行为类别的各个副字段。在期间副字段中,存储有表示在处理对象的影像中拍摄到伴随有危险驾驶的车辆的影像的期间的信息。在数据副字段中,存储有拍摄到伴随有危险驾驶的车辆的影像的期间的数据。在车辆号码副字段中,存储有根据处理对象的影像而被确定的汽车登记号码(标记在车牌上的号码)。另外,在标记在车牌上的号码未被确定时,存储有表示该号码未被确定的信息(例如,“---”或空栏等)。
[0099] 在脸部信息副字段中,存储有表示处理对象的影像内的、能够确定个人信息的脸部信息的存在的有无的信息。例如,在存在有驾驶车辆的驾驶员或落座于副驾驶座的同乘者的脸部图像时,存储有“有”等信息。此外,在不存在上述脸部图像时,存储有“无”等信息。
[0100] 在行为类别副字段中,存储有表示根据车辆的举动而被推断出的、伴随有危险的驾驶行为的类别的信息。例如,存储有使用图2至图4进行了说明的挑衅驾驶或超速驾驶、超越驾驶、不点亮方向指示器的不开启指示灯驾驶、路侧带行驶、后轮行驶等。在危险等级字段中,存储有表示驾驶行为的危险程度的信息。例如,存储有与三个阶段的“A”、“B”、“C”等级相对应的信息。
[0101] 回到图8,显示信息输出部15基于所指定的显示期间以及时间段,而将被登记在显示信息DB17中的显示信息(显示数据、标语等)输出至符合的电子看板装置30中。此外,提取被存储于车辆影像DB1C中的伴随有危险驾驶的车辆的影像,并输出至电子看板装置30。提取到的车辆的影像与表示行驶位置的位置信息或表示驾驶行为的危险程度的信息、预先规定的消息信息一起被显示。另外,显示信息输出部15对被登记在显示信息DB17中的显示信息和被存储于车辆影像DB1C中的影像之间的显示计划进行调节,并使之显示在电子看板装置30上。关于显示信息输出部15的详细情况,将在后文中进行叙述。
[0102] (处理的流程)
[0103] 接着,参照图12至图16,对第一实施方式所涉及的管理服务器10的处理进行说明。图12为表示图像信息的取得处理的一个示例的流程图。在图12的流程图中,处理的开始被例示为,在接受从车载装置20被发送的图像信息之时。管理服务器10取得从车载装置20被发送的图像信息(S1)。另外,也可以通过车载雷达而一并取得对方车辆的速度、加速度等。
管理服务器10将图像信息与车载装置20的识别信息(IP地址、MAC地址等)和接受到的时刻信息一起临时性地存储于主存储部102的预定的区域中,并转移至S2的处理。
[0104] 管理服务器10提取图像信息中所包含的影像信息、位置信息、速度信息(S2)。而且,管理服务器10参照用户信息DB18,而对与车载装置20的识别信息相对应的用户的用户ID进行确定(S3)。被确定的用户ID被提交至S4的处理。
[0105] 在S4的处理中,与用户ID建立对应,以将所取得的图像信息中所包含的影像信息、位置信息、速度信息记录在图像信息DB1A中。管理服务器10例如对被存储于图像信息DB1A中的、与用户ID相对应的图像信息图表进行确定。而且,在该图像信息图表中生成对处理对象的图像信息进行存储的记录。在处理对象的记录中,与最近的记录的取得号码连续的取得号码被编号。管理服务器10将接受到的时刻信息、影像信息的数据号码、位置信息的数据号码、速度信息的数据号码存储于该记录所对应的字段中。另外,处理状态字段为“空栏”的状态。在S4的处理之后,结束图12的处理。
[0106] 通过以上的处理,从而管理服务器10能够取得从被搭载于正在行驶的车辆V1上的车载装置20定期地被发送的图像信息。在图像信息中,包含经由车载装置20所具备的摄像机208而拍摄到的影像、以一定的周期间隔而被检测到的车辆V1的位置信息以及车速信息。管理服务器10能够基于车载装置20的识别信息来对用户ID进行确定,并且对已取得的图像信息赋予取得号码,且记录在图像信息DB1A中。
[0107] 接着,对图13至图14的处理进行说明。图13至图14为表示图像处理的一个示例的流程图。图13至图14的处理针对在图像信息DB1A中处理状态字段为“空栏”状态的记录而定期地被执行。通过图13至图14的处理,来对在图2至图4中进行了说明的、伴随着基于车辆的举动的危险驾驶行为的车辆进行确定。另外,图13至图14的处理为,将挑衅驾驶、超速驾驶、不开启指示灯驾驶、路侧带行驶、后轮行驶判断为三个阶段的“A”、“B”、“C”等级的处理例。
[0108] 在图13的流程图中,管理服务器10参照图像信息DB1A而提取处理对象的记录(S11)。提取到的记录被临时性地存储于主存储部102的预定的区域中。管理服务器10取得被存储于该记录中的图像信息(S12)。但是,管理服务器10在从车辆V1的行车记录仪取得图像的情况下,也可以一并取得由车载雷达得到的对方车辆的速度、加速度等信息。管理服务器10基于图像信息来对通过车载装置20而被拍摄到的道路的交通环境进行确定(S13)。
[0109] 管理服务器10例如参照对照模型DB1B,并通过模型匹配来对以预定的帧周期而被拍摄到的帧图像内所拍摄到的车辆或构造物(车道外侧线、中心线等的道路显示、侧沟、邮筒、道路标识等)进行确定。而且,管理服务器10基于伴随着被确定的车辆的特征点的时间推移的光流等,而对影像内的该车辆的举动进行检测(S14)。但是,该车辆的举动的检测例如也可以利用由车载雷达得到的对方车辆的速度、加速度等信息。
[0110] 管理服务器10对检测到的车辆的举动是否为危险驾驶状态进行判断(S15)。管理服务器10例如在根据伴随着车辆的时间推移的影像内的变化而被检测出的该车辆的速度或加速度超过预定的阈值时,判断为该车辆处于危险驾驶状态。同样地,在与该车辆前后的其它车辆的相对距离为预定的阈值以下的情况、伴随着车道变更的指示器未点亮的情况、进行行驶限制区域内的行驶或后轮行驶的情况、行驶车道的变更频率为一定频率的情况下,判断为该车辆处于危险驾驶状态。
[0111] 管理服务器10在被检测出的车辆的举动为危险驾驶状态的情况下(S15为“是”),转移至S16的处理。另一方面,管理服务器10在被检测出的车辆的举动不为危险驾驶状态的情况下(S15为“否”),转移至S19的处理。
[0112] 在S16的处理中,对伴随有危险驾驶的车辆(危険運転に伴う应当为危険運転を伴う)的危险程度进行判断。使用图14的流程图来对S16的处理的详细内容进行说明。
[0113] 在图14的流程图中,在S21的处理中,对车辆的举动是否为挑衅驾驶进行判断。管理服务器10例如在与跟着本车辆的该车辆的相对距离、与先行于该车辆的其它车辆的相对距离短于与行驶速度相应的车距的状态持续的情况下,判断为符合挑衅驾驶。例如,基于表示限制速度的道路显示或道路标识、速度信息等,而对行驶速度进行判断。另外,判断条件也可以包含相对于中心线或车道外侧线的行驶位置的移动、或尾灯的闪烁频率。
[0114] 管理服务器10在判断为车辆的举动是挑衅驾驶的情况下(S21为“是”),将危险程度判断为危险等级“A”等级(S22)。这是因为,能够判断为挑衅驾驶行为是引起事故的可能性较高的行为的缘故。被判断出的危险程度与上述危险驾驶的信息一起被提交至图13的S18的处理。
[0115] 另一方面,管理服务器10在判断为车辆的举动不是挑衅驾驶的情况下(S21为“否”),转移至S23的处理。在S23的处理中,对车辆的举动是否为超速驾驶进行判断。管理服务器10例如在车辆的行驶速度超过限制速度的情况下,判断为属于超速驾驶。行驶速度基于表示限制速度的道路显示或道路标识、速度信息等而被判断出。管理服务器10在判断为车辆的举动是超速驾驶的情况下(S23为“是”),转移至S24的处理。另一方面,管理服务器10在判断为车辆的举动不是超速驾驶的情况下(S23为“否”),转移至S26的处理。
[0116] 在S24的处理中,对超速是否在预定的范围内进行判断。作为超速的预定的范围例如例示了20km/h。管理服务器10在车辆的行驶速度相对于限制速度而小于20km/h的情况下(S24为“是”),判断为超速在预定的范围内,并转移至S28的处理。另一方面,管理服务器10在车辆的行驶速度相对于限制速度而在20km/h以上的情况下(S24为“否”),判断为超速不在预定的范围内,并将危险程度判断为危险等级“B”等级(S25)。这是因为,能够判断出相对于限制速度而在20km/h以上的超速存在发生与人命相关的事故的可能性的缘故。被判断出的危险程度与上述危险驾驶的信息一起被提交至图13的S18的处理。
[0117] 在S26的处理中,对车辆的举动是否为路侧带行驶进行判断。管理服务器10例如在车辆的行驶位置相对于车道外侧线而位于外侧区域的情况下,判断出为路侧带行驶。管理服务器10在判断出车辆的举动是路侧带行驶的情况下(S26为“是”),将危险程度判断为危险等级“B”等级(S25)。这是因为,能够判断出在路侧带行驶中存在发生与人命相关的事故的可能性的缘故。被判断出的危险程度与上述危险驾驶的信息一起被提交至图13的S18的处理。
[0118] 另一方面,管理服务器10在判断出车辆的举动不是路侧带行驶的情况下(S26为“否”),判断为该车辆处于后轮行驶或不点亮指示器的不开启指示灯驾驶(S27)。在正在行驶的姿态为使前轮从地面翘起的状态的情况下,被判断为后轮行驶。此外,能够通过方向指示器的点亮的有无,来对不开启指示灯驾驶进行判断。管理服务器10在车辆的举动符合后轮行驶、不开启指示灯驾驶、相对于限制速度而小于20km/h的超速驾驶的情况下,将危险程度判断为危险等级“C”等级(S28)。这是因为,能够判断为虽然有可能发生事故但是与其它危险驾驶行为相比危险程度相对较低的缘故。被判断出的危险程度与上述危险驾驶的信息一起被提交至图13的S18的处理。
[0119] 在S29的处理中,管理服务器10对伴随有危险驾驶行为的车辆的车辆号码(汽车登记号码)是否被确定进行判断。车辆号码的确定在对车辆进行确定时,经由被显示在该车辆的车牌上的信息的读取而被实施。管理服务器10在车辆号码被确定的情况下(S29为“是”),取得该车辆号码(S2A)。所取得的车辆号码被提交至图13的S18的处理。另一方面,管理服务器10在车辆号码未被确定的情况下(S29为“否”),转移至S2B的处理。
[0120] 在S2B的处理中,对在该车辆的影像内是否具有能够对个人信息进行确定的脸部图像进行判断。管理服务器10在具有脸部图像的情况下(S2B为“是”),将表示在车辆的影像内存在脸部图像的信息“有”提交至图13的S18的处理(S2C)。另一方面,管理服务器10在不具有脸部图像的情况下(S2B为“否”),将表示在车辆的影像内不存在脸部图像的信息“无”提交至图13的S18的处理(S2D)。在S2C或S2D的处理后,转移至图13的S17的处理。
[0121] 在S17的处理中,管理服务器10提取拍摄到被判断为处于危险驾驶状态的车辆的举动的期间的影像。所提取到的车辆的影像被提交至S18的处理。在S18的处理中,管理服务器10将拍摄到被判断为处于危险驾驶状态的车辆的举动的期间的影像记录在车辆影像DB1C中。车辆的影像与危险驾驶的信息、表示危险程度的信息、车辆号码信息、脸部图像的有无信息一起被被存储于车辆影像DB1C中。在S19的处理之后,结束图13至图14的处理。
[0122] 通过以上的处理,管理服务器10能够基于从车载装置20被发送的图像信息,而对影像内所拍摄到的车辆进行确定,并对该车辆的举动进行检测。而且,管理服务器10能够根据表示被检测到的车辆的举动的信息,而对该车辆是否处于危险驾驶状态进行判断。管理服务器10例如能够根据表示车辆的速度、加速度的信息,而检测出该车辆处于超速的危险驾驶状态。此外,管理服务器10能够根据表示车辆与该车辆前后的其它车辆之间的距离的信息,而检测出该车辆处于挑衅驾驶的危险驾驶状态。而且,管理服务器10能够根据表示正在行驶的车辆的姿态的信息,而检测出该车辆处于后轮行驶的危险驾驶状态,并能够根据表示车辆的行驶区域的信息,而检测出该车辆处于路侧带(行驶限制区域)行驶的危险驾驶状态。此外,管理服务器10能够根据表示车辆的方向指示器的闪烁状态的信息,而检测出该车辆处于不开启指示灯驾驶的危险驾驶状态。
[0123] 此外,管理服务器10能够针对处于危险驾驶状态的车辆,而对危险程度进行判断,并赋予与该程度相应的指标。管理服务器10能够对被显示在处于危险驾驶状态的车辆的车牌上的汽车登记号码进行确定。管理服务器10能够将符合危险驾驶的信息、表示危险程度的指标、该车辆的汽车登记号码与拍摄到被判断为处于危险驾驶状态的车辆的举动的期间的影像一起登记在车辆影像DB1C中。
[0124] 接着,对图15的处理进行说明。图15为表示显示信息输出处理的一个示例的流程图。图15的处理针对被登记在显示信息DB17中的每个装置ID而定期地被执行。
[0125] 在图15的流程图中,管理服务器10参照显示信息DB17,而提取与处理对象的装置ID相对应的记录(S31)。所提取到的记录被临时性地存储于主存储部102的预定的区域中。管理服务器10从提取到的装置ID的记录中取得显示信息的显示期间、时间段的各个信息(S32)。
[0126] 管理服务器10对当前的日期是否为显示期间进行判断(S33)。管理服务器10在当前的日期为显示期间的情况下(S33为“是”),转移至S34的处理。另一方面,管理服务器10在当前的日期不是显示期间的情况下(S33为“否”),结束图15的处理。
[0127] 在S34的处理中,管理服务器10对当前的时刻是否为显示时间段进行判断。管理服务器10在当前的时刻为显示时间段的情况下(S34为“是”),转移至S35的处理。另一方面,管理服务器10在当前的时刻不是显示时间段的情况下(S34为“否”),结束图15的处理。
[0128] 在S35的处理中,管理服务器10从提取到的装置ID的记录中取得显示数据。而且管理服务器10将所取得的显示数据输出至利用装置ID而被指定的电子看板装置30(S36)。电子看板装置30使从管理服务器10被输出的显示信息(内容的显示数据)显示在显示部304上。在S36的处理之后,结束图15的处理。
[0129] 通过以上的处理,从而管理服务器10能够根据被指定的期间、时间段,而使被登记在显示信息DB17中的显示信息显示在电子看板装置30上。管理服务器10能够根据时间段而使被登记在显示信息DB17中的安全标语等内容按照时间段而显示在电子看板装置30上。
[0130] 接着,对图16的处理进行说明。图16为,表示输出被登记在车辆影像DB1C中的伴随有危险驾驶的车辆的影像的处理的一个示例的流程图。图16的处理定期地被执行。
[0131] 在图16的流程图中,管理服务器10参照车辆影像DB1C而提取处理对象的记录(S41)。所提取到的记录被临时性地存储于主存储部102的预定的区域中。管理服务器10从提取到的记录中取得了取得日期和时间信息(S42)。
[0132] 管理服务器10对当前的日期是否为取得日进行判断(S43)。管理服务器10在当前的日期是取得日的情况下(S43为“是”),转移至S44的处理。另一方面,管理服务器10在当前的日期不是取得日的情况下(S43为“否”),转移至S41的处理。
[0133] 在S44的处理中,管理服务器10从提取到的记录中取得影像信息的数据号码。管理服务器10参照图像信息DB1A而取得拍摄到影像的位置信息(S45)。管理服务器10取得存储有数据号码的记录的位置信息。而且,管理服务器10基于位置信息,而从显示信息DB17提取使车辆影像显示的电子看板装置30(S46)。例如,被设置为与该位置信息相对应的区域ID的电子看板装置30的记录被提取。管理服务器10将提取到的记录临时性地存储于主存储部102的预定的区域中,并转移至S47的处理。
[0134] 在S47的处理中,管理服务器10从提取到的记录中,取得与车辆影像一起显示的消息信息。而且,管理服务器10取得从车辆影像DB1C提取到的记录的影像数据、危险等级信息(S48)。管理服务器10对针对于被判断为危险驾驶状态的车辆的危险等级的等级进行判断(S49)。
[0135] 管理服务器10在危险等级的等级是“A”的情况下(S49为“是”),转移至S4A的处理。另一方面,管理服务器10在危险等级的等级不是“A”的情况下(S49为“否”),转移至S4B的处理。在S4A的处理中,伴随有危险驾驶的车辆的影像数据、危险等级信息、消息信息、位置信息这类的车辆信息被输出至处理对象的电子看板装置30。车辆信息与用于使显示中的内容中断并优先进行显示的指示一起被输出至处理对象的电子看板装置30。在电子看板装置30中,被输出的车辆信息根据管理服务器10的指示而优先地被显示。在S4A的处理之后,转移至S4C的处理。
[0136] 在S4B的处理中,伴随有危险驾驶的车辆的影像数据、危险等级信息、消息信息、位置信息这类的车辆信息也被输出至处理对象的电子看板装置30。但是,车辆信息与用于等待正在显示的内容的结束并进行显示的指示一起被输出至处理对象的电子看板装置30。在电子看板装置30中,被输出的车辆信息根据管理服务器10的指示,而等待正在显示的内容的结束并被显示。在S4B的处理之后,转移至S4C的处理。
[0137] 在S4C的处理中,管理服务器10在通过S46的处理中被提取到的电子看板装置30中,对是否具有未处理的电子看板装置30进行判断。管理服务器10在存在未处理的电子看板装置30的情况下(S4C为“是”),转移至S47的处理。另一方面,管理服务器10在不存在未处理的电子看板装置30的情况下(S4C为“否”),结束图16的处理。
[0138] 通过以上的处理,从而管理服务器10能够将被记录在车辆影像DB1C中的、伴随有危险驾驶的车辆的影像输出至电子看板装置30。管理服务器10能够输出与该车辆的影像一起被显示的广告主的消息信息。此外,管理服务器10将拍摄到伴随有危险驾驶的车辆的影像的位置信息、表示危险驾驶的危险程度的信息输出至电子看板装置30。在电子看板装置30中,如图5至图6中所说明的那样,能够在显示区域30a中显示伴随有危险驾驶行为的车辆的影像。
[0139] 同样地,能够在显示区域30b中,同时显示表示伴随有危险驾驶行为的车辆的行驶位置的地图信息和车辆的行驶位置或移动历史(30c)。而且,能够在显示区域30e中,显示赞同安全驾驶的推进的广告主的消息。能够在显示区域30f中,显示表示伴随有危险驾驶行为的车辆的危险程度的信息。能够将表示危险程度的信息等级划分为多个阶段的级别,并进行显示。另外,管理服务器10能够根据表示危险程度的信息的阶段,而输出用于使正在显示的内容中断并使该车辆信息优先地显示的指示。根据第一实施方式,能够提供一种用于将对实时发生的事态进行探测并被内容化了的显示信息显示在电子看板装置上从而促进了安全驾驶的技术。
[0140] <第二实施方式>
[0141] 第二实施方式为,如图17所示,作为电子看板装置30的结构要素而包含摄像机306的方式。在第二实施方式中,经由摄像机306而对正在道路上行驶的伴随有危险驾驶的车辆的影像进行拍摄。电子看板装置30的摄像机306与第一实施方式的车载装置20所具备的摄像机208相同。典型而言,摄像机306被一体地设置于电子看板装置30的框体上,并以预定的帧周期而对该电子看板装置周边的道路的影像进行拍摄。但是,摄像机306也可以与电子看板装置30的框体以分体的方式被设置。例如,既可以设置在隔着道路而与电子看板装置30对置的位置上,也可以设置于天桥等上。由摄像机306所拍摄到的影像例如被记录在辅助存储部303等中,并定期地、或者根据管理服务器10的请求而被发送至经由通信部305而与网络N1连接的管理服务器10中。
[0142] 管理服务器10与第一实施方式同样地,通过对于以预定的帧周期而拍摄到的帧图像的模型匹配等,而对车辆或构造物(车道外侧线、中心线等的道路显示、侧沟、邮筒、道路标识等)进行确定。而且,能够基于伴随着被确定的车辆的特征点的时间推移的光流等,而对影像内的该车辆的举动进行检测。
[0143] 在第二实施方式中也提供了如下的技术,即,用于通过实施图12至图16所示的处理,从而将对实时发生的事态进行探测并被内容化了的显示信息显示在电子看板装置上,从而促进了安全驾驶的技术。
[0144] 另外,在第二实施方式中,能够将摄像机306的高度设置在更高的位置上。因此,能够取得通过被搭载于车载装置20上的摄像机208而跨及较大范围所拍摄到的影像。例如,当在横跨单侧两车道或三车道的高速公路的天桥等上设置有摄像机306的情况下,能够检测出长期间持续进行挑衅驾驶并在超车车道等上行驶的车辆的举动。此外,能够检测出在多个车道间反复进行车道变更并行驶的车辆的举动。在第二实施方式中,判断条件能够包含车道变更的频率(频繁地反复进行车道变更的车辆的举动),以作为用于对危险驾驶状态进行确定的车辆的举动。
[0145] <其它实施方式>
[0146] 上述的实施方式只不过为一个示例,本实施方式的公开内容在不脱离其主旨的范围内能够适当地进行变更并实施。在本公开内容中说明了的处理或单元只要不产生技术上的矛盾,则能够自由地组合并实施。
[0147] 此外,作为一个装置所实施的内容而进行了说明的处理也可以通过多个装置来分担并被执行。或者,作为不同的装置所实施的内容而进行了说明的处理也可以通过一个装置来执行。在计算机系统中,以何种硬件结构(服务器结构)来实现各功能的是能够灵活地变更的。
[0148] 能够将使信息处理装置或其它的设备、装置(以下,称为计算机等)实现上述任意功能的程序记录在可供计算机等读取的记录介质中。而且,能够通过使计算机等读取并执行该记录介质的程序,从而提供该功能。
[0149] 在此,计算机可读取的记录介质是指,能够通过电气、磁性、光学、机械或化学作用来积累数据和程序等信息,并能够从计算机等读取的记录介质。作为这样的记录介质中的、能够从计算机等拆下的记录介质,例如具有软磁盘、磁光盘、CD-ROM、CD-R/W、DVD、蓝光光盘、DAT、8mm磁带、闪存等存储卡等。此外,作为被固定于计算机等中的记录介质而具有硬盘、ROM等。
[0150] 符号说明
[0151] 1…安全驾驶推进系统;
[0152] 10…管理服务器;
[0153] 11…接受部;
[0154] 12…登记部;
[0155] 13…图像信息取得部;
[0156] 14…图像处理部;
[0157] 15…显示信息输出部;
[0158] 16…电子看板装置DB;
[0159] 17…显示信息DB;
[0160] 18…用户信息DB;
[0161] 19…地图信息DB;
[0162] 1A…图像信息DB;
[0163] 1B…对照模型DB;
[0164] 1C…车辆影像DB;
[0165] 20…车载装置;
[0166] 30…电子看板装置。