CN107810506B - 具有隐私保护的远程查看系统 - Google Patents
具有隐私保护的远程查看系统 Download PDFInfo
- Publication number
- CN107810506B CN107810506B CN201680033506.XA CN201680033506A CN107810506B CN 107810506 B CN107810506 B CN 107810506B CN 201680033506 A CN201680033506 A CN 201680033506A CN 107810506 B CN107810506 B CN 107810506B
- Authority
- CN
- China
- Prior art keywords
- images
- privacy
- vehicle interior
- ecu
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
- B60R25/305—Detection related to theft or to other events relevant to anti-theft systems using a camera
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/593—Recognising seat occupancy
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/02—Protecting privacy or anonymity, e.g. protecting personally identifiable information [PII]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2325/00—Indexing scheme relating to vehicle anti-theft devices
- B60R2325/10—Communication protocols, communication systems of vehicle anti-theft devices
- B60R2325/101—Bluetooth
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/30—Detection related to theft or to other events relevant to anti-theft systems
- B60R25/31—Detection related to theft or to other events relevant to anti-theft systems of human presence inside or outside the vehicle
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30268—Vehicle interior
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Computer Security & Cryptography (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Telephonic Communication Services (AREA)
Abstract
一种操作具有隐私保护的远程查看系统的方法以及具有隐私保护的远程查看系统。在一个实施例中,该方法包括从远程设备接收对车辆内部的一个或多个图像的请求,接收车辆内部的一个或多个图像,确定隐私钥匙是否位于车辆内部内,确定一个或多个乘客是否位于车辆内部内,检索存储在存储器中的车辆内部的隐私设置,响应于确定隐私钥匙以及一个或多个乘客位于车辆内部内,基于车辆内部的一个或多个图像和隐私设置生成一个或多个隐私图像,控制收发器经由天线将所述一个或多个隐私图像传输到远程设备。
Description
相关申请的交叉引用
本申请要求2015年4月10日提交的美国临时专利申请No.62/145,946的权益,该申请的全部内容通过引用并入本文。
背景技术
现今的车辆可以装备有内部相机,所述内部相机能够查看车辆内部并且在某些实例中查看车辆乘客。内部相机可以用于与车辆内部内乘客的安全、安保、舒适和便利相关的多种应用。
发明内容
然而,当内部相机是远程可访问时,车辆内部内一个或多个乘客的身份是远程可访问的。因此,对于具有隐私保护的远程查看系统以及用于操作具有隐私保护的远程查看系统的方法存在着需求。
下面阐述本文所公开的某些实施例的概述。应当理解,呈现这些方面仅仅是为了向读者提供这某些实施例的简要概述,并且这些方面并不意图限制本公开的范围。实际上,本公开可以涵盖可能在下面未阐述的各种方面。
在一个实施例中,本发明提供操作具有隐私设置的远程查看系统的方法。该方法包括,利用电子控制单元从远程设备接收对车辆内部的一个或多个图像的请求。该方法还包括,利用电子控制单元接收车辆内部的一个或多个图像。该方法还包括,利用电子控制单元确定隐私钥匙是否位于车辆内部内。该方法还包括,利用电子控制单元确定一个或多个乘客是否位于车辆内部内。该方法还包括,利用电子控制单元检索存储在存储器中的车辆内部的隐私设置。该方法还包括,响应于确定隐私钥匙以及一个或多个乘客位于车辆内部内,利用电子控制单元基于车辆内部的一个或多个图像以及隐私设置生成一个或多个隐私图像。附加地,该方法还包括,控制收发器经由天线将所述一个或多个隐私图像传输到远程设备。
在另一个实施例中,本发明提供具有隐私保护的远程查看系统。该系统包括:被配置为捕获车辆内部的一个或多个图像的相机;以及电子控制单元,所述电子控制单元具有电气耦合到第一天线的第一收发器、电气耦合到第二天线的第二收发器、存储器以及电气耦合到存储器的电子处理器。电子控制单元被配置为经由第一收发器和第一天线从远程设备接收对车辆内部的一个或多个图像的请求,接收车辆内部的一个或多个图像,经由第二收发器和第二天线确定隐私钥匙是否位于车辆内部内,确定一个或多个乘客是否位于车辆内部内,检索存储在存储器中的车辆内部的隐私设置,响应于确定隐私钥匙以及一个或多个乘客位于车辆内部内而基于车辆内部的一个或多个图像以及隐私设置生成一个或多个隐私图像,以及控制第一收发器经由第一天线将所述一个或多个隐私图像传输到远程设备。
通过考虑详细描述和附图,本发明的其它方面将变得清楚。
附图说明
图1是装备有具有隐私保护的远程查看系统的车辆内部的框图。
图2是图1的远程查看系统的图像处理电子控制单元的框图。
图3是图1的远程查看系统的电子控制单元的框图。
图4是操作图1的远程查看系统的方法的流程图。
图5是没有任何隐私保护的车辆内部的图像。
图6-8是具有隐私保护的车辆内部的隐私图像。
具体实施方式
在详细解释本发明的任何实施例之前,应该理解,本发明在其应用上并不限于后面描述中所阐述或者附图中所图示的组件的构造和布置的细节。本发明能够有其它实施例并且能够以各种方式实践或施行。
应该注意,可以使用多个基于硬件和软件的设备以及多个不同结构的组件来实现本发明。此外,应该理解的是,本发明的实施例可以包括硬件、软件和电子组件或模块,为了讨论的目的,可以如同大多数组件仅实现在硬件中那样图示和描述所述硬件、软件和电子组件或模块。然而,本领域普通技术人员基于对该详细描述的阅读将认识到,在至少一个实施例中,本发明的基于电子的方面可以实现在可利用一个或多个处理器执行的软件(例如,存储在非瞬时性计算机可读介质上)中。如此,应该注意,可以利用多个基于硬件和软件的设备以及多个不同结构的组件来实现本发明。例如,说明书中描述的“控制单元”和“控制器”可以包括一个或多个处理器、包括非瞬时性计算机可读介质的一个或多个存储器模块、一个或多个输入/输出接口以及连接组件的各种连接(例如系统总线)。
图1是图示出装备有具有隐私保护的远程查看系统102(被称为“远程查看系统102”)的车辆内部100的框图。远程查看系统102包括图像处理电子控制单元(ECU)110、相机112(例如鱼眼镜头相机或广角镜头相机)、可选相机114、点对点连接115A和115B(统称为“点对点连接115”)、车辆通信接口116A-116C(统称为“车辆通信接口116”)、电子控制单元(ECU)120、车辆传感器140、隐私钥匙142、远程设备144、无线网络146和无线网络148。无线网络146可以实现在蜂窝网络、Bluetooth®网络、无线局域网(WLAN)、短距离无线网络、长距离无线网络或其它合适的无线网络中的一些或全部中。无线网络148可以实现在Bluetooth®网络、近场通信(NFC)网络、短距离无线网络、长距离无线网络或其它合适的无线网络中的一些或全部中。
车辆内部100还包括驾驶员座椅130、乘坐者座椅132、左后座椅134、中后座椅136、右后座椅138。尽管在图1中图像处理ECU 110和ECU 120被描述和图示为分离的组件,但是应理解,图像处理ECU 110和ECU 120可以一起实现为单个电子控制单元。还应理解,分别归因于图像处理ECU 110和ECU 120的功能可以由图像处理ECU 110或ECU 120中的一个全部执行,或者图像处理ECU 110和 ECU 120两者的各种组合来全部执行。
相机112经由点对点连接115A通信地耦合到图像处理ECU 110,并将一个或多个图像或视频流传输到图像处理ECU 110。另外,在一些实施例中,可选相机114经由点对点连接115B通信地耦合到图像处理ECU 110,并将一个或多个图像或视频流传输到图像处理ECU110。可选相机114位于与相机112的位置不同的位置。例如,当相机112位于车辆内部100的前部附近时,可选相机114位于车辆内部100的后部附近。
图像处理ECU 110接收利用相机112捕获的一个或多个图像(例如,全方位图像),并且在一些实施例中,图像处理ECU 110接收利用可选相机114捕获的一个或多个图像。在一些实施例中,图像处理ECU 110以预定的时间间隔处理该一个或多个图像,并记录该一个或多个图像以及相关联的数据。例如,图像处理ECU 110可以至少部分地基于车辆内部100行进的距离处理该一个或多个图像。图像处理ECU 110经由车辆通信接口116A通信地耦合到ECU 120,并将该一个或多个图像传输到ECU 120。例如,图2是图1的远程查看系统102的图像处理ECU 110的框图。图像处理ECU 110包括向图像处理110和/或相机112内的组件和模块提供电力、操作控制和保护的多个电气和电子组件。例如,除其它外,图像处理ECU 110包括控制器205(诸如可编程电子微处理器、微控制器或其它合适的处理设备)、电源210和输入/输出模块215。在一些实施例中,图像处理ECU 110与相机112集成为单个设备。
在图2的示例中,控制器205包括电子处理器220和存储器225。电子处理器220通信地耦合(例如,电气连接)到存储器225并且执行能够被存储在存储器225中的指令。控制器205被配置为从存储器225检索并执行(除其它以外)与本文描述的控制过程和方法有关的指令。控制器205还可以被配置成从存储器225检索并且执行与共同未决的PCT申请No.PCT/US16/26747(2016年4月8日提交)中描述的乘客检测过程和方法有关的指令,该PCT申请的全部内容通过引用并入本文。特别地,图像处理ECU 110可以使用乘客检测系统来标识车辆内部100内的一个或多个乘客的数量、大小、姿势以及相应位置。图像处理ECU 110可以将一个或多个乘客的信息作为与车辆内部100的一个或多个图像相关联的元数据输出到ECU120。在其它实施例中,图像处理ECU 110包括附加的、更少的或不同的组件。应该注意的是,图像处理ECU 110可以被实现在数个独立的电子控制单元中,每个电子控制单元被配置为执行本文列出的特定功能。另外,图像处理ECU 110可以包含输入特定类型的传感器数据并执行相关处理的子模块。
图像处理ECU 110被配置为从相机112接收一个或多个图像并处理该一个或多个图像。例如,在图2的实施例中,输入/输出模块215从相机112接收一个或多个图像并将该一个或多个图像发送给控制器205进行图像处理。 然后控制器205处理该一个或多个图像。可替换地,由图像处理ECU 110的控制器205执行的分析模块可以从相机112接收一个或多个图像,将该一个或多个图像变换成合适的格式,识别该一个或多个图像中的对象和特征(例如,车辆内部内的一个或多个乘客),跟踪该一个或多个图像内的对象和特征,并控制其它ECU(例如,ECU 120),或者将来自这些处理的数据输出发送到其它ECU(例如,将该一个或多个图像和/或元数据发送到ECU 120)。
图像处理ECU 110、图像处理ECU 110的子模块和附加的ECU(例如,ECU 120)可以通过车辆通信接口116上的一个或多个通信模块链接和/或经由图像处理ECU 110的输入/输出模块215直接连接。在一些实施例中,ECU 120借助于诸如J1939或CAN总线的协议进行通信,以与图像处理ECU 110的输入/输出模块215通信。在其它实施例中,取决于特定应用的需要,ECU 120在其它合适的协议下与图像处理ECU 110的输入/输出模块215通信。在一些实施例中,图像处理ECU 110的输入/输出模块215使用来自各种控制和传感器的专用信号线直接输入信息。
回头参考图1,ECU 120从图像处理ECU 110接收一个或多个图像,并且取决于如下面更详细地描述的各种确定,响应于通过无线网络146从远程设备144接收到请求而将如上所描述的一个或多个图像或者一个或多个隐私图像传输到远程设备144。例如,ECU 120可以通过无线网络146将一个或多个图像或者一个或多个隐私图像传输到远程设备144。
来自远程设备144的请求可以由远程设备144的用户发起以访问来自车辆内部100的图像或视频,以确定物品是否位于车辆内部100内。附加地或可替换地,来自远程设备144的请求可以由远程设备144的用户发起以访问来自车辆内部100的图像或视频,以确定是否有任何乘客在车辆内部100中。在一些实施例中,远程设备144是智能电话、平板电脑、服务器或其它合适的通信设备。在一些实施例中,远程设备144被车辆内部100的用户或第三方用户(例如应急人员)访问。
在一些实施例中,当ECU 120从远程设备144接收到传输车辆内部100的图像的请求时,车辆内部100有一个或多个乘客。为了在传输车辆内部100的一个或多个图像或者一个或多个隐私图像时实现对车辆内部100内的一个或多个乘客的隐私保护,ECU 120使用存储在ECU 120的存储器中的隐私设置。
ECU 120可以至少部分地基于从ECU 120的存储器检索的隐私设置从一个或多个图像生成一个或多个隐私图像。例如,图3是图1的远程查看系统102的ECU 120的框图。ECU120包括与图像处理ECU 110类似的组件,并因此这些组件将不被更详细地描述。ECU 120包括第一收发器302、第一天线304、第二收发器306和第二天线308。在一些实施例中,ECU 120专用于远程查看系统102。在其它实施例中,ECU 120在包括远程查看系统102的各种车辆系统当中共享。在一些实施例中,ECU 120是多相机系统(例如,外部周围查看系统、备用相机系统或其它车辆相机系统)的部分。
ECU 120的控制器205包括电子处理器220和存储器225。电子处理器220通信地耦合(例如,电气连接)到存储器225并且执行能够被存储在存储器225中的指令。ECU 120的存储器225还存储与车辆内部100相关联的隐私设置。控制器205被配置为从存储器225检索并执行(除其它以外)与本文描述的控制过程和方法相关的指令(例如,如下面更详细描述的基于隐私设置的控制过程和方法)。在其它实施例中,ECU 120包括附加的、更少的或不同的组件。应该注意,ECU 120可以被实现在数个独立的电子控制单元中,每个电子控制单元被配置为执行本文列出的特定功能。附加地,ECU 120可以包含输入特定类型的传感器数据并执行相关处理的子模块。
ECU 120的输入/输出模块215被配置为从图像处理ECU 110接收一个或多个图像连同相关联的元数据(例如,元数据可以包括乘客的数量、一个或多个乘客中每个乘客的姿势、一个或多个乘客中每个乘客的大小、一个或多个乘客中每个乘客的位置或其它合适的元数据)。控制器205被配置为处理由输入/输出模块215接收的视频或一个或多个图像。例如,在图3的实施例中,输入/输出模块215从图像处理ECU 110接收一个或多个图像,并将该一个或多个图像发送到控制器205进行图像处理。然后控制器205处理该一个或多个图像。通过处理该一个或多个图像,ECU 120的控制器205可以从该一个或多个图像生成一个或多个隐私图像。附加地,取决于各种确定,控制器205可以控制第一收发器302和第一天线304将一个或多个隐私图像传输到远程设备(例如,远程设备144)。可替换地,取决于各种确定,控制器205可以控制第一收发器302和第一天线304直接将该一个或多个图像从图像处理ECU 110传输到远程设备(例如,远程设备144)。第一收发器302是长距离射频(RF)收发器(例如,通过第二代(2G)、第三代(3G)或第四代长期演进(4G LTE)之一进行通信的RF收发器,无线局域网(WLAN)收发器或其它合适的长距离RF收发器)。
ECU 120、子模块和附加的ECU(例如,图像处理ECU 110)可以通过车辆通信接口116上的一个或多个通信模块链接和/或经由输入/输出模块215直接连接。在一些实施例中,图像处理ECU 110借助于诸如J1939或CAN总线的协议进行通信,以与输入/输出模块215通信。在其它实施例中,取决于特定应用的需要,图像处理ECU 110在其它合适的协议下与输入/输出模块215通信。在一些实施例中,输入/输出模块215使用来自各种控制和传感器的专用信号线直接输入信息。
回头参考图1,在一些实施例中,ECU 120还可以经由无线网络148检测或传送车辆内部100内的隐私钥匙142。在图3的示例中,第二收发器306是短距离RF收发器(例如,Bluetooth® 收发器、NFC收发器或其它合适的短距离RF收发器)。隐私钥匙142可以是可以被ECU 120或其它车辆系统检测的智能手机、钥匙链、平板电脑、智能手表或其它合适的无线设备。隐私钥匙142也可以被ECU 120用来进一步控制车辆内部100的隐私设置。
在一些实施例中,隐私设置包括不同阈值,并且ECU 120基于检测到车辆内部100内的隐私钥匙142来更改或调整隐私设置的不同阈值。例如,当隐私钥匙142存在于车辆内部100内时,ECU 120可以禁用远程查看系统102(例如,将隐私设置设置为最大隐私阈值)。可替换地,当隐私钥匙142不存在于车辆内部100内时,ECU 120可以启用远程查看系统102(例如,解激活隐私设置或将隐私设置从最大隐私阈值降低)。附加地,取决于隐私设置的不同阈值,ECU 120可以通过对包含一个或多个乘客的一个或多个图像的一个或多个部分进行不同程度的审查来生成一个或多个隐私图像,如下面更详细描述的。
在通过无线网络146将隐私图像传输到远程设备144之前,ECU 120生成一个或多个隐私图像。以这种方式,传输到远程设备144的任何隐私图像将减少或消除位于车辆内部100内的一个或多个乘客的身份。
在一些实施例中,ECU 120针对车辆内部100默认设置到至少低阈值的隐私设置。在图1的图示实施例中,ECU 120经由车辆通信接口116C连接到用户界面150,用户界面150允许车辆内部100的用户调整包括默认阈值设置的隐私设置的不同阈值。用户界面还可以允许用户向ECU 120注册或配对不同的隐私钥匙。附加地或可替换地,ECU 120可以响应于从其它车辆系统接收到的输入或命令而激活或解激活隐私设置。用户界面150可以包括显示在触摸屏显示器上并且从触摸屏显示器接收输入的图形用户界面、显示在显示器上并从控制设备接收输入的图形用户界面或其它合适的用户界面。
车辆传感器140经由车辆通信接口116B通信地耦合到ECU 120,并且车辆传感器140可以指示包括车辆内部100的车辆是否处于事故中。在一些实施例中,车辆传感器140传输使ECU 120能够确定车辆的位置、航向和运动的信息。在一些实施例中,ECU 120基于从车辆传感器140接收到的信息来确定车辆是否已经处于事故中。当包括车辆内部100的车辆处于事故中时,ECU 120解激活隐私设置。隐私设置的解激活可以允许紧急调度员或其它应急人员在没有隐私保护的情况下访问并远程查看车辆内部100的一个或多个图像。在一些实施例中,车辆传感器140包括全球定位系统(GPS)、一个或多个气囊传感器或其它合适的碰撞传感器。
图4是用于操作远程查看系统102的方法400的流程图。关于图3描述方法400。然而,应当理解的是,方法400中图示的功能可以分布在多个设备当中,诸如在图像处理ECU110、ECU 120和/或其它车辆系统之间。还应理解的是,方法400中图示的功能不限于由ECU120执行,而是也可以由图像处理ECU 110或其它车辆系统执行。
如图4中所图示的,ECU 120从远程设备(例如,如上所述的远程设备144)接收图像请求(在框402处)。在一些实施例中,ECU 120经由第一收发器302和第一天线304从远程服务器(例如,紧急调度中心处的计算机)接收图像请求。
ECU 120还经由图像处理ECU 110从相机112接收车辆内部(例如,如上所述的车辆内部100)的一个或多个图像(在框404处)。在一些实施例中,ECU 120连续地接收一个或多个图像,或者在从图像处理ECU 110请求一个或多个图像时接收一个或多个图像。在其它实施例中,该一个或多个图像是来自具有广角镜头的相机112的视频流,该广角镜头覆盖车辆内部中的所有乘坐区域。该一个或多个图像可以是原始图像、经处理的图像、压缩图像或者未压缩图像之一。附加地,ECU 120从图像处理ECU 110接收与该一个或多个图像相关联的元数据。
ECU 120确定隐私钥匙(例如,如上所述的隐私钥匙142)是否位于车辆内部内(在判定框406处)。例如,ECU 120的第二收发器306是经由第二天线308从无线钥匙链接收信号的短距离射频(RF)收发器。无线密钥链可以被注册为ECU 120的存储器225中的隐私钥匙。在另一示例中,ECU 120可以确定智能手机是否通过无线网络(例如,如上所述的无线网络148)连接到ECU 120、是否被注册为存储器225中的隐私钥匙以及是否位于车辆内部内。
ECU 120可以基于从隐私钥匙接收到的位置信息(例如,GPS信息或其它基于位置的信息)来确定隐私钥匙是否位于车辆内部中。可替换地,ECU 120可以基于经由第二收发器306和第二天线308连接ECU 120和隐私钥匙的无线网络的特性来确定隐私钥匙是否位于车辆中。例如,ECU 120具有存储在ECU 120的存储器225中的关于无线网络的最大距离的信息,并且基于该最大距离,ECU 120确定隐私钥匙是否位于车辆内部内。换句话说,ECU 120可以具有存储在ECU 120的存储器225中的这样的信息:无线网络的最大距离是六英尺。如果车辆内部长度为六英尺并且ECU 120没有通过无线网络检测到或连接到隐私钥匙,则ECU120可以确定隐私钥匙未位于车辆内部中。
如果ECU 120确定私密钥匙未位于车辆内部内(在判定框406处),则ECU 120控制第一收发器302通过无线网络(例如无线网络146)经由第一天线传输来自图像处理ECU 110的一个或多个图像(在框408处)。以这种方式,由于隐私钥匙未位于车辆内部内,所以ECU120不生成具有隐私保护的任何图像。例如,图5是没有任何隐私保护的车辆内部的图像500。在该图示的实施例中,图像500包括两个乘客——第一乘客505和第二乘客510。这两个乘客是如上所述由图像处理ECU 110的乘客检测系统检测到的感兴趣对象,并且关于这两个乘客的信息作为相关联元数据被提供给ECU 120。如图5所图示,第一乘客505和第二乘客510占据来自相机112的图像500的多个部分(例如,分别为车辆内部的驾驶员座椅130和右后座椅138)。
如果ECU 120确定隐私钥匙位于车辆内部内,则ECU 120确定一个或多个乘客是否位于车辆内部内(在判定框410处)。例如,ECU 120可以使用与车辆内部的一个或多个图像相关联的元数据来确定一个或多个乘客是否位于车辆内部内。可替换地,ECU 120从其它车辆传感器(例如,如上所述的车辆传感器140)接收信息,并且ECU 120可以基于来自其它车辆传感器的信息来确定一个或多个乘客是否在车辆内。例如,如果ECU 120接收到来自安全带接合传感器的指示或者来自重量传感器的指示,则ECU 120可以确定一个或多个乘客在车辆内部内。
如果ECU 120确定在车辆内部内没有乘客,则ECU 120控制第一收发器302通过无线网络经由第一天线304传输来自图像处理ECU 110的一个或多个图像(例如,如上所述的图像500)(在框408处)。以这种方式,ECU 120不生成具有隐私保护的任何图像,这是因为没有乘客位于车辆内部100内。
如果ECU 120确定在车辆内部内有乘客(在判定框410处),则ECU 120检索存储在ECU 120的存储器225中的隐私设置,并确定隐私设置是否被激活(在判定框412处)。如果ECU 120确定隐私设置未被激活(在判定框412处),则ECU 120控制第一收发器302通过无线网络经由第一天线304将来自图像处理ECU 110的一个或多个图像(例如,如上所述的图像500)传输到远程设备(在框408处)。以这种方式,由于隐私设置未被激活,所以ECU 120不生成具有隐私保护的任何图像。
如果ECU 120确定隐私设置被激活(在判定框412处),则ECU 120从该一个或多个图像生成一个或多个隐私图像,并控制第一收发器302通过无线网络经由第一天线304将该一个或多个隐私图像传输到远程设备(例如远程设备144)(在框414处)。以这种方式,ECU120生成一个或多个具有隐私保护的隐私图像,这是因为ECU 120已经确定隐私钥匙和一个或多个乘客在车辆内部内,并且ECU 120已经确定隐私设置被激活。在一些实施例中,隐私钥匙可以激活或调整存储在ECU 120的存储器中的隐私设置。在一些实施例中,隐私设置具有不同的阈值,这些阈值确定提供给远程设备的信息的类型。
隐私设置的最大阈值可以对应于没有车辆内部的图像或信息。隐私设置的最小阈值可以对应于车辆内部的一个或多个未经审查的图像。隐私设置的高阈值可以对应于仅车辆内部的信息(例如乘客的数量)且无图像。隐私设置的中高阈值可以对应于这样的隐私图像,审查该隐私图像的包括车辆内部的一个或多个乘客的部分。例如,图6是具有隐私保护的车辆内部的隐私图像600。在该图示的实施例中,隐私图像600包括隐私图像600的两个部分——第一部分605和第二部分610。如图6中所图示,第一部分605和第二部分610完全审查隐私图像600的ECU 120曾基于来自图像处理ECU 110的元数据确定两个乘客(例如如图5中所图示的第一乘客505和第二乘客510)的位置在其处的部分(例如,分别是驾驶员座椅130和右后座椅138)。
应理解,由ECU 120生成的隐私图像不限于如隐私图像600中所图示的完全受审查部分,而是代之以可以改变审查的程度。例如,图7是具有隐私保护的车辆内部的隐私图像700。取代于隐私图像600的完全受审查部分,隐私图像700包括两个乘客705和710的被模糊面部。可替换地,图8是具有隐私保护的车辆内部的隐私图像800。取代于隐私图像600的完全受审查部分或隐私图像700的被模糊面部,隐私图像800包括与两个乘客(例如,乘客705和710)的外形对应的受审查部分805和810。
可选地,在一些实施例中,ECU 120还可以确定包括车辆内部的车辆是否处于事故中(在判定框416处)。如果ECU 120确定车辆处于事故中(在判定框416处),则ECU 120控制第一收发器302通过无线网络经由第一天线304将来自图像处理ECU 110的一个或多个图像(例如,如上所述的图像500)传输到远程设备(在框408处)。以这种方式,由于车辆已经处于事故中并且应急人员可能需要收集关于车辆内部内的一个或多个乘客的信息,ECU 120不生成具有隐私保护的任何图像。换句话说,事故会解激活与车辆内部相关联的隐私设置。
如果ECU 120确定车辆未曾处于事故中(在判定框416处),并且ECU 120确定隐私设置被激活(在判定框412处),则ECU 120从该一个或多个图像生成一个或多个隐私图像,并通过无线网络经由天线将该一个或多个隐私图像传输到远程设备(例如,远程设备144)(在框414处)。以这种方式,因为ECU 120已经确定隐私钥匙和一个或多个乘客位于车辆内部内、隐私设置被激活并且包括车辆内部的车辆未曾处于事故中,ECU 120生成一个或多个具有隐私保护的隐私图像。
因此,除其它外,本发明提供具有隐私保护的远程查看系统以及用于操作具有隐私保护的远程查看系统的方法。在所附权利要求中阐述了本发明的各种特征和优点。
Claims (14)
1.一种操作具有隐私保护的远程查看系统的方法,所述方法包括:
利用电子控制单元从远程设备接收对车辆内部的一个或多个图像的请求;
利用电子控制单元接收车辆内部的一个或多个图像;
利用电子控制单元确定隐私钥匙是否位于车辆内部内;
利用电子控制单元确定一个或多个乘客是否位于车辆内部内;
利用电子控制单元检索存储在存储器中的车辆内部的隐私设置;
响应于确定隐私钥匙以及一个或多个乘客位于车辆内部内,利用电子控制单元基于车辆内部的一个或多个图像和隐私设置生成一个或多个隐私图像;以及
控制收发器经由天线将所述一个或多个隐私图像传输到远程设备。
2.如权利要求1所述的方法,还包括利用电子控制单元确定包括车辆内部的车辆是否已经处于事故中,其中从所述一个或多个图像并且基于车辆内部的隐私设置生成一个或多个隐私图像进一步响应于确定车辆未曾处于事故中。
3.如权利要求2所述的方法,其中响应于确定车辆未曾处于事故中,所述方法还包括利用电子控制单元控制收发器经由天线将所述一个或多个图像传输到远程设备。
4.如权利要求1所述的方法,其中响应于确定隐私钥匙未位于车辆内部内,所述方法还包括利用电子控制单元控制收发器经由天线将所述一个或多个图像传输到远程设备。
5.如权利要求1所述的方法,其中响应于确定一个或多个乘客未位于车辆内部内,所述方法还包括利用电子控制单元控制收发器经由天线将所述一个或多个图像传输到远程设备。
6.如权利要求1所述的方法,其中车辆内部的隐私设置被解激活,并且其中所述一个或多个隐私图像基本上类似于所述一个或多个图像。
7.如权利要求1所述的方法,其中车辆内部的隐私设置被设置为消除一个或多个乘客中的至少一个乘客的身份,并且其中所述一个或多个隐私图像消除了在所述一个或多个隐私图像中一个或多个乘客中的至少一个乘客的身份。
8.一种具有隐私保护的远程查看系统,所述系统包括:
相机,被配置为捕获车辆内部的一个或多个图像;以及
电子控制单元,具有
电气耦合到第一天线的第一收发器;
电气耦合到第二天线的第二收发器;
存储器;以及
电气耦合到存储器的电子处理器,其中电子控制单元被配置为:
经由第一收发器和第一天线从远程设备接收对车辆内部的一个或多个图像的请求,
接收车辆内部的一个或多个图像,
经由第二收发器和第二天线确定隐私钥匙是否位于车辆内部内,
确定一个或多个乘客是否位于车辆内部内,
检索存储在存储器中的车辆内部的隐私设置,
响应于确定隐私钥匙以及一个或多个乘客位于车辆内部内,基于车辆内部的一个或多个图像和隐私设置生成一个或多个隐私图像,以及
控制第一收发器经由第一天线将所述一个或多个隐私图像传输到远程设备。
9.如权利要求8所述的系统,其中电子控制单元还被配置为确定包括车辆内部的车辆是否已经处于事故中,并且其中从所述一个或多个图像并且基于车辆内部的隐私设置生成一个或多个隐私图像进一步响应于确定车辆未曾处于事故中。
10.如权利要求9所述的系统,其中电子控制单元还被配置为响应于确定车辆已经处于事故中,控制第一收发器经由第一天线将所述一个或多个图像传输到远程设备。
11.如权利要求8所述的系统,电子控制单元还被配置为响应于确定隐私钥匙未位于车辆内部内,控制第一收发器经由第一天线将所述一个或多个图像传输到远程设备。
12.如权利要求8所述的系统,其中电子控制单元还被配置为响应于确定一个或多个乘客未位于车辆内部内,控制第一收发器经由第一天线将所述一个或多个图像传输到远程设备。
13.如权利要求8所述的系统,其中车辆内部的隐私设置被解激活,并且其中所述一个或多个隐私图像基本上类似于所述一个或多个图像。
14.如权利要求8所述的系统,其中车辆内部的隐私设置被设置为消除一个或多个乘客中的至少一个乘客的身份,并且其中所述一个或多个隐私图像消除了在所述一个或多个隐私图像中一个或多个乘客中的至少一个乘客的身份。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201562145946P | 2015-04-10 | 2015-04-10 | |
| US62/145946 | 2015-04-10 | ||
| PCT/US2016/026778 WO2016164820A1 (en) | 2015-04-10 | 2016-04-08 | Remote view system with privacy protection |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107810506A CN107810506A (zh) | 2018-03-16 |
| CN107810506B true CN107810506B (zh) | 2021-10-01 |
Family
ID=55967404
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201680033506.XA Active CN107810506B (zh) | 2015-04-10 | 2016-04-08 | 具有隐私保护的远程查看系统 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US10423845B2 (zh) |
| EP (1) | EP3281148B1 (zh) |
| JP (1) | JP6509369B2 (zh) |
| KR (1) | KR102027098B1 (zh) |
| CN (1) | CN107810506B (zh) |
| WO (1) | WO2016164820A1 (zh) |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7118529B2 (ja) * | 2018-03-29 | 2022-08-16 | 矢崎総業株式会社 | 車内監視モジュール、及び、監視システム |
| GB2574891B (en) * | 2018-06-22 | 2021-05-12 | Advanced Risc Mach Ltd | Data processing |
| JP7076331B2 (ja) * | 2018-08-10 | 2022-05-27 | 本田技研工業株式会社 | 車両システム |
| JP7143736B2 (ja) * | 2018-11-20 | 2022-09-29 | トヨタ自動車株式会社 | 運転支援装置、ウェアラブル装置、運転支援方法およびプログラム |
| JP2020156033A (ja) * | 2019-03-22 | 2020-09-24 | 日産自動車株式会社 | 情報処理装置及び情報処理方法 |
| JP2021043571A (ja) | 2019-09-09 | 2021-03-18 | ソニーセミコンダクタソリューションズ株式会社 | 情報処理装置、移動装置、情報処理システム、および方法、並びにプログラム |
| US11430088B2 (en) | 2019-12-23 | 2022-08-30 | Samsung Electronics Co., Ltd. | Method and apparatus for data anonymization |
| US10893302B1 (en) * | 2020-01-09 | 2021-01-12 | International Business Machines Corporation | Adaptive livestream modification |
| US11960621B2 (en) * | 2021-02-09 | 2024-04-16 | Ford Global Technologies, Llc | Systems and methods for ensuring privacy in an autonomous vehicle |
| CN114880695A (zh) * | 2021-05-31 | 2022-08-09 | 北京京东方技术开发有限公司 | 服务器及由服务器执行的数据处理方法 |
| DE102021207437A1 (de) * | 2021-07-13 | 2023-01-19 | Hyundai Motor Company | Verfahren und System zum Schutz der Privatspähre bei der Vorbereitung eines Telefongesprächs zwischen einem Fahrzeuginsassen eines Fahrzeugs und einem entfernten Gesprächspartner |
| CN114021183A (zh) * | 2021-10-26 | 2022-02-08 | 集度汽车有限公司 | 基于乘员信息的隐私保护方法、装置、座舱、车辆及介质 |
| WO2023112119A1 (ja) * | 2021-12-14 | 2023-06-22 | パイオニア株式会社 | 通信システム、通信装置、サーバ装置、通信方法、通信プログラム及び記憶媒体 |
| US20230419690A1 (en) * | 2022-06-22 | 2023-12-28 | GM Global Technology Operations LLC | Fusion based method for in-vehicle violence detection using cameras |
| EP4408043A1 (en) * | 2023-01-30 | 2024-07-31 | Valeo Telematik Und Akustik GmbH | Method for transmitting data during an emergency call and vehicle suitable for implementing such a method |
| WO2025061547A1 (en) * | 2023-09-22 | 2025-03-27 | Continental Automotive Technologies GmbH | Method for processing data of multiple applications of a vehicle by a central privacy manager |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1852184A (zh) * | 2005-04-22 | 2006-10-25 | 鸿富锦精密工业(深圳)有限公司 | 车辆网络系统 |
| CN1940911A (zh) * | 2005-09-30 | 2007-04-04 | 欧姆龙株式会社 | 信息处理装置和方法、信息处理系统、程序以及记录介质 |
| CN101065980A (zh) * | 2004-09-30 | 2007-10-31 | 思玛威公司 | 无线视频监视系统和方法 |
| CN201457305U (zh) * | 2009-04-13 | 2010-05-12 | 复旦大学 | 图像加密车辆中控锁装置 |
| CN101739615A (zh) * | 2009-11-30 | 2010-06-16 | 交通部公路科学研究院 | 出租车智能综合监管与服务系统 |
| CN102752359A (zh) * | 2012-02-17 | 2012-10-24 | 浙江吉利汽车研究院有限公司 | 一种远程客服协助式汽车指纹识别认证方法及其系统 |
| CN103177493A (zh) * | 2011-12-21 | 2013-06-26 | 通用汽车环球科技运作有限责任公司 | 用于通过远程设备确定驾驶员身份证明的系统和方法 |
| CN103246835A (zh) * | 2012-02-06 | 2013-08-14 | 吉菲斯股份有限公司 | 基于隐私的身份 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6748536B1 (en) * | 2000-01-13 | 2004-06-08 | Visteon Global Technologies, Inc. | Key security system for vehicle-based information node |
| US6423487B2 (en) * | 2000-04-13 | 2002-07-23 | Fuji Photo Film Co., Ltd. | Thermally processed image recording material |
| DE10063697B4 (de) | 2000-12-20 | 2006-07-13 | Siemens Ag | Verfahren und Vorrichtung zur Erfassung der Position eines Elements in einem Fahrzeug, insbesondere für Insassenschutzsysteme |
| ATE363413T1 (de) * | 2001-01-23 | 2007-06-15 | Donnelly Corp | Verbessertes fahrzeugbeleuchtungssystem |
| JP2003306106A (ja) * | 2002-04-12 | 2003-10-28 | Matsushita Electric Ind Co Ltd | 緊急通報装置 |
| US7401233B2 (en) * | 2003-06-24 | 2008-07-15 | International Business Machines Corporation | Method, system, and apparatus for dynamic data-driven privacy policy protection and data sharing |
| US7366279B2 (en) * | 2004-07-29 | 2008-04-29 | General Electric Company | Scatter control system and method for computed tomography |
| JP2008009761A (ja) * | 2006-06-29 | 2008-01-17 | Toyota Motor Corp | 車内環境記録装置 |
| KR101502012B1 (ko) | 2008-10-06 | 2015-03-12 | 엘지전자 주식회사 | 텔레매틱스 단말기 및 텔레매틱스 단말기의 비상 상황 알림방법 |
| US20120256769A1 (en) | 2011-04-07 | 2012-10-11 | GM Global Technology Operations LLC | System and method for real-time detection of an emergency situation occuring in a vehicle |
| US8594861B2 (en) | 2012-02-27 | 2013-11-26 | Toyota Motor Engineering & Manufacturing North America, Inc. | Systems and methods for communicating with a vehicle user |
| US8654329B2 (en) * | 2012-06-19 | 2014-02-18 | The United States Of America, As Represented By The Secretary Of The Navy | Parallel multisensor optical particle sensors for flowing fluid systems |
| US20140019219A1 (en) * | 2012-07-13 | 2014-01-16 | Google Inc. | Regulating Impression Frequency in Content Display |
| EP2713582B1 (en) * | 2012-09-28 | 2018-08-01 | Harman Becker Automotive Systems GmbH | Method and apparatus for personalized access to automotive telematic services |
| US20140192194A1 (en) * | 2013-01-07 | 2014-07-10 | Linda Bedell | Vehicle Surveillance System |
| WO2014172581A1 (en) | 2013-04-17 | 2014-10-23 | Hovtag Llc | Managing vehicular traffic on a roadway |
| US9479075B2 (en) * | 2013-07-31 | 2016-10-25 | General Electric Company | Multilevel converter system |
| US9503694B2 (en) | 2013-08-13 | 2016-11-22 | GM Global Technology Operations LLC | Methods and apparatus for utilizing vehicle system integrated remote wireless image capture |
| US20150077556A1 (en) | 2013-09-13 | 2015-03-19 | Ford Global Technologies, Llc | Vehicle system for automated video recording |
| US20170076396A1 (en) * | 2014-02-04 | 2017-03-16 | Menachem Sudak | Monitoring system and method |
| EP3154830B1 (en) * | 2014-06-11 | 2024-07-24 | Veridium IP Limited | Method for facilitating user access to vehicles based on biometric information |
| CN104325946A (zh) * | 2014-11-28 | 2015-02-04 | 天津博信汽车零部件有限公司 | 基于乘客检测的车辆控制系统 |
-
2016
- 2016-04-08 JP JP2017552922A patent/JP6509369B2/ja active Active
- 2016-04-08 CN CN201680033506.XA patent/CN107810506B/zh active Active
- 2016-04-08 US US15/560,387 patent/US10423845B2/en active Active
- 2016-04-08 KR KR1020177032268A patent/KR102027098B1/ko active Active
- 2016-04-08 WO PCT/US2016/026778 patent/WO2016164820A1/en not_active Ceased
- 2016-04-08 EP EP16722436.9A patent/EP3281148B1/en active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101065980A (zh) * | 2004-09-30 | 2007-10-31 | 思玛威公司 | 无线视频监视系统和方法 |
| CN1852184A (zh) * | 2005-04-22 | 2006-10-25 | 鸿富锦精密工业(深圳)有限公司 | 车辆网络系统 |
| CN1940911A (zh) * | 2005-09-30 | 2007-04-04 | 欧姆龙株式会社 | 信息处理装置和方法、信息处理系统、程序以及记录介质 |
| CN201457305U (zh) * | 2009-04-13 | 2010-05-12 | 复旦大学 | 图像加密车辆中控锁装置 |
| CN101739615A (zh) * | 2009-11-30 | 2010-06-16 | 交通部公路科学研究院 | 出租车智能综合监管与服务系统 |
| CN103177493A (zh) * | 2011-12-21 | 2013-06-26 | 通用汽车环球科技运作有限责任公司 | 用于通过远程设备确定驾驶员身份证明的系统和方法 |
| CN103246835A (zh) * | 2012-02-06 | 2013-08-14 | 吉菲斯股份有限公司 | 基于隐私的身份 |
| CN102752359A (zh) * | 2012-02-17 | 2012-10-24 | 浙江吉利汽车研究院有限公司 | 一种远程客服协助式汽车指纹识别认证方法及其系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2016164820A1 (en) | 2016-10-13 |
| KR102027098B1 (ko) | 2019-10-01 |
| JP2018513804A (ja) | 2018-05-31 |
| US10423845B2 (en) | 2019-09-24 |
| KR20170136576A (ko) | 2017-12-11 |
| JP6509369B2 (ja) | 2019-05-08 |
| EP3281148A1 (en) | 2018-02-14 |
| CN107810506A (zh) | 2018-03-16 |
| EP3281148B1 (en) | 2022-08-24 |
| US20180068192A1 (en) | 2018-03-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107810506B (zh) | 具有隐私保护的远程查看系统 | |
| US11463408B2 (en) | Vehicular secure gateway system | |
| CN104871147B (zh) | 检测车辆中的用户到无线设备关联的方法、设备和系统 | |
| EP3543979B1 (en) | Mobile autonomous surveillance | |
| US20190092345A1 (en) | Driving method, vehicle-mounted driving control terminal, remote driving terminal, and storage medium | |
| US11176826B2 (en) | Information providing system, server, onboard device, storage medium, and information providing method | |
| JP2016128320A (ja) | 車両とのモバイルデバイスワイヤレスカメラ統合 | |
| US9734412B2 (en) | Method and system of communicating vehicle information | |
| US20140063250A1 (en) | Apparatus and method of processing image of vehicle and system for processing image of vehicle using the same | |
| EP3504071A1 (en) | Recording video of an operator and a surrounding visual field | |
| KR102192260B1 (ko) | 카메라 위치 판별 장치 및 그 제어방법 | |
| JP2020504694A (ja) | 自律運転車両下方の監視のためのシステム | |
| US11247698B2 (en) | Methods and systems for monitoring rear objects in a vehicle | |
| WO2020194584A1 (ja) | 物体追跡装置、制御方法、及びプログラム | |
| US11648955B2 (en) | Voice assistant system | |
| US9930474B2 (en) | Method and system for integrating wearable glasses to vehicle | |
| US20200250441A1 (en) | Systems and methods for image processing using mobile devices | |
| US20150116491A1 (en) | Private and automatic transmission of photograph via occupant's cell phone following impact event | |
| JP2016055789A (ja) | 車両用認証装置 | |
| CN108574810B (zh) | 图像处理系统、图像处理方法以及非暂态存储介质 | |
| JP2022045460A (ja) | 車載器制御システム、車載器及び車載器制御方法 | |
| US12499704B2 (en) | Apparatus and method for detecting an object in a vehicle | |
| JP3197545U (ja) | 車両用セキュリティシステム | |
| US20190213872A1 (en) | Device and method for detecting the surroundings of a motor vehicle | |
| JP2023142359A (ja) | 映像記録装置および映像記録プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |