[go: up one dir, main page]

WO2011111201A1 - 画像位置調整装置 - Google Patents

画像位置調整装置 Download PDF

Info

Publication number
WO2011111201A1
WO2011111201A1 PCT/JP2010/054092 JP2010054092W WO2011111201A1 WO 2011111201 A1 WO2011111201 A1 WO 2011111201A1 JP 2010054092 W JP2010054092 W JP 2010054092W WO 2011111201 A1 WO2011111201 A1 WO 2011111201A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
image
infrared light
mirror
driver
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2010/054092
Other languages
English (en)
French (fr)
Inventor
光 古賀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to PCT/JP2010/054092 priority Critical patent/WO2011111201A1/ja
Priority to US13/583,565 priority patent/US8878843B2/en
Priority to EP10847431.3A priority patent/EP2546087B1/en
Priority to JP2012504228A priority patent/JP5267727B2/ja
Priority to CN201080065221.7A priority patent/CN102791509B/zh
Publication of WO2011111201A1 publication Critical patent/WO2011111201A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
    • B60K35/53—Movable instruments, e.g. slidable
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/334—Projection means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K37/00—Dashboards
    • B60K37/20—Dashboard panels
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0149—Head-up displays characterised by mechanical features
    • G02B2027/0154—Head-up displays characterised by mechanical features with movable elements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0181—Adaptation to the pilot/driver
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Definitions

  • the present invention relates to an image position adjusting device that adjusts the position of an image in accordance with a user's line-of-sight position.
  • Patent Document 1 discloses a visible light source that emits visible light for image display, an infrared light source that emits infrared light, and an infrared light in a HUD [Head Up Display] device that displays an image in the driver's field of view. And a line-of-sight position detecting means for detecting the line-of-sight position of the driver with light, and adjusting the position of the image according to the detected line-of-sight position of the driver is described.
  • the HUD device having the image position adjusting function as described above is provided in the vehicle interior of the vehicle, the space in the vehicle interior is reduced according to the size of the device. For this reason, further downsizing of the apparatus is desired.
  • an object of the present invention is to provide an image position adjusting device that can be miniaturized.
  • an image position adjustment device includes a light source unit that emits visible light and infrared light, and a first movable reflection unit that reflects visible light and transmits infrared light.
  • a second movable reflecting means for reflecting the infrared light transmitted through the first movable reflecting means, a display means for displaying an image by visible light reflected by the first movable reflecting means, and a second movable reflection.
  • Gaze position detecting means for detecting the user's gaze position by imaging the user using the reflected light reflected from the infrared light reflected by the means and detected by the gaze position detecting means The image position is adjusted according to the line-of-sight position.
  • the image position adjustment device of the present invention it is possible to detect the position of the line of sight by imaging the user and adjust the position of the image to be easy to see according to the position of the line of sight. Can be achieved.
  • visible light for image display is configured to emit visible light used for image display and infrared light used for detection of the user's line-of-sight position from the same light source unit. Compared with the case where the light source unit and the infrared light source unit for detecting the line-of-sight position are provided at different locations, the apparatus can be downsized.
  • the infrared light is preferably laser light. According to this image position adjustment device, the occurrence of false detection can be suppressed by detecting the line-of-sight position with a laser beam that is less susceptible to disturbance light than incandescent light, etc. Can be improved.
  • the image position adjusting apparatus preferably further includes a third movable reflecting means for reflecting visible light and infrared light toward the first movable reflecting means.
  • a third movable reflecting means for reflecting visible light and infrared light toward the first movable reflecting means.
  • the infrared light is doubly reflected by the third movable reflecting means and the second movable reflecting means, the movable range of the third movable reflecting means and the second movable reflection are provided.
  • the infrared light projection range can be expanded to a wide range according to the movable range of the means. Therefore, according to this image position adjustment device, since the projection range of infrared light to the user is expanded, the user can be imaged in a wide range, and the reliability related to the detection of the user's line-of-sight position is improved. Can do.
  • the HUD [Head Up Display] device 1 displays an image G such as vehicle speed information and road shape information on the windshield glass F within the field of view of the driver D. Device.
  • the HUD device 1 has a function as an image position adjusting device that adjusts the position of the image G.
  • the HUD device 1 is provided inside an instrument panel of a vehicle.
  • the HUD device 1 includes a light source unit 2, an optical system 3, and a CMOS [Complementary Metal Oxide Semiconductor] sensor 4. Further, the HUD device 1 includes a first image processing unit 5, a second image processing unit 6, a control unit 7, and a driving unit 8.
  • CMOS Complementary Metal Oxide Semiconductor
  • the light source unit 2 has a laser light source that emits laser light L.
  • the laser light L includes wavelength components of visible light RGB and infrared light IR.
  • the laser light L emitted from the light source unit 2 is projected onto the windshield glass F through the optical system 3.
  • the windshield glass F functions as display means described in the claims.
  • the optical system 3 includes a fixed mirror 10, a first scanner mirror 11, a movable cold mirror 12, and a second scanner mirror 13.
  • the fixed mirror 10 reflects the laser light L emitted from the light source unit 2 toward the first scanner mirror 11.
  • the first scanner mirror 11 is a flat mirror that reflects the laser light L reflected by the fixed mirror 10 toward the movable cold mirror 12.
  • the first scanner mirror 11 has two rotation axes L1 and L2 that are parallel to the reflecting surface and orthogonal to each other.
  • the first scanner mirror 11 scans the laser beam L by rotating around the rotation axes L1 and L2 and changing the reflection angle.
  • the first scanner mirror 11 performs scanning so that the visible light RGB of the laser light L reflected by the movable cold mirror 12 can draw a two-dimensional image G.
  • the first scanner mirror 11 functions as a third movable reflecting means described in the claims.
  • the movable cold mirror 12 is a flat cold mirror that reflects visible light RGB toward the windshield glass F and transmits infrared light IR.
  • the movable cold mirror 12 has a rotation axis M parallel to its reflecting surface.
  • the movable cold mirror 12 swings about the rotation axis M to change the reflection angle, so that the position of the image G projected on the windshield glass F by the visible light RGB in the vertical direction (arrow A direction in FIG. 1). Adjust.
  • the movable cold mirror 12 functions as the first movable reflecting means described in the claims.
  • the second scanner mirror 13 is a plane mirror that reflects the infrared light IR transmitted through the movable cold mirror 12 toward the windshield glass F.
  • the second scanner mirror 13 is disposed on the back side of the movable cold mirror 12.
  • the second scanner mirror 13 has two rotation axes N1 and N2 that are parallel to the reflecting surface and orthogonal to each other.
  • the second scanner mirror 13 rotates about the rotation axes N1 and N2 to change the reflection angle, thereby expanding the projection range of the infrared light IR.
  • a broken line R in FIG. 1 indicates a projection range of the infrared light IR.
  • the second scanner mirror 13 functions as the second movable reflecting means described in the claims.
  • the infrared light IR reflected by the second scanner mirror 13 is reflected again by the windshield glass F and projected toward the driver D. Part of the infrared light IR projected to the driver D is reflected by the surface of the driver D to become reflected light, and further reflected by the windshield glass F to return to the second scanner mirror 13 side. come.
  • the CMOS sensor 4 is an image sensor that detects infrared light IR.
  • the CMOS sensor 4 is disposed in the vicinity of the second scanner mirror 13 inside the instrument panel.
  • the CMOS sensor 4 is electrically connected to the first image processing unit 5.
  • the CMOS sensor 4 images the driver D by detecting infrared light IR (reflected light) reflected on the surface of the driver D.
  • the CMOS sensor 4 outputs information about the imaged driver D to the first image processing unit 5 as an imaging signal.
  • the first image processing unit 5 detects the line-of-sight position of the driver D by image processing.
  • detection of the line-of-sight position of the driver D in the first image processing unit 5 will be described with reference to the drawings.
  • the first image processing unit 5 is electrically connected to the CMOS sensor 4 and the control unit 7.
  • the first image processing unit 5 acquires the light emission timing t 0 of the laser light L, that is, the infrared light IR in the light source unit 2 based on the light emission signal input from the control unit 7.
  • the first image processing unit 5 acquires the light reception timing t 1 of the infrared light IR from the imaging signal of the CMOS sensor 4.
  • the first image processing unit 5 determines the image information in the depth direction (the traveling direction of the infrared light IR with respect to the driver D) from the difference ⁇ t between the light emission timing t 0 and the light reception timing t 1 of the infrared light IR. Is calculated.
  • the first image processing unit 5 acquires the three-dimensional image information of the driver D from the two-dimensional image information of the driver D included in the imaging signal of the CMOS sensor 4 and the calculated image information in the depth direction.
  • the first image processing unit 5 detects the line-of-sight position of the driver D based on the three-dimensional image information of the driver D.
  • the line-of-sight position of the driver D is detected from the face direction of the driver D, for example.
  • the first image processing unit 5 outputs information regarding the detected line-of-sight position of the driver D to the control unit 7 as a line-of-sight position signal.
  • the second image processing unit 6 generates image contents projected on the windshield glass F.
  • the second image processing unit 6 is electrically connected to a vehicle control ECU (Electronic Control Unit) (not shown), and generates image contents according to vehicle speed information and road shape information input from the vehicle control ECU. .
  • the second image processing unit 6 outputs an image signal related to the generated image content to the control unit 7 and the drive unit 8.
  • the control unit 7 performs overall control of the HUD device 1.
  • the control unit 7 is electrically connected to the first image processing unit 5, the second image processing unit 6, and the driving unit 8.
  • the control unit 7 performs light emission control of the light source unit 2 via the driving unit 8.
  • the control unit 7 is electrically connected to the first scanner mirror 11, the movable cold mirror 12, and the second scanner mirror 13.
  • the control unit 7 performs drive control of the first scanner mirror 11, the movable cold mirror 12, and the second scanner mirror 13.
  • the control unit 7 controls the driving of the mirrors 11 to 13 in accordance with the image signal from the second image processing unit 6.
  • the control unit 7 controls the driving of the mirrors 11 to 13 in synchronization with the light emission control of the light source unit 2 by the driving unit 8.
  • the control unit 7 determines whether or not the position of the image G needs to be adjusted based on the line-of-sight position signal of the first image processing unit 5. When the control unit 7 determines that adjustment of the position of the image G is necessary to make the position easy to see for the driver D, the tracking calculation for moving the position of the image G following the line-of-sight position of the driver D I do.
  • the controller 7 adjusts the position of the image G projected on the windshield glass F by driving the movable cold mirror 12 according to the result of the follow-up calculation. Further, the control unit 7 sets a projection prohibition area for preventing light from entering the eyes of the driver D based on the line-of-sight position signal of the first image processing unit 5.
  • the drive unit 8 performs drive control of the light source unit 2 based on the control signal of the control unit 7 and the image signal of the second image processing unit 6.
  • the drive unit 8 performs emission control related to emission start and stop of the light source unit 2 and laser beam modulation control.
  • the drive unit 8 controls the laser beam not to be projected onto the projection prohibited area set by the control unit 7.
  • the laser light L is emitted from the light source unit 2 by the drive unit 8 (S1).
  • the drive unit 8 performs control so that laser light is not projected onto the projection prohibition area.
  • the control unit 7 performs drive control of the first scanner mirror 11 and the second scanner mirror 13 in accordance with the emission of the laser light L (S2).
  • the laser light L is scanned by the first scanner mirror 11, and the visible light RGB reflected by the movable cold mirror 12 out of the scanned laser light L reaches the windshield glass F to project an image. (S3).
  • the infrared light IR is projected onto the driver D in a wide range after being projected by the driving of the second scanner mirror 13 and being reflected by the windshield glass F.
  • a part of the infrared light IR projected on the driver D is reflected on the surface of the driver D to reach the windshield glass F, and further reflected on the windshield glass F and detected by the CMOS sensor 4.
  • the first image processing unit 5 acquires the three-dimensional image information of the driver D based on the light emission signal of the control unit 7 and the imaging signal of the CMOS sensor 4.
  • the first image processing unit 5 detects the line-of-sight position of the driver D (S4).
  • control unit 7 determines whether or not it is necessary to adjust the position of the image based on the line-of-sight position signal of the first image processing unit 5 (S5).
  • control unit 7 ends the process, returns to S1, and continues to project the image G.
  • the control unit 7 When it is determined that the adjustment of the position of the image is necessary, the control unit 7 performs a follow-up calculation for moving the position of the image G following the line-of-sight position of the driver D (S6).
  • the control unit 7 adjusts the position of the image G projected on the windshield glass F by driving the movable cold mirror 12 according to the result of the follow-up calculation (S7).
  • the control unit 7 sets a projection prohibition area for preventing light from directly entering the eyes of the driver D based on the line-of-sight position signal of the first image processing unit 5 (S8). Thereafter, the process ends and the process returns to S1.
  • the driver D is imaged using infrared light IR to detect the line-of-sight position, and the position of the image G is adjusted to an easy-to-see position according to the line-of-sight position. Therefore, the convenience for the driver D can be improved.
  • the visible light RGB used for image display and the infrared light IR used for detection of the line-of-sight position are emitted from the same light source unit 2, so that the visible light source unit for image display and the line-of-sight position detection are used. Compared with the case where the infrared light source unit is provided in a separate place, the apparatus can be reduced in size.
  • a laser light source is adopted as the light source unit 2 that emits infrared light IR, and the line-of-sight position is detected by laser light that is less susceptible to disturbance light than incandescent light or the like. Occurrence of false detection can be suppressed, and the reliability related to detection of the line-of-sight position can be improved.
  • the movable range of the first scanner mirror 11 and the second The projection range of the infrared light IR can be expanded to a wide range corresponding to the movable range of the scanner mirror 13.
  • the HUD device 1 detects the line-of-sight position of the driver D based on the three-dimensional image information of the driver D, it is more reliable than the case where the line-of-sight position is detected based on the two-dimensional image information. High detection results can be obtained. Therefore, according to the HUD device 1, it is possible to improve the reliability related to the detection of the line-of-sight position of the driver D.
  • this HUD device 1 since the range in which the driver D can be imaged by the infrared light IR is greatly enlarged, even if the projection of the infrared light IR is prohibited using the vicinity of the driver's eyes as a projection prohibited area. Thus, it is possible to accurately detect the line-of-sight position from the driver's posture and face orientation. Therefore, according to this HUD device 1, it is possible to avoid discomfort to the driver by projecting infrared light IR to the driver's eyes.
  • the HUD device 1 since all the components including the CMOS sensor 4 can be accommodated inside the instrument panel or the like, it is advantageous in improving the design and downsizing of the vehicle interior.
  • the HUD device 20 according to the second embodiment differs from the HUD device 1 according to the first embodiment in the configuration of the light source unit and the drive unit and the position of the CMOS sensor. .
  • the light source unit 30 of the HUD device 20 has three laser light sources, an IR light source 31, a BL light source 32, and a RED light source 33.
  • the IR light source 31 is a laser light source that emits infrared light.
  • the IR light source 31 is electrically connected to the first drive unit 21. Infrared light emitted from the IR light source 31 is divided into infrared light IR and green light GR by the nonlinear optical crystal 34.
  • the infrared light IR separated by the nonlinear optical crystal 34 is reflected by the hot mirror 35 toward the first light modulator 37.
  • the hot mirror 35 reflects the infrared light IR and transmits the green light GR.
  • the first light modulator 37 performs modulation of the infrared light IR and switching between emission and stop of the infrared light IR.
  • the infrared light IR emitted from the first light modulator 37 is reflected toward the fixed mirror 10 by the first total reflection mirror 39.
  • the green light GR separated by the nonlinear optical crystal 34 passes through the hot mirror 35 and is reflected by the second total reflection mirror 36 toward the second light modulator 38.
  • the second light modulator 38 performs modulation of the green light GR and switching between emission and stop of the green light GR.
  • the green light GR emitted from the second light modulator 38 is reflected toward the fixed mirror 10 by the second cold mirror 40.
  • the second cold mirror 40 is disposed between the first total reflection mirror 39 and the fixed mirror 10.
  • the infrared light IR reflected by the first total reflection mirror 39 passes through the second cold mirror 40 and is then combined with the green light GR. That is, the infrared light IR transmitted through the second cold mirror 40 and the green light GR reflected by the second cold mirror 40 travel on the same optical path.
  • the BL light source 32 is a laser light source that emits blue light BL.
  • the BL light source 32 is electrically connected to the second drive unit 22.
  • the blue light BL emitted from the BL light source 32 is reflected toward the fixed mirror 10 by the blue light mirror 41.
  • the blue light mirror 41 is disposed between the second cold mirror 40 and the fixed mirror 10.
  • the blue light mirror 41 reflects the blue light BL and transmits the infrared light IR and the green light GR.
  • the blue light BL reflected by the second blue light mirror 41 passes through the blue light mirror 41 and is then combined with the infrared light IR and the green light GR.
  • the RED light source 33 is a laser light source that emits red light RED.
  • the RED light source 33 is electrically connected to the third drive unit 23.
  • the red light RED emitted from the RED light source 33 is reflected toward the fixed mirror 10 by the red light mirror 42.
  • the red light mirror 42 is disposed between the second cold mirror 40 and the fixed mirror 10.
  • the red light mirror 42 reflects the red light RED and transmits the infrared light IR, the blue light BL, and the green light GR.
  • the red light RED reflected by the red light mirror 42 passes through the red light mirror 42 and is then combined with the infrared light IR, the blue light BL, and the green light GR.
  • the infrared light IR and the visible light RGB (red light RED, blue light BL, and green light GR) are combined and a laser including the infrared light IR and the visible light RGB.
  • Light L is emitted.
  • the wavelengths of the visible light RGB of the laser light L are controlled by the first drive unit 21, the second drive unit 22, and the third drive unit 23, and the infrared in the light modulators 37 and 38. It is determined by switching between emission and stop of the light IR and the green light GR. For example, in the control of the wavelength of visible light RGB, when the emission of the green light GR is not required, the emission of the green light GR is stopped by the second light modulator 38 instead of stopping the IR light source 31.
  • wavelength control of visible light RGB can be realized in a state where infrared light IR for line-of-sight detection is emitted.
  • the CMOS sensor 24 is disposed near the rearview mirror in the vehicle interior. In other words, the CMOS sensor 24 is disposed at an obliquely upper position on the front side of the driver D.
  • the CMOS sensor 24 arranged at such a position images the driver D by directly detecting the infrared light IR reflected by the surface of the driver D.
  • the HUD device 20 according to the second embodiment described above, substantially the same effect as the HUD device 1 according to the first embodiment is obtained except that the entire device is not accommodated inside the instrument panel. Can do. Further, according to the HUD device 20, since the light from the IR light source 31 is divided into the infrared light IR and the green light GR by the nonlinear optical crystal 34, the light source for infrared light and the light source for green light are separated. The number of light sources can be reduced as compared with the case where they are provided separately.
  • the CMOS sensor 24 directly detects the infrared light IR reflected by the surface of the driver D, the driver D can be imaged with high accuracy, and the line of sight of the driver D can be obtained. The reliability related to position detection can be improved.
  • the present invention is not limited to the embodiment described above.
  • the configuration of the light source unit is not limited to that described above.
  • the light source of the light source unit is not limited to the laser light source, and an LED [Light Emitting Diode], a white light bulb with improved directivity, or the like may be adopted as the light source. Further, it is not always necessary to acquire the three-dimensional image information of the driver D, and an aspect in which the line-of-sight position of the driver D is detected based on the two-dimensional image may be used.
  • the present invention can be used in an image position adjustment device that adjusts the position of an image according to the user's line-of-sight position.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Instrument Panels (AREA)
  • Mechanical Optical Scanning Systems (AREA)

Abstract

　本発明に係る画像位置調整装置（１）は、小型化を図ることを目的とし、可視光及び赤外光を出射する光源部（３）と、可視光を反射させると共に、赤外光を透過させる可動コールドミラー（１２）と、可動コールドミラー（１２）を透過した赤外光を反射させる第２のスキャナミラー（１３）と、可動コールドミラー（１２）が反射した可視光により画像が表示されるウインドシールドガラス（Ｆ）と、第２のスキャナミラー（１３）で反射された赤外光を運転者（Ｄ）に反射させた反射光を用いて運転者（Ｄ）を撮像することで運転者（Ｄ）の視線位置を検出する第１の画像処理部（５）と、を備え、第１の画像処理部（５）の検出した視線位置に応じて画像の位置を調整する。

Description

画像位置調整装置
　本発明は、利用者の視線位置に応じて画像の位置を調整する画像位置調整装置に関する。
　従来、利用者の視線位置に応じて画像の位置を調整する画像位置調整装置として、例えば特許文献１に記載されたものが知られている。特許文献１には、運転者の視界内に画像を映し出すＨＵＤ［Head　Up　Display］装置において、画像表示用の可視光を出射する可視光源と、赤外光を出射する赤外光源と、赤外光により運転者の視線位置を検出する視線位置検出手段と、を備え、検出した運転者の視線位置に応じて画像の位置を調整するものが記載されている。
特開２００８－１５５７２０号公報
　ところで、前述のような画像位置調整機能を備えたＨＵＤ装置は車両の車室内に設けられるため、装置の大きさに応じて車室内のスペースが狭められてしまう。このため、装置の更なる小型化が望まれている。
　そこで、本発明は、小型化を図ることができる画像位置調整装置を提供することを目的とする。
　上記課題を解決するため、本発明に係る画像位置調整装置は、可視光及び赤外光を出射する光源部と、可視光を反射させると共に、赤外光を透過させる第１の可動反射手段と、第１の可動反射手段を透過した赤外光を反射する第２の可動反射手段と、第１の可動反射手段が反射した可視光により画像が表示される表示手段と、第２の可動反射手段で反射された赤外光を利用者に反射した反射光を用いて利用者を撮像することで利用者の視線位置を検出する視線位置検出手段と、を備え、視線位置検出手段の検出した視線位置に応じて画像の位置を調整することを特徴とする。
　本発明に係る画像位置調整装置によれば、利用者を撮像して視線位置を検出し、視線位置に応じて画像の位置を見やすい位置に調整することができるので、利用者に対する利便性の向上を図ることができる。しかも、この画像位置調整装置では、画像表示に用いられる可視光と利用者の視線位置の検出に用いられる赤外光とを同一の光源部から出射する構成とすることで、画像表示用の可視光源部と視線位置検出用の赤外光源部とを別々の場所に設ける場合と比べて装置の小型化を図ることできる。
　また、本発明に係る画像位置調整装置においては、赤外光はレーザ光であることが好ましい。
　この画像位置調整装置によれば、白熱光等と比べて外乱光の影響を受けにくいレーザ光により視線位置を検出することで、誤検出の発生を抑制できるので、視線位置の検出に係る信頼性の向上を図ることができる。
　また、本発明に係る画像位置調整装置においては、可視光及び赤外光を第１の可動反射手段に向けて反射させる第３の可動反射手段を更に備えたことが好ましい。
　この画像位置調整装置によれば、赤外光は第３の可動反射手段及び第２の可動反射手段によって二重に反射されるので、第３の可動反射手段の可動範囲及び第２の可動反射手段の可動範囲に応じた広い範囲に赤外光の投射範囲を拡大することができる。従って、この画像位置調整装置によれば、利用者に対する赤外光の投射範囲が拡大されるので、広範囲で利用者を撮像でき、利用者の視線位置の検出に係る信頼性の向上を図ることができる。
　本発明によれば画像位置調整装置の小型化を図ることができる。
本発明に係るＨＵＤ装置の第１の実施形態を示す図である。 運転者の３次元画像情報の取得を説明するための図である。 第１の実施形態に係るＨＵＤ装置の制御の流れを示すフローチャートである。 本発明に係るＨＵＤ装置の第２の実施形態を示す図である。
　以下、本発明の好適な実施形態について、図面を参照して詳細に説明する。なお、各図において同一又は相当部分には同一符号を付し、重複する説明を省略する。
［第１の実施形態］
　図１に示されるように、第１の実施形態に係るＨＵＤ［Head　Up　Display］装置１は、車速情報や道路形状情報等の画像Ｇを運転者Ｄの視界内でウインドシールドガラスＦに表示する装置である。ＨＵＤ装置１は、画像Ｇの位置を調整する画像位置調整装置としての機能を有している。ＨＵＤ装置１は、車両のインストルメントパネル内部に設けられている。
　ＨＵＤ装置１は、光源部２、光学系３、及びＣＭＯＳ［Complementary　Metal　Oxide　Semiconductor］センサ４を備えている。さらに、ＨＵＤ装置１は、第１の画像処理部５、第２の画像処理部６、制御部７、及び駆動部８を備えている。
　光源部２は、レーザ光Ｌを出射するレーザ光源を有している。レーザ光Ｌには、可視光ＲＧＢ及び赤外光ＩＲの波長成分が含まれる。光源部２から出射されたレーザ光Ｌは、光学系３を介してウインドシールドガラスＦに投射される。ウインドシールドガラスＦは、請求の範囲に記載の表示手段として機能する。
　光学系３は、固定ミラー１０、第１のスキャナミラー１１、可動コールドミラー１２、及び第２のスキャナミラー１３から構成されている。固定ミラー１０は、光源部２から出射されたレーザ光Ｌを第１のスキャナミラー１１に向けて反射する。
　第１のスキャナミラー１１は、固定ミラー１０で反射されたレーザ光Ｌを可動コールドミラー１２に向けて反射させる平面ミラーである。第１のスキャナミラー１１は、その反射面と平行且つ互いに直交する二つの回転軸Ｌ１，Ｌ２を有している。第１のスキャナミラー１１は、回転軸Ｌ１，Ｌ２を中心に回動して反射角度を変えることで、レーザ光Ｌの走査を行う。第１のスキャナミラー１１は、可動コールドミラー１２に反射されたレーザ光Ｌの可視光ＲＧＢが２次元の画像Ｇを描けるように走査を行う。第１のスキャナミラー１１は、請求の範囲に記載の第３の可動反射手段として機能する。
　可動コールドミラー１２は、可視光ＲＧＢをウインドシールドガラスＦに向けて反射させると共に、赤外光ＩＲを透過させる平板状のコールドミラーである。可動コールドミラー１２は、その反射面に平行な回転軸Ｍを有している。可動コールドミラー１２は、回転軸Ｍを中心に揺動して反射角度を変えることで、可視光ＲＧＢによってウインドシールドガラスＦに投影される画像Ｇの上下方向（図１の矢印Ａ方向）の位置を調整する。可動コールドミラー１２は、請求の範囲に記載の第１の可動反射手段として機能する。
　第２のスキャナミラー１３は、可動コールドミラー１２を透過した赤外光ＩＲをウインドシールドガラスＦに向けて反射させる平面ミラーである。第２のスキャナミラー１３は、可動コールドミラー１２の背面側に配置されている。第２のスキャナミラー１３は、その反射面と平行且つ互いに直交する二つの回転軸Ｎ１，Ｎ２を有している。第２のスキャナミラー１３は、回転軸Ｎ１，Ｎ２を中心に回動して反射角度を変えることで、赤外光ＩＲの投射範囲を拡大させる。図１の破線Ｒは、赤外光ＩＲの投射範囲を示している。第２のスキャナミラー１３は、請求の範囲に記載の第２の可動反射手段として機能する。
　第２のスキャナミラー１３で反射された赤外光ＩＲは、ウインドシールドガラスＦで再び反射され、運転者Ｄに向かって投射される。運転者Ｄに対して投射された赤外光ＩＲの一部は、運転者Ｄの表面で反射されて反射光となり、更にウインドシールドガラスＦで反射されて第２のスキャナミラー１３側に戻ってくる。
　ＣＭＯＳセンサ４は、赤外光ＩＲを検出する撮像素子である。ＣＭＯＳセンサ４は、インストルメントパネルの内部で第２のスキャナミラー１３の近辺に配置されている。また、ＣＭＯＳセンサ４は、第１の画像処理部５と電気的に接続されている。ＣＭＯＳセンサ４は、運転者Ｄの表面で反射された赤外光ＩＲ（反射光）を検出することで運転者Ｄの撮像を行う。ＣＭＯＳセンサ４は、撮像した運転者Ｄに関する情報を撮像信号として第１の画像処理部５に出力する。
　第１の画像処理部５は、画像処理によって運転者Ｄの視線位置を検出する。ここで、第１の画像処理部５における運転者Ｄの視線位置を検出について図面を参照して説明する。図１及び図２に示されるように、第１の画像処理部５は、ＣＭＯＳセンサ４及び制御部７と電気的に接続されている。第１の画像処理部５は、制御部７から入力される発光信号に基づいて光源部２におけるレーザ光Ｌすなわち赤外光ＩＲの発光タイミングｔ０を取得する。また、第１の画像処理部５は、ＣＭＯＳセンサ４の撮像信号から赤外光ＩＲの受光タイミングｔ１を取得する。そして、第１の画像処理部５は、赤外光ＩＲの発光タイミングｔ０と受光タイミングｔ１との差Δｔから、深さ方向（運転者Ｄに対する赤外光ＩＲの進行方向）の画像情報を算出する。第１の画像処理部５は、ＣＭＯＳセンサ４の撮像信号に含まれる運転者Ｄの２次元画像情報と算出した深さ方向の画像情報とから運転者Ｄの３次元画像情報を取得する。第１の画像処理部５は、運転者Ｄの３次元画像情報に基づいて運転者Ｄの視線位置を検出する。運転者Ｄの視線位置は、例えば運転者Ｄの顔の向きから検出される。第１の画像処理部５は、検出した運転者Ｄの視線位置に関する情報を視線位置信号として制御部７に出力する。
　第２の画像処理部６は、ウインドシールドガラスＦに投影される画像内容を生成する。第２の画像処理部６は図示しない車両制御用ＥＣＵ[Electronic　Control　Unit]と電気的に接続されており、車両制御用ＥＣＵから入力された車速情報や道路形状情報に応じて画像内容を生成する。第２の画像処理部６は、生成した画像内容に関する画像信号を制御部７及び駆動部８に出力する。
　制御部７は、ＨＵＤ装置１を統括的な制御を行う。制御部７は、第１の画像処理部５、第２の画像処理部６、及び駆動部８と電気的に接続されている。制御部７は、駆動部８を介して光源部２の光の出射制御を行う。また、制御部７は、第１のスキャナミラー１１、可動コールドミラー１２、及び第２のスキャナミラー１３と電気的に接続されている。制御部７は、第１のスキャナミラー１１、可動コールドミラー１２、及び第２のスキャナミラー１３の駆動制御を行う。制御部７は、第２の画像処理部６の画像信号に応じてミラー１１～１３の駆動制御を行う。また、制御部７は、駆動部８による光源部２の光の出射制御に同期させてミラー１１～１３の駆動制御を行う。
　制御部７は、第１の画像処理部５の視線位置信号に基づいて、画像Ｇの位置の調整が必要か否かを判定する。制御部７は、運転者Ｄにとって見やすい位置にするため画像Ｇの位置の調整が必要であると判定した場合、運転者Ｄの視線位置に追従して画像Ｇの位置を移動させるための追従演算を行う。制御部７は、追従演算の結果に応じて可動コールドミラー１２を駆動させることにより、ウインドシールドガラスＦに投影される画像Ｇの位置を調整する。また、制御部７は、第１の画像処理部５の視線位置信号に基づいて、運転者Ｄの目に光が直接入らないようにするための投射禁止エリアを設定する。
　駆動部８は、制御部７の制御信号及び第２の画像処理部６の画像信号に基づいて光源部２の駆動制御を行う。駆動部８は、光源部２の出射開始及び停止に関する出射制御やレーザ光の変調制御を行う。駆動部８は、制御部７の設定した投射禁止エリアにレーザ光が投射されないように制御する。
　次に、第１の実施形態に係るＨＵＤ装置１の制御の流れについて図面を参照して説明する。
　図３に示されるように、まず、このＨＵＤ装置１では、駆動部８により光源部２からレーザ光Ｌが出射される（Ｓ１）。このとき、駆動部８は、投射禁止エリアが予め設定されている場合、投射禁止エリアにレーザ光が投射されないように制御する。制御部７は、レーザ光Ｌの出射に応じて第１のスキャナミラー１１及び第２のスキャナミラー１３の駆動制御を行う（Ｓ２）。これによって、レーザ光Ｌは第１のスキャナミラー１１で走査され、走査されたレーザ光Ｌのうち可動コールドミラー１２で反射された可視光ＲＧＢがウインドシールドガラスＦに到達することで画像が投影される（Ｓ３）。
　一方、赤外光ＩＲは、第２のスキャナミラー１３の駆動によって投射範囲が拡大され、ウインドシールドガラスＦで反射された後、広い範囲で運転者Ｄに投射される。運転者Ｄに投射された赤外光ＩＲの一部は、運転者Ｄの表面で反射されてウインドシールドガラスＦに到達し、更にウインドシールドガラスＦで反射されてＣＭＯＳセンサ４に検出される。第１の画像処理部５は、制御部７の発光信号及びＣＭＯＳセンサ４の撮像信号に基づいて運転者Ｄの３次元画像情報を取得する。第１の画像処理部５は、運転者Ｄの視線位置を検出する（Ｓ４）。
　その後、制御部７は、第１の画像処理部５の視線位置信号に基づいて、画像の位置の調整が必要か否かを判定する（Ｓ５）。制御部７は、画像の位置の調整は必要ではないと判定した場合、処理を終了してＳ１に戻り、画像Ｇの投影を続ける。
　制御部７は、画像の位置の調整が必要であると判定した場合、運転者Ｄの視線位置に追従して画像Ｇの位置を移動させるための追従演算を行う（Ｓ６）。制御部７は、追従演算の結果に応じて可動コールドミラー１２を駆動させることにより、ウインドシールドガラスＦに投影される画像Ｇの位置を調整する（Ｓ７）。続いて、制御部７は、第１の画像処理部５の視線位置信号に基づいて、運転者Ｄの目に光が直接入らないようにするための投射禁止エリアを設定する（Ｓ８）。その後、処理を終了してＳ１に戻る。
　次に、上述した第１の実施形態に係るＨＵＤ装置１の作用効果について説明する。
　第１の実施形態に係るＨＵＤ装置１によれば、赤外光ＩＲを用いて運転者Ｄを撮像して視線位置を検出し、この視線位置に応じて画像Ｇの位置を見やすい位置に調整することができるので、運転者Ｄに対する利便性の向上を図ることができる。しかも、画像表示に用いられる可視光ＲＧＢと視線位置の検出に用いられる赤外光ＩＲとを同一の光源部２から出射する構成とすることで、画像表示用の可視光源部と視線位置検出用の赤外光源部とを別々の場所に設ける場合と比べて装置の小型化を図ることできる。
　また、このＨＵＤ装置１では、赤外光ＩＲを出射する光源部２にレーザ光源を採用し、白熱光等と比べて外乱光の影響を受けにくいレーザ光により視線位置を検出するので、視線位置の誤検出の発生を抑制でき、視線位置の検出に係る信頼性の向上を図ることができる。
　さらに、このＨＵＤ装置１によれば、赤外光ＩＲが第１のスキャナミラー１１と第２のスキャナミラー１３とによって二重に反射されるので、第１のスキャナミラー１１の可動範囲及び第２のスキャナミラー１３の可動範囲に応じた広い範囲に赤外光ＩＲの投射範囲を拡大することができる。これにより、このＨＵＤ装置１では、運転者Ｄを撮像可能な範囲が大きく拡大されるので、運転者の姿勢等をも認識することが可能になり、運転者の視線位置の誤検出の発生を避けることができる。しかも、このＨＵＤ装置１では、運転者Ｄの３次元画像情報に基づいて運転者Ｄの視線位置を検出するので、２次元画像情報に基づいて視線位置を検出する場合と比べて、より信頼性の高い検出結果を得ることができる。従って、このＨＵＤ装置１によれば、運転者Ｄの視線位置の検出に係る信頼性の向上を図ることができる。
　また、このＨＵＤ装置１では、赤外光ＩＲにより運転者Ｄを撮像可能な範囲が大きく拡大されるので、運転者の目の付近を投射禁止エリアとして赤外光ＩＲの投射を禁止しても、運転者の姿勢や顔の向きから視線位置を精度良く検出することが可能となる。従って、このＨＵＤ装置１によれば、運転者の目に赤外光ＩＲが投射されることにより運転者に不快感を与えることを避けることができる。
　また、このＨＵＤ装置１によれば、ＣＭＯＳセンサ４を含めた構成部品を全てインストルメントパネルの内部等に収容することができるので、車室内のデザイン性の向上及び小型化に有利である。
［第２の実施形態］
　図４に示されるように、第２の実施形態に係るＨＵＤ装置２０は、第１の実施形態に係るＨＵＤ装置１と比べて光源部及び駆動部の構成とＣＭＯＳセンサの位置とが異なっている。
　第２の実施形態に係るＨＵＤ装置２０の光源部３０は、ＩＲ光源３１、ＢＬ光源３２、及びＲＥＤ光源３３の３つのレーザ光源を有している。ＩＲ光源３１は、赤外光を出射するレーザ光源である。ＩＲ光源３１は、第１の駆動部２１と電気的に接続されている。ＩＲ光源３１から出射された赤外光は、非線形光学結晶３４によって赤外光ＩＲと緑色光ＧＲとに分けられる。
　非線形光学結晶３４によって分けられた赤外光ＩＲは、ホットミラー３５によって第１の光変調器３７に向かって反射される。ホットミラー３５は、赤外光ＩＲを反射して緑色光ＧＲを透過する。第１の光変調器３７は、赤外光ＩＲの変調や赤外光ＩＲの出射と停止との切り替えを行うものである。第１の光変調器３７から出射された赤外光ＩＲは、第１の全反射ミラー３９により固定ミラー１０に向かって反射される。
　一方、非線形光学結晶３４によって分けられた緑色光ＧＲは、ホットミラー３５を透過して第２の全反射ミラー３６により第２の光変調器３８に向かって反射される。第２の光変調器３８は、緑色光ＧＲの変調や緑色光ＧＲの出射と停止との切り替えを行うものである。第２の光変調器３８から出射された緑色光ＧＲは、第２のコールドミラー４０により固定ミラー１０に向かって反射される。第２のコールドミラー４０は、第１の全反射ミラー３９と固定ミラー１０との間に配置されている。第１の全反射ミラー３９により反射された赤外光ＩＲは、第２のコールドミラー４０を透過した後に緑色光ＧＲと合波される。すなわち、第２のコールドミラー４０を透過した赤外光ＩＲと第２のコールドミラー４０により反射された緑色光ＧＲとは、同一の光路を進行する。
　ＢＬ光源３２は、青色光ＢＬを出射するレーザ光源である。ＢＬ光源３２は、第２の駆動部２２と電気的に接続されている。ＢＬ光源３２から出射された青色光ＢＬは、青色光用ミラー４１により固定ミラー１０に向かって反射される。青色光用ミラー４１は、第２のコールドミラー４０と固定ミラー１０との間に配置されている。青色光用ミラー４１は、青色光ＢＬを反射すると共に赤外光ＩＲ及び緑色光ＧＲを透過する。第２の青色光用ミラー４１により反射された青色光ＢＬは、青色光用ミラー４１を透過した後に赤外光ＩＲ及び緑色光ＧＲと合波される。
　ＲＥＤ光源３３は、赤色光ＲＥＤを出射するレーザ光源である。ＲＥＤ光源３３は、第３の駆動部２３と電気的に接続されている。ＲＥＤ光源３３から出射された赤色光ＲＥＤは、赤色光用ミラー４２により固定ミラー１０に向かって反射される。赤色光用ミラー４２は、第２のコールドミラー４０と固定ミラー１０との間に配置されている。赤色光用ミラー４２は、赤色光ＲＥＤを反射すると共に赤外光ＩＲ、青色光ＢＬ、及び緑色光ＧＲを透過する。赤色光用ミラー４２により反射された赤色光ＲＥＤは、赤色光用ミラー４２を透過した後に赤外光ＩＲ、青色光ＢＬ、及び緑色光ＧＲと合波される。
　以上のように構成された光源部３０では、赤外光ＩＲと可視光ＲＧＢ（赤色光ＲＥＤ、青色光ＢＬ、及び緑色光ＧＲ）が合波され、赤外光ＩＲ及び可視光ＲＧＢを含むレーザ光Ｌが出射される。レーザ光Ｌの可視光ＲＧＢの波長は、第１の駆動部２１、第２の駆動部２２、及び第３の駆動部２３による各光源３１～３３の制御や光変調器３７，３８における赤外光ＩＲ及び緑色光ＧＲの出射及び停止の切り替えによって決定される。例えば、可視光ＲＧＢの波長の制御において、緑色光ＧＲの出射が不要な場合には、ＩＲ光源３１を停止させるのではなく、第２の光変調器３８により緑色光ＧＲの出射を停止することにより、視線検出用の赤外光ＩＲを出射した状態で可視光ＲＧＢの波長制御を実現することができる。
　第２の実施形態に係るＣＭＯＳセンサ２４は、車室内のバックミラー付近に配置されている。換言すると、ＣＭＯＳセンサ２４は、運転者Ｄの前側で斜め上方の位置に配置されている。このような位置に配置されたＣＭＯＳセンサ２４は、運転者Ｄの表面で反射された赤外光ＩＲを直接検出することで運転者Ｄの撮像を行う。
　上述した第２の実施形態に係るＨＵＤ装置２０によれば、装置全体がインストルメントパネルの内部に収容されないことを除いて、第１の実施形態に係るＨＵＤ装置１とほぼ同様の効果を得ることができる。また、このＨＵＤ装置２０によれば、ＩＲ光源３１の光を非線形光学結晶３４によって赤外光ＩＲと緑色光ＧＲとに分けているので、赤外光用の光源と緑色光用の光源とを別々に設ける場合と比べて光源の数を少なくすることができる。さらに、このＨＵＤ装置２０では、ＣＭＯＳセンサ２４が運転者Ｄの表面で反射された赤外光ＩＲを直接検出するので、高精度な運転者Ｄの撮像を行うことができ、運転者Ｄの視線位置の検出に係る信頼性の向上を図ることができる。
　本発明は、上述した実施形態に限定されるものではない。
　例えば、光源部の構成は上述したものに限られない。光源部の有する光源はレーザ光源に限られず、ＬＥＤ［Light　Emitting　Diode］や指向性を高めた白色電球等を光源として採用しても良い。また、必ずしも運転者Ｄの３次元画像情報を取得する必要はなく、２次元画像に基づいて運転者Ｄの視線位置を検出する態様であっても良い。
　本発明は利用者の視線位置に応じて画像の位置を調整する画像位置調整装置に利用可能である。
　１，２０…ＨＵＤ装置（画像位置調整装置）　２，３０…光源部　３…光学系　４，２４…ＣＭＯＳセンサ　５…第１の画像処理部（視線位置検出手段）　６…第２の画像処理部　７…制御部　８…駆動部　１０…固定ミラー　１１…第１のスキャナミラー（第３の可動反射手段）　１２…可動コールドミラー（第１の可動反射手段）　１３…第２のスキャナミラー（第２の可動反射手段）　Ｄ…運転者（利用者）　Ｆ…ウインドシールドガラス（表示手段）　Ｌ…レーザ光　ＧＲ…緑色光　ＢＬ…青色光　ＲＥＤ…赤色光　ＲＧＢ…可視光

Claims (4)

  1. 　可視光及び赤外光を出射する光源部と、
    　前記可視光を反射させると共に、前記赤外光を透過させる第１の可動反射手段と、
    　前記第１の可動反射手段を透過した前記赤外光を反射させる第２の可動反射手段と、
    　前記第１の可動反射手段が反射した前記可視光により画像が表示される表示手段と、
    　前記第２の可動反射手段で反射された前記赤外光を利用者に反射した反射光を用いて前記利用者を撮像することにより前記利用者の視線位置を検出する視線位置検出手段と、
    　を備え、
    　前記視線位置検出手段の検出した前記視線位置に応じて前記画像の位置を調整することを特徴とする画像位置調整装置。
  2. 　前記赤外光はレーザ光であることを特徴とする請求項１に記載の画像位置調整装置。
  3. 　前記視線位置検出手段の検出した前記視線位置に応じて前記第１の可動反射手段の反射角度を変更することで前記画像の位置を調整することを特徴とする請求項１又は請求項２に記載の画像位置調整装置。
  4. 　前記可視光及び前記赤外光を前記第１の可動反射手段に向けて反射させる第３の可動反射手段を更に備えたことを特徴とする請求項１～３のうちいずれか一項に記載の画像位置調整装置。
PCT/JP2010/054092 2010-03-11 2010-03-11 画像位置調整装置 Ceased WO2011111201A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
PCT/JP2010/054092 WO2011111201A1 (ja) 2010-03-11 2010-03-11 画像位置調整装置
US13/583,565 US8878843B2 (en) 2010-03-11 2010-03-11 Image position adjustment device
EP10847431.3A EP2546087B1 (en) 2010-03-11 2010-03-11 Image position adjustment device
JP2012504228A JP5267727B2 (ja) 2010-03-11 2010-03-11 画像位置調整装置
CN201080065221.7A CN102791509B (zh) 2010-03-11 2010-03-11 图像位置调节装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2010/054092 WO2011111201A1 (ja) 2010-03-11 2010-03-11 画像位置調整装置

Publications (1)

Publication Number Publication Date
WO2011111201A1 true WO2011111201A1 (ja) 2011-09-15

Family

ID=44563043

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/054092 Ceased WO2011111201A1 (ja) 2010-03-11 2010-03-11 画像位置調整装置

Country Status (5)

Country Link
US (1) US8878843B2 (ja)
EP (1) EP2546087B1 (ja)
JP (1) JP5267727B2 (ja)
CN (1) CN102791509B (ja)
WO (1) WO2011111201A1 (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104169780A (zh) * 2012-06-29 2014-11-26 Jvc建伍株式会社 车辆用显示装置
JP2015527612A (ja) * 2012-08-06 2015-09-17 ジョンソン コントロールズ オートモーティブ エレクトロニクス エスエイエス 自動車用のディスプレイ
JP2016504624A (ja) * 2012-12-21 2016-02-12 トゥー ツリーズ フォトニクス リミテッド ホログラフィック補正を用いたホログラフィック画像投影
CN105874358A (zh) * 2014-01-06 2016-08-17 Jvc建伍株式会社 透射型屏幕及使用了它的图像显示装置
EP2808723A4 (en) * 2012-01-27 2017-01-04 Nippon Seiki Co., Ltd. Head-up display device for vehicle and self-checking method therefor
WO2017090319A1 (ja) * 2015-11-27 2017-06-01 株式会社デンソー 視線方向検出装置、及び視線方向検出システム
KR101786581B1 (ko) 2017-08-09 2017-10-19 현대오트론 주식회사 헤드업 디스플레이의 표시 제어 장치
JP2019095389A (ja) * 2017-11-27 2019-06-20 矢崎総業株式会社 メータ装置及びそれを備えたメータユニット
WO2020203989A1 (ja) * 2019-03-29 2020-10-08 積水化学工業株式会社 合わせガラス、及び車両システム
WO2020203991A1 (ja) * 2019-03-29 2020-10-08 積水化学工業株式会社 合わせガラス、及び車両システム

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9213185B1 (en) * 2012-01-06 2015-12-15 Google Inc. Display scaling based on movement of a head-mounted display
EP2871843B1 (en) * 2013-11-12 2019-05-29 LG Electronics Inc. -1- Digital device and method for processing three dimensional image thereof
KR101526424B1 (ko) * 2013-12-18 2015-06-05 현대자동차 주식회사 차량용 헤드 업 디스플레이 검사장치 및 그 방법
KR101518932B1 (ko) 2013-12-18 2015-05-11 현대자동차 주식회사 차량용 디스플레이 장치
CN104978011B (zh) * 2014-04-02 2018-07-06 联想(北京)有限公司 电子设备及其控制方法
CN103943033B (zh) 2014-04-02 2017-02-15 京东方科技集团股份有限公司 一种透明显示设备
GB2525653A (en) * 2014-05-01 2015-11-04 Jaguar Land Rover Ltd Apparatus and method for providing information within a vehicle
US9360668B2 (en) * 2014-08-07 2016-06-07 Continental Automotive Systems, Inc. Dynamically calibrated head-up display
CN105984386B (zh) * 2015-02-05 2018-11-02 徐州标特福数控科技有限公司 汽车装置及汽车控制方法
TWI554785B (zh) * 2015-03-19 2016-10-21 尚立光電股份有限公司 具不對稱稜鏡之顯示裝置及其抬頭顯示裝置
WO2016171651A1 (en) * 2015-04-20 2016-10-27 Hewlett-Packard Development Company, L.P. Tunable filters
KR20170055091A (ko) 2015-11-10 2017-05-19 현대오트론 주식회사 헤드업 디스플레이 제어 장치 및 방법
JP6535759B2 (ja) * 2015-12-24 2019-06-26 京セラ株式会社 車両用ヘッドアップディスプレイシステム
US9919600B2 (en) 2016-02-27 2018-03-20 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicle information display systems
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud系统及其影像调整方法
TWI839775B (zh) 2017-01-03 2024-04-21 美商康寧公司 具有彎曲的覆蓋玻璃以及顯示器或觸控面板的車輛內部系統及其形成方法
US20190012552A1 (en) * 2017-07-06 2019-01-10 Yves Lambert Hidden driver monitoring
US11332011B2 (en) * 2017-07-18 2022-05-17 Corning Incorporated Cold forming of complexly curved glass articles
KR102574235B1 (ko) 2017-09-12 2023-09-11 코닝 인코포레이티드 데드프론트 유리용 촉각 요소 및 이를 제조하는 방법
US11065960B2 (en) 2017-09-13 2021-07-20 Corning Incorporated Curved vehicle displays
TWI844520B (zh) 2017-10-10 2024-06-11 美商康寧公司 具有改善可靠性的彎曲的覆蓋玻璃的車輛內部系統及其形成方法
CN108231010B (zh) * 2017-12-20 2020-05-05 中国航空工业集团公司洛阳电光设备研究所 一种多功能平显系统控制装置
JP7037760B2 (ja) * 2018-03-16 2022-03-17 株式会社リコー 画像投写装置及び移動体
FR3073054A1 (fr) * 2018-03-20 2019-05-03 Continental Automotive France Systeme optique a affichage tete-haute et camera integree
FR3073053A1 (fr) * 2018-03-20 2019-05-03 Continental Automotive France Systeme optique a affichage tete-haute et eclairage integre
JP7215838B2 (ja) * 2018-06-15 2023-01-31 株式会社小糸製作所 光学ユニットおよび車両用前照灯
JP7026325B2 (ja) * 2018-06-21 2022-02-28 パナソニックＩｐマネジメント株式会社 映像表示システム、映像表示方法、プログラム、及び移動体
GB2575658B (en) * 2018-07-18 2020-12-23 Envisics Ltd Head-up display
CN109493305A (zh) * 2018-08-28 2019-03-19 初速度（苏州）科技有限公司 一种人眼视线与前景图像叠加的方法及系统
CN109633901A (zh) * 2018-12-09 2019-04-16 中国航空工业集团公司洛阳电光设备研究所 一种汽车平显像源构型及像源调整机构
US11131117B2 (en) * 2019-03-12 2021-09-28 Magna Closures Inc. Electromagnetic-based sensor with cold mirror cover
JP7127590B2 (ja) * 2019-03-26 2022-08-30 株式会社Ｊｖｃケンウッド 虚像表示装置
US11205083B2 (en) * 2019-04-02 2021-12-21 Magna Electronics Inc. Vehicular driver monitoring system
CN110027410B (zh) * 2019-04-16 2021-06-01 深圳市尼欧科技有限公司 车载抬头显示的显示方法及装置
US11989344B2 (en) * 2020-02-21 2024-05-21 Maxell, Ltd. Information display device
JP7504387B2 (ja) * 2020-03-31 2024-06-24 パナソニックオートモーティブシステムズ株式会社 撮像表示システム
JP7469261B2 (ja) * 2021-06-22 2024-04-16 株式会社デンソー 死角補助装置
CN114567758A (zh) * 2022-03-10 2022-05-31 深圳市超越智能电子有限公司 一种汽车360度全景视频处理系统和方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008155720A (ja) 2006-12-22 2008-07-10 Nippon Seiki Co Ltd ヘッドアップディスプレイ装置
JP2009145846A (ja) * 2007-12-18 2009-07-02 Honda Motor Co Ltd 投射型画像表示装置
JP2009163084A (ja) * 2008-01-09 2009-07-23 Toshiba Corp 表示装置及び移動体
JP2009244869A (ja) * 2008-03-11 2009-10-22 Panasonic Corp 表示装置、表示方法、眼鏡型ヘッドマウントディスプレイ、及び自動車

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7983817B2 (en) * 1995-06-07 2011-07-19 Automotive Technologies Internatinoal, Inc. Method and arrangement for obtaining information about vehicle occupants
JPH07135623A (ja) 1993-10-27 1995-05-23 Kinseki Ltd 網膜直接表示装置
JP3855439B2 (ja) 1998-03-17 2006-12-13 いすゞ自動車株式会社 夜間運転視界支援装置
JP4682470B2 (ja) 2001-07-16 2011-05-11 株式会社デンソー スキャン型ディスプレイ装置
JP2009196473A (ja) 2008-02-20 2009-09-03 Denso Corp 車両用ヘッドアップディスプレイ装置
JP2009292409A (ja) 2008-06-09 2009-12-17 Yazaki Corp ヘッドアップディスプレイ装置
CN101488030A (zh) * 2009-02-10 2009-07-22 深圳Tcl新技术有限公司 显示屏调整装置以及方法
KR101613133B1 (ko) * 2009-05-14 2016-04-18 삼성전자주식회사 3차원 영상 처리 장치 및 그 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008155720A (ja) 2006-12-22 2008-07-10 Nippon Seiki Co Ltd ヘッドアップディスプレイ装置
JP2009145846A (ja) * 2007-12-18 2009-07-02 Honda Motor Co Ltd 投射型画像表示装置
JP2009163084A (ja) * 2008-01-09 2009-07-23 Toshiba Corp 表示装置及び移動体
JP2009244869A (ja) * 2008-03-11 2009-10-22 Panasonic Corp 表示装置、表示方法、眼鏡型ヘッドマウントディスプレイ、及び自動車

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2546087A4

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2808723A4 (en) * 2012-01-27 2017-01-04 Nippon Seiki Co., Ltd. Head-up display device for vehicle and self-checking method therefor
CN104169780A (zh) * 2012-06-29 2014-11-26 Jvc建伍株式会社 车辆用显示装置
CN104169780B (zh) * 2012-06-29 2016-02-17 Jvc建伍株式会社 车辆用显示装置
JP2015527612A (ja) * 2012-08-06 2015-09-17 ジョンソン コントロールズ オートモーティブ エレクトロニクス エスエイエス 自動車用のディスプレイ
JP2016504624A (ja) * 2012-12-21 2016-02-12 トゥー ツリーズ フォトニクス リミテッド ホログラフィック補正を用いたホログラフィック画像投影
CN105874358A (zh) * 2014-01-06 2016-08-17 Jvc建伍株式会社 透射型屏幕及使用了它的图像显示装置
WO2017090319A1 (ja) * 2015-11-27 2017-06-01 株式会社デンソー 視線方向検出装置、及び視線方向検出システム
JP2017097759A (ja) * 2015-11-27 2017-06-01 株式会社デンソー 視線方向検出装置、及び視線方向検出システム
KR101786581B1 (ko) 2017-08-09 2017-10-19 현대오트론 주식회사 헤드업 디스플레이의 표시 제어 장치
JP2019095389A (ja) * 2017-11-27 2019-06-20 矢崎総業株式会社 メータ装置及びそれを備えたメータユニット
WO2020203989A1 (ja) * 2019-03-29 2020-10-08 積水化学工業株式会社 合わせガラス、及び車両システム
WO2020203991A1 (ja) * 2019-03-29 2020-10-08 積水化学工業株式会社 合わせガラス、及び車両システム
EP3950630A4 (en) * 2019-03-29 2022-12-21 Sekisui Chemical Co., Ltd. LAMINATED GLASS AND VEHICLE SYSTEM

Also Published As

Publication number Publication date
CN102791509B (zh) 2015-02-25
EP2546087B1 (en) 2018-10-24
EP2546087A4 (en) 2018-01-17
CN102791509A (zh) 2012-11-21
US20130044138A1 (en) 2013-02-21
US8878843B2 (en) 2014-11-04
EP2546087A1 (en) 2013-01-16
JP5267727B2 (ja) 2013-08-21
JPWO2011111201A1 (ja) 2013-06-27

Similar Documents

Publication Publication Date Title
JP5267727B2 (ja) 画像位置調整装置
KR102089036B1 (ko) 정보 디스플레이 장치, 정보 제공 시스템, 이동체 디바이스, 정보 디스플레이 방법 및 기록 매체
JP6175589B2 (ja) 投写型表示装置及び投写表示方法
JP5392276B2 (ja) 虚像表示装置
US9521382B2 (en) Display apparatus capable of projecting different images on display areas
CN109891299B (zh) 虚像显示光学系统及图像显示装置
US20170032195A1 (en) Image display system
US20180218711A1 (en) Display device
KR20190015552A (ko) 표시 장치, 이동체 장치, 표시 장치의 제조 방법, 및 표시 방법
JP2022020704A (ja) 情報表示装置
JP2016097818A (ja) ヘッドアップディスプレイ装置
US20140320952A1 (en) Head-Up Display Device
US11130404B2 (en) Head-up display apparatus
JP2014010409A (ja) 投射型ディスプレイ装置
JP2018146761A (ja) 表示装置及び投影装置
US10962767B2 (en) Optical scanning device, image display apparatus, and movable object
JP6569318B2 (ja) 光走査装置
JP2017116625A (ja) ヘッドアップディスプレイ装置、及び制御方法
JP2017116626A (ja) ヘッドアップディスプレイ装置、及び制御方法
JP2017116627A (ja) ヘッドアップディスプレイ装置、及び制御方法
JP2017151145A (ja) 光源装置および投影装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080065221.7

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10847431

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
WWE Wipo information: entry into national phase

Ref document number: 2012504228

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13583565

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2010847431

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE