WO2012176683A1 - Image display device and image display system - Google Patents
Image display device and image display system Download PDFInfo
- Publication number
- WO2012176683A1 WO2012176683A1 PCT/JP2012/065234 JP2012065234W WO2012176683A1 WO 2012176683 A1 WO2012176683 A1 WO 2012176683A1 JP 2012065234 W JP2012065234 W JP 2012065234W WO 2012176683 A1 WO2012176683 A1 WO 2012176683A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image display
- unit
- display device
- brightness
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
- G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/003—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/337—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/341—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
Definitions
- the present invention relates to an image display device and an image display system, and more particularly to an image display device capable of adjusting the brightness of a display screen and an image display system including the image display device.
- an image display device such as a computer display or a television
- a configuration including a liquid crystal display panel and a backlight is known.
- an image is displayed by controlling the transmission of light by the birefringence and optical rotation of the liquid crystal.
- the brightness of the backlight can be adjusted so that the brightness is easy to see for the user.
- Japanese Unexamined Patent Application Publication No. 2006-72255 describes a system including a remote controller and an image display device.
- the image display device includes a backlight, a liquid crystal display panel, a light receiving sensor, and a signal receiving unit.
- the light receiving sensor is provided on a frame that supports the liquid crystal display panel.
- a signal transmission unit and a light receiving sensor are provided.
- information regarding the amount of light received by the light receiving sensor is transmitted from the signal transmission unit when the tip of the remote controller is operated toward the image display device.
- the signal transmitted by the signal transmission unit is received by the signal reception unit of the image display device.
- the output of the backlight is adjusted based on the light amount information received by the signal receiving unit and the light amount information received by the light receiving sensor attached to the frame.
- the light receiving sensor is provided in each of the frame of the liquid crystal display panel and the remote controller, and receives ambient light.
- the brightness detected by the light receiving sensor provided on the frame or the light receiving sensor provided on the remote controller is different from the brightness actually observed by the user. For this reason, in the configuration described in Japanese Patent Laid-Open No. 2006-72255, it may not be possible to adjust the brightness to an appropriate level for the user.
- An object of the present invention is to provide an image display device capable of adjusting display luminance more appropriately based on brightness actually recognized by a user.
- an image display device capable of acquiring image data and receiving the image data transmitted from a wearable item that can be worn by a user.
- Unit a display unit, and a luminance control unit.
- the receiving unit receives image data.
- the brightness control unit controls the brightness of the image display unit based on the brightness of the image data received by the receiving unit.
- a light receiving sensor is provided in the frame of the remote controller or the image display device, Compared with the case where the luminance of the image display device is adjusted based on the amount of light received by the sensor, it becomes easier to adjust the luminance to be appropriate for the user.
- FIG. 1 is a schematic diagram showing a liquid crystal display device of an image display system according to an embodiment of the present invention and an observer observing the liquid crystal display device.
- FIG. 2 is an external perspective view of the glasses.
- FIG. 3 is a block diagram of a liquid crystal display device and glasses.
- FIG. 4 is a diagram illustrating the relationship between adaptation luminance and object luminance.
- FIG. 5 is a diagram showing the relationship between adaptation luminance and light source output.
- FIG. 6 is a schematic diagram illustrating a state in which an observer observes the liquid crystal display device and the liquid crystal display device of the image display system according to the second embodiment.
- FIG. 7 is a block diagram of a liquid crystal display device and glasses according to the second embodiment.
- FIG. 1 is a schematic diagram showing a liquid crystal display device of an image display system according to an embodiment of the present invention and an observer observing the liquid crystal display device.
- FIG. 2 is an external perspective view of the glasses.
- FIG. 3 is a block diagram of
- FIG. 8 is a diagram schematically illustrating a state in which light is received by the light receiving unit of the glasses.
- FIG. 9 is a diagram illustrating a calculation range of the light receiving unit.
- FIG. 10 is a schematic diagram illustrating a liquid crystal display device and an observer observing the liquid crystal display device of the image display system according to the third embodiment.
- FIG. 11 is a block diagram of a liquid crystal display device and a remote controller according to the third embodiment.
- FIG. 12 is a block diagram of a liquid crystal display device and glasses according to the third embodiment.
- FIG. 13 is a diagram illustrating a positional relationship between a pair of infrared sensors and an observer.
- FIG. 14 is a flowchart showing the brightness control operation.
- FIG. 15 is a schematic diagram illustrating a liquid crystal display device and an observer observing the liquid crystal display device of the image forming system according to the fourth embodiment.
- An image display device includes: A receiving unit that receives the data from a wearable that can acquire data representing brightness in the observation direction of the user in a state worn by the user during observation; An image display unit; Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user; And a brightness control unit that controls the brightness of the image display unit based on a calculation result by the brightness calculation unit (first configuration).
- the data representing the brightness in the viewing direction of the user is acquired by the wearing object worn by the user, and the data is received by the receiving unit.
- the luminance calculation unit calculates the brightness in the observation direction of the user based on the data received by the reception unit, and the luminance of the image display unit is controlled based on the calculation result. That is, the brightness of the image display device is adjusted based on the amount of light received by the light receiving sensor provided in the frame of the remote controller or the image display device by using data acquired by the wearable item worn by the user.
- the conventional configuration there is an effect that the user can easily adjust the luminance to an appropriate luminance according to the situation actually observed.
- An image display system includes: An image display system including an image display device and a wearing object worn by a user when observing the image display device,
- the wearing object is a data acquisition unit that acquires data representing brightness in the observation direction of the user in a state worn by the user during observation of the image display device;
- the image display device includes: A receiving unit for receiving the data from the wearing article; An image display unit; Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user; And a luminance control unit that controls the luminance of the image display unit based on a calculation result by the luminance calculation unit (second configuration).
- the data representing the brightness in the viewing direction of the user is acquired by the wearing object worn by the user, and the data is received by the receiving unit.
- the luminance calculation unit calculates the brightness in the observation direction of the user based on the data received by the reception unit, and the luminance of the image display unit is controlled based on the calculation result. That is, the brightness of the image display device is adjusted based on the amount of light received by the light receiving sensor provided in the frame of the remote controller or the image display device by using data acquired by the wearable item worn by the user.
- the second configuration has an effect that it is easy to adjust the luminance to an appropriate level according to the situation that the user is actually observing.
- the data acquisition unit includes an image sensor that detects a spatial distribution of light as two-dimensional image data;
- the luminance calculation unit may be configured to calculate brightness in the observation direction of the user based on luminance data of at least some pixels of the image data (third configuration).
- the luminance can be adjusted in consideration of the spatial distribution of light, there is an effect that it is easy to adjust the luminance to an appropriate luminance according to the situation that the user is actually observing. Since the area that the user actually observes is a space having a certain extent, the user actually observes by using the luminance data of at least some pixels of the image data obtained therefrom. Control according to the situation becomes possible.
- the data acquisition unit further includes a wide-angle lens on the light incident side with respect to the image sensor (fourth configuration).
- the wide angle lens is arranged on the light incident side of the image sensor, a wider range of images can be acquired.
- the image display device includes: A data selection unit for selecting luminance data of pixels belonging to a predetermined viewing angle range from the image data; It is preferable that the luminance calculation unit is configured to calculate the brightness in the observation direction of the user based on the luminance data selected by the data selection unit (fifth configuration).
- the brightness of the image display unit is controlled based on the brightness of an image in a range that is highly likely to be visually recognized by the user, it is easy to adjust the brightness to be more appropriate for the user.
- a wear detecting unit for detecting whether or not the user wears the wearing object It is preferable that the data acquisition unit acquires data representing the brightness in the observation direction of the user after the mounting detection unit detects that the user has mounted the mounted item (sixth configuration). According to this configuration, since the brightness data is acquired after confirming that the user has mounted the mounted object, it is possible to efficiently acquire appropriate image data.
- the image display device includes: A human detection sensor; A distance detection unit that detects a distance to the person detected by the person detection sensor; When the person detection sensor detects a plurality of persons, the brightness control unit calculates the brightness of the image display device based on the data obtained from the attachments of the plurality of persons, and the calculated brightness It is preferable that the luminance of the image display device is controlled based on the average value (seventh configuration).
- the image display device is easy to see. It is possible to prevent an increase in the bias.
- a remote controller for controlling the image display device is An ambient data acquisition unit that acquires data representing the brightness around the remote controller; An image data transmission unit that transmits data acquired by the ambient data acquisition unit to the image display device as data representing brightness in the observation direction of the user; It is preferable that the brightness calculation unit calculates the brightness in the observation direction of the user based on data received from the remote controller (eighth configuration).
- the brightness data is acquired by the ambient data acquisition unit of the remote controller, and the luminance calculation unit uses the data acquired by the remote controller as data representing the brightness in the observation direction of the user. Perform the operation. Thereby, for example, even when the user is not wearing a wearing object, the luminance can be adjusted based on the data obtained from the remote controller.
- the image display device may be a device capable of displaying a stereoscopic image on the image display unit (9th configuration).
- the wearing object may be glasses (tenth configuration).
- FIG. 1 is a schematic diagram illustrating a state in which an observer observes the image display system 1.
- the image display system 1 mainly includes a liquid crystal display device 2 and glasses 3.
- Arrows A to E indicate light. Arrows A and E are light that is not visually recognized by the observer. Arrows B to D are light visually recognized by an observer. An arrow C is light traveling from the liquid crystal display device 2 toward the observer. Arrows B and D are lights other than the light from the liquid crystal display device 2 visually recognized by the observer.
- the liquid crystal display device 2 includes a liquid crystal display panel 21, a frame 22, and a signal receiving unit 23.
- the liquid crystal display panel 21 displays an image on the surface by appropriately transmitting light.
- the frame 22 supports the liquid crystal display panel 21.
- the frame 22 has a back surface portion that covers the back surface of the liquid crystal display panel 21 and a front surface portion provided around the liquid crystal display panel 21.
- the frame 22 is made of resin, for example.
- buttons 221, etc. for operating speakers and channels are arranged on the frame 22.
- the signal receiving unit 23 is a part capable of receiving a signal from the glasses 3.
- the signal receiving unit 23 is provided in the frame 22.
- the signal receiving unit 23 is disposed below the liquid crystal display panel 21, but is not limited to this position.
- the eyeglasses 3 are worn by an observer of the liquid crystal display device 2.
- the kind of glasses 3 is arbitrary.
- glasses 3 for example, glasses having a function of assisting the visual acuity of an observer of the liquid crystal display device 2 or reducing fatigue when viewing the liquid crystal display device 2 can be used.
- FIG. 2 is an external view of the glasses 3.
- the glasses 3 include a glasses frame 31, a lens 32, and a light receiving unit 33.
- the light receiving unit 33 includes, for example, a CCD type image sensor or a CMOS type image sensor, receives light in a direction facing the observer wearing the glasses 3, and outputs it as two-dimensional digital image data.
- the light receiving unit 33 is attached to the glasses frame 31. As shown in FIG. 1, the light receiving unit 33 receives light indicated by arrows A to E when the observer is looking at the liquid crystal display panel 21 of the liquid crystal display device 2.
- FIG. 3 is a block diagram showing a functional configuration of the liquid crystal display device 2 and the glasses 3. The configuration of the liquid crystal display device 2 and the glasses 3 will be described with reference to FIG.
- the liquid crystal display device 2 includes a backlight 24 and a control unit 25 in addition to the liquid crystal display panel 21 and the signal receiving unit 23.
- the backlight 24 irradiates the liquid crystal display panel 21 with light.
- the backlight 24 has a plurality of light sources and a light guide plate.
- the backlight 24 is disposed on the back surface of the liquid crystal display panel 21 between the front surface portion and the back surface portion of the frame 22.
- the control unit 25 is a part that controls the functional units of the liquid crystal display device 2 including the liquid crystal display panel 21 and the backlight 24.
- the control unit 25 includes a storage unit 251, a luminance calculation unit 252, a light source output calculation unit 253, and a light source output control unit (luminance control unit) 254.
- the luminance calculation unit 252, the light source output calculation unit 253, and the light source output control unit 254 are not necessarily implemented as hardware.
- the control unit 25 includes a processor, and the processor executes the program stored in the storage unit 251 so that the functions as the luminance calculation unit 252, the light source output calculation unit 253, and the light source output control unit 254 are provided. It may be embodied.
- the storage unit 251 includes a ROM and a RAM, and stores various programs and data in addition to the program that controls the operation of the control unit 25 as described above.
- the storage unit 251 stores signal data from the signal receiving unit 23.
- the luminance calculation unit 252 calculates the brightness of the image data received by the signal receiving unit 23 from the glasses 3.
- the light source output calculation unit 253 calculates an output value for appropriately controlling the luminance of the backlight 24 based on the calculation result of the luminance calculation unit 252.
- the light source output control unit 254 controls the luminance of the backlight 24 based on the value calculated by the light source output calculation unit 253.
- the glasses 3 include a light receiving unit 33 and a signal transmission unit 34 as functional blocks.
- the light receiving unit 33 includes an image sensor 331 (image data acquisition unit) and an A / D conversion unit 332.
- the image sensor 33 for example, a CCD image sensor or a CMOS image sensor can be used.
- a wide-angle lens may be disposed on the surface of the image sensor 331. In order to acquire a wider range of image data, it is preferable to use a lens called an “super wide-angle lens”.
- image data (two-dimensional data) representing the spatial distribution of light is acquired using the image sensor 331.
- the brightness is not simply the image sensor but the brightness. It is possible to use an optical sensor that only acquires the level.
- the image sensor 331 has a plurality of light detection elements arranged two-dimensionally.
- each light detection element detects light and converts it into an electric signal.
- the electrical signal obtained here is sent to the A / D converter 332 for each pixel (photodetection element).
- the A / D conversion unit 332 converts the electrical signal sent from the image sensor 331 into a digital signal, and outputs it to the signal transmission unit 34 as image data.
- the signal transmission unit 34 transmits the image data to the liquid crystal display device 2.
- data transmission / reception between the glasses 3 and the liquid crystal display device 2 is preferably performed by wireless communication. There is no particular limitation on the wireless communication system.
- the image data transmitted from the signal transmission unit 34 of the glasses 3 is received by the signal reception unit 23 of the liquid crystal display device 2 and stored in the storage unit 251. Then, the luminance calculation unit 252 calculates the average luminance of the image data. In the present embodiment, the luminance calculation unit 252 averages the luminance (light reception intensity) of each pixel of the image data received by the signal reception unit 23, and calculates the adaptation luminance Ys. Even when an object having the same luminance is observed, the luminance of the object is felt differently by human eyes according to the brightness (luminance) around the object.
- the adaptation luminance Ys means a luminance that is visually recognized when an observer observes the liquid crystal display device 2 under the influence of the brightness around the place where the liquid crystal display device 2 is disposed. .
- the human eye adapts to the light intensity in the visual field range, and even when looking at an object having the same luminance, the human eye feels different brightness (luminance) depending on the degree of adaptation (luminance).
- the averaging process here may be a weighted average or a weighted averaging process.
- the light source output calculation unit 253 calculates the luminance (light source output) of the backlight 24 using the adaptation luminance Ys obtained by the luminance calculation unit 252.
- the light source output calculation unit 253 B kY 0.31 - (mYs 0.31 + L) ⁇ (1) Is used.
- This expression (1) is a relational expression proposed by the study of Bodmann and Haubner et al.
- Y is the object luminance (cd / m 2 )
- Ys is the adaptation luminance (cd / m 2 )
- k, m, and L are constants. Note that the above-described object brightness Y corresponds to the brightness of the backlight 24 that illuminates the liquid crystal display panel 21 in the present embodiment.
- the human eye adapts to light within the field of view.
- the constants k, m, and L are set based on human sensory characteristics that “even if different observers see the same object, each observer feels different brightness depending on the degree of adaptation of the observer”. Including the above formula (1) is defined.
- the above equation (1) indicates that if the object brightness Y is controlled according to the adaptation brightness Ys so that the brightness sense value B is constant, the observer's observational vision is not impaired.
- the adaptation luminance Ys and the object luminance Y change so as to follow each line shown in FIG. 4 (that is, the value of B is kept constant). If the adaptation brightness Ys and the object brightness Y change), the visual characteristics of the observer are not impaired. It can be seen from FIG. 4 that the rate of change of the object brightness Y with respect to the adaptation brightness Ys is substantially constant even if the brightness sense value B is different. As described above, the object luminance Y is the luminance of the backlight that illuminates the liquid crystal display panel 21. Therefore, when the change rate of the object luminance Y with respect to the adaptation luminance Ys shown in FIG.
- the relationship between the adaptation luminance Ys and the light source output shown in FIG. 5 is stored in a memory (not shown) in the light source output calculation unit 253.
- the light source output calculation unit 253 receives the value of the adaptation luminance Ys calculated by the luminance calculation unit 252, the light source output calculation unit 253 refers to the memory and determines the light source output according to the input value of the adaptation luminance Ys.
- the light source output data determined by the light source output calculation unit 253 is sent to the light source output control unit 254, and the luminance of the backlight 24 is adjusted based on the light source output data received by the light source output control unit 254.
- image data is acquired by the image sensor 331 of the glasses 3 worn by the observer, and the luminance calculation unit 252 obtains the adaptive luminance Ys from the image data. Then, the light source output calculation unit 253 obtains the light source output according to the adaptation luminance Ys, and the luminance of the backlight 24 is controlled according to the obtained value.
- the liquid crystal display device 2 is actually observed.
- the brightness can be adjusted based on the user's feeling. This is because the image data obtained by the image sensor 331 of the glasses 3 generally includes an image in a range actually viewed by the observer. For this reason, it can adjust to the brightness
- the image display system 12 according to the second embodiment is different from the image display system according to the first embodiment in the configuration of the control unit of the liquid crystal display device. More specifically, in the first embodiment, the luminance is calculated using all the pixels of the image data obtained by the image sensor 331. On the other hand, the present embodiment is different in that a range visually recognized by the user is set in advance, and brightness is calculated only for image data within the range.
- the same components as those of the first embodiment are denoted by the same reference numerals as those of the first embodiment, and description thereof is omitted.
- FIG. 6 is a schematic diagram showing a state in which an observer is observing the image display system 12 according to the second embodiment.
- the range indicated by a broken line in FIG. 6 is a range visually recognized by an observer. That is, among the arrows A to E shown in FIG. 6, the range including the light of the arrows B to D is a range visually recognized by the observer. On the other hand, arrows A and E are light that enters the image sensor 331 of the glasses 3 but is outside the range visually recognized by the observer.
- FIG. 7 is a block diagram showing a liquid crystal display device 62 and glasses 3 according to the second embodiment.
- the control unit 37 is a part that controls each functional unit such as the liquid crystal display panel 21 and the backlight 24.
- the control unit 37 includes a storage unit 371, a visual field luminance calculation unit 372, a light source output calculation unit 373, a light source output control unit 374, and a calculation range selection unit 375. Note that the visual field luminance calculation unit 372, the light source output calculation unit 373, the light source output control unit 374, and the calculation range selection unit 375 are not necessarily implemented as hardware.
- control unit 37 includes a processor, and when the processor executes a program stored in the storage unit 351, the visual field luminance calculation unit 372, the light source output calculation unit 373, the light source output control unit 374, and the calculation range selection unit A mode in which the functions of 375 are implemented may be possible.
- the storage unit 371 includes a ROM and a RAM, and stores various programs and data in addition to the program that controls the operation of the control unit 37 as described above.
- the storage unit 371 stores the signal data from the signal receiving unit 23.
- the visual field luminance calculation unit 372 calculates the brightness of the image data received by the signal receiving unit 23 from the glasses 3. Note that the calculation range selection unit 375 selects a range that is subject to brightness calculation by the visual field luminance calculation unit 372 among all the pixels of the image data.
- the light source output calculation unit 373 calculates an output value for appropriately controlling the luminance of the backlight 24 based on the calculation result of the visual field luminance calculation unit 372.
- the light source output control unit 374 controls the luminance of the backlight 24 based on the value calculated by the light source output calculation unit 373.
- the light receiving unit 33 of the glasses 3 has a super wide angle lens 333 on the light incident side to the image sensor 331. For this reason, the light transmitted through the super wide-angle lens 333 is received by the image sensor 331.
- the super wide angle lens 333 is a lens having a shorter focal length than the wide angle lens.
- FIG. 8 is a diagram schematically showing a state in which light is received by the light receiving unit 33 of the glasses 3.
- the super wide-angle lens 333 (not shown in FIG. 8) is arranged in a direction in which the optical axis is orthogonal to the frame surface of the spectacle frame 31 of the spectacles 3. Therefore, the super wide-angle lens 333 receives light from the directions indicated by arrows A to E in FIG.
- the light receiving part 33 is the origin ⁇
- the left and right direction of the observer wearing the glasses 3 is the X axis
- the front and rear direction is the Y axis (the optical axis of the super wide angle lens 333).
- the vertical direction is the Z axis.
- the angle from the Y-axis is ⁇ and the angle from the Z-axis is ⁇
- the light ray r enters the super wide-angle lens 333 with an azimuth angle ⁇ r and a polar angle ⁇ r.
- FIG. 9 is a diagram illustrating a calculation range of the light receiving unit 33.
- the calculation range selection unit 375 selects the range of light recognized by the observer from the light observed by the observer through the glasses 3. Specifically, the calculation range selection unit 375 selects a predetermined angle range around the direction in which the observer is facing.
- the predetermined angle range is, for example, a range of a horizontal angle of ⁇ 60 degrees and a vertical angle of ⁇ 30 degrees.
- the selected range is a range of azimuth angle ⁇ 1 ( ⁇ 60 ° from Y axis) on image sensor 331 shown in FIG. 9, and polar angle ⁇ 2 (60 °) and polar angle ⁇ 4 (120 °). ) (A hatched portion in FIG. 9).
- the calculation range selection unit 375 can be visually recognized by an observer wearing the glasses 3. Only the brightness of the range is detected. For example, out of the light indicated by arrows A to E in FIG. 6, only the brightness information based on the light indicated by arrows B to D can be set as a calculation target in the visual field luminance calculation unit 372.
- the visual field luminance calculation unit 372 calculates the adaptation luminance Ys by performing the averaging process only on the pixels within the range selected by the calculation range selection unit 375.
- the calculation of the adaptation luminance Ys by the visual field luminance calculation unit 372 is the same as the processing by the luminance calculation unit 252 in the first embodiment, and thus detailed description thereof is omitted.
- the processing of the light source output calculation unit 373 and the light source output control unit 374 is the same as that of the light source output calculation unit 253 and the light source output control unit 254 in the first embodiment.
- the configuration in which the range for obtaining the luminance is selected by the calculation process of the calculation range selection unit 375 of the control unit 37 is exemplified.
- the image forming system 12 uses the function of a lens provided as an ultra-wide-angle lens 333 on the incident side of the image sensor 331, so that only light in a range that is viewed by an observer (range indicated by arrows BD in the example of FIG. You may make it inject into the image sensor 331.
- FIG. This can be realized, for example, by adjusting the refractive index of the super wide-angle lens 333.
- the image forming system 12 when calculation is performed using information on all pixels of the image sensor 331, calculation is performed on light in a range that is actually visually recognized by the observer. As compared with the above, it is possible to further adjust the luminance to be appropriate for the observer.
- the image display system 61 according to the third embodiment differs from the image display system 11 according to the first embodiment in that the remote controller 4 and a configuration for detecting whether the observer wears the glasses 63 are included. Yes.
- the same components as those in the first embodiment are denoted by the same reference numerals, and description thereof is omitted.
- FIG. 10 is a diagram showing an observer observing the image display system 61 and the liquid crystal display device 62 according to the third embodiment.
- the liquid crystal display device 62 includes a liquid crystal display panel 21, a frame 22, a signal receiving unit 23, an infrared LED 621, and a person detection sensor 622.
- the infrared LED 621 emits an infrared signal.
- a pair of infrared LEDs 621 are attached to the frame 22.
- the infrared LEDs 621 are arranged on both sides of the liquid crystal display panel 21 in the horizontal direction.
- Person detection sensor 622 detects whether or not there is a person in front of the liquid crystal display device 62.
- the person detection sensor 622 is provided on the frame 22 below the liquid crystal display panel 21.
- attachment positions of the infrared LED 621 and the person detection sensor 622 are not limited to the positions described above.
- the remote controller 4 operates the liquid crystal display device 62 at a location away from the liquid crystal display device 2.
- the remote controller 4 includes a housing 41, a plurality of buttons 42, a light receiving unit 43, and a signal transmission unit 44.
- the light receiving unit 43 is provided at one end of the housing 41.
- the light receiving unit 43 calculates the brightness in the direction in which one end of the housing 41 is facing. Since the configuration of the light receiving unit 43 is the same as the configuration of the light receiving unit 33, the description thereof is omitted.
- the signal transmission unit 44 transmits the signal converted by the A / D conversion unit 332 of the light receiving unit 43 to the signal reception unit 23 of the liquid crystal display device 62.
- the signal transmission unit 44 transmits the signal received by the light receiving unit 43 to the light reception control unit 45.
- FIG. 11 is a block diagram showing a functional relationship between the liquid crystal display device 62 and the remote controller 4.
- the liquid crystal display device 62 includes a liquid crystal display panel 21, a signal receiving unit 23, a backlight 24, a control unit 25, an infrared LED 621, and a person detection sensor 622.
- the remote controller 4 has a light receiving control unit 45 in addition to the housing 41 and the plurality of buttons 42.
- the light reception control unit 45 When receiving an instruction from the signal transmission unit 44, the light reception control unit 45 transmits a control signal so that the light reception unit 43 receives an image.
- FIG. 12 is a block diagram showing a functional relationship between the liquid crystal display device 62 and the glasses 63.
- the glasses 63 are worn by an observer of the liquid crystal display device 62.
- the glasses 63 include a light receiving unit 632, a glasses wearing detection unit 631, a light reception control unit 633, and a signal transmission unit 34 as functional blocks.
- the light receiving unit 632 receives light in the direction in which the observer wearing the glasses 63 is facing.
- the light receiving unit 632 can receive an infrared signal emitted by the pair of infrared LEDs 621.
- the light receiving unit 632 is attached to the glasses frame 31.
- the light receiving unit 632 includes an image sensor 636 and an A / D conversion unit 637.
- the image sensor 636 and the A / D conversion unit 637 have the same configuration as the image sensor 331 and the A / D conversion unit 332.
- the glasses wearing detector 631 is a portion that detects whether or not the observer of the liquid crystal display panel 21 is wearing the glasses 63. Specifically, when the light receiving unit 632 receives an infrared signal emitted from the infrared LED 621, the glasses wearing detection unit 631 detects the distance between the liquid crystal display device 62 and the observer and the observer's view of the liquid crystal display device 62. Try to calculate the viewing angle. The glasses wearing detection unit 631 determines that the viewer is wearing the glasses 63 when the distance between the liquid crystal display device 62 and the viewer and the viewing angle of the viewer with respect to the liquid crystal display device 62 can be calculated. to decide.
- the viewing angle means an angle at which the observer observes the liquid crystal display panel 21. That is, the viewing angle means an angle between a line segment orthogonal to the liquid crystal display panel 21 and a line segment connecting the center of the liquid crystal display device 62 and the center of the observer.
- FIG. 13 is a diagram showing the positional relationship between a pair of infrared LEDs 621 and an observer.
- a and B in FIG. 13 are the positions of the infrared LEDs 621, and C is the position of the observer.
- L indicates the distance between the two infrared LEDs 621.
- ⁇ and ⁇ are calculated from the incident angle of the infrared signal when the light receiving unit 632 receives the infrared signal emitted from the infrared LED 621.
- the distance L between the pair of infrared LEDs 621 is measured in advance and stored in a memory (not shown) provided in the glasses 63.
- the angle of the infrared LED 621 with respect to the light receiving unit 632 is detected from the image data received by the light receiving unit 632.
- the distance D and the viewing angle ⁇ are calculated from the above calculation formula.
- the light reception control unit 633 transmits an instruction signal for starting light reception by the light receiving unit 632 when the glasses wearing detection unit 631 detects that the observer is wearing the glasses 63.
- the signal transmission unit 34 transmits the image data converted by the A / D conversion unit 637 to the signal reception unit 23 of the liquid crystal display device 62.
- FIG. 14 is a flowchart showing the brightness control operation. Next, the operation for controlling the luminance will be described with reference to the flowchart of FIG.
- the light reception control unit 633 instructs the light reception unit 632 to start detection.
- the light receiving unit 632 receives light from the direction in which the observer is facing, that is, light from the direction in which the light receiving unit 632 of the glasses 63 is facing (S4).
- the light received by the image sensor 636 of the glasses 63 is converted into an electric signal by the A / D converter 637 and transmitted to the signal transmitter 34 as image data. Thereafter, the image data is transmitted from the signal transmission unit 34 toward the liquid crystal display device 62.
- the light reception control unit 45 instructs the light reception unit 43 to start detection.
- the light receiving unit 43 receives light from the direction in which the tip of the remote controller 4 is directed, that is, the direction in which the liquid crystal display device 62 is disposed (S5).
- the light received by the light receiving unit 43 is converted into an electrical signal by the A / D conversion unit 332 and transmitted to the signal transmission unit 44. Thereafter, an image signal is transmitted from the signal transmission unit 44 toward the liquid crystal display device 62.
- the image signal transmitted from the signal transmission unit 34 or the signal transmission unit 44 is stored in the storage unit 251. Then, the luminance calculation unit 252 calculates the luminance. Thereafter, the output of the backlight 24 is determined from the relationship shown in FIGS. 4 and 5 based on the luminance calculated by the luminance calculation unit 252. Then, the backlight 24 is controlled to the determined output value (S6).
- the luminance of the backlight 24 is equal to the luminance value obtained by averaging the luminance values (output values of the backlight 24) calculated for each observer. Be controlled.
- the output value of the backlight 24 may be determined based on the brightness information obtained from the glasses 63 worn by the observer at the closest distance or the farthest distance.
- the brightness of the liquid crystal display device 2 can be adjusted via the light receiving unit 43 provided in the remote controller 4 even when the glasses 63 are not worn. it can. For this reason, even when the liquid crystal display device 2 is observed without wearing the glasses 63, it is easy to adjust the luminance appropriately.
- FIG. 15 is a schematic diagram showing an image display system 13 according to the fourth embodiment.
- the image display system 13 according to the fourth embodiment is different from the image display system according to the first embodiment in a liquid crystal display device and glasses. More specifically, the liquid crystal display device 9 according to the fourth embodiment can display a stereoscopic image, and the glasses 7 are glasses for visually recognizing the stereoscopic image. That is, the image display system 13 of this embodiment is a glasses-type three-dimensional image display system.
- the glasses 7 are the same as the configurations described in the first to third embodiments, except that they have a configuration and a function for visually recognizing a stereoscopic image.
- the liquid crystal display device 9 is also described in the first to third embodiments, except that the liquid crystal display device 9 also has a configuration and a function for displaying a left-eye image and a right-eye image for forming a stereoscopic image.
- the configuration is the same.
- this embodiment can be applied to arbitrary three-dimensional image display systems.
- a three-dimensional image display system there is a method in which a left-eye image and a right-eye image displayed simultaneously are spatially separated by glasses and recognized by the left eye and the right eye.
- the left-eye image and the right-eye image, which are displayed alternately are alternately viewed by the left and right eyes using shutter glasses that are alternately opened and closed in synchronization with the display. There is a method to make it.
- a left-eye image and a right-eye image are alternately displayed every other scanning line of the liquid crystal display device 9.
- the left-eye image is displayed on the even-numbered scanning lines
- the right-eye image is displayed on the odd-numbered scanning lines.
- the left-eye image and the right-eye image are polarized and displayed.
- the left eye image is guided to the left eye and the right eye image is guided to the right eye, thereby displaying a three-dimensional image to the observer.
- the liquid crystal display device 9 can display the right-eye image and the left-eye image on the display panel 91 at a predetermined cycle (for example, every 1/120 second).
- the glasses 7 allow the right-eye image displayed by the stereoscopic image display device 6 to be observed by the observer's right eye and the left-eye image by the observer's left eye.
- the glasses 7 are provided with liquid crystal shutters for the lenses of both eyes.
- the right-eye image is displayed on the display panel 91
- the right-eye shutter of the glasses 7 is opened, and the left-eye shutter is closed.
- the left-eye shutter of the glasses 7 is opened, and the right-eye shutter is closed.
- the brightness of the observer's visual field range is detected by the image sensor provided in the glasses, and the backlight 24 is controlled according to the detected brightness.
- the brightness is adjusted.
- luminance of a liquid crystal display panel can be adjusted more appropriately based on the brightness which an observer actually recognizes.
- the glasses are used as the attachment, but the attachment of the present invention is not limited to this.
- any wearing object that an observer may wear on the head or face can be used instead of the glasses.
- whether the eyeglasses are worn is detected by calculating the position of the observer from the infrared signals from the pair of infrared sensors 621.
- the present invention is not limited to this. It may be a method.
- a button or the like may be arranged on the frame of the glasses, and the wearing of the glasses may be detected by pressing the button with an ear.
- the luminance is controlled so that the average luminance is optimum for each observer.
- the present invention is not limited to this.
- the brightness may be controlled to be most appropriate for an observer who is closest to the liquid crystal display device and has the smallest viewing angle. Further, for example, in the present description, the brightness may be controlled to be most appropriate for an observer who is farthest from the liquid crystal display device and has the largest viewing angle.
- the configuration in which the liquid crystal display device is provided as the image display device and the brightness of the display is adjusted by controlling the light source output of the backlight 24 is exemplified.
- the image display device is not limited to a liquid crystal display device, and the present invention can be applied to any display device.
- a method for adjusting the display brightness a method for adjusting the gradation of data to be displayed can be employed in addition to the method for controlling the output of the backlight.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Liquid Crystal Display Device Control (AREA)
- Controls And Circuits For Display Device (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Liquid Crystal (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
Description
本発明は、画像表示装置および画像表示システムに関し、さらに詳しくは、表示画面の輝度を調整可能な画像表示装置およびその画像表示装置を備えた画像表示システムに関する。 The present invention relates to an image display device and an image display system, and more particularly to an image display device capable of adjusting the brightness of a display screen and an image display system including the image display device.
コンピュータディスプレイやテレビ等の画像表示装置としては、液晶表示パネルおよびバックライトを備えた構成が知られている。このような画像表示装置では、液晶の複屈折率や旋光性により光の透過を制御することによって映像の表示を行っている。画像表示装置では、ユーザにとって見やすい明るさにするため、バックライトの輝度を調整できるようになっている。 As an image display device such as a computer display or a television, a configuration including a liquid crystal display panel and a backlight is known. In such an image display device, an image is displayed by controlling the transmission of light by the birefringence and optical rotation of the liquid crystal. In the image display device, the brightness of the backlight can be adjusted so that the brightness is easy to see for the user.
ここで、自動的に液晶表示パネルの輝度を調整するようにした構成が提案されている。例えば、特開2006-72255号公報に記載された構成が知られている。特開2006-72255号公報には、リモートコントローラと、画像表示装置とを備えたシステムが記載されている。画像表示装置は、バックライトと、液晶表示パネルと、受光センサと、信号受信部とを備えている。受光センサは液晶表示パネルを支持するフレームに設けられている。リモートコントローラの先端には、信号送信部と受光センサとが設けられている。 Here, a configuration has been proposed in which the brightness of the liquid crystal display panel is automatically adjusted. For example, a configuration described in Japanese Patent Application Laid-Open No. 2006-72255 is known. Japanese Unexamined Patent Application Publication No. 2006-72255 describes a system including a remote controller and an image display device. The image display device includes a backlight, a liquid crystal display panel, a light receiving sensor, and a signal receiving unit. The light receiving sensor is provided on a frame that supports the liquid crystal display panel. At the tip of the remote controller, a signal transmission unit and a light receiving sensor are provided.
特開2006-72255号公報の構成では、リモートコントローラの先端を画像表示装置に向けて操作を行う際に、受光センサが受光した光量に関する情報が、信号送信部から送信される。信号送信部で送信された信号は、画像表示装置の信号受信部で受信される。信号受信部で受信した光量の情報と、フレームに取り付けられた受光センサによって受光した光量の情報とに基づいて、バックライトの出力が調整される。 In the configuration of Japanese Patent Application Laid-Open No. 2006-72255, information regarding the amount of light received by the light receiving sensor is transmitted from the signal transmission unit when the tip of the remote controller is operated toward the image display device. The signal transmitted by the signal transmission unit is received by the signal reception unit of the image display device. The output of the backlight is adjusted based on the light amount information received by the signal receiving unit and the light amount information received by the light receiving sensor attached to the frame.
特開2006-72255号公報の構成では、受光センサは、液晶表示パネルのフレームと、リモートコントローラにそれぞれ設けられており、周囲の光を受光する。しかし、フレームに設けられた受光センサやリモートコントローラに設けられた受光センサで検出される明るさは、ユーザが実際に観察する明るさとは異なっている。このため、特開2006-72255号公報に記載の構成では、ユーザにとっての適切な輝度に調整することができない場合がある。 In the configuration of Japanese Patent Application Laid-Open No. 2006-72255, the light receiving sensor is provided in each of the frame of the liquid crystal display panel and the remote controller, and receives ambient light. However, the brightness detected by the light receiving sensor provided on the frame or the light receiving sensor provided on the remote controller is different from the brightness actually observed by the user. For this reason, in the configuration described in Japanese Patent Laid-Open No. 2006-72255, it may not be possible to adjust the brightness to an appropriate level for the user.
本発明の課題は、ユーザが実際に認識する明るさに基づいて、より適切に表示輝度を調整可能な画像表示装置を提供することにある。 An object of the present invention is to provide an image display device capable of adjusting display luminance more appropriately based on brightness actually recognized by a user.
上記課題を解決するため、本発明による画像表示装置は、画像データを取得可能であり、かつユーザが装着可能な装着物から送信された前記画像データを受信可能な画像表示装置であって、受信部と、表示部と、輝度制御部とを備えている。受信部は、画像データを受信する。輝度制御部は、受信部で受信した画像データの明るさに基づいて、画像表示部の輝度を制御する。 In order to solve the above problems, an image display device according to the present invention is an image display device capable of acquiring image data and receiving the image data transmitted from a wearable item that can be worn by a user. Unit, a display unit, and a luminance control unit. The receiving unit receives image data. The brightness control unit controls the brightness of the image display unit based on the brightness of the image data received by the receiving unit.
本発明に係る画像表示装置では、ユーザが装着する装着物で取得された画像データに基づいて画像表示部の輝度を調整するため、リモートコントローラや画像表示装置のフレームに受光センサを設けて、受光センサで受光した光量に基づいて画像表示装置の輝度を調整する場合に比べて、ユーザにとって適切な輝度に調整しやすくなる。 In the image display device according to the present invention, in order to adjust the brightness of the image display unit based on the image data acquired by the wearable worn by the user, a light receiving sensor is provided in the frame of the remote controller or the image display device, Compared with the case where the luminance of the image display device is adjusted based on the amount of light received by the sensor, it becomes easier to adjust the luminance to be appropriate for the user.
本発明の一実施形態にかかる画像表示装置は、
観察時にユーザが装着した状態で当該ユーザの観察方向の明るさを表すデータを取得可能な装着物から、前記データを受信する受信部と、
画像表示部と、
前記受信部で受信した前記データに基づいて、前記ユーザの観察方向の明るさを算出する輝度演算部と、
前記輝度演算部による算出結果に基づいて、前記画像表示部の輝度を制御する輝度制御部とを備えた構成である(第1の構成)。
An image display device according to an embodiment of the present invention includes:
A receiving unit that receives the data from a wearable that can acquire data representing brightness in the observation direction of the user in a state worn by the user during observation;
An image display unit;
Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user;
And a brightness control unit that controls the brightness of the image display unit based on a calculation result by the brightness calculation unit (first configuration).
この第1の構成によれば、ユーザが装着している装着物により、ユーザの観察方向の明るさを表すデータが取得され、そのデータが受信部で受信される。輝度演算部が、受信部で受信したデータに基づいて、ユーザの観察方向の明るさを算出し、その算出結果に基づいて、画像表示部の輝度が制御される。すなわち、ユーザが装着した状態での装着物で取得されたデータを用いることにより、リモートコントローラや画像表示装置のフレームに設けられた受光センサでの受光量に基づいて画像表示装置の輝度を調整する従来の構成に比べて、ユーザが実際に観察している状況に応じた適切な輝度に調整しやすい、という効果がある。 According to the first configuration, the data representing the brightness in the viewing direction of the user is acquired by the wearing object worn by the user, and the data is received by the receiving unit. The luminance calculation unit calculates the brightness in the observation direction of the user based on the data received by the reception unit, and the luminance of the image display unit is controlled based on the calculation result. That is, the brightness of the image display device is adjusted based on the amount of light received by the light receiving sensor provided in the frame of the remote controller or the image display device by using data acquired by the wearable item worn by the user. Compared to the conventional configuration, there is an effect that the user can easily adjust the luminance to an appropriate luminance according to the situation actually observed.
本発明の他の側面にかかる画像表示システムは、
画像表示装置と、前記画像表示装置の観察時にユーザが装着する装着物とを含む画像表示システムであって、
前記装着物は、前記画像表示装置の観察時にユーザが装着した状態で当該ユーザの観察方向の明るさを表すデータを取得するデータ取得部と、
前記データを前記画像表示装置へ送信する送信部とを備え、
前記画像表示装置は、
前記装着物から、前記データを受信する受信部と、
画像表示部と、
前記受信部で受信した前記データに基づいて、前記ユーザの観察方向の明るさを算出する輝度演算部と、
前記輝度演算部による算出結果に基づいて、前記画像表示部の輝度を制御する輝度制御部とを備えた構成である(第2の構成)。
An image display system according to another aspect of the present invention includes:
An image display system including an image display device and a wearing object worn by a user when observing the image display device,
The wearing object is a data acquisition unit that acquires data representing brightness in the observation direction of the user in a state worn by the user during observation of the image display device;
A transmission unit for transmitting the data to the image display device,
The image display device includes:
A receiving unit for receiving the data from the wearing article;
An image display unit;
Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user;
And a luminance control unit that controls the luminance of the image display unit based on a calculation result by the luminance calculation unit (second configuration).
この第2の構成によっても、ユーザが装着している装着物により、ユーザの観察方向の明るさを表すデータが取得され、そのデータが受信部で受信される。輝度演算部が、受信部で受信したデータに基づいて、ユーザの観察方向の明るさを算出し、その算出結果に基づいて、画像表示部の輝度が制御される。すなわち、ユーザが装着した状態での装着物で取得されたデータを用いることにより、リモートコントローラや画像表示装置のフレームに設けられた受光センサでの受光量に基づいて画像表示装置の輝度を調整する従来の構成に比べて、第2の構成は、ユーザが実際に観察している状況に応じた適切な輝度に調整しやすい、という効果がある。 Also in the second configuration, the data representing the brightness in the viewing direction of the user is acquired by the wearing object worn by the user, and the data is received by the receiving unit. The luminance calculation unit calculates the brightness in the observation direction of the user based on the data received by the reception unit, and the luminance of the image display unit is controlled based on the calculation result. That is, the brightness of the image display device is adjusted based on the amount of light received by the light receiving sensor provided in the frame of the remote controller or the image display device by using data acquired by the wearable item worn by the user. Compared to the conventional configuration, the second configuration has an effect that it is easy to adjust the luminance to an appropriate level according to the situation that the user is actually observing.
前記の第2の構成において、
前記データ取得部が、光の空間分布を2次元の画像データとして検出するイメージセンサを有し、
前記輝度演算部は、前記画像データの少なくとも一部の画素の輝度データに基づいて、前記ユーザの観察方向の明るさを算出する構成としても良い(第3の構成)。
In the second configuration,
The data acquisition unit includes an image sensor that detects a spatial distribution of light as two-dimensional image data;
The luminance calculation unit may be configured to calculate brightness in the observation direction of the user based on luminance data of at least some pixels of the image data (third configuration).
この第3の構成によれば、光の空間分布を考慮して輝度を調整できるため、ユーザが実際に観察している状況に応じた適切な輝度に調整しやすい、という効果がある。ユーザが実際に観察している領域は、ある程度の広がりをもった空間であるので、そこから得られる画像データの少なくとも一部の画素の輝度データを用いることにより、ユーザが実際に観察している状況に則した制御が可能となる。 According to the third configuration, since the luminance can be adjusted in consideration of the spatial distribution of light, there is an effect that it is easy to adjust the luminance to an appropriate luminance according to the situation that the user is actually observing. Since the area that the user actually observes is a space having a certain extent, the user actually observes by using the luminance data of at least some pixels of the image data obtained therefrom. Control according to the situation becomes possible.
前記の第3の構成において、
前記データ取得部が、前記イメージセンサに対して光が入射する側に、広角レンズをさらに有する構成とすることが好ましい(第4の構成)。
In the third configuration,
It is preferable that the data acquisition unit further includes a wide-angle lens on the light incident side with respect to the image sensor (fourth configuration).
この第3の構成によれば、イメージセンサの光入射側に広角レンズが配置されているために、より広範囲の画像を取得できる。 According to the third configuration, since the wide angle lens is arranged on the light incident side of the image sensor, a wider range of images can be acquired.
前記第4の構成において、
前記画像表示装置は、
前記画像データから、所定の看視角度の範囲に属する画素の輝度データを選択するデータ選択部をさらに有し、
前記輝度演算部は、前記データ選択部によって選択された輝度データに基づいて、前記ユーザの観察方向の明るさを算出する構成とすることが好ましい(第5の構成)。
In the fourth configuration,
The image display device includes:
A data selection unit for selecting luminance data of pixels belonging to a predetermined viewing angle range from the image data;
It is preferable that the luminance calculation unit is configured to calculate the brightness in the observation direction of the user based on the luminance data selected by the data selection unit (fifth configuration).
この構成によれば、ユーザが視認する可能性が高い範囲の画像の輝度に基づいて、画像表示部の輝度を制御するため、ユーザにとってより適切な輝度に調整しやすくなる。 According to this configuration, since the brightness of the image display unit is controlled based on the brightness of an image in a range that is highly likely to be visually recognized by the user, it is easy to adjust the brightness to be more appropriate for the user.
前記第2~第5のいずれかの構成において、
前記装着物をユーザが装着したか否かを検出する装着検出部をさらに備え、
ユーザが装着物を装着したことを前記装着検出部が検出した後に、前記データ取得部がユーザの観察方向の明るさを表すデータを取得することが好ましい(第6の構成)
この構成によれば、ユーザが装着物を装着したことを確認してから、明るさのデータを取得するため、効率的にかつ適切な画像データを取得できる。
In any one of the second to fifth configurations,
A wear detecting unit for detecting whether or not the user wears the wearing object;
It is preferable that the data acquisition unit acquires data representing the brightness in the observation direction of the user after the mounting detection unit detects that the user has mounted the mounted item (sixth configuration).
According to this configuration, since the brightness data is acquired after confirming that the user has mounted the mounted object, it is possible to efficiently acquire appropriate image data.
前記第2~第6のいずれかの構成において、
前記画像表示装置は、
人物検出センサと、
前記人物検出センサで検出された人物への距離を検出する距離検出部とをさらに有し、
前記人物検出センサが複数の人物を検出した場合、前記輝度制御部が、前記複数の人物のそれぞれの装着物から得られたデータに基づいて前記画像表示装置の輝度を算出し、算出された輝度の平均値に基づいて、前記画像表示装置の輝度を制御する構成とすることが好ましい(第7の構成)。
In any one of the second to sixth configurations,
The image display device includes:
A human detection sensor;
A distance detection unit that detects a distance to the person detected by the person detection sensor;
When the person detection sensor detects a plurality of persons, the brightness control unit calculates the brightness of the image display device based on the data obtained from the attachments of the plurality of persons, and the calculated brightness It is preferable that the luminance of the image display device is controlled based on the average value (seventh configuration).
この構成によれば、複数のユーザが観察する場合であっても、各ユーザの装着物から得られたデータ毎に算出される輝度の平均値に制御されるため、画像表示装置の見易さの偏りが大きくなるのを防止できる。 According to this configuration, even when a plurality of users observe, since it is controlled to the average value of the brightness calculated for each data obtained from the wearables of each user, the image display device is easy to see. It is possible to prevent an increase in the bias.
前記第2~第7のいずれかの構成において、
前記画像表示装置を制御するリモートコントローラをさらに備え、
前記リモートコントローラは、
当該リモートコントローラの周囲の明るさを表すデータを取得する周囲データ取得部と、
前記周囲データ取得部で取得したデータを、ユーザの観察方向の明るさを表すデータとして前記画像表示装置へ送信する画像データ送信部とを備え、
前記輝度演算部が、前記リモートコントローラから受信したデータに基づいて、ユーザの観察方向の明るさを算出することが好ましい(第8の構成)。
In any one of the second to seventh configurations,
A remote controller for controlling the image display device;
The remote controller is
An ambient data acquisition unit that acquires data representing the brightness around the remote controller;
An image data transmission unit that transmits data acquired by the ambient data acquisition unit to the image display device as data representing brightness in the observation direction of the user;
It is preferable that the brightness calculation unit calculates the brightness in the observation direction of the user based on data received from the remote controller (eighth configuration).
この構成によれば、リモートコントローラの周囲データ取得部により明るさのデータが取得され、輝度演算部が、このリモートコントローラで取得されたデータを、ユーザの観察方向の明るさを表すデータとして用いて、演算を行う。これにより、例えば、ユーザが装着物を装着していない場合であっても、リモートコントローラから得られるデータに基づいて輝度を調整できる。 According to this configuration, the brightness data is acquired by the ambient data acquisition unit of the remote controller, and the luminance calculation unit uses the data acquired by the remote controller as data representing the brightness in the observation direction of the user. Perform the operation. Thereby, for example, even when the user is not wearing a wearing object, the luminance can be adjusted based on the data obtained from the remote controller.
前記第2~第8のいずれかの構成において、前記画像表示装置は、前記画像表示部に立体画像を表示可能な装置であっても良い(第9の構成)。 In any one of the second to eighth configurations, the image display device may be a device capable of displaying a stereoscopic image on the image display unit (9th configuration).
また、前記第2~第9のいずれかの構成において、前記装着物はメガネであっても良い(第10の構成)。 In any one of the second to ninth configurations, the wearing object may be glasses (tenth configuration).
以下、本発明のより具体的な実施形態について、図面を参照しながら説明する。 Hereinafter, more specific embodiments of the present invention will be described with reference to the drawings.
[第1の実施形態]
以下、図面を参照し、本発明の一実施の形態に係る画像表示システム1について説明する。図中同一又は相当部分には同一符号を付してその説明は繰り返さない。
[First Embodiment]
Hereinafter, an
〈全体構成〉
図1は、画像表示システム1を観察者が観察している状態を示す模式図である。画像表示システム1は、主に、液晶表示装置2と、メガネ3とを備えている。矢印A~Eは光を示している。矢印AおよびEは観察者が視認していない光である。矢印B~Dは、観察者が視認している光である。矢印Cは、液晶表示装置2から観察者に向かう光である。矢印BおよびDは、観察者が視認する液晶表示装置2からの光以外の光である。
<overall structure>
FIG. 1 is a schematic diagram illustrating a state in which an observer observes the
液晶表示装置2は、液晶表示パネル21と、フレーム22と、信号受信部23とを備えている。
The liquid
液晶表示パネル21は、光を適宜透過させて表面に画像を表示させる。
The liquid
フレーム22は、液晶表示パネル21を支持する。フレーム22は、液晶表示パネル21の背面を覆う背面部と、液晶表示パネル21の周囲に設けられた前面部とを有している。フレーム22は、例えば、樹脂製である。フレーム22には、液晶表示パネル21の他に、図示しないスピーカーやチャンネルを操作するボタン221等が配置されている。
The
信号受信部23は、メガネ3からの信号を受信可能な部分である。信号受信部23は、フレーム22に設けられている。この実施形態では、信号受信部23は、液晶表示パネル21の下方に配置されているが、この位置に限られない。
The
メガネ3は、液晶表示装置2の観察者が装着する。メガネ3の種類は任意である。メガネ3としては、例えば、液晶表示装置2の観察者の視力を補助したり、液晶表示装置2の視聴時の疲れを軽減したりする機能を有するメガネなどを用いることができる。図2は、メガネ3の外観図である。メガネ3は、メガネフレーム31と、レンズ32と、受光部33とを有している。
The
受光部33は、例えばCCD型イメージセンサまたはCMOS型イメージセンサを備え、メガネ3を装着した観察者が向いている方向の光を受光し、二次元のデジタル画像データとして出力する。受光部33は、メガネフレーム31に取り付けられている。受光部33は、図1に示すように、観察者が液晶表示装置2の液晶表示パネル21を見ている場合、矢印A~Eで示される光を受光する。
The
図3は、液晶表示装置2およびメガネ3の機能的構成を示すブロック図である。図3を参照して、液晶表示装置2およびメガネ3の構成について説明する。
FIG. 3 is a block diagram showing a functional configuration of the liquid
液晶表示装置2は、液晶表示パネル21や信号受信部23の他に、バックライト24と、制御部25とを有している。
The liquid
バックライト24は、液晶表示パネル21に光を照射する。バックライト24は、複数の光源および導光板を有している。バックライト24は、フレーム22の前面部と背面部との間において、液晶表示パネル21の背面に配置されている。バックライト24の光源としては、例えば、LEDや冷陰極線管などを用いることができる。
The
制御部25は、液晶表示パネル21やバックライト24等を含む、液晶表示装置2の機能部を制御する部分である。制御部25は、記憶部251と、輝度演算部252と、光源出力演算部253と、光源出力制御部(輝度制御部)254とを有している。なお、輝度演算部252、光源出力演算部253、および、光源出力制御部254は、必ずしもハードウエアとして実装されていなくても良い。例えば、制御部25がプロセッサを備え、記憶部251に記憶されているプログラムをプロセッサが実行することで、輝度演算部252と、光源出力演算部253と、光源出力制御部254としての機能がそれぞれ具現される態様であっても良い。
The
記憶部251は、ROMやRAMを有し、上述のとおり制御部25の動作を制御するプログラムの他に、様々なプログラムやデータを記憶する。記憶部251は、信号受信部23からの信号データを記憶する。
The
輝度演算部252は、信号受信部23がメガネ3から受信した画像データの明るさを算出する。
The
光源出力演算部253は、輝度演算部252の演算結果に基づいて、バックライト24の輝度を適切に制御するための出力値を算出する。
The light source
光源出力制御部254は、光源出力演算部253により算出された値に基づいて、バックライト24の輝度を制御する。
The light source
メガネ3は、機能的ブロックとして、受光部33と信号送信部34とを備えている。
The
受光部33は、イメージセンサ331(画像データ取得部)と、A/D変換部332とを有している。上述したように、イメージセンサ331としては、例えば、CCD型イメージセンサまたはCMOS型イメージセンサなどを用いることができる。イメージセンサ331の表面には、広角レンズを配置しても良い。なお、より広い範囲の画像データを取得するために、「超広角レンズ」と呼ばれるレンズを用いることが好ましい。
The
なお、本実施形態においては、イメージセンサ331を用いて光の空間分布を表す画像データ(2次元データ)を取得するが、より簡単な構成とするためには、イメージセンサではなく、単に明るさのレベルを取得するだけの光学センサを用いても良い。
In the present embodiment, image data (two-dimensional data) representing the spatial distribution of light is acquired using the
イメージセンサ331は、2次元に配列された複数の光検出素子を有している。イメージセンサ331では、それぞれの光検出素子で光を検出し、電気信号に変換する。ここで得られた電気信号は、画素(光検出素子)毎にA/D変換部332へ送られる。
The
A/D変換部332は、イメージセンサ331から送られた電気信号をデジタル信号に変換し、信号送信部34へ画像データとして出力する。
The A /
信号送信部34は、前記画像データを、液晶表示装置2へ送信する。なお、メガネ3と液晶表示装置2との間のデータ送受信は、無線通信によって行われることが好ましい。無線通信の方式には特に制限はない。
The
次に、メガネ3のイメージセンサ331で得られた画像データに基づいて、液晶表示装置2がバックライト24の輝度を調整する動作について、詳しく説明する。
Next, the operation in which the liquid
メガネ3の信号送信部34から送信された画像データは、液晶表示装置2の信号受信部23で受信され、記憶部251に記憶される。そして、輝度演算部252により、前記画像データの平均輝度が算出される。本実施形態では、輝度演算部252は、信号受信部23で受信した画像データの各画素の輝度(受光強度)を平均化して、順応輝度Ysを算出する。同じ輝度の対象物を観察したとしても、人間の眼には、対象物の周囲の明るさ(輝度)に応じて、対象物の輝度が異なって感じられる。順応輝度Ysとは、液晶表示装置2が配置されている場所の周囲の明るさの影響を受けて、観察者が液晶表示装置2を観察した際に視覚される輝度のことを意味している。つまり、人間の眼は、視野範囲の光強度に順応するために、同じ輝度の対象物を見ても、順応した明るさ(輝度)程度によって異なる明るさ(輝度)を感じる。なお、ここでの平均化処理は、加重平均であっても良いし、重み付けをした平均化処理であっても良い。
The image data transmitted from the
次に、光源出力演算部253が、輝度演算部252で得られた順応輝度Ysを用いて、バックライト24の輝度(光源出力)を算出する。ここで、光源出力演算部253は、
B=kY0.31-(mYs0.31+L) ・・・(1)
を用いる。この式(1)は、BodmannおよびHaubnerらの研究によって提唱された関係式である。Yは対象物輝度(cd/m2)、Ysは前述の順応輝度(cd/m2)、k、m、Lはそれぞれ定数である。なお、上記の対象物輝度Yが、本実施形態においては、液晶表示パネル21を照明するバックライト24の輝度に相当する。
Next, the light source
B = kY 0.31 - (mYs 0.31 + L) ··· (1)
Is used. This expression (1) is a relational expression proposed by the study of Bodmann and Haubner et al. Y is the object luminance (cd / m 2 ), Ys is the adaptation luminance (cd / m 2 ), and k, m, and L are constants. Note that the above-described object brightness Y corresponds to the brightness of the
人間の眼は、視野範囲内の光に順応する。「異なる観察者が同じ対象物を見ても、観察者の順応の程度によって、各観察者には異なった明るさに感じられる」という人間の感覚特性に基づいて、定数k、m、Lを含む上記の式(1)は定められている。 The human eye adapts to light within the field of view. The constants k, m, and L are set based on human sensory characteristics that “even if different observers see the same object, each observer feels different brightness depending on the degree of adaptation of the observer”. Including the above formula (1) is defined.
上記の式(1)は、明るさ感覚値Bが一定になるように、順応輝度Ysに応じて対象物輝度Yを制御すると、観察者の観察視覚を損なうことがないことを示している。 The above equation (1) indicates that if the object brightness Y is controlled according to the adaptation brightness Ys so that the brightness sense value B is constant, the observer's observational vision is not impaired.
例えば、式(1)において、k=23、m=5.62、L=1.65とした場合に、明るさ感覚値Bが一定となる対象物輝度Yと順応輝度Ysとの関係は、図4のようになる。図4では、横軸は順応輝度Ysであり、縦軸は対象物輝度Yである。図4では、明るさ感覚値Bが80、90、および100の場合を、それぞれ例示している。 For example, in equation (1), when k = 23, m = 5.62, L = 1.65, the relationship between the object luminance Y and the adaptation luminance Ys at which the brightness sense value B is constant is: As shown in FIG. In FIG. 4, the horizontal axis is the adaptation luminance Ys, and the vertical axis is the object luminance Y. FIG. 4 illustrates cases where the brightness sense value B is 80, 90, and 100, respectively.
例えば、B=80,90,100のそれぞれの場合において、順応輝度Ysと対象物輝度Yとが、図4に示す各ラインに従うように変化すれば(すなわち、Bの値を一定に保ったまま、順応輝度Ysと対象物輝度Yとが変化すれば)、観察者の視覚特性は損なわれない。なお、図4から、順応輝度Ysに対する対象物輝度Yの変化率は、明るさ感覚値Bが異なっていても、略一定であることが分かる。前述したように、対象物輝度Yは、液晶表示パネル21を照明するバックライトの輝度である。したがって、図4に示した順応輝度Ysに対する対象物輝度Yの変化率を、順応輝度Ysに対するバックライト24の輝度(光源出力)に置き換えると、図5に示すような関係が得られる。すなわち、図4に示したB=80,90,100のいずれの場合においても、概ね、順応輝度Ysが約300(cd/m2)である場合の光源出力を100%とすると、順応輝度Ysが約50(cd/m2)である場合の光源出力が約70%である。そして、順応輝度Ysが約50(cd/m2)から約300(cd/m2)まで変化する間において、光源出力は、約70%から100%までほぼ直線状に推移する。
For example, in each case of B = 80, 90, and 100, if the adaptation luminance Ys and the object luminance Y change so as to follow each line shown in FIG. 4 (that is, the value of B is kept constant). If the adaptation brightness Ys and the object brightness Y change), the visual characteristics of the observer are not impaired. It can be seen from FIG. 4 that the rate of change of the object brightness Y with respect to the adaptation brightness Ys is substantially constant even if the brightness sense value B is different. As described above, the object luminance Y is the luminance of the backlight that illuminates the liquid
図5に示した順応輝度Ysと光源出力との関係は、光源出力演算部253内のメモリ(図示せず)に記憶されている。光源出力演算部253は、輝度演算部252において算出された順応輝度Ysの値を入力すると、上記のメモリを参照し、入力された順応輝度Ysの値に応じた光源出力を決定する。光源出力演算部253で決定された光源出力のデータは、光源出力制御部254へ送られ、光源出力制御部254が受け取った光源出力のデータに基づいてバックライト24の輝度調整を行う。
The relationship between the adaptation luminance Ys and the light source output shown in FIG. 5 is stored in a memory (not shown) in the light source
以上のとおり、本実施形態の構成では、観察者が装着しているメガネ3のイメージセンサ331によって画像データが取得され、輝度演算部252が前記画像データから順応輝度Ysを求める。そして、光源出力演算部253が、順応輝度Ysに応じた光源出力を求め、求められた値に応じてバックライト24の輝度が制御される。このように、観察者が液晶表示装置2を見るときに装着するメガネ3のイメージセンサ331で得られた画像データに基づいてバックライトの輝度を制御することにより、実際に液晶表示装置2を観察するユーザの感覚に基づいた輝度に調整することができる。なぜならば、メガネ3のイメージセンサ331で得られる画像データは、概して、観察者が実際に見ている範囲の画像を含んでいるからである。このため、ユーザにとって見やすい輝度に調節することができる。
As described above, in the configuration of the present embodiment, image data is acquired by the
[第2の実施形態]
第2の実施形態に係る画像表示システム12は、第1の実施形態に係る画像表示システムと、液晶表示装置の制御部の構成が異なっている。より詳細には、第1の実施形態では、イメージセンサ331で得られた画像データの全ての画素を用いて輝度を算出した。これに対して、本実施形態では、ユーザが視認する範囲を予め設定し、その範囲内の画像データについてのみ輝度を算出する点が異なっている。なお、以下の説明においては、第1の実施形態と同じ構成については、第1の実施形態と同じ参照符号を付し、説明を省略する。
[Second Embodiment]
The image display system 12 according to the second embodiment is different from the image display system according to the first embodiment in the configuration of the control unit of the liquid crystal display device. More specifically, in the first embodiment, the luminance is calculated using all the pixels of the image data obtained by the
図6は、第2の実施形態に係る画像表示システム12を観察者が観察している状態を示す模式図である。 FIG. 6 is a schematic diagram showing a state in which an observer is observing the image display system 12 according to the second embodiment.
図6に破線で示す範囲は、観察者が視認する範囲である。すなわち、図6に示す矢印A~Eのうち、矢印B~Dの光を含む範囲は、観察者が視認する範囲である。一方、矢印AおよびEは、メガネ3のイメージセンサ331に入射するが、観察者が視認する範囲外の光である。
The range indicated by a broken line in FIG. 6 is a range visually recognized by an observer. That is, among the arrows A to E shown in FIG. 6, the range including the light of the arrows B to D is a range visually recognized by the observer. On the other hand, arrows A and E are light that enters the
図7は、第2の実施形態に係る液晶表示装置62およびメガネ3を示すブロック図である。
FIG. 7 is a block diagram showing a liquid
制御部37は、液晶表示パネル21やバックライト24等の各機能部を制御する部分である。制御部37は、記憶部371と、視野輝度演算部372と、光源出力演算部373と、光源出力制御部374と、演算範囲選択部375とを有している。なお、視野輝度演算部372と、光源出力演算部373と、光源出力制御部374と、演算範囲選択部375とは、必ずしもハードウエアとして実装されていなくても良い。例えば、制御部37がプロセッサを備え、記憶部351に記憶されているプログラムをプロセッサが実行することで、視野輝度演算部372、光源出力演算部373、光源出力制御部374、および演算範囲選択部375の機能がそれぞれ具現される態様であっても良い。
The
記憶部371は、ROMやRAMを有し、上述のとおり制御部37の動作を制御するプログラムの他に、様々なプログラムやデータを記憶する。記憶部371は、信号受信部23からの信号データを記憶する。
The
視野輝度演算部372は、信号受信部23がメガネ3から受信した画像データの明るさを算出する。なお、演算範囲選択部375は、前記画像データの全画素のうち、視野輝度演算部372による明るさ算出の対象となる範囲を選択する。
The visual field
光源出力演算部373は、視野輝度演算部372の演算結果に基づいて、バックライト24の輝度を適切に制御するための出力値を算出する。
The light source
光源出力制御部374は、光源出力演算部373により算出された値に基づいて、バックライト24の輝度を制御する。
The light source
メガネ3の受光部33は、イメージセンサ331への光入射側に、超広角レンズ333を有している。このため、超広角レンズ333を透過した光がイメージセンサ331で受光される。超広角レンズ333は、広角レンズよりもさらに焦点距離が短いレンズである。
The
図8は、メガネ3の受光部33で光を受光した状態を模式的に示す図である。
FIG. 8 is a diagram schematically showing a state in which light is received by the
超広角レンズ333(図8には図示せず)は、光軸をメガネ3のメガネフレーム31のフレーム面に対して直交する方向に配置されている。このため、超広角レンズ333は、図6において矢印A~Eで示した方向からの光を受光する。
The super wide-angle lens 333 (not shown in FIG. 8) is arranged in a direction in which the optical axis is orthogonal to the frame surface of the
図8に示すように、受光部33を原点Оとして、原点Оに対して、メガネ3を装着した観察者の左右方向をX軸、前後方向をY軸(超広角レンズ333の光軸)、上下方向をZ軸とする。XY平面上でY軸からの角度をφとし、Z軸からの角度をθとすると、光線rは、方位角φr、極角θrで超広角レンズ333に入射することになる。
As shown in FIG. 8, with respect to the origin О, the
図9は、受光部33の演算範囲を示す図である。演算範囲選択部375は、メガネ3を通して観察者が観察する光のうち、観察者が認識する光の範囲を選択する。具体的には、演算範囲選択部375は、観察者が正対している方向を中心として、所定の角度範囲を選択する。前記の所定の角度範囲とは、例えば、水平角±60度、垂直角±30度の範囲である。この選択された範囲は、図9に示すイメージセンサ331上では、方位角φ1(Y軸から±60°)の範囲であって、かつ、極角θ2(60°)と極角θ4(120°)との間に存在する部分(図9において斜線を付した箇所)である。
FIG. 9 is a diagram illustrating a calculation range of the
このように、イメージセンサ331上における所定の角度範囲に属する画素のみを、視野輝度演算部372における演算対象として選択することにより、演算範囲選択部375は、メガネ3を装着した観察者が視認できる範囲のみの明るさを検出することとなる。例えば、図6において矢印A~Eで示す光のうち、矢印B~Dの光による明るさ情報のみを、視野輝度演算部372における演算対象とすることができる。
In this way, by selecting only pixels belonging to a predetermined angle range on the
視野輝度演算部372は、演算範囲選択部375によって選択された範囲内の画素のみについて平均化処理を行うことにより、順応輝度Ysを算出する。視野輝度演算部372による順応輝度Ysの算出については、第1の実施形態における輝度演算部252による処理と同様であるので、詳しい説明は省略する。光源出力演算部373および光源出力制御部374の処理については、第1の実施形態における光源出力演算部253および光源出力制御部254と同様である。
The visual field
なお、第2の実施形態においては、制御部37の演算範囲選択部375の演算処理によって、輝度を求める範囲を選択する構成を例示した。しかし、画像形成システム12は、イメージセンサ331の入射側に超広角レンズ333として設けるレンズの機能によって、観察者が視認する範囲(図6の例では矢印B~Dで示す範囲)の光のみをイメージセンサ331へ入射させるようにしてもよい。これは、例えば、超広角レンズ333の屈折率を調整することなどによって実現可能である。
In the second embodiment, the configuration in which the range for obtaining the luminance is selected by the calculation process of the calculation
以上のように、第2の実施形態に係る画像形成システム12では、観察者が実際に視認する範囲の光について演算を行うため、イメージセンサ331の全画素の情報を用いて演算を行った場合に比べて、さらに観察者にとって適切な輝度に調整することができる。
As described above, in the image forming system 12 according to the second embodiment, when calculation is performed using information on all pixels of the
[第3の実施形態]
第3の実施形態の画像表示システム61は、第1の実施形態の画像表示システム11に比べ、リモートコントローラ4と、観察者がメガネ63を装着したかを検出する構成とを有する点で異なっている。第1の実施形態と同様の構成については同じ参照符号を付して、説明を省略する。
[Third Embodiment]
The
図10は、第3の実施形態に係る画像表示システム61および液晶表示装置62を観察する観察者を示す図である。
FIG. 10 is a diagram showing an observer observing the
液晶表示装置62は、液晶表示パネル21と、フレーム22と、信号受信部23と、赤外線LED621と、人物検出センサ622とを備えている。
The liquid
赤外線LED621は、赤外線信号を照射する。赤外線LED621は、フレーム22に1対取り付けられている。この実施形態では、赤外線LED621は、液晶表示パネル21の水平方向両側に配置されている。
The
人物検知センサ622は、液晶表示装置62の前に人物がいるか否かを検知する。人物検知センサ622は、この実施形態では、人物検知センサ622は、液晶表示パネル21の下方のフレーム22に設けられている。
なお、赤外線LED621および人物検出センサ622の取り付け位置は、上述した位置に限られない。
Note that the attachment positions of the
リモートコントローラ4は、液晶表示装置2から離れた場所で液晶表示装置62を操作する。リモートコントローラ4は、筐体41と、複数のボタン42と、受光部43と、信号送信部44とを有している。
The
受光部43は、筐体41の一端に設けられている。受光部43は、筐体41の一端が向いている方向の明るさを算出する。受光部43の構成は、受光部33の構成と同じであるため、説明を省略する。
The
信号送信部44は、受光部43のA/D変換部332で変換された信号を液晶表示装置62の信号受信部23に送信する。信号送信部44は、受光部43で受光した信号を受光制御部45に送信する。
The
図11は、液晶表示装置62とリモートコントローラ4との機能的な関係を示すブロック図である。液晶表示装置62は、液晶表示パネル21と、信号受信部23と、バックライト24と、制御部25と、赤外線LED621と、人物検知センサ622とを備えている。
FIG. 11 is a block diagram showing a functional relationship between the liquid
リモートコントローラ4は、筐体41や複数のボタン42等の他に受光制御部45を有している。
The
受光制御部45は、信号送信部44から指示を受けると、受光部43で画像を受光するように制御信号を送信する。
When receiving an instruction from the
図12は、液晶表示装置62とメガネ63との機能的関係を示すブロック図である。
FIG. 12 is a block diagram showing a functional relationship between the liquid
メガネ63は、液晶表示装置62の観察者が装着するものである。メガネ63は、機能的ブロックとして、受光部632と、メガネ着用検出部631と、受光制御部633と、信号送信部34とを有している。
The
受光部632は、メガネ63を装着した観察者が向いている方向の光を受光する。受光部632は、1対の赤外線LED621が照射した赤外線信号を受信可能である。受光部632は、メガネフレーム31に取り付けられている。受光部632は、イメージセンサ636と、A/D変換部637とを有している。イメージセンサ636及びA/D変換部637は、イメージセンサ331及びA/D変換部332と同じ構成である。
The
メガネ着用検出部631は、液晶表示パネル21の観察者がメガネ63を装着しているか否かを検出する部分である。具体的には、赤外線LED621から照射された赤外線信号を受光部632が受光すると、メガネ着用検出部631は、液晶表示装置62と観察者との間の距離および液晶表示装置62に対する観察者の看視角度の算出を試みる。メガネ着用検出部631は、液晶表示装置62と観察者との間の距離および液晶表示装置62に対する観察者の看視角度が算出できた場合には、観察者がメガネ63を装着していると判断する。ここで、看視角度とは観察者が液晶表示パネル21を観察する角度を意味している。すなわち、看視角度とは、液晶表示パネル21に直交する線分と、液晶表示装置62の中心と観察者の中心とを結ぶ線分との間の角度を意味している。
The
図13は、1対の赤外線LED621および観察者の位置関係を示す図である。図13のAおよびBは赤外線LED621の位置であり、Cは観察者の位置である。
FIG. 13 is a diagram showing the positional relationship between a pair of
観察者と液晶表示パネル21との間の距離Dは、
D=L(sinα-sinβ)/sin(α+β)
で求められる。ここで、Lは2つの赤外線LED621の間の距離を示している。
The distance D between the observer and the liquid
D = L (sin α−sin β) / sin (α + β)
Is required. Here, L indicates the distance between the two
また、観察者の液晶表示パネル21に対する看視角度θは、
α>βの場合、θ=arctan((L/2D)-(1/tanα))
α=βの場合、θ=0°
α<βの場合、θ=arctan((L/2D)-(1/tanβ))
で求められる。
Further, the viewing angle θ with respect to the liquid
When α> β, θ = arctan ((L / 2D) − (1 / tanα))
When α = β, θ = 0 °
When α <β, θ = arctan ((L / 2D) − (1 / tanβ))
Is required.
ここで、αおよびβは、赤外線LED621から照射された赤外線信号を受光部632が受光したときの赤外線信号の入射角度から算出される。
Here, α and β are calculated from the incident angle of the infrared signal when the
1対の赤外線LED621の間の距離Lは予め測定されており、メガネ63に設けられた図示しないメモリに記憶されている。受光部632で受信した画像データから受光部632に対する赤外線LED621の角度が検出される。距離Lと受光部632に対する赤外線LED621の角度とが得られると、上記の算出式から距離D及び看視角度θが算出される。
The distance L between the pair of
受光制御部633は、メガネ着用検出部631によって観察者がメガネ63を装着していることが検出された際に、受光部632による受光を開始する指示信号を送信する。
The light
信号送信部34は、A/D変換部637により変換された画像データを液晶表示装置62の信号受信部23に送信する。
The
〈動作〉
図14は、輝度制御の動作を示すフローチャートである。次に図14のフローチャートを参照して輝度を制御する動作について説明する。
<Operation>
FIG. 14 is a flowchart showing the brightness control operation. Next, the operation for controlling the luminance will be described with reference to the flowchart of FIG.
まず、人物検知センサ622によって液晶表示装置62の近傍に観察者がいるか否かが検知される(S1)。観察者がいることが検知されなかった場合(S1のNO)には、観察者が検知されるまで待機する。一方、液晶表示装置62の近傍に観察者がいることが検知されると(S1のYES)、1対の赤外線LED621から赤外線信号が放出される。そして、赤外線信号によって観察者と液晶表示装置62との間の距離等が算出される(S2)。また、メガネ着用検出部631により、観察者がメガネ63を着用しているか否かが検出される(S3)。
First, whether or not there is an observer in the vicinity of the liquid
観察者がメガネ63を着用していることが検出される(S3のYES)と、受光制御部633から検出開始の指示が受光部632になされる。検出開始の指示を受けると、受光部632は観察者が向いている方向、すなわち、メガネ63の受光部632が向いている方向からの光を、イメージセンサ636で受光する(S4)。メガネ63のイメージセンサ636で受光された光は、A/D変換部637で電気信号に変換され、画像データとして信号送信部34に伝達される。その後、信号送信部34から液晶表示装置62に向けて画像データが送信される。
When it is detected that the observer is wearing the glasses 63 (YES in S3), the light
観察者がメガネ63を着用していることが検出されない場合(S3のNO)には、受光制御部45から検出開始の指示が受光部43になされる。検出開始の指示を受けると、受光部43はリモートコントローラ4の先端が向いている方向、すなわち液晶表示装置62が配置されている方向、から光を受光する(S5)。受光部43が受光した光は、A/D変換部332で電気信号に変換され、信号送信部44に伝達される。その後、信号送信部44から液晶表示装置62に向けて画像信号が送信される。
When it is not detected that the observer is wearing the glasses 63 (NO in S3), the light
信号送信部34又は信号送信部44から送信された画像信号は記憶部251に記憶される。そして、輝度演算部252により輝度が算出される。その後、輝度演算部252により算出された輝度に基づいて図4および図5の関係からバックライト24の出力が決定される。そして、バックライト24は、決定された出力値に制御される(S6)。
The image signal transmitted from the
なお、人物検知センサ622で複数の観察者を検知した場合には、観察者ごとに算出された輝度の値(バックライト24の出力値)を平均した輝度の値に、バックライト24の輝度が制御される。あるいは、最も近い距離または最も遠い距離にいる観察者が装着しているメガネ63から得られる明るさ情報に基づいて、バックライト24の出力値を決定しても良い。
When a plurality of observers are detected by the
第3の実施形態に記載の画像形成システム61によれば、メガネ63を装着していない場合でも、リモートコントローラ4に設けられた受光部43を介して液晶表示装置2の輝度を調整することができる。このため、メガネ63を装着せずに液晶表示装置2を観察する場合であっても、適切に輝度を調整しやすくなる。
According to the
[第4の実施形態]
図15は第4の実施形態に係る画像表示システム13を示す模式図である。
[Fourth Embodiment]
FIG. 15 is a schematic diagram showing an
第4の実施形態に係る画像表示システム13は、第1の実施形態に係る画像表示システムと、液晶表示装置およびメガネが異なっている。より詳細には、第4の実施形態に係る液晶表示装置9は、立体画像を表示可能であり、メガネ7は立体画像を視認するためのメガネである。すなわち、本実施形態の画像表示システム13は、メガネ方式の3次元画像表示システムである。
The
メガネ7は、立体画像を視認するための構成および機能を有している以外には、第1~第3の実施形態でそれぞれ説明した構成と同様である。液晶表示装置9も、立体画像を形成するための左目用画像と右目用画像とを表示するための構成および機能を有している以外においては、第1~第3の実施形態でそれぞれ説明した構成と同様である。
The
なお、液晶表示装置9とメガネ7の方式については特に限定はなく、任意の3次元画像表示システムに本実施形態を適用することができる。例えば、これらにのみ限定されないが、3次元画像表示システムの一例としては、同時に表示される左目用画像と右目用画像とを、メガネによって空間的に分離して左目と右目に認識させる方式がある。また他の例としては、交互に切替表示される左目用画像と右目用画像とを、表示に同期して左目レンズと右目レンズとが交互に開閉するシャッターメガネによって、左目と右目に交互に視認させる方式がある。
In addition, there is no limitation in particular about the system of the liquid
前者の方式の一例としては、液晶表示装置9の走査線1本おきに左目用画像と右目用画像とを交互に表示する。例えば、偶数番目の走査線に左目用画像、奇数番目の走査線に右目用画像を表示させる。そして、液晶表示装置9の表面に、走査線に沿って微細な円偏光素子を並べることにより、左目用画像と右目用画像とに偏光をかけて表示する。さらに、メガネ7に円偏光フィルタを設けることにより、左目用画像を左目へ、右目用画像を右目へ導くことにより、観察者に3次元画像を表示させる。
As an example of the former method, a left-eye image and a right-eye image are alternately displayed every other scanning line of the liquid
後者の方式の一例としては、フレームシーケンシャル方式がある。液晶表示装置9は、表示パネル91に、所定の周期で(例えば1/120秒毎)、右目用画像と左目用画像とを表示可能である。
An example of the latter method is a frame sequential method. The liquid
メガネ7は、立体画像表示装置6が表示する右目用画像を観察者の右目で、左目用画像を観察者の左目でそれぞれ観察させる。具体的には、メガネ7は、両目のレンズの液晶シャッターが設けられている。表示パネル91に右目用画像が表示されているときには、メガネ7の右目のシャッターが開状態となり、左目のシャッターは閉状態となる。表示パネル91に左目用画像が表示されているときには、メガネ7の左目のシャッターが開状態となり、右目のシャッターは閉状態となる。
The
本実施形態においても、第1~第3の実施形態と同様に、メガネに設けられたイメージセンサによって観察者の視野範囲の明るさが検出され、検出された明るさに応じてバックライト24の輝度が調整される。これにより、観察者が実際に認識する明るさに基づいて、より適切に液晶表示パネルの輝度を調整できる。
Also in the present embodiment, as in the first to third embodiments, the brightness of the observer's visual field range is detected by the image sensor provided in the glasses, and the
[他の実施形態]
上記の実施形態では、装着物としてメガネを用いたが、本発明の装着物はこれに限定されない。表示装置の観察中に、観察者が頭部や顔面に装着して使用する可能性のある任意の装着物を、メガネの代わりに用いることが可能である。
[Other Embodiments]
In the above embodiment, the glasses are used as the attachment, but the attachment of the present invention is not limited to this. During the observation of the display device, any wearing object that an observer may wear on the head or face can be used instead of the glasses.
上記の実施形態では、1対の赤外線センサ621からの赤外線信号から観察者の位置等を算出することで、メガネを装着しているかを検出したが、本発明はこれに限らずに、ほかの方法であってもよい。例えば、メガネのフレームにボタン等を配置しておいて、ボタンが耳によって押されたことでメガネの装着を検出してもよい。
In the embodiment described above, whether the eyeglasses are worn is detected by calculating the position of the observer from the infrared signals from the pair of
上記の実施形態では、人物検知センサ622が観察者を複数人検知した場合には、それぞれの観察者にとって最適な輝度の平均値になるように輝度を制御したが、本発明はこれに限られず、例えば、液晶表示装置に最も近く、看視角が最も小さい観察者にとって最も適切な輝度に制御してもよい。また、例えば、本説明は、液晶表示装置に最も遠く、看視角が最も大きい観察者にとって最も適切な輝度に制御してもよい。
In the above embodiment, when the
また、上記の実施形態においては、画像表示装置として液晶表示装置を備え、バックライト24の光源出力を制御することによって表示の明るさを調整する構成を例示した。しかし、画像表示装置は液晶表示装置に限定されず、任意の表示装置に本発明を適用することができる。また、表示の明るさを調整する方法としては、バックライトの出力を制御する方法以外に、表示すべきデータの階調を調整する方法も採用し得る。
In the above-described embodiment, the configuration in which the liquid crystal display device is provided as the image display device and the brightness of the display is adjusted by controlling the light source output of the
以上、本発明の実施の形態を説明したが、上述した実施の形態は本発明を実施するための例示に過ぎない。よって、本発明は上述した実施の形態に限定されることなく、その趣旨を逸脱しない範囲内で上述した実施の形態を適宜変形して実施することが可能である。
While the embodiments of the present invention have been described above, the above-described embodiments are merely examples for carrying out the present invention. Therefore, the present invention is not limited to the above-described embodiment, and can be implemented by appropriately modifying the above-described embodiment without departing from the spirit thereof.
Claims (10)
画像表示部と、
前記受信部で受信した前記データに基づいて、前記ユーザの観察方向の明るさを算出する輝度演算部と、
前記輝度演算部による算出結果に基づいて、前記画像表示部の輝度を制御する輝度制御部とを備えた画像表示装置。 A receiving unit that receives the data from a wearable that can acquire data representing brightness in the observation direction of the user in a state worn by the user during observation;
An image display unit;
Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user;
An image display device comprising: a luminance control unit that controls luminance of the image display unit based on a calculation result by the luminance calculation unit.
前記装着物は、前記画像表示装置の観察時にユーザが装着した状態で当該ユーザの観察方向の明るさを表すデータを取得するデータ取得部と、
前記データを前記画像表示装置へ送信する送信部とを備え、
前記画像表示装置は、
前記装着物から、前記データを受信する受信部と、
画像表示部と、
前記受信部で受信した前記データに基づいて、前記ユーザの観察方向の明るさを算出する輝度演算部と、
前記輝度演算部による算出結果に基づいて、前記画像表示部の輝度を制御する輝度制御部とを備えた、画像表示システム。 An image display system including an image display device and a wearing object worn by a user when observing the image display device,
The wearing object is a data acquisition unit that acquires data representing brightness in the observation direction of the user in a state worn by the user during observation of the image display device;
A transmission unit for transmitting the data to the image display device,
The image display device includes:
A receiving unit for receiving the data from the wearing article;
An image display unit;
Based on the data received by the reception unit, a luminance calculation unit that calculates brightness in the observation direction of the user;
An image display system comprising: a luminance control unit that controls the luminance of the image display unit based on a calculation result by the luminance calculation unit.
前記輝度演算部は、前記画像データの少なくとも一部の画素の輝度データに基づいて、前記ユーザの観察方向の明るさを算出する、請求項2に記載の画像表示システム。 The data acquisition unit includes an image sensor that detects a spatial distribution of light as two-dimensional image data,
The image display system according to claim 2, wherein the brightness calculation unit calculates brightness in the viewing direction of the user based on brightness data of at least some pixels of the image data.
前記画像データから、所定の看視角度の範囲に属する画素の輝度データを選択するデータ選択部をさらに有し、
前記輝度演算部は、前記データ選択部によって選択された輝度データに基づいて、前記ユーザの観察方向の明るさを算出する、請求項3または4に記載の画像表示システム。 The image display device includes:
A data selection unit for selecting luminance data of pixels belonging to a predetermined viewing angle range from the image data;
The image display system according to claim 3 or 4, wherein the luminance calculation unit calculates the brightness in the observation direction of the user based on the luminance data selected by the data selection unit.
ユーザが装着物を装着したことを前記装着検出部が検出した後に、前記データ取得部がユーザの観察方向の明るさを表すデータを取得する、請求項2~5のいずれか一項に記載の画像表示システム。 A wear detecting unit for detecting whether or not the user wears the wearing object;
The data acquisition unit acquires data representing the brightness in the observation direction of the user after the mounting detection unit detects that the user has mounted a wearing object. Image display system.
人物検出センサと、
前記人物検出センサで検出された人物への距離を検出する距離検出部とをさらに有し、
前記人物検出センサが複数の人物を検出した場合、前記輝度制御部が、前記複数の人物のそれぞれの装着物から得られたデータに基づいて前記画像表示装置の輝度を算出し、算出された輝度の平均値に基づいて、前記画像表示装置の輝度を制御する、請求項2~6のいずれか一項に記載の画像表示システム。 The image display device includes:
A human detection sensor;
A distance detection unit that detects a distance to the person detected by the person detection sensor;
When the person detection sensor detects a plurality of persons, the brightness control unit calculates the brightness of the image display device based on the data obtained from the attachments of the plurality of persons, and the calculated brightness The image display system according to any one of claims 2 to 6, wherein the brightness of the image display device is controlled based on an average value of the image display device.
前記リモートコントローラは、
当該リモートコントローラの周囲の明るさを表すデータを取得する周囲データ取得部と、
前記周囲データ取得部で取得したデータを、ユーザの観察方向の明るさを表すデータとして前記画像表示装置へ送信する画像データ送信部とを備え、
前記輝度演算部が、前記リモートコントローラから受信したデータに基づいて、ユーザの観察方向の明るさを算出する、請求項2~7のいずれか一項に記載の画像表示システム。 A remote controller for controlling the image display device;
The remote controller is
An ambient data acquisition unit that acquires data representing the brightness around the remote controller;
An image data transmission unit that transmits data acquired by the ambient data acquisition unit to the image display device as data representing brightness in the observation direction of the user;
The image display system according to any one of claims 2 to 7, wherein the luminance calculation unit calculates brightness in a user's observation direction based on data received from the remote controller.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011136806A JP2014160097A (en) | 2011-06-20 | 2011-06-20 | Image display device and image display system |
| JP2011-136806 | 2011-06-20 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2012176683A1 true WO2012176683A1 (en) | 2012-12-27 |
Family
ID=47422522
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2012/065234 Ceased WO2012176683A1 (en) | 2011-06-20 | 2012-06-14 | Image display device and image display system |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2014160097A (en) |
| WO (1) | WO2012176683A1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9430970B2 (en) * | 2014-11-04 | 2016-08-30 | Innolux Corporation | 3D image display device |
| JP6243866B2 (en) * | 2015-03-20 | 2017-12-06 | Kddi株式会社 | Portable terminal, light emission control method, and program |
| JP7312599B2 (en) * | 2019-04-24 | 2023-07-21 | セコム株式会社 | surveillance display |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006196995A (en) * | 2005-01-11 | 2006-07-27 | Matsushita Electric Ind Co Ltd | 3D glasses viewing detection |
| JP2007101618A (en) * | 2005-09-30 | 2007-04-19 | Konica Minolta Photo Imaging Inc | Display device |
| WO2011061975A1 (en) * | 2009-11-19 | 2011-05-26 | シャープ株式会社 | Image display system |
-
2011
- 2011-06-20 JP JP2011136806A patent/JP2014160097A/en not_active Withdrawn
-
2012
- 2012-06-14 WO PCT/JP2012/065234 patent/WO2012176683A1/en not_active Ceased
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006196995A (en) * | 2005-01-11 | 2006-07-27 | Matsushita Electric Ind Co Ltd | 3D glasses viewing detection |
| JP2007101618A (en) * | 2005-09-30 | 2007-04-19 | Konica Minolta Photo Imaging Inc | Display device |
| WO2011061975A1 (en) * | 2009-11-19 | 2011-05-26 | シャープ株式会社 | Image display system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2014160097A (en) | 2014-09-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6520119B2 (en) | Image processing apparatus and image processing method | |
| JP6337418B2 (en) | Head-mounted display device and method for controlling head-mounted display device | |
| WO2011061975A1 (en) | Image display system | |
| US11110027B2 (en) | Vision training device for improving fusional vergence | |
| KR20120129134A (en) | Device and method for controlling display of the image in the head mounted display | |
| JPWO2015198477A1 (en) | Gaze detection device | |
| US9846305B2 (en) | Head mounted display, method for controlling head mounted display, and computer program | |
| US20160116741A1 (en) | Display apparatus and method for controlling display apparatus | |
| KR101650706B1 (en) | Device for wearable display | |
| JP2011209805A (en) | Video display device | |
| KR101203921B1 (en) | Information providing apparatus using an eye tracking and local based service | |
| US20120099195A1 (en) | Eyewear, three-dimensional image display system employing the same, and method of allowing viewing of image | |
| CN102291588A (en) | Method for remote user control for stereoscopic display and device thereof | |
| US10042171B2 (en) | Head mounted display device, control method for head mounted display device, and computer program | |
| JP2014103585A (en) | Stereoscopic image display device | |
| JP7118650B2 (en) | Display device | |
| US20120320038A1 (en) | Three-dimensional image processing apparatus, method for processing three-dimensional image, display apparatus, and computer program | |
| WO2012176683A1 (en) | Image display device and image display system | |
| US12393027B2 (en) | Head-mountable display apparatus and methods | |
| JP5909849B2 (en) | Head-mounted display device and method for controlling head-mounted display device | |
| JPH11155154A (en) | 3D image processing device | |
| CN105812779B (en) | A kind of wear-type endoscope 3D display system in changeable scene source | |
| KR100751290B1 (en) | Imaging System for Head Mounted Displays | |
| EP3961572A1 (en) | Image rendering system and method | |
| JPH11196351A (en) | Display device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 12801946 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 12801946 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: JP |