[go: up one dir, main page]

WO2016032039A1 - 영상 투사 장치 및 그의 동작 방법 - Google Patents

영상 투사 장치 및 그의 동작 방법 Download PDF

Info

Publication number
WO2016032039A1
WO2016032039A1 PCT/KR2014/008285 KR2014008285W WO2016032039A1 WO 2016032039 A1 WO2016032039 A1 WO 2016032039A1 KR 2014008285 W KR2014008285 W KR 2014008285W WO 2016032039 A1 WO2016032039 A1 WO 2016032039A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
gesture
area
image projection
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2014/008285
Other languages
English (en)
French (fr)
Inventor
김경중
유현희
주연주
염수지
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Priority to US15/507,751 priority Critical patent/US10429939B2/en
Publication of WO2016032039A1 publication Critical patent/WO2016032039A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00—Projectors or projection-type viewers; Accessories therefor
    • G03B21/14—Details
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3188—Scale or resolution adjustment

Definitions

  • the present invention relates to an image projection apparatus and an operation method thereof, and more particularly, to an image projection apparatus and an operation method thereof for detecting a gesture of a user with respect to a projected image and performing an operation corresponding to the detected user gesture. It is about.
  • a method of displaying an image is not only displayed through a display device but also a method of displaying an image through an image projection device such as a projector.
  • Image display through a display device has a limitation of a screen size, and has a disadvantage of displaying an image only on a screen of the display device.
  • an image projector such as a projector can provide a larger screen than a display device, and has an advantage of displaying an image at various positions according to a direction in which the image is projected.
  • the image projection apparatus has a problem in that the difference in size and image quality of the displayed image is large according to the distance, angle, etc. between the point where the image is projected and the image projection apparatus. Accordingly, it is necessary to appropriately adjust the image quality of the image projected by the image projection apparatus according to the distance between the image projection apparatus and the point at which the image is projected.
  • the touch user input method has an advantage in that the user can directly touch the displayed screen, so that the user can intuitively recognize the input method and the use method.
  • the image projection apparatus has a disadvantage in that it does not receive a user input through a touch method due to the feature that there is no display.
  • An object of the present invention is to project an image corresponding to a distance to a point where an image is to be projected, thereby providing a user with an image of high quality.
  • an object of the present invention is to recognize a gesture operation of a user with respect to the projected screen and to perform a control operation on the projected image.
  • An operation method of an image projection apparatus includes projecting an image; Detecting a user gesture operation on an image screen region where an image screen corresponding to the projected image is displayed and a region between the image projection apparatus; And performing a control operation corresponding to the sensed gesture operation.
  • Image projection apparatus includes an image projection unit for projecting an image; A sensing unit configured to detect a user gesture motion of an image screen region in which an image screen corresponding to the projected image is displayed and a region between the image projection apparatus; And a controller configured to perform a control operation corresponding to the user gesture operation sensed by the sensing unit.
  • the present invention may project an image corresponding to a distance of a point at which the image is projected, thereby providing a user with an image of high quality.
  • the present invention can recognize a variety of user gesture actions for the user's projected image, it is possible to easily perform the user's desired actions and functions.
  • FIG. 1 is a block diagram illustrating a configuration of an image projection apparatus according to an exemplary embodiment.
  • FIG. 2 is a conceptual diagram of image projection according to an embodiment of the present invention.
  • FIG. 3 is a conceptual diagram of image projection according to another embodiment of the present invention.
  • FIG. 4 is a block diagram of a terminal according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating a method of operating an image projection apparatus, according to an exemplary embodiment.
  • FIG 6 illustrates image projection according to an embodiment of the present invention.
  • FIG 7 illustrates image projection according to another embodiment of the present invention.
  • FIG. 8 illustrates a terminal interworking display according to an embodiment of the present invention.
  • FIG 9 is an exemplary view of a video screen according to a call reception according to an embodiment of the present invention.
  • FIG. 10 illustrates a user gesture area according to an embodiment of the present invention.
  • FIG. 11 illustrates a first gesture area according to an embodiment of the present invention.
  • FIG. 12 illustrates a menu display screen according to an embodiment of the present invention.
  • FIG. 13 illustrates a user input for a menu display screen according to an embodiment of the present invention.
  • FIG. 14 illustrates a volume control screen according to an embodiment of the present invention.
  • FIG. 15 illustrates a user input for a volume control screen according to an embodiment of the present invention.
  • FIG. 16 illustrates a second gesture area according to an embodiment of the present invention.
  • FIG 17 illustrates a user gesture input according to an embodiment of the present invention.
  • FIG. 18 illustrates a user input in a second gesture area according to an embodiment of the present invention.
  • FIG. 19 illustrates a user gesture input according to another embodiment of the present invention.
  • FIG. 20 illustrates a user input in a second gesture area according to another embodiment of the present invention.
  • 21 is a view illustrating a full channel list display screen according to an embodiment of the present invention.
  • 22 is a view illustrating a user input in a second gesture area according to another embodiment.
  • An image projection apparatus is, for example, an intelligent image projection apparatus that adds a computer support function to a broadcast reception function. It can be equipped with a more convenient interface such as a recognition, a handwritten input device, a touch screen or a spatial remote controller. In addition, it is connected to the Internet and a computer with the support of a wired or wireless Internet function, and can perform functions such as e-mail, web browsing, banking, or gaming. Standardized general-purpose operating systems can be used for these various functions.
  • the image projection apparatus may be, for example, an image projector, and may be applicable to a smartphone in some cases.
  • FIG. 1 is a block diagram illustrating a configuration of an image projection apparatus according to an exemplary embodiment.
  • the image projection apparatus 100 includes a sensing unit 105, an audio acquisition unit 110, an image acquisition unit 120, a broadcast receiving unit 130, an external device interface unit 135, and a storage unit ( 140, a user input interface unit 150, a communication unit 160, a controller 170, an image projector 180, an audio output unit 185, and a power supply unit 190.
  • the sensing unit 105 may include one or more sensors for sensing at least one of information in the image projector, surrounding environment information surrounding the image projector, and user information.
  • the sensing unit 105 may include a distance sensor 106, a proximity sensor, an illumination sensor, a touch sensor, an acceleration sensor, a magnetic sensor. , G-sensor, gyroscope sensor, motion sensor (107), RGB sensor, infrared sensor (IR sensor: infrared sensor), fingerprint scan sensor, ultrasonic sensor (ultrasonic sensor), optical sensor, battery gauge, environmental sensor (e.g. barometer, hygrometer, thermometer, radioactivity sensor, heat sensor, gas sensor, etc.), chemical sensor (e.g.
  • the image projection apparatus 100 may utilize a combination of information sensed by at least two or more of these sensors.
  • the voice acquirer 110 may acquire a voice.
  • the voice acquirer 110 may include at least one microphone, so that the voice may be obtained through the included microphone.
  • the voice acquirer 110 may transmit the acquired voice to the controller 170.
  • the image acquirer 120 may acquire an image.
  • the image acquirer 120 may include at least one camera, and may acquire an image through the included camera. Accordingly, the image acquirer 120 may acquire an image of the user. In addition, the image acquirer 120 may also acquire an image of biometric information such as an iris or a vein of the user.
  • the image acquirer 120 may transmit the acquired image to the controller 170.
  • the voice acquirer 110 and the image acquirer 120 may be included in the user input interface 150.
  • the broadcast receiver 130 may include a tuner 131, a demodulator 132, and a network interface unit 133.
  • the external device interface unit 135 may receive an application or a list of applications in a neighboring external device and transmit the received application to the controller 170 or the storage 140.
  • the external device interface unit 135 may include a terminal for connecting to an external device, and thus may be connected to a connector of the external device.
  • the external device interface unit 135 may supply power supplied from the power supply unit 190 to the connected external device as driving power.
  • the external device interface unit 135 may transmit an operation signal transmitted from the external device to the controller 170.
  • the external device interface unit 135 may include a sensor that can detect the connection of the external device, it can recognize the connection of the external device.
  • the network interface unit 133 may provide an interface for connecting the image projection apparatus 100 to a wired / wireless network including an internet network.
  • the network interface unit 133 may transmit or receive data with another user or another electronic device through the connected network or another network linked to the connected network.
  • some content data stored in the image projection apparatus 100 may be transmitted to a user selected from another user or another electronic device registered in the image projection apparatus 100 or a selected electronic device.
  • the network interface unit 133 may access a predetermined web page through a connected network or another network linked to the connected network. That is, by accessing a predetermined web page through the network, it is possible to send or receive data with the server.
  • the network interface unit 133 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 133 may receive content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • the network interface unit 133 may receive the update information and the update file of the firmware provided by the network operator, and may transmit data to the Internet or the content provider or the network operator.
  • the network interface unit 133 may select and receive a desired application from among applications that are open to the public through the network.
  • the storage 140 may store a program for processing and controlling each signal in the controller 170, and may store a signal, an image, an audio, or a data signal.
  • the storage unit 140 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 135 or the network interface unit 133. You can also store information about the image.
  • the storage 140 may store an application or a list of applications input from the external device interface 135 or the network interface 133.
  • the storage 140 may store biometric information of the user.
  • the biometric information of the user may refer to unique information related to the user's body such as a user's fingerprint, iris, vein, face, and voice.
  • the image projector 100 may reproduce and provide a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage 140 to a user.
  • a content file video file, still image file, music file, document file, application file, etc.
  • the storage 140 may store personalization service information for the user.
  • the personalization service information for the user may include information about one or more of a function frequently used by the user, a channel frequently viewed, content, and a setting value set by the user.
  • the personalization service information for the user may include information about personalized functions and personalized menus for each of the plurality of users.
  • the user input interface unit 150 may transmit a signal input by the user to the controller 170, or may transmit a signal from the controller 170 to the user.
  • the user input interface unit 150 may be configured according to various communication methods such as Bluetooth, Ultra Wideband (WB), ZigBee, RF (Radio Frequency) communication, or Infrared (IR) communication.
  • the remote controller 300 may receive and process a control signal such as power on / off, channel selection, screen setting, or the like, or transmit a control signal from the controller 170 to the remote controller 300.
  • the user input interface unit 150 may transmit a control signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the controller 170.
  • a local key such as a power key, a channel key, a volume key, and a set value
  • the communicator 160 may include one or more modules that enable the image projection apparatus 100, the network or the image projection apparatus 100, and peripheral devices to perform wired or wireless communication.
  • the peripheral device may include one or more of the terminal 200 and the remote control device 300 to be described later.
  • the communication unit 160 may include an internet module for internet access, and may allow the image projection apparatus 100 to access the internet through wired or wireless communication through the internet module.
  • the communicator 160 may include a short range communication module to enable wireless communication between the image projector 100 and another device.
  • the short-range communication module included in the communication unit 160 may include Bluetooth, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, and WLAN (Wireless LAN). (Wi-Fi), Near Field Communication (NFC), etc. may be used.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • WLAN Wireless LAN
  • Wi-Fi Wi-Fi
  • NFC Near Field Communication
  • the image signal processed by the controller 170 may be input to the image projector 180 and displayed as an image corresponding to the image signal.
  • the image signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.
  • the audio signal processed by the controller 170 may be audio output to the audio output unit 185.
  • the voice signal processed by the controller 170 may be input to the external device through the external device interface unit 135.
  • controller 170 may control overall operations of the image projection apparatus 100.
  • the controller 170 receives the detection signal for the connection of the external device from the external device interface unit 135, and controls the power supply unit 190 so that driving power is transmitted to the external device connected through the external device interface unit 135. can do.
  • controller 170 may recognize a voice acquired through the voice acquirer 110 and perform a control operation corresponding to the recognized voice.
  • the controller 170 may compare the plurality of voice signals with respect to the user's voice, recognize the voice of the best quality voice signal, and perform a control operation corresponding to the recognized voice.
  • the controller 170 may determine the location of the user by comparing the plurality of voices obtained from the voice acquisition unit 110 with a plurality of microphones. In detail, the controller 170 may determine the location of the user who uttered the voice by comparing the voices acquired by each of the plurality of microphones.
  • the controller 170 may control the image projection apparatus 100 by a user command or an internal program input through the user input interface unit 150, and access the network to display an application or a list of applications desired by the user. It can be downloaded into the projection apparatus 100.
  • the controller 170 may output the channel information selected by the user through the image projector 180 or the audio output unit 185 together with the processed image or audio signal.
  • the controller 170 may receive an external device image playback command received through the user input interface unit 150 from an external device, for example, a camera or a camcorder, input through the external device interface unit 135.
  • the image signal or the audio signal may be output through the image projector 180 or the audio output unit 185.
  • the controller 170 may control the image projector 180 to display an image, for example, a broadcast image input through the tuner 131 or an external input through the external device interface 135.
  • the input image, the image input through the network interface unit, or the image stored in the storage unit 140 may be controlled to be projected by the image projector 180.
  • the image projected by the image projector 180 may be a still image or a moving image, and may be a 2D image or a 3D image.
  • the controller 170 may control to project the content stored in the image projection apparatus 100, the received broadcast content, or an external input content input from the outside, and the content may include a broadcast image, an external input image, and audio. It may be in various forms such as a file, a still image, a connected web screen, and a document file.
  • the controller 170 may compare one or more of the input user's biometric information and pattern information with one or more of previously stored biometric information and pattern information. Accordingly, the controller 170 may search for the same biometric information as the biometric information of the user input from at least one of previously stored biometric information and pattern information.
  • the controller 170 may obtain personalization service information of the user corresponding to one or more of the input biometric information and the pattern information based on at least one of the input biometric information and the pattern information.
  • the controller 180 may recognize the user based on the received fingerprint image or information on the fingerprint.
  • the controller 180 may obtain personalization service information corresponding to the recognized user.
  • controller 170 may adjust the image to be projected based on the distance to the point where the image is projected.
  • the image projector 180 may project various images.
  • the image projector 180 may include a light source 181, a lens unit 182, and a reflector 183.
  • the light source unit 181 emits a beam.
  • the lens unit 182 selectively transmits only a predetermined wavelength of the beam generated by the light source unit 181.
  • the reflector 183 reflects the beam transmitted from the lens unit 182.
  • the reflector 183 may rotate in the up, down, left, and right directions, and may reflect the transmitted beam in various directions.
  • the image projector 180 may project an image to a point where the beam emitted from the light source unit 181 is projected through the lens unit 182.
  • the image projector 180 may project an image to a point to be projected by a beam emitted from the light source 181 through the lens unit 182 and reflected by the reflector 183.
  • FIG. 2 is a conceptual diagram of image projection according to an embodiment of the present invention.
  • the image projector 180 may project an image to a point where a beam generated by the light source unit 181 passes through the lens unit 182 and is reflected by the reflector 183 to be projected. Accordingly, the image screen 400 on which the image projected from the image projector 180 is displayed may be displayed on one surface on which the image is projected.
  • FIG. 3 is a conceptual diagram of image projection according to another embodiment of the present invention.
  • the image projector 180 may project an image to a point where a beam generated by the light source unit 181 is projected through the lens unit 182. Accordingly, the image screen 400 on which the image projected from the image projector 180 is displayed may be displayed on one surface on which the image is projected.
  • the image projector 180 may project an image in various projection directions using the reflector 183.
  • the image projector 180 converts an image signal, a data signal, an OSD signal processed by the controller 170, or an image signal, data signal, etc. received from the external device interface unit 135 into R, G, and B signals, respectively.
  • a drive signal can be generated.
  • the image projection device 100 shown in Figure 1 is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted according to the specifications of the image projection apparatus 100 that is actually implemented.
  • two or more components may be combined into one component as needed, or one component may be divided into two or more components.
  • the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
  • the image projection apparatus 100 does not include the tuner 131 and the demodulator 132, as shown in FIG. 1, but the network interface unit 133 or the external device interface unit. An image may be received and reproduced through the 135.
  • the image projection apparatus 100 may be divided into an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services, and a content reproduction apparatus for reproducing contents input from the image processing apparatus. Can be implemented.
  • an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services
  • a content reproduction apparatus for reproducing contents input from the image processing apparatus. Can be implemented.
  • the image display method according to an embodiment of the present invention to be described below is not only an image projection apparatus 100 as described with reference to FIG. 1, but also an image processing apparatus or an image projection unit such as the separated set-top box or the like. 180 may be performed by any one of the content reproduction device including the audio output unit 185.
  • FIG. 4 is a block diagram of a terminal 200 according to an embodiment of the present invention.
  • the terminal 200 includes a wireless communication unit 210, an A / V input unit 220, a user input unit 230, a sensing unit 240, an output unit 250, and a memory ( 260, an interface unit 270, a controller 280, a power supply unit 290, and the like.
  • the components shown in FIG. 4 are not essential, so a terminal having more or fewer components may be implemented.
  • the wireless communication unit 210 may include one or more modules that enable wireless communication between the terminal 200 and the network or between the terminal 200 and the image projection apparatus 100.
  • the wireless communication unit 210 may include one or more of a broadcast receiving module, a mobile communication module, a wireless internet module, a short range communication module, and a location information module.
  • the A / V input unit 220 is for inputting an audio signal or a video signal, and may include a camera 221 and a microphone 222.
  • the camera 221 processes an image frame such as a still image or a video obtained by an image sensor in a video call mode or a photographing mode.
  • the processed image frame may be displayed on the display unit 251.
  • the image frame processed by the camera 221 may be stored in the memory 260 or transmitted to the outside through the wireless communication unit 210. Two or more cameras 221 may be provided according to a usage environment.
  • the microphone 222 receives an external sound signal by a microphone in a call mode, a recording mode, a voice recognition mode, etc., and processes the external sound signal into electrical voice data.
  • the processed voice data may be converted into a form transmittable to the mobile communication base station through the wireless communication unit 210 and output in the call mode.
  • the microphone 222 may implement various noise removing algorithms for removing noise generated while receiving an external sound signal. Two or more microphones 222 may be provided according to a usage environment.
  • the user input unit 230 generates input data for the user to control the operation of the terminal 200.
  • the user input unit 230 may include a key pad dome switch, a touch pad (static pressure / capacitance), a jog wheel, a jog switch, and the like.
  • the sensing unit 240 may include one or more sensors for sensing at least one of information in the terminal, surrounding environment information surrounding the terminal, and user information.
  • the sensing unit 240 may include a proximity sensor 241, an illumination sensor 242, an illumination sensor, a touch sensor, an acceleration sensor, a magnetic sensor, and gravity.
  • Optical sensors e.g. cameras (see 221)), microphones (see 222), battery gauges, environmental sensors (e.g.
  • the mobile terminal disclosed herein may use a combination of information sensed by at least two or more of these sensors.
  • the sensing unit 240 detects the current state of the terminal 200 such as the open / closed state of the terminal 200, the position of the terminal 200, the presence or absence of a user contact, the orientation of the terminal, the acceleration / deceleration of the terminal, and the like. Generates a sensing signal for controlling the operation of the 200. For example, when the terminal 200 is in the form of a slide phone, it may sense whether the slide phone is opened or closed. Also, whether the power supply unit 290 is supplied with power or whether the interface unit 270 is coupled to an external device may be sensed.
  • the output unit 250 is used to generate an output related to sight, hearing, or tactile sense, and includes a display unit 251, an audio output module 252, an alarm unit 253, and a haptic module 254. Can be.
  • the display unit 251 displays (outputs) information processed by the terminal 200. For example, when the terminal is in a call mode, the terminal displays a user interface (UI) or a graphic user interface (GUI) related to the call. When the terminal 200 is in a video call mode or a photographing mode, the terminal 200 displays a photographed and / or received image, a UI, or a GUI.
  • UI user interface
  • GUI graphic user interface
  • the display unit 251 includes a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), and a flexible display (flexible). and at least one of a 3D display.
  • LCD liquid crystal display
  • TFT LCD thin film transistor-liquid crystal display
  • OLED organic light-emitting diode
  • flexible display flexible display (flexible). and at least one of a 3D display.
  • the display unit 251 and a sensor (hereinafter, referred to as a “touch sensor”) 244 for detecting a touch operation form a mutual layer structure (hereinafter, referred to as a “touch screen”)
  • the display unit 251 may be In addition to the output device can also be used as an input device.
  • the touch sensor 244 may have, for example, a form of a touch film, a touch sheet, a touch pad, or the like.
  • the touch sensor 244 may be configured to convert a change in pressure applied to a specific portion of the display unit 251 or capacitance generated at a specific portion of the display unit 251 into an electrical input signal.
  • the touch sensor 244 may be configured to detect not only the position and area of the touch but also the pressure at the touch.
  • the touch controller When there is a touch input to the touch sensor 244, the corresponding signal (s) is sent to the touch controller.
  • the touch controller processes the signal (s) and then transmits the corresponding data to the controller 280.
  • the controller 280 may determine which area of the display unit 251 is touched.
  • the sound output module 252 may output audio data received from the wireless communication unit 210 or stored in the memory 260 in a call signal reception, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, and the like.
  • the sound output module 252 may also output a sound signal related to a function (for example, a call signal reception sound or a message reception sound) performed in the terminal 200.
  • the sound output module 252 may include a receiver, a speaker, a buzzer, and the like.
  • the alarm unit 253 outputs a signal for notifying occurrence of an event of the terminal 200. Examples of events occurring in the mobile terminal include call signal reception, message reception, key signal input, and touch input.
  • the alarm unit 253 may output a signal for notifying an occurrence of an event by vibration, in addition to a video signal or an audio signal.
  • the video signal or the audio signal may also be output through the display unit 251 or the audio output module 252, so that they 251 and 252 may be classified as part of the alarm unit 253.
  • the haptic module 254 generates various haptic effects that a user can feel. Vibration is a representative example of the haptic effect generated by the haptic module 254.
  • the intensity and pattern of vibration generated by the haptic module 254 can be controlled. For example, different vibrations may be synthesized and output or may be sequentially output.
  • the memory 260 may store a program for the operation of the controller 280, and may temporarily store input / output data (eg, a phone book, a message, a still image, a video, etc.).
  • the memory 260 may store data regarding vibration and sound of various patterns output when a touch input on the touch screen is performed.
  • the memory 260 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM (Random Access Memory, RAM), Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), Magnetic Memory, Magnetic It may include a storage medium of at least one type of disk, optical disk.
  • the terminal 200 may operate in association with a web storage that performs a storage function of the memory 260 on the internet.
  • the interface unit 270 serves as a path with all external devices connected to the terminal 200.
  • the interface unit 270 receives data from an external device, receives power, transfers the power to each component inside the terminal 200, or transmits the data inside the terminal 200 to an external device.
  • wired / wireless headset ports, external charger ports, wired / wireless data ports, memory card ports, ports for connecting devices with identification modules, audio input / output (I / O) ports, The video input / output (I / O) port, the earphone port, and the like may be included in the interface unit 270.
  • the identification module is a chip that stores various information for authenticating the use authority of the terminal 200, and includes a user identification module (UIM), a subscriber identity module (SIM), and a universal user authentication module (Universal). Subscriber Identity Module, USIM) and the like.
  • a device equipped with an identification module hereinafter referred to as an 'identification device' may be manufactured in the form of a smart card. Therefore, the identification device may be connected to the terminal 200 through a port.
  • the controller 280 typically controls the overall operation of the terminal 200. For example, perform related control and processing for voice calls, data communications, video calls, and the like.
  • the controller 280 may include a multimedia module 281 for playing multimedia.
  • the multimedia module 281 may be implemented in the controller 280 or may be implemented separately from the controller 280.
  • the controller 280 may perform a pattern recognition process for recognizing a writing input or a drawing input performed on the touch screen as text and an image, respectively.
  • the controller 280 may obtain information on the exercise performed by the user based on the sensing value obtained from the sensing unit 240. For example, the controller 280 may calculate a calorie consumed by the user by obtaining a moving distance, a moving speed, and the like of the user.
  • the power supply unit 290 receives an external power source and an internal power source under the control of the controller 280 to supply power for operation of each component.
  • the mobile terminal can be extended to a wearable device that can be worn on the body beyond the user mainly holding in the hand.
  • wearable devices include a smart watch, a smart glass, a head mounted display (HMD), and the like.
  • HMD head mounted display
  • the wearable device may be configured to exchange (or interlock) data with another terminal 200.
  • the short range communication module 214 may detect (or recognize) a wearable device that can communicate around the terminal 200. Further, when the detected wearable device is a device authorized to communicate with the terminal 200, the controller 280 transmits at least a part of the data processed by the terminal 200 to the wearable device through the short range communication module 214. Can be. Accordingly, the user may use data processed by the terminal 200 through the wearable device. For example, when a call is received by the terminal 200, a phone call may be performed through the wearable device, or when the message is received by the terminal 200, the received message may be confirmed through the wearable device.
  • FIG. 5 is a flowchart illustrating a method of operating the image projection apparatus 100 according to an exemplary embodiment.
  • the controller 170 of the image projection apparatus 100 measures the distance to the point where the image is projected through the sensing unit 105 (S101).
  • the sensing unit 105 may measure the distance to the point where the image is projected.
  • the point where the image is projected may be referred to as an image screen area.
  • the sensing unit 105 may measure the distance to one surface on which the image is projected using the distance sensor 106. Accordingly, the controller 170 may obtain information about the distance from the sensing unit 105 to the point where the image is projected.
  • the controller 170 of the image projector 100 adjusts an image to be projected based on the measured distance (S103).
  • the controller 170 may adjust one or more of focus, size, and image quality of the image to be projected based on the measured distance. For example, the controller 170 may adjust one or more of the focus, resolution, size, brightness, color, and contrast of the image to be projected based on the measured distance.
  • the controller 170 of the image projector 100 controls the image projector 180 to project the adjusted image (S105).
  • the controller 170 may control the image projector 180 to project the adjusted image onto one surface on which the image is to be projected.
  • FIG 6 illustrates image projection according to an embodiment of the present invention.
  • the controller 170 may control the image projector 180 to project the adjusted image to the image screen area. Accordingly, the image screen 400 may be displayed on one surface on which the image is projected. Meanwhile, the reflector 183 of the image projector 180 may reflect the beam for the projected image in one direction in which the image is projected.
  • FIG 7 illustrates image projection according to another embodiment of the present invention.
  • the controller 170 may control the image projector 180 to project the adjusted image onto one surface to be projected. Accordingly, the image screen 400 may be displayed on one surface on which the image is projected. Meanwhile, the reflector 183 of the image projector 180 may reflect the beam for the projected image in one direction in which the image is projected. The reflector 183 may project an image on one surface different from the case of FIG. 5 by adjusting the reflection direction of the beam. Accordingly, the image projector 100 may project an image in various directions by adjusting the reflection direction of the reflector 183.
  • the controller 170 of the image projection apparatus 100 searches for the terminal 200 (S107).
  • the controller 170 may search for the terminal 200 within a predetermined distance of the image projection apparatus 100.
  • the controller 170 may generate a search signal for searching for the terminal 200, and transmit the generated search signal to the terminal 200 within a predetermined distance through the communication unit 160.
  • the controller 170 may receive a response signal transmitted from the terminal 200 through the communication unit 160.
  • the controller 170 may receive a response signal according to an operation in which the terminal 200 tags the image projection apparatus 100.
  • the response signal according to the tagging operation may be a signal through a contactless proximity wireless communication technology.
  • the control unit 170 of the image projection apparatus 100 receives an operation signal from the searched terminal 200 (S109).
  • the controller 170 may receive an operation signal related to an operation of the image projector 100 from one or more terminals 200 retrieved through the communication unit 160.
  • the operation signal may be a signal for controlling the image projection apparatus 100, an image signal for an image projected by the image projection apparatus 100, or an audio signal for an output voice.
  • the operation signal may be a signal for displaying the screen displayed on the terminal 200 and the output voice on the image screen 400 through the image projection apparatus 100 and outputting the voice.
  • the control unit 170 of the image projection apparatus 100 performs an operation corresponding to the received operation signal (S111).
  • the controller 170 may perform an operation corresponding to the operation signal received from the terminal 200, and the operation corresponding to the received operation signal may include various operations performed by the terminal 200.
  • an operation corresponding to an operation signal received from the terminal 200 may include an operation related to voice call, data communication, video communication, and application execution.
  • FIG. 8 illustrates a terminal interworking display according to an embodiment of the present invention.
  • the controller 170 may display a terminal association icon 420 indicating that one or more terminals 200 have been searched for the image projected by the image projector 180 and associated with the searched terminal 200. Can be. Accordingly, the terminal link icon 420 may be displayed on the image screen 400 according to the image projected by the image projector 180.
  • the controller 170 may receive an operation signal from the searched terminal 200 and output various video screens 400 and audio related to the operation of the terminal 200.
  • the controller 170 receives an operation signal for at least one of a phone call, a message, and an alarm received by the terminal 200, and controls one or more of an image screen 400 and an audio corresponding to the received operation signal. You can print
  • FIG 9 is an exemplary view of a video screen according to a call reception according to an embodiment of the present invention.
  • the controller 170 may receive an operation signal for receiving a call from the searched terminal 200 through the communication unit 160.
  • the controller 170 may display a call reception notification window 470 on an image screen 400 corresponding to the received operation signal for receiving a call. Accordingly, the call reception notification window 470 may be displayed on the image screen 400 according to the image projected by the image projector 180, and information 480 about the caller may be displayed.
  • the information on the caller may include one or more of a caller's phone number, name, photo, and memo.
  • the above example is an example for describing an operation corresponding to an operation signal received from the terminal 200 of the controller 170, but is not limited thereto. Therefore, the image projection apparatus 100 may perform various operations that the terminal 200 may perform according to a user's or designer's selection.
  • the controller 170 of the image projector 100 detects a gesture gesture of the user (S113).
  • the controller 170 may detect a gesture operation of the user through at least one of the sensing unit 105 and the image acquisition unit 120.
  • the controller 170 may acquire information about a user's movement through one or more sensors included in the sensing unit 105, and detect a gesture gesture of the user based on the obtained information.
  • the controller 170 may recognize a user's motion based on an image of the user acquired by the image acquirer 120, and detect a user's gesture motion based on the recognized motion.
  • the controller 170 may detect a user input for an area between the image projector 100 and the projected image screen 400. In addition, the controller 170 may divide a region between the image projection apparatus 100 and the projected image screen 400 into a plurality of regions, and detect a user input for each of the divided regions. The region between the image projector 100 and the image screen 400 may be referred to as a gesture region 500.
  • FIG. 10 illustrates a user gesture area according to an embodiment of the present invention.
  • the gesture area 500 between the image projection apparatus 100 and the image screen 400 may be divided into a first gesture area 510 and a second gesture area 530.
  • the motion sensor 107 of the image projection apparatus 100 may detect user movement in the gesture area 500.
  • the controller 170 may acquire information about a user's movement from the motion sensor 107, and detect a user gesture motion.
  • the controller 170 may identify whether the user movement in the first gesture region 510 in the gesture region 500 or the user movement in the second gesture region 530 is based on the obtained information about the user movement. Can be.
  • the controller 170 may perform an operation corresponding to the divided region. It will be described in detail below.
  • the controller 170 of the image projector 100 determines that the detected user gesture is within the first gesture area (S115), the controller 170 performs a control operation corresponding to the displayed image screen 400 (S117).
  • the controller 170 may perform a control operation corresponding to the displayed video screen 400.
  • the control operation corresponding to the displayed image screen 400 may be a control operation corresponding to one of a menu, a notification window, a popup window, and a control bar displayed on the image screen 400.
  • FIG. 11 illustrates a first gesture area according to an embodiment of the present invention.
  • the first gesture area 510 may be an area within a predetermined distance from the image screen 400 among the areas between the image projection apparatus 100 and the image screen 400.
  • the predetermined distance of the first gesture region 510 may be variously set according to a user's or designer's selection.
  • FIG. 12 illustrates a menu display screen according to an embodiment of the present invention.
  • FIG. 13 illustrates a user input for a menu display screen according to an embodiment of the present invention.
  • the controller 170 may project the image screen 400 including the menu window 410 related to the function of the image projector 100 through the image projector 180. Accordingly, the screen and the menu window 410 corresponding to the image signal may be displayed on the projected image screen 400.
  • the controller 170 may acquire a user input corresponding to the menu window 410 through the motion sensor 107 included in the sensing unit 105.
  • the user input corresponding to the menu window 410 may be a user input for selecting one menu among the menus displayed on the menu window 410.
  • the user input corresponding to the menu window 410 may be a user gesture input in the first gesture area 510. This will be described in detail with reference to FIG. 13.
  • the controller 170 may recognize a user gesture input in the first gesture area 510 through the motion sensor 107.
  • the controller 170 may perform a control operation corresponding to the image screen 400 displayed based on a user gesture input in the first gesture area 510. Accordingly, the controller 170 performs an operation corresponding to the menu window 410 selected based on the menu window 410 of the image screen 400 corresponding to the user input and the user input in the first gesture area 510. can do.
  • FIG. 14 illustrates a volume control screen according to an embodiment of the present invention.
  • FIG. 15 illustrates a user input for a volume control screen according to an embodiment of the present invention.
  • the controller 170 may project the image screen 400 including the volume control bar 430 related to the output volume of the image projector 100 through the image projector 180. Accordingly, the screen and the volume control bar 430 corresponding to the image signal may be displayed on the projected image screen 400.
  • the controller 170 may obtain a user input corresponding to the volume control bar 430 through the motion sensor 107 included in the sensing unit 105.
  • the user input corresponding to the volume control bar 430 may be a user input for moving the position of the adjustment tab displayed on the volume control bar 430.
  • the user input corresponding to the volume control bar 430 may be a user gesture input in the first gesture area 510. This will be described in detail with reference to FIG. 15.
  • the controller 170 may recognize a user gesture input in the first gesture area 510 through the motion sensor 107.
  • the controller 170 may perform a control operation corresponding to the image screen 400 displayed based on a user gesture input in the first gesture area 510. Accordingly, the controller 170 performs an operation corresponding to the volume control tap that is moved based on the volume control bar 430 of the image screen 400 corresponding to the user input and the user input in the first gesture area 510. can do.
  • the controller 170 may perform an operation corresponding to a user input in the first gesture area 510 based on the user gesture operation and the displayed video screen 400.
  • the description of the operation corresponding to the user input in the first gesture area 510 is an example for description, and the present invention is not limited thereto. Therefore, an operation corresponding to a user input in the first gesture region 510 may be variously set according to a user's or designer's selection.
  • the controller 170 of the image projection apparatus 100 determines that the detected user gesture motion is within the second gesture area (S119), the controller 170 performs a control operation corresponding to the detected user gesture motion (S121).
  • the controller 170 may perform a control operation corresponding to the detected user gesture motion.
  • FIG. 16 illustrates a second gesture area according to an embodiment of the present invention.
  • the second gesture area 530 may be an area outside a predetermined distance from the image screen 400 among the areas between the image projection apparatus 100 and the image screen 400. Therefore, the second gesture area 530 may be an area excluding the first gesture area 510 of the gesture area 500.
  • FIG 17 illustrates a user gesture input according to an embodiment of the present invention.
  • FIG. 18 illustrates a user input in a second gesture area according to an embodiment of the present invention.
  • the controller 170 may project an image screen 400 according to an image signal through the image projector 180. Accordingly, a screen corresponding to the image signal may be displayed on the projected image screen 400.
  • the controller 170 may obtain a gesture input of the user through the motion sensor 107 included in the sensing unit 105.
  • the gesture input may be a user gesture motion moving in a right direction with respect to the image screen 400.
  • the user gesture moving in the right direction with respect to the image screen 400 may be a user gesture input in the second gesture area 530. This will be described in detail with reference to FIG. 18.
  • the controller 170 may recognize a user gesture input in the second gesture area 530 through the motion sensor 107.
  • the controller 170 may perform a control operation of switching the image screen 400 displayed on the basis of the user gesture input in the second gesture region 530 to another channel. Accordingly, when the controller 170 acquires a user gesture input moving in the right direction in the second gesture area 530, the controller 170 may switch the channel of the displayed video screen 400 to another channel.
  • the controller 170 may perform a control operation of switching a channel of the displayed video screen 400 to another channel.
  • the switched channel may be a channel different from the switched channel according to a user gesture input moving in a right direction.
  • FIG. 19 illustrates a user gesture input according to another embodiment of the present invention.
  • FIG. 20 illustrates a user input in a second gesture area according to another embodiment of the present invention.
  • the controller 170 may project an image screen 400 according to an image signal through the image projector 180. Accordingly, a screen corresponding to the image signal may be displayed on the projected image screen 400.
  • the controller 170 may obtain a gesture input of the user through the motion sensor 107 included in the sensing unit 105.
  • the gesture input may be a user gesture motion moving upward with respect to the image screen 400.
  • the user gesture motion moving upward with respect to the image screen 400 may be a user gesture input in the second gesture area 530. This will be described in detail with reference to FIG. 20.
  • the controller 170 may recognize a user gesture input in the second gesture area 530 through the motion sensor 107.
  • the controller 170 may perform an operation of increasing the volume of the voice corresponding to the video screen 400 displayed based on a user gesture input in the second gesture area 530. Accordingly, when the controller 170 acquires a user gesture input moving upward in the second gesture area 530, the controller 170 may increase the volume of the voice corresponding to the displayed video screen 400.
  • the controller 170 may lower the volume of the voice corresponding to the displayed video screen 400.
  • 21 is a view illustrating a full channel list display screen according to an embodiment of the present invention.
  • 22 is a view illustrating a user input in a second gesture area according to another embodiment.
  • the controller 170 may project the image screen 400 including the full channel list 450 representing the list of all channels through the image projector 180. Accordingly, the screen corresponding to the image signal and the full channel list 450 may be displayed on the projected image screen 400.
  • the controller 170 may obtain a user input through the motion sensor 107 included in the sensing unit 105.
  • the gesture input may be a user gesture motion moving upward with respect to the image screen 400.
  • the user gesture motion moving upward with respect to the image screen 400 may be a user gesture input in the second gesture area 530. This will be described in detail with reference to FIG. 22.
  • the controller 170 may recognize a user gesture input in the second gesture area 530 through the motion sensor 107.
  • the controller 170 may perform a control operation of scrolling the entire channel list 450 included in the image screen 400 displayed on the basis of the user gesture input in the second gesture area 530 in an upward direction. Accordingly, when the controller 170 acquires a user gesture input moving upward in the second gesture area 530, the controller 170 may scroll the entire channel list 450 included in the displayed video screen 400 upward. Can be.
  • the controller 170 may scroll the entire channel list 450 included in the displayed video screen 400 downward. have.
  • the controller 170 may perform an operation corresponding to a user input in the second gesture region 530 based on the user gesture operation.
  • the description of the operation corresponding to the user input in the second gesture area 530 is an example for description, and is not limited thereto. Therefore, an operation corresponding to a user input in the second gesture region 530 may be variously set according to a user's or designer's selection.
  • the image projection apparatus 100 may project an image corresponding to a distance from a point to be projected, thereby providing a high quality image.
  • the present invention may be linked to the terminal 200, the operation screen and sound for the associated terminal 200 can be output through the image projection apparatus 100.
  • the present invention may perform a variety of control operations based on the user input for the area between the image projection apparatus 100 and the image screen 400, each different control operation according to the distance to the image screen 400 In this case, the user can easily control the image projection apparatus 100 without directly inputting the image projection apparatus 100 or the input apparatus.
  • the above-described method may be implemented as code that can be read by a processor in a medium in which a program is recorded.
  • processor-readable media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like, and may be implemented in the form of a carrier wave (for example, transmission over the Internet). Include.
  • the above-described image projection apparatus may not be limitedly applied to the configuration and method of the embodiments described above, but the embodiments may be configured by selectively combining all or some of the embodiments so that various modifications may be made. May be

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명의 실시 예에 따른 영상 투사 장치는 영상을 투사하고， 투사된 영상에 대응하는 영상 화면이 표시되는 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에 대한 사용자 제스처 동작을 감지하고， 감지된 제스처 동작에 대응하는 제어 동작을 수행한다. 상기 사용자 제스처 동작을 감지하는 동작은 상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역을 복수의 영역으로 구분하고， 구분된 복수의 영역에 대한 사용자 제스처 동작을 감지하는 것을 포함한다.

Description

영상 투사 장치 및 그의 동작 방법
본 발명은 영상 투사 장치 및 그의 동작 방법에 관한 것으로, 보다 상세하게는 투사된 영상에 대한 사용자의 제스처를 감지하고, 감지된 사용자의 제스처에 대응하는 동작을 수행하는 영상 투사 장치 및 그의 동작 방법에 관한 것이다.
최근 들어, 영상을 표시하는 방법은 디스플레이 장치를 통해 표시되는 방법뿐만 아니라 프로젝터와 같이 영상 투사 장치를 통해 영상을 표시하는 방법도 이용된다.
디스플레이 장치를 통한 영상 표시는 화면 크기의 한계가 있고, 디스플레이 장치의 화면에만 영상을 표시할 수 밖에 없는 단점이 있다.
반면에 프로젝터와 같은 영상 투사 장치는 디스플레이 장치보다 큰 화면을 제공할 수 있으며, 영상을 투사하는 방향에 따라 다양한 위치에 영상을 표시할 수 있는 장점이 있다.
하지만, 영상 투사 장치는 영상이 투사되는 지점과 영상 투사 장치 사이의 거리, 각도 등에 따라 표시되는 영상의 크기, 화질의 차이가 크다는 문제점이 있다. 이에 따라 영상 투사 장치와 영상이 투사되는 지점 간의 거리에 따라 영상 투사 장치가 투사하는 영상의 화질 등을 적절히 조절할 필요성이 있다.
한편, 최근에는 다양한 터치 방식을 통해 디스플레이 장치에 표시된 화면을 사용자가 직접 터치하는 방식의 입력 방식이 널리 사용되고 있다. 터치 방식의 사용자 입력 방식은 표시된 화면에 대해 사용자가 직접적인 터치 동작을 할 수 있어서, 사용자가 입력 방식, 사용 방식을 직관적으로 인식할 수 있는 장점이 있다.
하지만 영상 투사 장치는 일정한 디스플레이가 없는 특징으로 인해 터치 방식을 통한 사용자 입력을 수신하지 못하는 단점이 있다.
본 발명은 영상이 투사될 지점까지의 거리에 대응하는 영상을 투사하여, 고 화질의 영상을 사용자에 제공하는데 목적이 있다.
또한, 본 발명은 투사되는 화면에 대한 사용자의 제스처 동작을 인식하여, 투사되는 영상에 대한 제어 동작을 수행하는데 목적이 있다.
본 발명의 실시 예에 따른 영상 투사 장치의 동작 방법은 영상을 투사하는 단계; 투사된 영상에 대응하는 영상 화면이 표시되는 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에 대한 사용자 제스처 동작을 감지하는 단계; 및 감지된 제스처 동작에 대응하는 제어 동작을 수행하는 단계를 포함한다.
본 발명의 실시 예에 따른 영상 투사 장치는 영상을 투사하는 영상 투사부; 투사된 영상에 대응하는 영상 화면이 표시되는 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에 대한 사용자 제스처 동작을 감지하는 센싱부; 및 상기 센싱부가 감지한 사용자 제스처 동작에 대응하는 제어 동작을 수행하는 제어부를 포함한다.
본 발명의 다양한 실시 예에 따르면, 본 발명은 영상이 투사되는 지점의 거리에 대응하는 영상을 투사할 수 있어서, 고화질의 영상을 사용자에 제공할 수 있다.
또한, 본 발명은 사용자의 투사되는 영상에 대한 다양한 사용자 제스처 동작을 인식할 수 있어서, 사용자가 원하는 동작 및 기능을 용이하게 실행할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 영상 투사 장치의 구성을 블록도로 도시한 것이다.
도 2는 본 발명의 일 실시 예에 따른 영상 투사의 개념도이다.
도 3은 본 발명의 다른 실시 예에 따른 영상 투사의 개념도이다.
도 4는 본 발명의 일 실시 예에 따른 단말기의 블록도이다.
도 5는 본 발명의 일 실시 예에 따른 영상 투사 장치의 동작 방법을 나타내는 흐름도이다.
도 6은 본 발명의 일 실시 예에 따른 영상 투사를 나타낸다.
도 7은 본 발명의 다른 실시 예에 따른 영상 투사를 나타낸다.
도 8은 본 발명의 일 실시 예에 따른 단말기 연동 표시를 나타낸다.
도 9는 본 발명의 일 실시 예에 따른 전화 수신에 따른 영상 화면의 예시도이다.
도 10은 본 발명의 일 실시 예에 따른 사용자 제스처 영역을 나타낸다.
도 11은 본 발명의 일 실시 예에 따른 제1 제스처 영역을 나타낸다.
도 12는 본 발명의 일 실시 예에 따른 메뉴 표시 화면을 나타낸다.
도 13은 본 발명의 일 실시 예에 따른 메뉴 표시 화면에 대한 사용자 입력을 나타낸다.
도 14는 본 발명의 일 실시 예에 따른 음량 조절 화면을 나타낸다.
도 15는 본 발명의 일 실시 예에 따른 음량 조절 화면에 대한 사용자 입력을 나타낸다.
도 16은 본 발명의 일 실시 예에 따른 제2 제스처 영역을 나타낸다.
도 17은 본 발명의 일 실시 예에 따른 사용자 제스처 입력을 나타낸다.
도 18은 본 발명의 일 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
도 19는 본 발명의 다른 실시 예에 따른 사용자 제스처 입력을 나타낸다.
도 20은 본 발명의 다른 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
도 21은 본 발명의 일 실시 예에 따른 전체 채널 목록 표시 화면을 나타낸다.
도 22는 다른 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
이하, 본 발명과 관련된 실시 예에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예에 따른 영상 투사 장치의 동작 방법 및 그를 이용한 영상 투사 장치에 관하여 상세히 설명한다.
본 발명의 실시 예에 따른 영상 투사 장치는, 예를 들어 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 영상 투사 장치로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가되어, 음성 명령 인식, 제스처 동작 인식, 수기 방식의 입력 장치, 터치 스크린 또는 공간 리모콘 등 보다 사용에 편리한 인터페이스를 갖출 수 있다. 그리고, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행 가능하다. 이러한 다양한 기능을 위해 표준화된 범용 OS가 사용될 수 있다.
따라서, 본 발명에서 기술되는 영상 투사 장치는, 예를 들어 범용의 OS 커널 상에, 다양한 애플리케이션이 자유롭게 추가되거나 삭제 가능하므로, 사용자 친화적인 다양한 기능이 수행될 수 있다. 상기 영상 투사 장치는, 보다 구체적으로 예를 들면, 영상 프로젝터가 될 수 있으며, 경우에 따라 스마트폰에도 적용 가능하다.
도 1은 본 발명의 일 실시 예에 따른 영상 투사 장치의 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 영상 투사 장치(100)는 센싱부(105), 음성 획득부(110), 영상 획득부(120), 방송 수신부(130), 외부 장치 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 통신부(160), 제어부(170), 영상 투사부(180), 오디오 출력부(185), 전원공급부(190)를 포함할 수 있다.
센싱부(105)는 영상 투사 장치 내 정보, 영상 투사 장치를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(105)는 거리 센서(106), 근접센서(proximity sensor), 조도 센서(illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor, 107), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 건강케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 영상 투사 장치(100)는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
음성 획득부(110)는 음성을 획득할 수 있다.
음성 획득부(110)는 적어도 하나 이상의 마이크를 포함할 수 있어서, 포함된 마이크를 통해 음성을 획득할 수 있다.
그리고 음성 획득부(110)는 획득된 음성을 제어부(170)에 전달할 수 있다.
영상 획득부(120)는 영상을 획득할 수 있다.
영상 획득부(120)는 적어도 하나 이상의 카메라를 포함할 수 있어서, 포함된 카메라를 통해 영상을 획득할 수 있다. 이에 따라, 영상 획득부(120)는 사용자에 대한 영상을 획득할 수 있다. 또한, 영상 획득부(120)는 사용자의 홍채, 정맥과 같은 생체 정보에 대한 영상도 획득할 수 있다.
그리고 영상 획득부(120)는 획득한 영상을 제어부(170)에 전달할 수 있다.
한편, 음성 획득부(110)와 영상 획득부(120)는 사용자입력 인터페이스부(150)에 포함될 수 있다.
한편, 방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부(133)를 포함할 수 있다.
외부 장치 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.
외부 장치 인터페이스부(135)는 외부 장치와 연결하기 위한 단자(terminal)를 포함할 수 있어서, 외부 장치의 커넥터(connecter)와 연결될 수 있다.
외부 장치 인터페이스부(135)는 전원 공급부(190)로부터 공급받은 전원을 연결된 외부 장치에 구동 전원으로 공급할 수 있다.
또한, 외부 장치 인터페이스부(135)는 외부 장치가 송신한 동작 신호를 제어부(170)에 전달할 수 있다.
한편, 외부 장치 인터페이스부(135)는 외부 장치의 연결을 감지할 수 있는 센서가 포함될 수 있어서, 외부 장치의 연결을 인식할 수 있다.
네트워크 인터페이스부(133)는 영상 투사 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
또한, 영상 투사 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 영상 투사 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
그리고 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
또한, 저장부(140)는 외부 장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.
저장부(140)는 외부 장치 인터페이스부(135) 또는 네트워크 인터페이스부(133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.
또한, 저장부(140)는 사용자의 생체 정보를 저장할 수 있다. 여기서 사용자의 생체 정보란, 사용자의 지문, 홍채, 정맥, 얼굴, 음성과 같은 사용자의 신체와 관련된 고유의 정보를 의미할 수 있다.
영상 투사 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.
저장부(140)는 사용자에 대한 개인화 서비스 정보를 저장할 수 있다. 여기서 사용자에 대한 개인화 서비스 정보는 사용자가 자주 사용하는 기능, 자주 시청하는 채널, 컨텐츠 및 사용자가 설정한 설정값 중 하나 이상에 대한 정보를 포함할 수 있다. 그리고 사용자에 대한 개인화 서비스 정보는 복수의 사용자 각각에 대해 개인화된 기능, 개인화된 메뉴에 대한 정보를 포함할 수 있다.
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), WB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(300)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(300)로 송신하도록 처리할 수 있다.
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.
통신부(160)는 영상 투사 장치(100)와 네트워크 또는 영상 투사 장치(100)와 주변 기기가 유선 통신 또는 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 여기서 주변 기기는 후술할 단말기(200), 원격제어장치(300) 중 하나 이상을 포함할 수 있다.
예를 들면, 통신부(160)는 인터넷 접속을 위한 인터넷 모듈을 포함할 수 있으며, 인터넷 모듈을 통해 유선 또는 무선 통신을 통해 영상 투사 장치(100)가 인터넷에 접속할 수 있도록 할 수 있다.
다른 예를 들면, 통신부(160)는 영상 투사 장치(100)와 다른 기기가 무선 통신할 수 있도록 근거리 통신 모듈을 포함할 수 있다. 일 실시예로 통신부(160)에 포함된 근거리 통신 모듈은 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, WLAN(Wireless LAN)(Wi-Fi), NFC(Near Field Communication) 등을 이용할 수 있다. 여기서 다른 기기는 후술할 단말기(200)일 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 영상 투사부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부 장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부 장치 인터페이스부(135)를 통하여 외부 장치로 입력될 수 있다.
그 외, 제어부(170)는 영상 투사 장치(100) 내의 전반적인 동작을 제어할 수 있다.
제어부(170)는 외부 장치 인터페이스부(135)로부터 외부 장치의 연결에 대한 감지 신호를 입력받아, 외부 장치 인터페이스부(135)를 통해 연결된 외부 장치에 구동 전원이 전달되도록 전원 공급부(190)를 제어할 수 있다.
또한, 제어부(170)는 음성 획득부(110)를 통해 획득한 음성을 인식하여, 인식된 음성에 대응하는 제어 동작을 수행할 수 있다.
그리고 제어부(170)는 사용자의 음성에 대한 복수의 음성 신호를 비교하고, 가장 품질 좋은 음성 신호의 음성을 인식하여, 인식된 음성에 대응하는 제어 동작을 수행할 수 있다.
제어부(170)는 복수의 마이크가 구비된 음성 획득부(110)로부터 획득된 복수의 음성을 비교하여 사용자의 위치를 판단할 수 있다. 구체적으로 제어부(170)는 복수의 마이크 각각이 획득한 음성을 비교하여, 음성을 발화한 사용자의 위치를 판단할 수 있다.
한편, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상 투사 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 영상 투사 장치(100) 내로 다운받을 수 있도록 할 수 있다.
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 영상 투사부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부 장치 영상 재생 명령에 따라, 외부 장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 영상 투사부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.
한편, 제어부(170)는 영상을 표시하도록 영상 투사부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부 장치 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 영상 투사부(180)에서 투사되도록 제어할 수 있다. 이 경우, 영상 투사부(180)에서 투사되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
또한, 제어부(170)는 영상 투사 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로 부터 입력되는 외부 입력 컨텐츠가 투사되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.
또한, 제어부(170)는 입력된 사용자의 생체 정보, 패턴 정보 중 하나 이상을 기 저장된 생체 정보, 패턴 정보 중 하나 이상과 비교할 수 있다. 이에 따라 제어부(170)는 기 저장된 생체 정보, 패턴 정보 중 하나 이상에서 입력된 사용자의 생체 정보와 동일한 생체 정보를 검색할 수도 있다.
또한, 제어부(170)는 입력된 사용자의 생체 정보, 패턴 정보 중 하나 이상을 기초로 입력된 생체 정보, 패턴 정보 중 하나 이상에 대응하는 사용자의 개인화 서비스 정보를 획득할 수 있다. 예를 들면, 제어부(180)는 수신된 사용자의 지문 이미지 또는 지문에 대한 정보를 기초로, 사용자를 인식할 수 있다. 그리고 제어부(180)는 인식된 사용자에 대응하는 개인화 서비스 정보를 획득할 수 있다.
또한, 제어부(170)는 영상이 투사될 지점까지의 거리를 기초로 투사될 영상을 조절할 수 있다.
영상 투사부(180)는 다양한 영상을 투사할 수 있다.
영상 투사부(180)는 광원부(181), 렌즈부(182), 반사부(183)를 포함할 수 있다.
광원부(181)는 빔을 발광한다.
렌즈부(182)는 광원부(181)에서 발생된 빔의 소정 파장만을 선택적으로 투과시킨다.
반사부(183)는 렌즈부(182)에서 투과된 빔을 반사시킨다. 또한, 반사부(183)는 상하좌우 방향으로 회전 가능하여, 투과된 빔을 다양한 방향으로 반사시킬 수도 있다.
영상 투사부(180)는 광원부(181)에서 발광하는 빔이 렌즈부(182)를 통과하여 투사될 지점에 영상을 투사할 수 있다.
또한, 영상 투사부(180)는 광원부(181)에서 발광하는 빔이 렌즈부(182)를 통과하고, 반사부(183)에서 반사되어, 투사될 지점에 영상을 투사할 수도 있다.
이를 도 2 내지 도 3을 참고하여 설명한다.
도 2는 본 발명의 일 실시 예에 따른 영상 투사의 개념도이다.
도 2를 참조하면, 영상 투사부(180)는 광원부(181)에서 발생된 빔이 렌즈부(182)를 통과하고, 반사부(183)에서 반사되어 투사될 지점에 영상을 투사되도록 할 수 있다. 이에 따라 영상이 투사되는 일면에는 영상 투사부(180)로부터 투사된 영상이 표시되는 영상 화면(400)이 표시될 수 있다.
도 3은 본 발명의 다른 실시 예에 따른 영상 투사의 개념도이다.
도 3을 참조하면, 영상 투사부(180)는 광원부(181)에서 발생된 빔이 렌즈부(182)를 통과하여 투사될 지점에 영상을 투사되도록 할 수 있다. 이에 따라 영상이 투사되는 일면에는 영상 투사부(180)로부터 투사된 영상이 표시되는 영상 화면(400)이 표시될 수 있다.
이와 같이 영상 투사부(180)는 반사부(183)를 이용하여, 다양한 투사 방향으로 영상을 투사할 수 있다.
영상 투사부(180)의 영상 투사 방법에 대한 내용은 공지 기술이므로 자세한 내용은 생략한다.
영상 투사부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부 장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.
한편, 도 1에 도시된 영상 투사 장치(100)는 본 발명의 일 실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 영상 투사 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
본 발명의 또 다른 실시예에 따르면, 영상 투사 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부 장치 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.
예를 들어, 영상 투사 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 이미지 표시 방법은 도 1을 참조하여 설명한 바와 같은 영상 투사 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 영상 투사부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.
다음으로, 도 4를 참조하여, 본 발명의 일 실시 예에 따른 단말기(200)에 대해 설명한다.
도 4는 본 발명의 일 실시 예에 따른 단말기(200)의 블록도이다.
도 4를 참조하면, 단말기(200)는 무선 통신부(210), A/V(Audio/Video) 입력부(220), 사용자 입력부(230), 센싱부(240), 출력부(250), 메모리(260), 인터페이스부(270), 제어부(280) 및 전원 공급부(290) 등을 포함할 수 있다. 도 4에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 단말기가 구현될 수도 있다.
이하, 상기 구성요소들에 대해 차례로 살펴본다.
무선 통신부(210)는 단말기(200)와 네트워크 사이 또는 단말기(200)와 영상 투사 장치(100) 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들면 무선 통신부(210)는 방송 수신 모듈, 이동통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈, 위치정보 모듈 중 하나 이상을 포함할 수 있다.
A/V(Audio/Video) 입력부(220)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(221)와 마이크(222) 등이 포함될 수 있다. 카메라(221)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(251)에 표시될 수 있다.
카메라(221)에서 처리된 화상 프레임은 메모리(260)에 저장되거나 무선 통신부(210)를 통하여 외부로 전송될 수 있다. 카메라(221)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.
마이크(222)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 무선 통신부(210)를 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(222)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다. 마이크(222)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.
사용자 입력부(230)는 사용자가 단말기(200)의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(230)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.
센싱부(240)는 단말기 내 정보, 단말기를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(240)는 근접센서(241, proximity sensor), 조도 센서(242, illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(221 참조)), 마이크로폰(microphone, 222 참조), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 건강케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 이동 단말기는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
이에 따라 센싱부(240)는 단말기(200)의 개폐 상태, 단말기(200)의 위치, 사용자 접촉 유무, 단말기의 방위, 단말기의 가속/감속 등과 같이 단말기(200)의 현 상태를 감지하여 단말기(200)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들어 단말기(200)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(290)의 전원 공급 여부, 인터페이스부(270)의 외부 기기 결합 여부 등을 센싱할 수도 있다.
출력부(250)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(251), 음향 출력 모듈(252), 알람부(253), 및 햅틱 모듈(254) 등이 포함될 수 있다.
디스플레이부(251)는 단말기(200)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 단말기(200)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.
디스플레이부(251)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
디스플레이부(251)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)(244)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(251)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서(244)는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.
터치 센서(244)는 디스플레이부(251)의 특정 부위에 가해진 압력 또는 디스플레이부(251)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서(244)는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.
터치 센서(244)에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(280)로 전송한다. 이로써, 제어부(280)는 디스플레이부(251)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.
음향 출력 모듈(252)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(210)로부터 수신되거나 메모리(260)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(252)은 단말기(200)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(252)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
알람부(253)는 단말기(200)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(253)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(251)나 음성 출력 모듈(252)을 통해서도 출력될 수 있어서, 그들(251,252)은 알람부(253)의 일부로 분류될 수도 있다.
햅틱 모듈(haptic module)(254)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(254)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(254)이 발생하는 진동의 세기와 패턴 등은 제어 가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.
메모리(260)는 제어부(280)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 상기 메모리(260)는 상기 터치스크린 상의 터치 입력 시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리(260)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 단말기(200)는 인터넷(internet)상에서 상기 메모리(260)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
인터페이스부(270)는 단말기(200)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(270)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 단말기(200) 내부의 각 구성 요소에 전달하거나, 단말기(200) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(270)에 포함될 수 있다.
식별 모듈은 단말기(200)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identity Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 단말기(200)와 연결될 수 있다.
제어부(controller, 280)는 통상적으로 단말기(200)의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(280)는 멀티 미디어 재생을 위한 멀티미디어 모듈(281)을 구비할 수도 있다. 멀티미디어 모듈(281)은 제어부(280) 내에 구현될 수도 있고, 제어부(280)와 별도로 구현될 수도 있다.
상기 제어부(280)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.
또한, 제어부(280)는 센싱부(240)로부터 획득한 센싱값을 기초로 사용자가 수행한 운동에 대한 정보를 획득할 수 있다. 예를 들면, 제어부(280)는 사용자의 이동 거리, 이동 속도 등을 획득하여, 사용자가 소모한 칼로리를 산출할 수 있다.
전원 공급부(290)는 제어부(280)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
한편, 이동 단말기는 사용자가 주로 손에 쥐고 사용하는 차원을 넘어서, 신체에 착용할 수 있는 웨어러블 디바이스(wearable device)로 확장될 수 있다. 이러한 웨어러블 디바이스에는 스마트 워치(smart watch), 스마트 글래스(smart glass), HMD(head mounted display) 등이 있다. 이하, 웨어러블 디바이스로 확장된 이동 단말기의 예들에 대하여 설명하기로 한다.
웨어러블 디바이스는 다른 단말기(200)와 데이터를 상호 교환(또는 연동) 가능하게 이루어질 수 있다. 근거리 통신 모듈(214)은, 단말기(200) 주변에 통신 가능한 웨어러블 디바이스를 감지(또는 인식)할 수 있다. 나아가, 제어부(280)는 감지된 웨어러블 디바이스가 단말기(200)와 통신하도록 인증된 디바이스인 경우, 단말기(200)에서 처리되는 데이터의 적어도 일부를, 근거리 통신 모듈(214)을 통하여 웨어러블 디바이스로 전송할 수 있다. 따라서, 사용자는 단말기(200)에서 처리되는 데이터를 웨어러블 디바이스를 통하여 이용할 수 있다. 예를 들어, 단말기(200)에 전화가 수신된 경우 웨어러블 디바이스를 통해 전화 통화를 수행하거나, 단말기(200)에 메시지가 수신된 경우 웨어러블 디바이스를 통해 상기 수신된 메시지를 확인하는 것이 가능하다.
이하, 도 5 내지 도 22를 참조하여, 영상 투사 장치(100)의 동작 방법을 설명한다.
도 5는 본 발명의 일 실시 예에 따른 영상 투사 장치(100)의 동작 방법을 나타내는 흐름도이다.
도 5를 참조하면, 영상 투사 장치(100)의 제어부(170)는 센싱부(105)를 통해 영상이 투사될 지점까지의 거리를 측정한다(S101).
센싱부(105)는 영상이 투사될 지점까지의 거리를 측정할 수 있다. 여기서 영상이 투사되는 지점을 영상 화면 영역이라고 할 수도 있다.
일 실시예로 센싱부(105)는 거리 센서(106)를 이용하여, 영상이 투사될 일면까지의 거리를 측정할 수 있다. 이에 따라, 제어부(170)는 센싱부(105)로부터 영상이 투사될 지점까지의 거리에 대한 정보를 획득할 수 있다.
영상 투사 장치(100)의 제어부(170)는 측정된 거리를 기초로 투사될 영상을 조절한다(S103).
제어부(170)는 측정된 거리를 기초로 투사될 영상의 초점, 크기, 화질 중 하나 이상을 조절할 수 있다. 예를 들면, 제어부(170)는 측정된 거리를 기초로 투사될 영상의 초점, 해상도, 크기, 밝기, 색상, 명암 중 하나 이상을 조절할 수 있다.
영상 투사 장치(100)의 제어부(170)는 영상 투사부(180)가 조절된 영상을 투사하도록 제어한다(S105).
제어부(170)는 영상 투사부(180)가 조절된 영상을 영상이 투사될 일면으로 투사하도록 제어할 수 있다.
이에 대해 도 6 내지 도 7을 참조하여 설명한다.
도 6은 본 발명의 일 실시 예에 따른 영상 투사를 나타낸다.
도 6을 참조하면, 제어부(170)는 영상 투사부(180)가 조절된 영상을 영상 화면 영역으로 투사하도록 제어할 수 있다. 이에 따라 영상이 투사되는 일면에는 영상 화면(400)이 표시될 수 있다. 한편, 영상 투사부(180)의 반사부(183)는 투사되는 영상에 대한 빔을 영상이 투사될 일면 방향으로 반사시킬 수 있다.
도 7은 본 발명의 다른 실시 예에 따른 영상 투사를 나타낸다.
도 7을 참조하면, 제어부(170)는 영상 투사부(180)가 조절된 영상을 투사될 일면으로 투사하도록 제어할 수 있다. 이에 따라 영상이 투사되는 일면에는 영상 화면(400)이 표시될 수 있다. 한편, 영상 투사부(180)의 반사부(183)는 투사되는 영상에 대한 빔을 영상이 투사될 일면 방향으로 반사시킬 수 있다. 여기서 반사부(183)는 빔의 반사 방향을 조절하여 도 5의 경우와 다른 일면에 영상을 투사할 수 있다. 이에 따라 영상 투사 장치(100)는 반사부(183)의 반사 방향 조절을 통해 다양한 방향으로 영상을 투사시킬 수 있다.
다시 도 5를 참조한다.
영상 투사 장치(100)의 제어부(170)는 단말기(200)를 검색한다(S107).
제어부(170)는 영상 투사 장치(100)의 일정 거리 내에 있는 단말기(200)를 검색할 수 있다.
일 실시 예로, 제어부(170)는 단말기(200)를 검색하기 위한 검색 신호를 생성하고, 생성된 검색 신호를 통신부(160)를 통해 일정 거리 내에 있는 단말기(200)에 전송할 수 있다. 그리고 제어부(170)는 통신부(160)를 통해 단말기(200)가 전송한 응답 신호를 수신할 수 있다.
다른 실시 예로, 제어부(170)는 단말기(200)가 영상 투사 장치(100)에 태깅(tagging)하는 동작에 따른 응답 신호를 수신할 수도 있다. 여기서 태깅하는 동작에 따른 응답 신호는 비접촉식 근접형 무선통신기술을 통한 신호일 수도 있다.
영상 투사 장치(100)의 제어부(170)는 검색된 단말기(200)로부터 동작 신호를 수신한다(S109).
제어부(170)는 통신부(160)를 통해 검색된 하나 이상의 단말기(200)로부터 영상 투사 장치(100)의 동작과 관련된 동작 신호를 수신할 수 있다.
여기서 동작 신호는 영상 투사 장치(100)를 제어하기 위한 신호일 수 있으며, 영상 투사 장치(100)가 투사하는 영상에 대한 영상 신호, 출력하는 음성에 대한 음성 신호일 수도 있다. 또한, 동작 신호는 단말기(200)에 표시되는 화면 및 출력되는 음성을 영상 투사 장치(100)를 통해 영상 화면(400)으로 표시하고, 음성으로 출력하기 위한 신호일 수도 있다.
영상 투사 장치(100)의 제어부(170)는 수신된 동작 신호에 대응하는 동작을 수행한다(S111).
제어부(170)는 단말기(200)로부터 수신된 동작 신호에 대응하는 동작을 수행할 수 있으며, 수신된 동작 신호에 대응하는 동작은 단말기(200)에서 수행되는 다양한 동작을 포함할 수 있다. 예를 들면, 단말기(200)로부터 수신된 동작 신호에 대응하는 동작은 음성 통화, 데이터 통신, 화상 통신, 애플리케이션 실행과 관련된 동작을 포함할 수 있다.
이를 도 8 내지 도 9를 참조하여 설명한다.
도 8은 본 발명의 일 실시 예에 따른 단말기 연동 표시를 나타낸다.
도 8을 참조하면, 제어부(170)는 영상 투사부(180)에서 투사되는 영상에 하나 이상의 단말기(200)가 검색되어, 검색된 단말기(200)와 연계되었음을 나타내는 단말기 연계 아이콘(420)을 표시할 수 있다. 이에 따라, 영상 투사부(180)에서 투사되는 영상에 따른 영상 화면(400)에는 단말기 연계 아이콘(420)이 표시될 수 있다.
또한, 제어부(170)는 검색된 단말기(200)로부터 동작 신호를 수신하여, 단말기(200)의 동작과 관련된 다양한 영상 화면(400) 및 음성을 출력할 수 있다. 예를 들면, 제어부(170)는 단말기(200)에 수신된 전화, 메시지, 알람 중 하나 이상에 대한 동작 신호를 수신하고, 수신된 동작 신호에 대응하는 영상 화면(400), 음성 중 하나 이상을 출력할 수 있다.
도 9는 본 발명의 일 실시 예에 따른 전화 수신에 따른 영상 화면의 예시도이다.
제어부(170)는 검색된 단말기(200)로부터 전화 수신에 대한 동작 신호를 통신부(160)를 통해 수신할 수 있다. 제어부(170)는 전화 수신에 대한 동작 신호를 수신하면, 수신된 전화 수신에 대한 동작 신호에 대응하는 영상 화면(400)에 전화 수신 알림창(470)을 표시할 수 있다. 이에 따라, 영상 투사부(180)에서 투사되는 영상에 따른 영상 화면(400)에는 전화 수신 알림창(470)이 표시될 수 있으며, 전화 발신자에 대한 정보(480)를 표시할 수도 있다. 여기서 전화 발신자에 대한 정보는 전화 발신자의 전화 번호, 이름, 사진, 메모 중 하나 이상이 포함될 수 있다.
상술한 예시는 제어부(170)의 단말기(200)로부터 수신된 동작 신호에 대응하는 동작 수행에 대한 설명을 위한 예시로, 이에 한정되지 않는다. 따라서, 영상 투사 장치(100)는 사용자 또는 설계자의 선택에 따라 단말기(200)가 수행할 수 있는 다양한 동작을 수행할 수 있다.
다시 도 5를 참조한다.
영상 투사 장치(100)의 제어부(170)는 사용자의 제스처 동작을 감지한다(S113).
제어부(170)는 센싱부(105), 영상 획득부(120) 중 하나 이상을 통해 사용자의 제스처 동작을 감지할 수 있다.
일 실시 예로, 제어부(170)는 센싱부(105)에 포함된 하나 이상의 센서를 통해 사용자의 움직임에 대한 정보를 획득하고, 획득된 정보를 기초로 사용자의 제스처 동작을 감지할 수 있다.
다른 실시 예로, 제어부(170)는 영상 획득부(120)가 획득한 사용자에 대한 영상을 기초로 사용자의 동작을 인식하고, 인식된 동작을 기초로 사용자의 제스처 동작을 감지할 수 있다.
한편, 제어부(170)는 영상 투사 장치(100)와 투사된 영상 화면(400) 사이의 영역에 대한 사용자 입력을 감지할 수 있다. 또한, 제어부(170)는 영상 투사 장치(100)와 투사된 영상 화면(400) 사이의 영역을 복수의 영역으로 구분하고, 구분된 복수의 영역 각각에 대한 사용자 입력을 감지할 수도 있다. 여기서 영상 투사 장치(100)와 영상 화면(400) 사이의 영역을 제스처 영역(500)이라고 할 수도 있다.
이를 도 10을 참조하여 설명한다.
도 10은 본 발명의 일 실시 예에 따른 사용자 제스처 영역을 나타낸다.
도 10을 참조하면, 영상 투사 장치(100)와 영상 화면(400) 사이의 제스처 영역(500)은 제1 제스처 영역(510)과 제2 제스처 영역(530)으로 구분될 수 있다.
일 실시 예로 영상 투사 장치(100)의 모션 센서(107)는 제스처 영역(500) 내의 사용자 움직임을 감지할 수 있다. 그리고 제어부(170)는 모션 센서(107)로부터 사용자 움직임에 대한 정보를 획득하여, 사용자 제스처 동작을 감지할 수 있다. 그리고 제어부(170)는 획득된 사용자 움직임에 대한 정보를 기초로 제스처 영역(500) 내의 제1 제스처 영역(510) 내에서의 사용자 움직임인지 또는 제2 제스처 영역(530) 내에서의 사용자 움직임인지 구분할 수 있다. 그리고 제어부(170)는 구분된 영역에 대응하는 동작을 수행할 수 있다. 이하, 자세히 설명한다.
다시 도 5를 참조한다.
영상 투사 장치(100)의 제어부(170)는 감지된 사용자 제스처 동작이 제1 제스처 영역 내인 것으로 판단하면(S115), 표시된 영상 화면(400)에 대응하는 제어 동작을 수행한다(S117).
제어부(170)는 센싱부(105)를 통해 감지된 사용자 제스처 동작이 제1 제스처 영역(510) 내의 움직임으로 판단하면, 표시된 영상 화면(400)에 대응하는 제어 동작을 수행할 수 있다. 여기서 표시된 영상 화면(400)에 대응하는 제어 동작은 영상 화면(400)에 표시된 메뉴, 알림창, 팝업창, 컨트롤 바 중 하나에 대응하는 제어 동작일 수 있다.
이에 대해 도 11 내지 도 15를 참조하여 설명한다.
도 11은 본 발명의 일 실시 예에 따른 제1 제스처 영역을 나타낸다.
도 11을 참조하면, 제1 제스처 영역(510)은 영상 투사 장치(100)와 영상 화면(400) 사이의 영역 중 영상 화면(400)에서 일정 거리 이내의 영역일 수 있다. 여기서 제1 제스처 영역(510)의 일정 거리는 사용자 또는 설계자의 선택에 따라 다양하게 설정될 수 있다.
제1 제스처 영역(510) 내의 사용자 제스처 동작에 대응하는 제어 동작의 일 실시 예를 도 12 내지 도 13을 참조하여 설명한다.
도 12는 본 발명의 일 실시 예에 따른 메뉴 표시 화면을 나타낸다.
도 13은 본 발명의 일 실시 예에 따른 메뉴 표시 화면에 대한 사용자 입력을 나타낸다.
도 12를 참조하면, 제어부(170)는 영상 투사 장치(100)의 기능과 관련된 메뉴창(410)이 포함된 영상 화면(400)을 영상 투사부(180)를 통해 투사할 수 있다. 이에 따라, 투사된 영상 화면(400)에는 영상 신호에 대응하는 화면 및 메뉴창(410)이 표시될 수 있다. 그리고 제어부(170)는 센싱부(105)에 포함된 모션 센서(107)를 통해 메뉴창(410)에 대응하는 사용자 입력을 획득할 수 있다. 여기서 메뉴창(410)에 대응하는 사용자 입력은 메뉴창(410)에 표시된 메뉴 중 하나의 메뉴를 선택하는 사용자 입력일 수 있다. 그리고 메뉴창(410)에 대응하는 사용자 입력은 제1 제스처 영역(510) 내의 사용자 제스처 입력일 수 있다. 이를 도 13을 참조하여 자세히 설명한다.
도 13을 참조하면, 제어부(170)는 모션 센서(107)를 통해 제1 제스처 영역(510) 내의 사용자 제스처 입력을 인식할 수 있다. 제어부(170)는 제1 제스처 영역(510) 내의 사용자 제스처 입력을 기초로 표시되는 영상 화면(400)에 대응하는 제어 동작을 수행할 수 있다. 이에 따라, 제어부(170)는 제1 제스처 영역(510) 내의 사용자 입력 및 사용자 입력에 대응하는 영상 화면(400)의 메뉴창(410)을 기초로 선택된 메뉴창(410)에 대응하는 동작을 수행할 수 있다.
제1 제스처 영역(510) 내의 사용자 제스처 동작에 대응하는 제어 동작의 다른 실시 예를 도 14 내지 도 15를 참조하여 설명한다.
도 14는 본 발명의 일 실시 예에 따른 음량 조절 화면을 나타낸다.
도 15는 본 발명의 일 실시 예에 따른 음량 조절 화면에 대한 사용자 입력을 나타낸다.
도 14를 참조하면, 제어부(170)는 영상 투사 장치(100)의 출력 음량과 관련된 음량 조절 바(430)가 포함된 영상 화면(400)을 영상 투사부(180)를 통해 투사할 수 있다. 이에 따라, 투사된 영상 화면(400)에는 영상 신호에 대응하는 화면 및 음량 조절 바(430)가 표시될 수 있다. 그리고 제어부(170)는 센싱부(105)에 포함된 모션 센서(107)를 통해 음량 조절 바(430)에 대응하는 사용자 입력을 획득할 수 있다. 여기서 음량 조절 바(430)에 대응하는 사용자 입력은 음량 조절 바(430)에 표시된 조절 탭의 위치를 이동하는 사용자 입력일 수 있다. 그리고 음량 조절 바(430)에 대응하는 사용자 입력은 제1 제스처 영역(510) 내의 사용자 제스처 입력일 수 있다. 이를 도 15를 참조하여 자세히 설명한다.
도 15를 참조하면, 제어부(170)는 모션 센서(107)를 통해 제1 제스처 영역(510) 내의 사용자 제스처 입력을 인식할 수 있다. 제어부(170)는 제1 제스처 영역(510) 내의 사용자 제스처 입력을 기초로 표시되는 영상 화면(400)에 대응하는 제어 동작을 수행할 수 있다. 이에 따라, 제어부(170)는 제1 제스처 영역(510) 내의 사용자 입력 및 사용자 입력에 대응하는 영상 화면(400)의 음량 조절 바(430)를 기초로 이동된 음량 조절 탭에 대응하는 동작을 수행할 수 있다.
이와 같이, 제어부(170)는 사용자 제스처 동작 및 표시된 영상 화면(400)을 기초로 제1 제스처 영역(510) 내의 사용자 입력에 대응하는 동작을 수행할 수 있다.
상술한 제1 제스처 영역(510) 내의 사용자 입력에 대응하는 동작에 대한 설명은 설명을 위한 예시로, 이에 한정되지 않는다. 따라서, 제1 제스처 영역(510) 내의 사용자 입력에 대응하는 동작은 사용자 또는 설계자의 선택에 따라 다양하게 설정될 수 있다.
다시 도 5를 참조한다.
영상 투사 장치(100)의 제어부(170)는 감지된 사용자 제스처 동작이 제2 제스처 영역 내인 것으로 판단하면(S119), 감지된 사용자 제스처 동작에 대응하는 제어 동작을 수행한다(S121).
제어부(170)는 센싱부(105)를 통해 감지된 사용자 제스처 동작이 제2 제스처 영역(510) 내의 움직임으로 판단하면, 감지된 사용자 제스처 동작에 대응하는 제어 동작을 수행할 수 있다.
도 16 내지 도 20을 참조하여 설명한다.
도 16은 본 발명의 일 실시 예에 따른 제2 제스처 영역을 나타낸다.
도 16을 참조하면, 제2 제스처 영역(530)은 영상 투사 장치(100)와 영상 화면(400) 사이의 영역 중 영상 화면(400)에서 일정 거리 밖의 영역일 수 있다. 따라서 제2 제스처 영역(530)은 제스처 영역(500) 중 제1 제스처 영역(510)을 제외한 영역일 수 있다.
제2 제스처 영역(530) 내의 사용자 제스처 동작에 대응하는 제어 동작의 일 실시 예를 도 17 내지 도 18을 참조하여 설명한다.
도 17은 본 발명의 일 실시 예에 따른 사용자 제스처 입력을 나타낸다.
도 18은 본 발명의 일 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
도 17을 참조하면, 제어부(170)는 영상 신호에 따른 영상 화면(400)을 영상 투사부(180)를 통해 투사할 수 있다. 이에 따라, 투사된 영상 화면(400)에는 영상 신호에 대응하는 화면이 표시될 수 있다. 그리고 제어부(170)는 센싱부(105)에 포함된 모션 센서(107)를 통해 사용자의 제스처 입력을 획득할 수 있다. 여기서 제스처 입력은 영상 화면(400)에 대해 우측 방향으로 움직이는 사용자 제스처 동작일 수 있다. 그리고 영상 화면(400)에 대해 우측 방향으로 움직이는 사용자 제스처 동작은 제2 제스처 영역(530) 내의 사용자 제스처 입력일 수 있다. 이를 도 18을 참조하여 자세히 설명한다.
도 18을 참조하면, 제어부(170)는 모션 센서(107)를 통해 제2 제스처 영역(530) 내의 사용자 제스처 입력을 인식할 수 있다. 제어부(170)는 제2 제스처 영역(530) 내의 사용자 제스처 입력을 기초로 표시되는 영상 화면(400)을 다른 채널로 전환하는 제어 동작을 수행할 수 있다. 이에 따라, 제어부(170)는 제2 제스처 영역(530) 내에서 우측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)의 채널을 다른 채널로 전환할 수 있다.
한편, 제어부(170)는 제2 제스처 영역(530) 내에서 좌측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)의 채널을 다른 채널로 전환하는 제어 동작을 수행할 수 있고, 이때 전환되는 채널은 우측 방향으로 움직이는 사용자 제스처 입력에 따라 전환되는 채널과 다른 채널일 수 있다.
제2 제스처 영역(530) 내의 사용자 제스처 동작에 대응하는 제어 동작의 다른 실시 예를 도 19 내지 도 20을 참조하여 설명한다.
도 19는 본 발명의 다른 실시 예에 따른 사용자 제스처 입력을 나타낸다.
도 20은 본 발명의 다른 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
도 19를 참조하면, 제어부(170)는 영상 신호에 따른 영상 화면(400)을 영상 투사부(180)를 통해 투사할 수 있다. 이에 따라, 투사된 영상 화면(400)에는 영상 신호에 대응하는 화면이 표시될 수 있다. 그리고 제어부(170)는 센싱부(105)에 포함된 모션 센서(107)를 통해 사용자의 제스처 입력을 획득할 수 있다. 여기서 제스처 입력은 영상 화면(400)에 대해 상측 방향으로 움직이는 사용자 제스처 동작일 수 있다. 그리고 영상 화면(400)에 대해 상측 방향으로 움직이는 사용자 제스처 동작은 제2 제스처 영역(530) 내의 사용자 제스처 입력일 수 있다. 이를 도 20을 참조하여 자세히 설명한다.
도 20을 참조하면, 제어부(170)는 모션 센서(107)를 통해 제2 제스처 영역(530) 내의 사용자 제스처 입력을 인식할 수 있다. 제어부(170)는 제2 제스처 영역(530) 내의 사용자 제스처 입력을 기초로 표시되는 영상 화면(400)에 대응하는 음성의 음량을 높이는 동작을 수행할 수 있다. 이에 따라, 제어부(170)는 제2 제스처 영역(530) 내에서 상측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)에 대응하는 음성의 음량을 높일 수 있다.
한편, 제어부(170)는 제2 제스처 영역(530) 내에서 하측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)에 대응하는 음성의 음량을 낮출 수도 있다.
제2 제스처 영역(530) 내의 사용자 제스처 동작에 대응하는 제어 동작의 다른 실시 예를 도 21 내지 도 22를 참조하여 설명한다.
도 21은 본 발명의 일 실시 예에 따른 전체 채널 목록 표시 화면을 나타낸다.
도 22는 다른 실시 예에 따른 제2 제스처 영역 내의 사용자 입력을 나타낸다.
도 21을 참조하면, 제어부(170)는 전체 채널에 대한 목록을 나타내는 전체 채널 목록(450)이 포함된 영상 화면(400)을 영상 투사부(180)를 통해 투사할 수 있다. 이에 따라, 투사된 영상 화면(400)에는 영상 신호에 대응하는 화면 및 전체 채널 목록(450)이 표시될 수 있다. 그리고 제어부(170)는 센싱부(105)에 포함된 모션 센서(107)를 통해 사용자 입력을 획득할 수 있다. 여기서 제스처 입력은 영상 화면(400)에 대해 상측 방향으로 움직이는 사용자 제스처 동작일 수 있다. 그리고 영상 화면(400)에 대해 상측 방향으로 움직이는 사용자 제스처 동작은 제2 제스처 영역(530) 내의 사용자 제스처 입력일 수 있다. 이를 도 22를 참조하여 자세히 설명한다.
도 22를 참조하면, 제어부(170)는 모션 센서(107)를 통해 제2 제스처 영역(530) 내의 사용자 제스처 입력을 인식할 수 있다. 제어부(170)는 제2 제스처 영역(530) 내의 사용자 제스처 입력을 기초로 표시되는 영상 화면(400)에 포함된 전체 채널 목록(450)을 상측 방향으로 스크롤하는 제어 동작을 수행할 수 있다. 이에 따라, 제어부(170)는 제2 제스처 영역(530) 내에서 상측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)에 포함된 전체 채널 목록(450)을 상측 방향으로 스크롤할 수 있다.
한편, 제어부(170)는 제2 제스처 영역(530) 내에서 하측 방향으로 움직이는 사용자 제스처 입력을 획득하면, 표시되는 영상 화면(400)에 포함된 전체 채널 목록(450)을 하측 방향으로 스크롤할 수 있다.
이와 같이, 제어부(170)는 사용자 제스처 동작을 기초로 제2 제스처 영역(530) 내의 사용자 입력에 대응하는 동작을 수행할 수 있다.
상술한 제2 제스처 영역(530) 내의 사용자 입력에 대응하는 동작에 대한 설명은 설명을 위한 예시로, 이에 한정되지 않는다. 따라서, 제2 제스처 영역(530) 내의 사용자 입력에 대응하는 동작은 사용자 또는 설계자의 선택에 따라 다양하게 설정될 수 있다.
이와 같이, 본 발명에 따른 영상 투사 장치(100)는 투사될 지점과의 거리에 대응하는 영상을 투사할 수 있어서, 고화질의 영상을 제공할 수 있다.
또한, 본 발명은 단말기(200)와 연계하여, 연계된 단말기(200)에 대한 동작 화면 및 음성을 영상 투사 장치(100)를 통해 출력할 수 있다.
또한, 본 발명은 영상 투사 장치(100)와 영상 화면(400) 사이의 영역에 대한 사용자 입력을 기초로 다양한 제어 동작을 수행할 수 있으며, 영상 화면(400)과의 거리에 따라 각각 다른 제어 동작을 수행할 수도 있어서, 사용자는 영상 투사 장치(100) 또는 입력 장치에 대한 직접적인 입력을 통하지 않고서도 영상 투사 장치(100)를 용이하게 제어할 수 있다.
본 발명의 일실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
상기와 같이 설명된 영상 투사 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (20)

  1. 영상 투사 장치의 동작 방법에 있어서,
    영상을 투사하는 단계;
    투사된 영상에 대응하는 영상 화면이 표시되는 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에 대한 사용자 제스처 동작을 감지하는 단계; 및
    감지된 제스처 동작에 대응하는 제어 동작을 수행하는 단계를 포함하는
    영상 투사 장치의 동작 방법.
  2. 제1항에 있어서,
    상기 사용자 제스처 동작을 감지하는 단계는
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역을 복수의 영역으로 구분하는 단계와,
    구분된 복수의 영역에 대한 사용자 제스처 동작을 감지하는 단계를 포함하고,
    상기 감지된 제스처 동작에 대응하는 제어 동작을 수행하는 단계는
    상기 구분된 복수의 영역에 대한 사용자 제스처 동작에 대응하는 제어 동작을 수행하는 단계를 포함하는
    영상 투사 장치의 동작 방법.
  3. 제2항에 있어서,
    상기 사용자 제스처 동작을 감지하는 단계는
    상기 복수의 영역을 제1 제스처 영역과 제2 제스처 영역으로 구분하는 단계와,
    구분된 제1 제스처 영역 및 제2 제스처 영역 각각에 대한 사용자 제스처 동작을 감지하는 단계를 포함하는
    영상 투사 장치의 동작 방법.
  4. 제3항에 있어서,
    상기 감지된 제스처 동작에 대응하는 제어 동작을 수행하는 단계는
    상기 감지된 제스처 동작이 상기 제1 제스처 영역에서 감지된 경우, 상기 감지된 제스처 동작 및 상기 영상 화면에 대응하는 제어 동작을 수행하는 단계를 포함하고,
    상기 감지된 제스처 동작이 상기 제2 제스처 영역에서 감지된 경우, 상기 감지된 제스처 동작에 대응하는 제어 동작을 수행하는 단계를 포함하는
    영상 투사 장치의 동작 방법.
  5. 제4항에 있어서,
    상기 감지된 제스처 동작 및 상기 영상 화면에 대응하는 제어 동작은
    상기 영상 화면에 표시된 메뉴, 메뉴창, 알림창, 팝업창, 컨트롤 바 중 하나에 대응하는 제어 동작인
    영상 투사 장치의 동작 방법.
  6. 제3항에 있어서,
    상기 제1 제스처 영역은
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에서 상기 영상 화면 영역에서 일정 거리 이내의 영역이고,
    상기 제2 제스처 영역은
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에서 상기 영상 화면 영역에서 일정 거리 밖의 영역인
    영상 투사 장치의 동작 방법.
  7. 제1항에 있어서,
    상기 영상 화면 영역까지의 거리를 측정하는 단계; 및
    측정된 거리를 기초로 상기 투사되는 영상을 조절하는 단계를 더 포함하는
    영상 투사 장치의 동작 방법.
  8. 제7항에 있어서,
    상기 측정된 거리를 기초로 상기 투사되는 영상을 조절하는 단계는
    상기 투사되는 영상의 초점, 해상도, 크기, 밝기, 색상, 명암 중 하나 이상을 조절하는 단계를 포함하는
    영상 투사 장치의 동작 방법.
  9. 제1항에 있어서,
    상기 영상 투사 장치의 일정 거리 내에 있는 단말기를 검색하는 단계;
    검색된 단말기로부터 상기 검색된 단말기의 동작과 관련된 동작 신호를 수신하는 단계; 및
    수신된 동작 신호에 대응하는 동작을 수행하는 단계를 더 포함하는
    영상 투사 장치의 동작 방법.
  10. 제9항에 있어서,
    상기 동작 신호는
    상기 검색된 단말기의 음성 통화, 데이터 통신, 화상 통신, 애플리케이션 실행 중 하나 이상과 관련된 동작에 대한 신호를 포함하는
    영상 투사 장치의 동작 방법.
  11. 영상 투사 장치에 있어서,
    영상을 투사하는 영상 투사부;
    투사된 영상에 대응하는 영상 화면이 표시되는 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에 대한 사용자 제스처 동작을 감지하는 센싱부; 및
    상기 센싱부가 감지한 사용자 제스처 동작에 대응하는 제어 동작을 수행하는 제어부를 포함하는
    영상 투사 장치.
  12. 제11항에 있어서,
    상기 제어부는
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역을 복수의 영역으로 구분하고, 상기 센싱부가 감지한 사용자 제스처 동작을 구분된 복수의 영역 각각에 대한 사용자 동작으로 구분하고, 상기 구분된 복수의 영역에 대한 사용자 제스처 동작에 대응하는 제어 동작을 수행하는
    영상 투사 장치.
  13. 제12항에 있어서,
    상기 제어부는
    상기 복수의 영역을 제1 제스처 영역과 제2 제스처 영역으로 구분하고, 상기 센싱부가 감지한 사용자 제스처 동작을 구분된 제1 제스처 영역 및 제2 제스처 영역 각각에 대한 사용자 제스처 동작을 구분하는
    영상 투사 장치.
  14. 제13항에 있어서,
    상기 제어부는
    상기 감지된 제스처 동작이 상기 제1 제스처 영역인 경우, 상기 감지된 제스처 동작 및 상기 영상 화면에 대응하는 제어 동작을 수행하고,
    상기 감지된 제스처 동작이 상기 제2 제스처 영역인 경우, 상기 감지된 제스처 동작에 대응하는 제어 동작을 수행하는
    영상 투사 장치.
  15. 제14항에 있어서,
    상기 감지된 제스처 동작 및 상기 영상 화면에 대응하는 제어 동작은
    상기 영상 화면에 표시된 메뉴, 메뉴창, 알림창, 팝업창, 컨트롤 바 중 하나에 대응하는 제어 동작인
    영상 투사 장치.
  16. 제13항에 있어서,
    상기 제1 제스처 영역은
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에서 상기 영상 화면 영역에서 일정 거리 이내의 영역이고,
    상기 제2 제스처 영역은
    상기 영상 화면 영역과 상기 영상 투사 장치 사이의 영역에서 상기 영상 화면 영역에서 일정 거리 밖의 영역인
    영상 투사 장치.
  17. 제11항에 있어서,
    상기 센싱부는
    상기 영상 화면 영역까지의 거리를 측정하고,
    상기 제어부는
    측정된 거리를 기초로 상기 투사되는 영상을 조절하는
    영상 투사 장치.
  18. 제17항에 있어서,
    상기 제어부는
    상기 측정된 거리를 기초로 상기 투사되는 영상의 초점, 해상도, 크기, 밝기, 색상, 명암 중 하나 이상을 조절하는
    영상 투사 장치.
  19. 제11항에 있어서,
    통신부를 더 포함하고,
    상기 제어부는
    상기 통신부를 통해 상기 영상 투사 장치의 일정 거리 내에 있는 단말기를 검색하고, 검색된 단말기로부터 상기 검색된 단말기의 동작과 관련된 동작 신호를 수신하고, 수신된 동작 신호에 대응하는 동작을 수행하는
    영상 투사 장치.
  20. 제19항에 있어서,
    상기 동작 신호는
    상기 검색된 단말기의 음성 통화, 데이터 통신, 화상 통신, 애플리케이션 실행 중 하나 이상과 관련된 동작에 대한 신호를 포함하는
    영상 투사 장치.
PCT/KR2014/008285 2014-08-28 2014-09-03 영상 투사 장치 및 그의 동작 방법 Ceased WO2016032039A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/507,751 US10429939B2 (en) 2014-08-28 2014-09-03 Apparatus for projecting image and method for operating same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140113439A KR102271184B1 (ko) 2014-08-28 2014-08-28 영상 투사 장치 및 그의 동작 방법
KR10-2014-0113439 2014-08-28

Publications (1)

Publication Number Publication Date
WO2016032039A1 true WO2016032039A1 (ko) 2016-03-03

Family

ID=55399917

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/008285 Ceased WO2016032039A1 (ko) 2014-08-28 2014-09-03 영상 투사 장치 및 그의 동작 방법

Country Status (3)

Country Link
US (1) US10429939B2 (ko)
KR (1) KR102271184B1 (ko)
WO (1) WO2016032039A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7434819B2 (ja) 2019-11-13 2024-02-21 カシオ計算機株式会社 投影装置、及び投影システム
WO2021142601A1 (en) * 2020-01-14 2021-07-22 Citrix Systems, Inc. Content resolution adjustment for passive display devices
CN111638786B (zh) * 2020-05-29 2023-07-07 电装天研究开发(天津)有限公司 车载后排投影显示系统的显示控制方法、装置、设备及存储介质
CN113473198B (zh) * 2020-06-23 2023-09-05 青岛海信电子产业控股股份有限公司 一种智能设备的控制方法及智能设备
CN111708207A (zh) * 2020-07-26 2020-09-25 河南恒鑫丰安防科技有限责任公司 多功能智慧玻璃系统
CN114584817B (zh) * 2020-11-30 2023-09-29 华为技术有限公司 投屏方法及系统
KR102471971B1 (ko) * 2021-12-29 2022-11-29 한국가스공사 하역암 조작 훈련 장치
KR20240134635A (ko) * 2023-03-02 2024-09-10 삼성전자주식회사 프로젝터 및 그의 동작 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100029166A (ko) * 2008-09-06 2010-03-16 (주)이컴정보기술 휴대용 모바일을 이용한 무선 빔 프로젝트 시스템
US20120154595A1 (en) * 2010-12-17 2012-06-21 Sony Ericsson Mobile Communications Ab Integrated Camera-Projection Device
KR20120128348A (ko) * 2011-05-17 2012-11-27 (주)에어로직스 원격 영상 전송 및 프로젝터 제어 시스템 및 그 방법
JP2013008368A (ja) * 2011-06-24 2013-01-10 Ricoh Co Ltd 仮想タッチスクリーンシステム及び双方向モード自動切換方法
JP2014029656A (ja) * 2012-06-27 2014-02-13 Soka Univ 画像処理装置および画像処理方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8180114B2 (en) * 2006-07-13 2012-05-15 Northrop Grumman Systems Corporation Gesture recognition interface system with vertical display
WO2012120958A1 (ja) * 2011-03-04 2012-09-13 株式会社ニコン 投影装置
US9104239B2 (en) * 2011-03-09 2015-08-11 Lg Electronics Inc. Display device and method for controlling gesture functions using different depth ranges
US8963883B2 (en) * 2011-03-17 2015-02-24 Symbol Technologies, Inc. Touchless interactive display system
US20160080708A1 (en) * 2013-04-26 2016-03-17 Hitachi Maxell, Ltd. Projection-type video display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100029166A (ko) * 2008-09-06 2010-03-16 (주)이컴정보기술 휴대용 모바일을 이용한 무선 빔 프로젝트 시스템
US20120154595A1 (en) * 2010-12-17 2012-06-21 Sony Ericsson Mobile Communications Ab Integrated Camera-Projection Device
KR20120128348A (ko) * 2011-05-17 2012-11-27 (주)에어로직스 원격 영상 전송 및 프로젝터 제어 시스템 및 그 방법
JP2013008368A (ja) * 2011-06-24 2013-01-10 Ricoh Co Ltd 仮想タッチスクリーンシステム及び双方向モード自動切換方法
JP2014029656A (ja) * 2012-06-27 2014-02-13 Soka Univ 画像処理装置および画像処理方法

Also Published As

Publication number Publication date
US10429939B2 (en) 2019-10-01
KR102271184B1 (ko) 2021-07-01
KR20160025929A (ko) 2016-03-09
US20170285760A1 (en) 2017-10-05

Similar Documents

Publication Publication Date Title
WO2016032039A1 (ko) 영상 투사 장치 및 그의 동작 방법
WO2016036017A1 (en) Portable terminal and method of controlling the same
WO2016006772A1 (en) Mobile terminal and method of controlling the same
WO2017048076A1 (en) Display apparatus and method for controlling display of display apparatus
WO2019160198A1 (ko) 이동 단말기 및 그 제어방법
WO2016010221A1 (ko) 이동 단말기 및 그 제어 방법
WO2012020864A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2012020863A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2016052874A1 (ko) 영상과 관련되는 리마크 정보 제공 방법 및 그 단말
WO2016010262A1 (en) Mobile terminal and controlling method thereof
WO2016064132A1 (en) Wearable device and method of transmitting content
WO2015194693A1 (ko) 영상 표시 기기 및 그의 동작 방법
WO2015194797A1 (en) Mobile terminal and method of controlling the same
WO2017135522A1 (ko) 미러형 디스플레이 장치 및 그 제어방법
WO2016175424A1 (ko) 이동 단말기 및 그 제어 방법
WO2018124334A1 (ko) 전자장치
WO2015194723A1 (ko) 이동단말기 및 그 제어방법
WO2017010595A1 (ko) 키보드 및 이를 구비하는 단말 시스템
WO2015126012A1 (ko) 이동단말기 및 그 제어방법
WO2015057013A1 (ko) 휴대용 장치가 웨어러블 장치를 통하여 정보를 표시하는 방법 및 그 장치
WO2016093633A1 (ko) 컨텐트를 표시하는 방법 및 디바이스
WO2016039509A1 (ko) 단말기 및 그 동작 방법
WO2016076561A2 (en) Method of controlling device and device for performing the method
WO2017030212A1 (ko) 이동 단말기 및 그 제어 방법
WO2016200005A1 (en) Mobile terminal and display operating method thereof

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14900827

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 15507751

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 14900827

Country of ref document: EP

Kind code of ref document: A1