[go: up one dir, main page]

KR102630681B1 - 디스플레이 장치 및 캡처 이미지 생성 방법 - Google Patents

디스플레이 장치 및 캡처 이미지 생성 방법 Download PDF

Info

Publication number
KR102630681B1
KR102630681B1 KR1020160131357A KR20160131357A KR102630681B1 KR 102630681 B1 KR102630681 B1 KR 102630681B1 KR 1020160131357 A KR1020160131357 A KR 1020160131357A KR 20160131357 A KR20160131357 A KR 20160131357A KR 102630681 B1 KR102630681 B1 KR 102630681B1
Authority
KR
South Korea
Prior art keywords
image
display
capture
viewpoint
captured images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020160131357A
Other languages
English (en)
Other versions
KR20180039939A (ko
Inventor
김정근
고창석
김석현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160131357A priority Critical patent/KR102630681B1/ko
Priority to US15/604,783 priority patent/US10440266B2/en
Priority to EP17860954.1A priority patent/EP3476118A4/en
Priority to CN201780062638.XA priority patent/CN109804620A/zh
Priority to PCT/KR2017/006788 priority patent/WO2018070638A1/en
Publication of KR20180039939A publication Critical patent/KR20180039939A/ko
Application granted granted Critical
Publication of KR102630681B1 publication Critical patent/KR102630681B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/354—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying sequentially
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

디스플레이 장치가 개시된다. 본 디스플레이 장치는, 파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 디스플레이, 캡처 명령을 입력받으면, 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점을 갖는 캡처 이미지를 생성하는 프로세서, 및, 생성된 캡처 이미지를 저장하는 저장부를 포함한다.

Description

디스플레이 장치 및 캡처 이미지 생성 방법{DISPLAY APPARATUS AND METHOD FOR GENERATING CAPTURE IMAGE}
본 개시는 디스플레이 장치 및 캡처 이미지 생성 방법에 관한 것으로, 파노라마 영상에 대한 복수의 시점을 갖는 캡처 이미지를 생성할 수 있는 디스플레이 장치 및 캡처 이미지 생성 방법에 관한 것이다.
디스플레이 장치는 외부로부터 수신된 디지털 또는 아날로그 영상신호 또는 내부 저장장치에 다양한 포맷의 압축 파일로 저장된 다양한 영상신호 등을 처리하여 표시하는 장치이다. 이때 외부로부터 수신되는 디지털 영상신호는 방송국, 디지털 위성방송 신호, 또는 각종 외부 장치(예를 들어, 셋톱박스(set-top box), 디스크 재생기, 모바일 기기, PC 등)이나 인터넷 프로토콜 의거한 서버로부터 전송된 신호 등일 수 있다.
최근의 디스플레이 장치는 하나의 시점을 갖는 일반적인 영상뿐만 아니라 복수의 시점으로 표시 가능한 파노라마 영상에 대해서도 재생이 가능해졌다.
이러한 파노라마 영상을 시청 중에 사용자는 원하는 화면을 캡처할 수 있는데, 종래의 디스플레이 장치는 화면상에 표시되는 화면만을 캡처하였다.
따라서, 사용자가 다양한 시점의 캡처 이미지를 얻기 위해서는 여러 번의 시점 변경 명령과 각 변경된 시점에서 캡처 명령을 반복적으로 입력하여야 하는 불편함이 있었다.
본 개시는 상술한 문제를 해결하기 위한 것으로, 본 개시의 목적은 파노라마 영상에 대한 복수의 시점을 갖는 캡처 이미지를 생성할 수 있는 디스플레이 장치 및 캡처 이미지 생성 방법을 제공하는 데 있다.
이상과 같은 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 디스플레이 장치는, 파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 디스플레이, 캡처 명령을 입력받으면, 상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점을 갖는 캡처 이미지를 생성하는 프로세서, 및 상기 생성된 캡처 이미지를 저장하는 저장부를 포함한다.
이 경우, 상기 프로세서는 상기 파노라마 영상의 현재 표시 프레임의 전체 이미지를 하나의 캡처 이미지로 생성할 수 있다.
이 경우, 상기 프로세서는 현재 표시 중인 제1 시점을 기준점으로 하나의 캡처 이미지를 생성할 수 있다.
또는 상기 프로세서는 현재 표시 중인 제1 시점에 대한 정보를 메타 데이터에 포함하여 하나의 캡처 이미지를 생성할 수 있다.
한편, 상기 프로세서는 상기 파노라마 영상의 현재 표시 프레임의 복수의 시점에 대응되는 복수의 캡처 이미지를 생성할 수 있다.
이 경우, 상기 복수의 캡처 이미지는 현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지일 수 있다.
한편, 본 디스플레이 장치는 캡처 명령 및 현재 표시된 영상에서 특정 오브젝트를 선택받는 조작부를 더 포함할 수 있다.
이 경우, 상기 프로세서는 상기 파노라마 영상의 재생 중에 상기 선택받은 오브젝트에 검출되면 반복적으로 캡처 이미지를 생성할 수 있다.
또는 상기 프로세서는 상기 선택받은 특정 오브젝트를 중심으로 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다.
한편, 상기 프로세서는 기저장된 복수의 시점을 갖는 캡처 이미지에 대한 표시 명령을 입력받으면, 상기 복수의 시점을 갖는 캡처 이미지 내에서 캡처 시의 시점(view point)에 대응되는 영역을 디스플레이하도록 상기 디스플레이를 제어할 수 있다.
한편, 상기 파노라마 영상은, 360도의 뷰를 갖는 파노라마 영상일 수 있다.
한편, 본 개시의 일 실시 예에 따른 캡처 이미지 생성 방법은 파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 단계, 캡처 명령을 입력받는 단계, 상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점을 갖는 캡처 이미지를 생성하는 단계, 및 상기 생성된 캡처 이미지를 저장하는 단계를 포함한다.
이 경우, 상기 생성하는 단계는 상기 파노라마 영상의 현재 표시 프레임의 전체 이미지를 하나의 캡처 이미지로 생성할 수 있다.
이 경우, 상기 생성하는 단계는 현재 표시 중인 제1 시점을 기준점으로 하나의 캡처 이미지를 생성할 수 있다.
한편, 상기 생성하는 단계는 현재 표시 중인 제1 시점에 대한 정보를 메타 데이터에 포함하여 하나의 캡처 이미지를 생성할 수 있다.
한편, 상기 생성하는 단계는 상기 파노라마 영상의 현재 표시 프레임의 복수의 시점에 대응되는 복수의 캡처 이미지를 생성할 수도 있다.
이 경우, 상기 복수의 캡처 이미지는 현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지일 수 있다.
한편, 본 캡처 이미지 생성 방법은 현재 표시된 영상에서 특정 오브젝트를 선택받는 단계를 더 포함하고, 상기 생성하는 단계는 상기 파노라마 영상의 재생 중에 상기 선택받은 오브젝트에 검출되면 반복적으로 캡처 이미지를 생성할 수 있다.
한편, 본 캡처 이미지 생성 방법은 현재 표시된 영상에서 특정 오브젝트를 선택받는 단계를 더 포함하고, 상기 생성하는 단계는 상기 선택받은 특정 오브젝트를 중심으로 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다.
한편, 본 개시의 일 실시 예에 따른 캡처 이미지 생성 방법을 실행하기 위한 프로그램을 포함하는 컴퓨터 판독가능 기록매체에 있어서, 상기 캡처 이미지 생성방법은 파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 단계, 캡처 명령을 입력받는 단계, 상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점을 갖는 캡처 이미지를 생성하는 단계, 및 상기 생성된 캡처 이미지를 저장하는 단계를 포함한다.
도 1은 본 개시의 일 실시 예에 따른 디스플레이 장치의 간단한 구성을 나타내는 블록도,
도 2는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구체적인 구성을 나타내는 블록도,
도 3은 파노라마 영상 내의 여러 시점 영상들을 설명하기 위한 도면,
도 4는 디스플레이 장치에서의 파노라마 영상의 표시 예를 도시한 도면,
도 5는 본 개시의 일 실시 예에 따른 캡처 명령이 입력된 경우의 디스플레이의 표시 예를 도시한 도면,
도 6은 제2 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면이다.
도 7은 제3 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면이다.
도 8은 오브젝트를 기준으로 캡처 이미지를 생성하는 실시 예를 설명하기 위한 도면,
도 9는 제4 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면,
도 10은 본 개시의 일 실시 예에 따라 캡처 이미지를 표시하는 동작을 설명하기 위한 도면, 그리고,
도 11은 본 개시의 일 실시 예에 따른 캡처 이미지의 생성 방법을 설명하기 위한 흐름도이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 개시에 대해 구체적으로 설명하기로 한다.
본 개시의 실시 예에서 사용되는 용어는 본 개시에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 개시의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 개시에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 정의되어야 한다.
본 개시의 실시 예들은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 특정한 실시 형태에 대해 범위를 한정하려는 것이 아니며, 개시된 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 실시 예들을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다." 또는 "구성되다." 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 개시의 실시 예에서 '모듈' 혹은 '부'는 적어도 하나의 기능이나 동작을 수행하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 '모듈' 혹은 복수의 '부'는 특정한 하드웨어로 구현될 필요가 있는 '모듈' 혹은 '부'를 제외하고는 적어도 하나의 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 개시의 실시 예에 대하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
이하에서는 도면을 참조하여 본 개시에 대해 더욱 상세히 설명하기로 한다.
도 1은 본 개시의 일 실시 예에 따른 디스플레이 장치의 간단한 구성을 나타내는 블록도이다.
도 1을 참조하면, 본 개시의 일 실시 예에 따른 디스플레이 장치(100)는 디스플레이(110), 프로세서(120) 및 저장부(130)로 구성된다. 여기서 디스플레이 장치(100)는 영상을 표시하는 장치로, 예를 들어, TV, 모니터, 태블릿 PC, 노트북 PC, 데스크톱 PC, 프로젝터, 스마트폰 등일 수 있다.
디스플레이(110)는 영상을 표시한다. 디스플레이(110)는 예컨대, LCD(Liquid Crystal Display)로 구현될 수 있으며, 경우에 따라 CRT(cathode-ray tube), PDP(plasma display panel), OLED(organic light emitting diodes), TOLED(transparent OLED) 등으로 구현될 수 있다.
또한, 디스플레이(110)는 사용자의 터치 조작을 감지할 수 있는 터치스크린 형태로 구현될 수도 있다. 즉, 구현시에 디스플레이(110)와 후술할 조작부(195)는 하나의 장치로 구현될 수도 있다.
디스플레이(110)는 하나의 시점(view point)을 갖는 일반적인 영상을 표시하는 것뿐만 아니라, 복수의 시점을 갖는 파노라마 영상을 표시할 수 있다.
여기서 파노라마 영상이란 여러 시점(view point)을 가진 영상으로, 예컨대, 하나의 카메라를 이동시켜 가며 촬영한 복수의 영상을 결합하여 생성된 영상이거나, 여러 대의 카메라로 같은 공간의 다른 시점에서 촬영한 복수의 영상을 결합하여 생성된 영상이거나, 화각이 넓은 한 대의 카메라로 촬영한 영상일 수 있다.
또한, 반드시 카메라로 촬영된 영상에 제한되는 것은 아니고, 예컨대 게임 영상과 같이 인위적으로 제작된 콘텐츠도 파노라마 영상에 해당할 수 있다. 한편, 영상은, 정지 영상과 동영상을 모두 포함할 수 있는 개념이다.
파노라마 영상 중엔, 360도의 뷰를 가지는 파노라마 영상이 있다. 360도의 뷰를 가지는 파노라마 영상이란, 시작 단과 끝단이 동일한 영상을 의미하는 것으로서, 구형 영상, 전 방향 영상 등 다양한 이름으로 불릴 수 있다. 특히, 본 개시에 따르면 360도의 뷰를 가지는 파노라마 영상을 다양한 모드로 감상할 수 있다. 예를 들어, 디스플레이(110)는 디폴트 시점 또는 사용자가 선택한 시점에 대응되는 영상을 표시하는 것뿐만 아니라, 서로 다른 시점의 복수의 영상을 함께 표시할 수도 있다. 예를 들어, 디스플레이(100)는 제1 시점에 대응되는 영상을 제1 영역에 표시하고, 제1 시점에 180도 회전된 영상을 제1 영역의 하단인 제2 영역에 표시할 수 있다. 또는 디스플레이(110)는 2개의 시점뿐만 아니라 4개의 시점의 영상을 동시에 표시할 수도 있다.
디스플레이(110)는 사용자 제어 명령을 입력받기 위한 메뉴 UI를 표시할 수 있다. 구체적으로, 디스플레이(110)는 사용자로부터 캡처 명령을 입력받기 위한 UI, 캡처 방식을 입력받기 위한 UI를 표시할 수 있다. 여기서 캡처 방식을 입력받기 위한 UI는 현재 표시 중인 화면만을 캡처하는 제1 캡처 방식, 현재 표시 프레임의 전체 이미지를 하나의 캡처 이미지로 캡처하는 제2 캡처 방식, 현재 표시 프레임의 서로 다른 시점을 갖는 복수의 캡처 이미지로 캡처하는 제3 캡처 방식 중 어느 하나를 선택받기 위한 UI일 수 있다.
한편, 구현시에 이러한 캡처 방식 중 어느 하나가 디폴트로 기설정되어 있을 수 있다.
그리고 디스플레이(110)는 파노라마 영상을 표시 중에 현재 표시 중인 시점에 대한 정보를 표시하는 UI도 표시할 수 있다. 이러한 시점에 대한 정보를 표시하는 UI는 사용자의 조작이 있는 경우에만 일시적으로 표시될 수 있다.
그리고 디스플레이(110)는 캡처 동작이 수행되면, 캡처가 수행되었음을 알리는 메시지를 표시할 수 있다. 구현시에는 메시지 표시뿐만 아니라, 캡처가 수행되었음을 사용자가 인지할 수 있는 다양한 이미지 효과로 표시될 수도 있다. 예를 들어, 화면이 기설정된 시간 동안 밝아지거나, 캡쳐된 이미지가 표시되었다가 표시된 캡쳐된 이미지의 투명도 정도가 점차 줄어드는 효과일 수 있다.
그리고 디스플레이(110)는 캡처된 이미지를 표시할 수 있다. 이때, 디스플레이(110)는 현재 표시 중인 화면상의 일 영역에 캡처된 이미지를 기설정된 시간 동안 함께 표시할 수 있다.
그리고 디스플레이(110)는 저장부(130)에 저장된 캡처 이미지들의 리스트를 표시할 수 있다. 이때, 디스플레이(110)는 저장부(130)에 저장된 캡처 이미지 각각의 썸네일을 표시하고, 사용자가 선택한 썸네일에 대응되는 캡처 이미지를 표시할 수 있다.
한편, 사용자가 선택한 캡처 이미지가 복수의 시점을 갖는 파노라마 이미지인 경우, 디스플레이(110)는 캡처 시점에 표시되는 시점에 대응되는 파노라마 이미지 내의 영역을 표시할 수 있다.
한편, 사용자가 선택한 캡처 이미지가 서로 다른 시점을 갖는 복수의 캡처 이미지 중 하나라면, 디스플레이(110)는 사용자가 선택된 캡처 이미지와 함께 생성된 복수의 캡처 이미지를 함께 표시할 수 있다. 이때, 디스플레이(110)는 사용자가 선택한 캡처 이미지를 메인 영역에 표시하고, 다른 각도의 캡처 이미지를 메인 영역보다 작은 영역에 함께 표시할 수도 있다.
한편, 사용자가 선택한 캡처 이미지가 오브젝트 선택에 따라 생성된 캡처 이미지라면, 디스플레이(110)는 현재 선택된 캡처 이미지와 함께 다른 시간 상에서 캡처된 다른 캡처 이미지도 함께 표시하거나 다른 시간 상에 캡처된 캡처 이미지가 있음을 나타내는 정보를 함께 표시할 수 있다.
프로세서(120)는 디스플레이 장치(100)의 전반적인 동작을 제어한다. 프로세서(120)는 CPU, 램(RAM), 롬(ROM), 각 구성을 연결하는 버스를 포함할 수 있다. 한편, 구현시에 프로세서(120)는 하나의 CPU로 구성되거나 복수의 CPU로도 구성될 수도 있다. 그리고 프로세서(120)는 MICOM(MICRO COMPUTER), ASIC(application specific integrated circuit) 등으로도 구현될 수 있다.
그리고 프로세서(120)는 영상이 표시되도록 디스플레이(110)를 제어할 수 있다. 구체적으로, 프로세서(120)는 후술할 방송 수신부(140) 또는 통신 인터페이스부(190)로부터 영상 신호가 수신되면, 수신된 영상 신호에 대응되는 영상이 표시되도록 디스플레이(110)를 제어할 수 있다.
또는 프로세서(120)는 저장부(130)에 저장된 컨텐츠에 대한 재생 명령을 입력받으면, 저장부(130)에 저장된 컨텐츠에 대응되는 영상이 표시되도록 디스플레이(110)를 제어할 수 있다. 이때 컨텐츠는 상술한 바와 같이 일반적인 영상 컨텐츠일 수 있으며, 파노라마 영상 컨텐츠일 수도 있다.
만약, 파노라마 영상 대한 재생 명령을 입력받으면 경우, 프로세서(120)는 파노라마 영상 내의 사용자의 조작에 대응되는 시점 또는 기설정된 디폴트 시점에 대응되는 영상이 표시되도록 디스플레이(110)를 제어할 수 있다.
그리고 영상의 재생 중에 사용자로부터 캡처 명령을 입력받으면, 프로세서(120)는 파노라마 영상의 현재 표시 프레임을 이용하여 캡처 이미지를 생성할 수 있다. 그리고 생성된 캡처 이미지가 저장부(130)에 저장되도록 할 수 있다.
이때, 프로세서(120)는 캡처 명령에 대응하여 캡처 방식을 선택받기 위한 UI가 표시되도록 디스플레이(110)를 제어할 수 있다. 그리고 프로세서(120)는 사용자로부터 선택받은 캡처 방식에 따른 캡처를 수행할 수 있다. 여기서 캡처 방식은 현재 표시중인 화면에 대응되는 하나의 캡처 이미지를 생성하는 제1 캡처 방식, 복수의 시점을 갖는 하나의 캡처 이미지를 생성하는 제2 캡처 방식, 서로 다른 시점을 갖는 복수의 캡처 이미지를 생성하는 제3 캡처 방식일 수 있다. 한편, 제3 캡처 방식으로 캡처가 수행되는 경우, 프로세서(120)는 사용자로부터 캡처할 시점(view point)을 지정받거나 변경 받을 수도 있다.
만약, 제1 캡처 방식으로 캡처를 수행하는 경우, 프로세서(120)는 현재 표시 중인 화면에 대한 하나의 캡처 이미지를 생성할 수 있다.
그리고 제2 캡처 방식으로 캡처를 수행하는 경우, 프로세서(120)는 360도 뷰를 갖는 파노라마 영상에 대응되는 도 6과 같은 복수의 시점을 갖는 하나의 캡처 이미지를 생성할 수 있다. 이때, 프로세서(120)는 캡처 이미지에 현재 표시 시점에 대한 정보를 캡처 이미지에 대한 메타 데이터에 추가할 수 있다.
그리고 제3 캡처 방식으로 캡처를 수행하는 경우, 프로세서(130)는 서로 다른 시점을 갖는 복수의 캡처 이미지를 생성할 수 있다. 이때, 프로세서는 서로 다른 시점을 갖는 복수의 캡처 이미지 각각에 시점 정보를 메타 데이터에 추가할 수 있으며, 복수의 캡처 이미지가 함께 생성된 것임을 알 수 있는 식별자를 메타 데이터 또는 파일명에 추가할 수도 있다.
그리고 프로세서(120)는 사용자로부터 현재 표시중인 영상 내에서 특정 오브젝트에 대해서 선택받으면, 선택된 오브젝트가 표시되는 프레임마다 캡처 이미지를 생성할 수도 있다.
또는 프로세서(120)는 사용자로부터 선택된 오브젝트가 다양한 각도로 배치되는 캡처 이미지를 생성할 수도 있다. 예를 들어, 사용자가 선택한 오브젝트가 현재 0도 시점으로 표시중인 화면의 중앙에 배치된 경우, 프로세서(120)는 현재 오브젝트가 중앙에 위치한 0도 시점의 캡처 이미지와 선택된 오브젝트가 우측에 배치되는 15도 캡처 이미지와 선택된 오브젝트가 좌측에 배치되는 345도 캡처 이미지를 생성할 수도 있다. 여기서 상술한 0도, 15도, 345도는 예시된 수치에 불가하며, 구현시에는 상술한 수치 이외의 각도의 캡처 이미지가 생성될 수 있으며, 2개의 캡처 이미지 또는 4장 이상의 캡처 이미지가 생성될 수도 있다.
이때, 프로세서(120)는 사용자가 선택한 오브젝트뿐만 아니라, 사용자가 선택한 오브젝트 이외의 복수의 오브젝트에 대해서도 식별을 수행하고, 식별된 오브젝트들과 사용자가 선택한 오브젝트 간의 다양한 배치 구도를 복수의 캡처 이미지를 생성할 수도 있다. 이때, 프로세서(120)는 생성된 복수의 캡처 이미지를 사용자에게 표시되도록 디스플레이(110)를 제어할 수 있으며, 사용자로부터 선택받은 캡처 이미지가 저장부(130)에 저장할 수도 있다. 물론 구현시에는 선택 과정 없이 생성된 캡처 이미지가 저장부(1300에 저장될 수도 있다.
한편, 디스플레이 장치(100)는 게임 컨텐츠를 구동하고, 게임 컨텐츠에 대응되는 영상을 표시할 수 있다. 이러한 게임 컨텐츠에 대응되는 영상의 표시 중에 사용자로부터 특정 오브젝트를 선택받았으면, 프로세서(120)는 선택된 오브젝트를 중심으로 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다. 구체적으로, 프로세서(120)는 선택된 오브젝트를 중심으로 복수의 시점을 갖는 영상을 렌더링하고, 렌더링된 영상을 기초로 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다. 이와 같은 실시 예에 대해서는 도 9를 참조하여 후술한다.
그리고 프로세서(120)는 캡처 이미지가 생성되면, 캡처 이미지가 생성되었다는 UI가 표시되도록 디스플레이(110)를 제어할 수 있다. 이때, 프로세서(120)의 UI의 표시와 함께 캡처를 알리는 사운드가 출력되도록 후술할 오디오 출력부(170)를 제어할 수도 있다.
그리고 프로세서(120)는 캡처 이미지가 생성되면, 캡처 이미지를 표시하거나, 캡처 이미지에 대한 썸네일을 현재 표시중인 영상과 함께 표시할 수도 있다.
그리고 프로세서(120)는 캡처 이미지에 대한 표시 명령을 입력받으면, 저장부(130)에 저장된 캡처 이미지가 표시되도록 디스플레이(110)를 제어할 수 있다. 이때, 프로세서(120)는 캡처 이미지 내의 캡처 시의 시점(view point)에 대응되는 영역이 디스플레이되도록 디스플레이(110)를 제어할 수 있다.
저장부(130)는 영상 컨텐츠를 저장할 수 있다. 구체적으로, 저장부(130)는 A/V 처리부(160)로부터 영상과 오디오가 압축된 영상 컨텐츠를 제공받아 저장할 수 있으며, 프로세서(120)의 제어에 따라 저장된 영상 컨텐츠를 A/V 처리부(160)에 출력할 수 있다. 한편, 저장부(130)는 하드디스크, 비휘발성 메모리, 휘발성 메모리 등으로 구현될 수 있다.
그리고 저장부(130)는 상술한 과정을 통하여 생성된 캡처 이미지를 저장할 수 있다.
이상에서는 디스플레이 장치(100)의 간략한 구성만을 설명하였으나, 디스플레이 장치(100)는 도 2에 도시된 바와 같은 구성을 포함할 수 있다. 디스플레이 장치(100)의 구체적인 구성에 대해서는 도 2를 참조하여 이하에서 설명한다.
도 2는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구체적인 구성을 나타내는 블록도이다.
도 2를 참조하면, 본 실시 예에 따른 디스플레이 장치(100)는 디스플레이(110), 프로세서(120), 저장부(130), 방송 수신부(140), 신호 분리부(150), A/V 처리부(160), 오디오 출력부(170), GUI 생성부(180), 통신 인터페이스부(190), 및 조작부(195)로 구성될 수 있다.
도 2의 디스플레이(110), 프로세서(120) 및 저장부(130)의 구성은 도 1의 구성들과 동일한 기능을 수행하는 바 중복 설명은 생략한다.
방송 수신부(140)는 방송국 또는 위성으로부터 유선 또는 무선으로 방송을 수신하여 복조한다. 한편, 이상에서는 파노라마 영상이 저장부에 저장되어 표시되는 것으로만 설명하였지만, 파노라마 영상은 방송 수신부(140)를 통하여 수신될 수도 있다.
신호 분리부(150)는 방송신호를 영상신호, 오디오신호, 부가정보 신호로 분리한다. 그리고 신호 분리부(150)는 영상신호 및 오디오신호를 A/V 처리부(160)로 전송한다.
A/V 처리부(160)는 방송 수신부(140), 통신 인터페이스부(190) 및 저장부(130)로부터 전달된 영상 신호 및 오디오 신호에 대해 비디오 디코딩, 비디오 스케일링, 오디오 디코딩 등의 신호처리를 수행한다. 그리고 A/V 처리부(160)는 영상신호를 GUI 생성부(180)로 출력하고, 오디오 신호를 오디오 출력부(170)로 출력한다.
반면, 수신된 영상 및 오디오신호를 저장부(130)에 저장하는 경우, A/V 처리부(160)는 영상과 오디오를 압축된 형태로 저장부(130)에 출력할 수 있다.
오디오 출력부(170)는 A/V 처리부(160)에서 출력되는 오디오 신호를 사운드로 변환하여 스피커(미도시)를 통해 출력시키거나, 외부 출력단자(미도시)를 통해 연결된 외부기기로 출력한다.
그리고 오디오 출력부(170)는 사용자의 캡처 명령에 대응하여 캡처 이미지가 생성되면, 캡처 이벤트에 대응되는 사운드(예를 들어, '찰칵' 소리)를 출력할 수 있다.
GUI 생성부(180)는 사용자에게 제공하기 위한 GUI(Graphic User Interface)를 생성한다. 그리고 GUI 생성부(180)는 생성된 GUI를 A/V 처리부(160)에서 출력된 영상에 부가한다. 그리고 GUI 생성부(180)는 GUI가 부가된 영상을 디스플레이(110)에 제공한다.
그리고 GUI 생성부(180)는 사용자의 캡처 명령에 대응하여 캡처 이미지가 생성되면, 캡처 이미지가 생성되었다는 메시지가 부가된 영상을 디스플레이(110)에 제공할 수 있다.
또는 GUI 생성부(180)는 사용자의 캡처 명령에 대응하여 캡처 이미지가 생성되면, 특정 효과가 적용된 영상을 디스플레이(110)에 제공할 수 있다. 여기서 특정 효과는 화면이 일정시간(예를 들어, 0.5초) 밝아지는 효과나 캡처된 이미지가 현재 화면에 오버레이되어 표시되는 효과나 캡처된 이미지에 대응되는 썸네일 이미자가 현재 화면의 일정 영역에 표시되는 효과일 수도 있다.
통신 인터페이스부(190)는 셋톱 박스, PC, 노트북 PC, 모바일 기기 등의 외부 기기와 연결되며, 외부 기기로부터 영상 컨텐츠를 수신할 수 있다. 구체적으로, 통신 인터페이스부(190)는 디스플레이 장치(100)를 외부 기기와 연결하기 위해 형성되고, 다양한 외부 기기와 연결되기 위하여 다양한 연결 방식을 지원한다.
예를 들어, 통신 인터페이스부(190)는 근거리 통신망(LAN: Local Area Network) 및 인터넷망을 통해 단말장치에 접속되는 형태뿐만 아니라, HDMI(High Definition Multimedia Interface) 포트, USB(Universal Serial Bus) 포트, MHL(Mobile High-Definition Link) 포트 또는 무선 통신(예를 들어, WiFi 802.11a/b/g/n, NFC, Bluetooth) 포트를 통하여 접속되는 형태도 가능하다.
조작부(195)는 사용자 조작 명령을 수신하기 위한 구성이다. 구체적으로, 조작부(195)는 터치스크린, 터치패드, 키 버튼, 키패드 등으로 구현되어, 디스플레이 장치(100)의 사용자 조작을 제공한다.
이러한 조작부(195)는 디스플레이 장치(100)에 구비될 수 있으며, 외부의 리모컨으로부터 사용자 조작에 대응되는 제어 신호를 수신하는 리모컨 신호 수신부를 포함할 수 있다. 리모컨 신호 수신부는 예컨대 원격 제어장치에서 발생되는 IR 신호를 수광하기 위한 포토다이오드를 포함할 수 있다.
조작부(195)는 표시하고자 하는 파노라마 영상을 선택받을 수 있다.
그리고 조작부(195)는 파노라마 영상에 대한 표시 시점을 선택받을 수 있다. 예를 들어, 표시 시점의 변경을 버튼으로 입력받는 경우, 사용자의 숏 버튼 선택에 대응하여, 표시 시점을 디폴트 변경 각도(예를 들어, 10도)로 변경할 수 있다. 즉, 사용자가 우측 시점 변경 버튼을 3회 누른 경우, 디스플레이 장치(100)는 순차적으로 10도, 20도 및 30도 시점의 영상을 순차적으로 디스플레이할 수 있다. 한편, 사용자가 버튼을 기설정된 시간 이상 누른 경우, 디스플레이 장치(100)는 버튼 누름이 릴리즈될때까지 시점이 선형적으로 가변되는 영상을 디스플레이할 수 있다.
그리고 조작부(195)는 표시 중인 파노라마 영상에 대한 캡처 명령을 입력받을 수 있다. 이때, 조작부(196)는 캡처 방식을 선택하는 사용자 명령을 입력받을 수도 있다.
그리고 조작부(195)는 복수의 캡처 이미지 중 저장될 캡처 이미지를 선택하는 사용자 명령을 입력받을 수 있다.
그리고 조작부(195)는 표시된 영상에서 특정 오브젝트를 선택받을 수 있다. 여기서 조작부(195)가 특정 오브젝트를 직접 선택받는 것으로 설명하였지만, 구현시에 조작부(195)는 현재 표시중인 영상 내의 특정 좌표를 선택하는 명령을 입력받고, 프로세서(120)에서 영상에 대한 분석을 통하여 사용자가 선택한 오브젝트를 분석함으로써, 특정 오브젝트를 선택받을 수도 있다.
그리고 조작부(195)는 캡처된 이미지에 대한 표시 명령을 입력받을 수 있다. 이에 대응하여 저장부(130)에 저장된 복수의 캡처 이미지의 리스트가 표시되면, 조작부(195)는 표시된 복수의 리스트 중 어느 하나를 선택받는 명령을 입력받을 수 있다.
한편, 이상에서는 사용자 조작이 디스플레이 장치(100)에서 직접 입력되거나, 리모컨을 통하여 입력받는 것만을 설명하였지만, 구현시에는 외부의 전자 장치(미도시)로부터 입력받을 수도 있다. 이 경우, 상술한 통신 인터페이스부(190)는 사용자의 조작 명령에 대응되는 제어 신호를 전자 장치로부터 수신할 수 있다.
이상과 같이 본 실시 예에 따른 디스플레이 장치는 파노라마 영상에 대한 캡처시에 복수의 시점을 갖는 캡처 이미지를 생성하는바, 사용자는 기존의 화면을 돌려가며 복수의 화면을 캡처할 필요가 없어져 사용자 편의성이 향상된다. 또한, 캡처 이미지에 대한 표시 시에도 360도 감상이 가능하게 된다.
한편, 도 2를 설명함에 있어서, 디스플레이 장치(100)가 방송 신호를 수신하여 표시 가능한 것으로 설명하였지만, 구현시에는 상술한 방송 수신부, 신호 분리부 등과 같은 방송 신호를 수신함에 필요한 구성은 생략될 수 있다. 즉, 본 실시 예에 따른 디스플레이 장치(100)는 방송 신호를 표시하는 TV와 같은 장치뿐만 아니라 외부 장치에서 전달된 영상만을 표시하는 모니터와 같은 장치일 수도 있다.
도 3은 파노라마 영상 내의 여러 시점 영상들을 설명하기 위한 도면이다. 구체적으로, 360도의 뷰를 갖는 파노라마 영상(구형 영상)을 설명하기 위한 것이다.
도 3을 참고하면, 디스플레이 장치(200)에서는 전체 파노라마 영상(200) 내에서 일부 시점의 영상이 표시될 수 있다. 예컨대, 도 3에 도시한 것처럼 제1 시점의 영상(200A), 제2 시점의 영상(200B), 제3 시점의 영상(200C) 또는 제4 시점의 영상(200D)이 디스플레이 장치(200)에서 표시될 수 있다.
실제 공간을 예를 들어 설명하자면, 파노라마 영상(200)이 야구장의 투수판(mound)에서 홈 방향으로 촬영되었다고 가정하였을 때, 제1 시점의 영상(200A)은 홈(Home plate) 쪽이 촬영된 영상이고, 제2 시점의 영상(200B)은 3루(third base) 쪽이 촬영된 영상이고, 제3 시점의 영상(200C)은 2루(second base) 쪽이 촬영된 영상이고, 제4 시점의 영상(200D)은 1루 쪽이 촬영된 영상이다.
한편, 도시된 예에서는 360도 뷰를 갖는 파노라마 영상이 반구 형태의 뷰를 갖는 것으로 도시하였지만, 이는 설명을 용이하게 하기 위한 것이며, 실제 360도 뷰를 갖는파노라마 영상은 원형 형태의 뷰를 가질 수 있다.
도 4는 디스플레이 장치에서의 파노라마 영상의 표시 예를 도시한 도면이다. 구체적으로, 도 4는 디스플레이 장치(200)가 파노라마 영상(200) 내의 제1 시점의 영상(200A)을 표시하고 있는 상태에서, 사용자로부터 시점 변경 명령을 입력받은 제2 시점의 영상(200B)로 시점을 이동시키는 상황을 설명하기 위한 도면이다.
도 3 및 도 4를 참고하면, 디스플레이 장치(100)가 파노라마 영상(200) 내의 제1 시점의 영상(200A)을 표시하고 있는 상태에서 우측으로 90도 회전하는 제2 시점으로 이동하는 시점 변경 명령을 입력받으면, 프로세서(120)는 제2 시점에 대응되는 영상(200B)을 디스플레이하도록 디스플레이(110)를 제어할 수 있다. 이에 따라 디스플레이 장치(100)에선, 제1 시점의 영상(200A)에서 제2 시점의 영상(200B)으로 시점이 이동된다.
한편, 디스플레이 장치(100)가 제1 시점의 영상(200A)을 표시 중에 사용자로부터 캡처 명령을 입력하면, 디스플레이 장치(100)는 도 5와 같은 화면을 표시할 수 있다. 구체적으로, 프로세서(120)는 사용자의 캡처 명령에 대응하여 복수의 시점을 갖는 캡처 이미지를 생성하고, 캡처 이미지의 생성이 완료되면 도 5와 같은 화면을 표시할 수 있다.
도 5는 본 개시의 일 실시 예에 따른 캡처 명령이 입력된 경우의 디스플레이의 표시 예를 도시한 도면이다.
도 5를 참조하면, 현재 제1 시점의 영상(200A)의 표시 중에 캡처 명령을 입력받은 상태인바, 표시된 화면(200A')은 제1 시점의 영상(200A)과 동시에 캡처가 수행되었음을 알리는 알림 메시지(510)를 포함한다. 이에 따라 생성되는 캡처 이미지는 도 6의 형태이거나 도 7의 형태일 수 있다.
한편, 제1 시점과 다른 시점으로 변경된 상태에서 사용자로부터 캡처 명령을 입력받은 경우, 현재 표시된 화면 상에서 캡처가 수행되었음을 알리는 알림 메시지가 표시될 수 있다. 그리고 그에 따라 생성된 캡처 이미지는 후술할 도 6과 도 7과 다른 시점을 가질 수 있다.
도 6은 제2 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면이다. 구체적으로, 제2 캡처 방식은 파노라마 영상 현재 표시 프레임의 전체 이미지를 하나의 캡처 이미지로 생성하는 실시예이다.
도 6을 참조하면, 생성된 캡처 이미지는 1개의 이미지로 구성되며, 도시된 바와 같이 360도 뷰를 갖는 파노라마 이미지이다.
이와 같은 캡처 이미지를 파노라마 이미지로 형성시에, 프로세서(120)는 표시 시점을 반영하여 파노라마 이미지를 형성할 수 있다. 즉, 현재 표시 시점이 파노라마 이미지의 중심축에 위치하도록 파노라마 이미지를 형성할 수 있다. 한편, 구현시에 파노라마 이미지의 표시시에 중심축이 아닌 다른 위치를 기본 표시 영역으로 이용하는 경우라면, 프로세서(120)는 캡처된 파노라마 이미지의 표시 시에 캡처된 시점의 이미지와 동일한 이미지가 표시될 수 있도록 하는 파노라마 이미지를 형성할 수 있다.
또는 구현시에는 파노라마 영상의 현재 표시 프레임의 이미지와 동일한 캡처 이미지를 생성하고, 생성된 캡처 이미지의 메타 데이터에 기본 표시 시점에 대한 정보를 추가할 수도 있다.
이와 같이 현재 표시 시점을 반영하여 복수의 시점을 갖는 캡처 이미지를 생성하는바, 사용자는 캡처 이미지를 보는 중에도 자신이 인상 깊었던 화면 먼저 확인할 수 있게 된다.
도 7은 제3 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면이다. 구체적으로, 제3 캡처 방식은 캡처 명령에 대응하여 현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지로 생성하는 실시 예이다.
도 7을 참조하면, 생성된 캡처 이미지는 4개의 이미지로 구성되며, 각각 현재 표시 중인 시점을 기준으로 0도(600a), 90도(600b), 180도(600c) 및 270도(600d) 회전된 시점을 갖는 4장의 캡처 이미지로 구성된다.
만약, 현재 시점이 30도 시점이라면, 캡처된 4개의 캡처 이미지는 30도, 120도, 210도, 300도 시점을 갖는 캡처 이미지일 수 있다.
한편, 이상에서는 4개의 시점만을 갖는 4개의 캡처 이미지를 생성하는 것으로 도시하고 설명하였지만, 구현시에는 2개의 시점만을 갖는 두 개의 캡처 이미지를 생성할 수도 있으며, 5개 이상의 캡처 이미지를 생성할 수도 있다. 구체적으로, 제3 캡처 방식이 선택되면, 프로세서(120)는 캡처될 복수의 시점을 사용자로부터 선택받기 위한 UI 표시되도록 디스플레이(110)를 제어할 수 있다. 이에 대응하여 사용자는 생성할 캡처 이미지 개수와 각 캡처 이미지의 시점을 선택받을 수 있다. 이러한 사용자 선택에 대응하여, 프로세서(120)는 사용자로부터 선택받은 시점에 대응되는 복수의 캡처 이미지를 생성할 수 있다.
한편, 복수의 캡처 이미지가 생성되면, 프로세서(120)는 캡처된 이미지가 표시되도록 디스플레이(110)를 제어하고, 사용자로부터 캡처된 이미지 중 저장될 이미지를 선택받을 수 있다. 그리고 프로세서(120)는 사용자가 선택한 캡처 이미지에 대해서만 저장부(130)에 저장할 수 있다.
한편, 본 실시 예에서는 서로 다른 시점을 갖는 복수의 캡처 이미지를 생성하는바, 캡처 이미지에 대한 표시시에 프로세서(120)는 복수의 캡처 이미지를 병합하여 파노라마 이미지를 생성하고, 생성된 파노라마 이미지의 일 시점을 표시할 수도 있다.
한편, 이상에서는 사용자의 캡처 명령이 입력되는 경우에만 캡처 이미지를 생성하는 것으로 설명하였지만, 구현시에는 자동으로 캡처 이미지를 생성할 수도 있다. 또한, 이상에서는 파노라마 영상의 촬영점을 기준으로 복수의 시점을 갖는 캡처 이미지를 생성하는 것으로 설명하였지만, 구현시에는 촬영점 이외의 다른 점을 중심으로 복수의 시점을 갖는 캡처 이미지를 생성할 수도 있다.
이와 같은 실시 예에 대해서는 도 8 내지 도 9를 참조하여 설명한다.
도 8은 오브젝트를 기준으로 캡처 이미지를 생성하는 실시 예를 설명하기 위한 도면이다. 구체적으로, 도 8은 사용자로부터 특정 오브젝트를 선택받고, 특정 오브젝트가 검출되는 시점에 자동으로 캡처를 수행하는 실시예이다.
도 8을 참조하면, 사용자는 디스플레이 장치(100)에 표시된 화면(810)에서 특정 좌표를 선택할 수 있다. 이와 같은 선택에 대응하여, 프로세서(120)는 현재 사용자가 선택한 좌표에 표시 중인 오브젝트를 분석할 수 있다.
그리고 이후의 영상 표시 과정 중에 동일한 오브젝트가 재차 검출되면, 별도의 캡처 명령 없이도 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다. 예를 들어, 화면(810)과 같이 야구 관람시에 특정 타자를 선택하는 사용자 입력이 있는 경우, 사용자 입력이 있는 현재 시간에서의 캡처 이미지(820)를 생성하고, 이후에 해당 타자가 재차 감지된 시간에 재차 캡처 이미지(830)를 생성할 수도 있다.
한편, 동일한 오브젝트는 시간상 여러 프레임 상에 연속적으로 존재할 수 있다. 이러한 경우, 동일한 오브젝트가 존재하는 모든 프레임에 대한 캡처 이미지를 생성할 수도 있지만, 연속적으로 동일 오브젝트가 존재하는 구간 내에서 기설정된 시간 단위로 캡처 이미지를 생성하거나, 동일 오브젝트가 재차 감지되는 첫 번째 프레임에 대해서만 캡처 이미지을 생성할 수도 있다.
한편, 이상에서는 사용자의 오브젝트 선택에 대응하여 시간 흐름에 따른 복수의 캡처 이미지를 생성하는 것으로 설명하였지만, 구현시에는 사용자의 오브젝트 선택에 대응하여 공간 상에서 복수의 캡처 이미지를 생성할 수도 있다.
먼저, 사용자가 선택한 오브젝트를 중심으로, 사용자가 선택한 오브젝트가 중심에 위치하는 제1 캡처 이미지, 사용자가 선택한 오브젝트가 우측에 위치하는 제2 캡처 이미지, 사용자가 선택한 오브젝트가 좌측에 위치하는 제3 캡처 이미지를 생성할 수도 있다.
구체적으로, 프로세서(120)는 사용자가 선택한 좌표에 대응되는 오브젝트를 식별하고, 식별된 오브젝트가 다양한 구도로 배치되는 복수의 캡처 이미지를 생성할 수도 있다. 이때, 프로세서(120)는 사용자가 선택한 좌표 이외의 영역에 위치한 다른 오브젝트에 대해서도 식별을 수행하고, 사용자가 선택한 오브젝트와 추가로 식별된 다른 오브젝트 간의 다양한 구도를 갖는 복수의 캡처 이미지를 생성할 수도 있다.
이상에서는 촬영점 변경이 불가능한 파노라마 영상에 대한 캡처 이미지를 생성하는 것을 가정하여 설명하였지만, 촬영점 변경이 가능한 경우, 프로세서(120)는 사용자가 선택한 오브젝트를 중심으로 복수의 시점을 갖는 캡처 이미지를 생성할 수도 있다. 이와 같은 예에 대해서는 도 9를 참조하여 이하에서 설명한다.
도 9는 제4 캡처 방식으로 생성된 캡처 이미지의 예를 도시한 도면이다. 구체적으로, 제4 캡처 방식은 디스플레이 장치(100)가 게임 컨텐츠를 구동하는 경우, 즉, 사용자가 선택한 시점에 대응되는 렌더링된 영상을 표시하는 경우의 캡처 방식을 설명한다.
도 8 및 도 9를 참조하면, 사용자가 게임 컨텐츠 이용 중에 특정 오브젝트를 선택하여 캡처 명령을 입력한 경우, 프로세서(120)는 사용자가 선택한 오브젝트를 중심으로 360도 뷰 파노라마 이미지를 렌더링하고, 렌더링된 360 뷰 파노라마 이미지를 기초로 복수의 시점을 갖는 캡처 이미지를 생성할 수 있다.
한편, 구현시에는 프로세서(120)는 사용자가 선택한 오브젝트(예를 들어, 타자)를 중심으로 0도(910), 90도(920), 180도(930) 및 270도(940) 회전된 시점을 갖는 복수의 캡처 이미지(910, 920,930, 940)를 생성할 수도 있다.
도 10은 본 개시의 일 실시 예에 따라 캡처 이미지를 표시하는 동작을 설명하기 위한 도면이다.
사용자로부터 캡처 이미지의 표시 명령을 입력받으면, 프로세서(120)는 저장부(130)에 저장된 복수의 캡처 이미지 각각에 대한 썸네일을 포함하는 제1 화면(1000)을 표시할 수 있다.
표시된 제1 화면(1000)상에서 사용자가 복수의 시점을 갖는 제1 캡처 이미지(1010)를 선택한 경우, 프로세서(120)는 선택된 제1 캡처 이미지(1010)가 표시되도록 디스플레이(110)를 제어할 수 있다. 이때, 프로세서(120)는 캡처될 때의 시점에 대응되는 화면이 표시되도록 디스플레이(110)를 제어할 수 있다. 이를 위하여, 프로세서(120)는 제1 캡처 이미지(1010) 내의 메타 데이터를 이용하여 시점 정보를 확인하고, 캡처 이미지 내이 확인된 시점 정보에 대응되는 시점의 이미지가 표시되도록 할 수 있다.
만약, 메타 데이터에 별도의 시점 정보가 없는 경우, 파노라마 영상의 디폴트 영역을 우선적으로 표시할 수 있다. 그리고 프로세서(120)는 사용자로부터 시점 이동 명령을 입력받으면, 입력된 시점 이동 명령에 대응되는 시점의 영역이 표시되도록 할 수 있다.
도 11은 본 개시의 일 실시 예에 따른 캡처 이미지의 생성 방법을 설명하기 위한 흐름도이다.
도 11을 참조하면, 파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이한다(S1110). 이때, 사용자로부터 시점 변경 명령을 입력받으면, 입력된 시점 변경 명령에 대응되는 시점에 대응되는 영상을 디스플레이할 수 있다.
캡처 명령을 입력받는다(S1120). 구체적으로, 디스플레이 장치에 구비된 버튼, 또는 리모컨(또는 외부 장치)으로부터 캐처 명령을 입력받을 수 있다. 구현시에 디스플레이 장치(100)는 캡처 방식을 선택받기 위한 UI를 표시하고, 사용자로부터 캡처 방식을 입력받을 수 있다. 여기서 캡처 방식은 종래와 같이 현재 표시 중인 화면을 캡처하는 방식, 복수의 시점을 갖는 단일 캡처 이미지를 생성하는 방식, 서로 다른 시점을 갖는 복수의 캡처 이미지를 생성하는 방식 등이 있을 수 있다.
그리고 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점을 갖는 캡처 이미지를 생성한다(S1130). 구체적으로, 앞서 선택받은 캡처 방식에 대응되는 캡처 이미지를 생성할 수 있다. 예를 들어, 복수의 시점을 갖는 단일 캐처 이미지를 생성하는 방식을 선택받았으면, 도 6에 도시된 형태와 같이 파노라마 영상의 현재 표시 프레임의 전체 이미지를 하나의 캡처 이미지로 생성할 수 있다.
만약, 서로 다른 시점의 복수의 캡처 이미지를 생성하는 방식을 선택받았으면, 도 7에 도시된 바와 같이 현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지를 생성할 수 있다.
그리고 생성된 캡처 이미지를 저장한다(S1140). 구체적으로, 생성된 캡처 이미지를 디스플레이 장치(100) 내의 저장부(130)에 저장하거나, 생성된 캡처 이미지를 통신 인터페이스부를 통하여 외부 서버(또는 클라우드 서버)로 전송하여 외부에 저장할 수도 있다.
따라서, 본 실시예에 따른 캡처 이미지 생성 방법은 파노라마 영상에 대한 캡처시에 복수의 시점을 갖는 캡처 이미지를 생성하는바, 사용자는 기존의 화면을 돌려가며 복수의 화면을 캡처할 필요가 없어져 사용자 편의성이 향상된다. 또한, 캡처 이미지에 대한 표시 시에도 360도 감상할 수 있게 된다. 도 11과 같은 캡처 이미지 생성 방법은 도 1 또는 도 2의 구성을 가지는 디스플레이 장치상에서 실행될 수 있으며, 그 밖의 다른 구성을 가지는 디스플레이 장치상에서도 실행될 수 있다.
한편, 상술한 본 개시의 다양한 실시 예들에 따른 캡처 이미지 생성 방법은 비일시적 판독 가능 매체(non-transitory readable medium) 에 저장될 수 있다. 이러한 비일시적 판독 가능 매체는 다양한 장치에 탑재되어 사용될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 캡처 이미지 생성 방법을 수행하기 위한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
이상에서는 본 개시의 바람직한 실시예에 대해서 도시하고, 설명하였으나, 본 개시는 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시가 속하는 기술분야에서 통상의 지식을 가진자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
100: 디스플레이 장치 110: 디스플레이
120: 프로세서 130: 저장부
140: 방송 수신부 150: 신호 분리부
160: A/V 처리부 170: 오디오 출력부
180: GUI 생성부 190: 통신 인터페이스부
195: 조작부

Claims (20)

  1. 디스플레이 장치에서,
    파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 디스플레이;
    캡처 명령을 입력받으면, 상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점에 대응되는 복수의 캡처 이미지를 생성하는 프로세서; 및
    상기 생성된 복수의 캡처 이미지를 저장하는 저장부;를 포함하며,
    상기 복수의 시점은,
    상기 디스플레이를 통해 현재 디스플레이되는 상기 제1 시점 및 상기 현재 표시 프레임 내에 상기 디스플레이를 통해 현재 디스플레이되지 않는 시점을 포함하며,
    상기 프로세서는,
    현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지를 포함하는 상기 복수의 캡처 이미지를 생성하는, 디스플레이 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 제1 시점에 대한 정보를 메타 데이터에 포함하여 하나의 캡처 이미지를 생성하는 디스플레이 장치.
  5. 삭제
  6. 삭제
  7. 제1항에 있어서,
    캡처 명령 및 현재 표시된 영상에서 특정 오브젝트를 선택받는 조작부;를 더 포함하는 디스플레이 장치.
  8. 제7항에 있어서,
    상기 프로세서는,
    상기 파노라마 영상의 재생 중에 상기 선택받은 오브젝트에 검출되면 반복적으로 캡처 이미지를 생성하는 디스플레이 장치.
  9. 제7항에 있어서,
    상기 프로세서는,
    상기 선택받은 특정 오브젝트를 중심으로 상기 복수의 시점에 대응되는 복수의 캡처 이미지를 생성하는 디스플레이 장치.
  10. 제1항에 있어서,
    상기 프로세서는,
    기저장된 복수의 시점을 갖는 캡처 이미지에 대한 표시 명령을 입력받으면, 상기 복수의 시점을 갖는 캡처 이미지 내에서 캡처 시의 시점(view point)에 대응되는 영역을 디스플레이하도록 상기 디스플레이를 제어하는 디스플레이 장치.
  11. 제1항에 있어서,
    상기 파노라마 영상은,
    360도의 뷰를 갖는 파노라마 영상인 디스플레이 장치.
  12. 캡처 이미지 생성 방법에 있어서,
    파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 단계;
    캡처 명령을 입력받는 단계;
    상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점에 대응되는 복수의 캡처 이미지를 생성하는 단계; 및
    상기 생성된 복수의 캡처 이미지를 저장하는 단계;를 포함하며,
    상기 복수의 시점은,
    현재 디스플레이되는 상기 제1 시점 및 상기 현재 표시 프레임 내에 현재 디스플레이되지 않는 시점을 포함하며,
    상기 복수의 캡처 이미지를 생성하는 단계는,
    현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지를 포함하는 상기 복수의 캡처 이미지를 생성하는 단계;를 포함하는, 캡처 이미지 생성 방법.
  13. 삭제
  14. 삭제
  15. 제12항에 있어서,
    상기 생성하는 단계는,
    상기 제1 시점에 대한 정보를 메타 데이터에 포함하여 하나의 캡처 이미지를 생성하는 캡처 이미지 생성 방법.
  16. 삭제
  17. 삭제
  18. 제12항에 있어서,
    현재 표시된 영상에서 특정 오브젝트를 선택받는 단계;를 더 포함하고,
    상기 생성하는 단계는,
    상기 파노라마 영상의 재생 중에 상기 선택받은 오브젝트에 검출되면 반복적으로 캡처 이미지를 생성하는 캡처 이미지 생성 방법.
  19. 제12항에 있어서,
    현재 표시된 영상에서 특정 오브젝트를 선택받는 단계;를 더 포함하고,
    상기 생성하는 단계는,
    상기 선택받은 특정 오브젝트를 중심으로 상기 복수의 시점에 대응되는 복수의 캡처 이미지를 생성하는 캡처 이미지 생성 방법.
  20. 캡처 이미지 생성 방법을 실행하기 위한 프로그램을 포함하는 컴퓨터 판독가능 기록매체에 있어서,
    상기 캡처 이미지 생성 방법은,
    파노라마 영상 내의 제1 시점(view point)에 대응되는 영상을 디스플레이하는 단계;
    캡처 명령을 입력받는 단계;
    상기 파노라마 영상의 현재 표시 프레임을 이용하여 복수의 시점에 대응되는 복수의 캡처 이미지를 생성하는 단계; 및
    상기 생성된 복수의 캡처 이미지를 저장하는 단계;를 포함하며,
    상기 복수의 시점은,
    현재 디스플레이되는 상기 제1 시점 및 상기 현재 표시 프레임 내에 현재 디스플레이되지 않는 시점을 포함하며,
    상기 복수의 캡처 이미지를 생성하는 단계는,
    현재 표시 중인 제1 시점을 기준으로 0도, 90도, 180도 및 270도 회전된 시점을 갖는 4장의 캡처 이미지를 포함하는 상기 복수의 캡처 이미지를 생성하는 단계;를 포함하는, 컴퓨터 판독가능 기록매체.
KR1020160131357A 2016-10-11 2016-10-11 디스플레이 장치 및 캡처 이미지 생성 방법 Active KR102630681B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020160131357A KR102630681B1 (ko) 2016-10-11 2016-10-11 디스플레이 장치 및 캡처 이미지 생성 방법
US15/604,783 US10440266B2 (en) 2016-10-11 2017-05-25 Display apparatus and method for generating capture image
EP17860954.1A EP3476118A4 (en) 2016-10-11 2017-06-27 DISPLAY DEVICE AND METHOD FOR GENERATING A RECORD IMAGE
CN201780062638.XA CN109804620A (zh) 2016-10-11 2017-06-27 用于生成捕获图像的显示设备和方法
PCT/KR2017/006788 WO2018070638A1 (en) 2016-10-11 2017-06-27 Display apparatus and method for generating capture image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160131357A KR102630681B1 (ko) 2016-10-11 2016-10-11 디스플레이 장치 및 캡처 이미지 생성 방법

Publications (2)

Publication Number Publication Date
KR20180039939A KR20180039939A (ko) 2018-04-19
KR102630681B1 true KR102630681B1 (ko) 2024-01-30

Family

ID=61830430

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160131357A Active KR102630681B1 (ko) 2016-10-11 2016-10-11 디스플레이 장치 및 캡처 이미지 생성 방법

Country Status (5)

Country Link
US (1) US10440266B2 (ko)
EP (1) EP3476118A4 (ko)
KR (1) KR102630681B1 (ko)
CN (1) CN109804620A (ko)
WO (1) WO2018070638A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466176B (zh) * 2020-11-09 2024-06-11 聚好看科技股份有限公司 一种全景视频显示方法及显示设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040264919A1 (en) * 2003-06-14 2004-12-30 Impressive Ideas Ltd. Display system for views of video item
US20150213577A1 (en) * 2014-01-30 2015-07-30 Google Inc. Zoom images with panoramic image capture

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000152168A (ja) 1998-11-13 2000-05-30 Olympus Optical Co Ltd 画像再生装置
US6563529B1 (en) 1999-10-08 2003-05-13 Jerry Jongerius Interactive system for displaying detailed view and direction in panoramic images
EP1381233A4 (en) * 2001-04-16 2007-03-07 Matsushita Electric Industrial Co Ltd METHOD, APPARATUS AND SYSTEM FOR MULTIVATE STORAGE BROADCAST SERVICES
US20040006425A1 (en) * 2002-07-03 2004-01-08 Terragraphix, Inc. System for communicating and associating information with a geographic location
US20070182812A1 (en) * 2004-05-19 2007-08-09 Ritchey Kurtis J Panoramic image-based virtual reality/telepresence audio-visual system and method
US20070139529A1 (en) * 2005-06-02 2007-06-21 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Dual mode image capture technique
US20070236514A1 (en) * 2006-03-29 2007-10-11 Bracco Imaging Spa Methods and Apparatuses for Stereoscopic Image Guided Surgical Navigation
JP4656005B2 (ja) * 2006-06-02 2011-03-23 日産自動車株式会社 画像処理システム及び画像処理方法
JP4720785B2 (ja) * 2007-05-21 2011-07-13 富士フイルム株式会社 撮像装置、画像再生装置、撮像方法及びプログラム
US9091755B2 (en) 2009-01-19 2015-07-28 Microsoft Technology Licensing, Llc Three dimensional image capture system for imaging building facades using a digital camera, near-infrared camera, and laser range finder
US8862987B2 (en) 2009-03-31 2014-10-14 Intel Corporation Capture and display of digital images based on related metadata
KR101030066B1 (ko) * 2009-04-06 2011-04-19 주식회사 다음커뮤니케이션 지리 정보 파노라마 사진의 제작을 위한 복수 개 카메라 자동제어 시스템
KR101282955B1 (ko) 2011-08-31 2013-07-17 한국과학기술연구원 실시간 고해상도 파노라마 영상 스트리밍 시스템 및 방법
US20130141526A1 (en) 2011-12-02 2013-06-06 Stealth HD Corp. Apparatus and Method for Video Image Stitching
EP2611152A3 (en) * 2011-12-28 2014-10-15 Samsung Electronics Co., Ltd. Display apparatus, image processing system, display method and imaging processing thereof
US9288506B2 (en) * 2012-01-05 2016-03-15 Qualcomm Incorporated Signaling view synthesis prediction support in 3D video coding
GB201305402D0 (en) * 2013-03-25 2013-05-08 Sony Comp Entertainment Europe Head mountable display
US20140324626A1 (en) * 2013-04-24 2014-10-30 Jonas Oscar Klink Systems and methods to present item recommendations
EP2960856B1 (en) * 2013-04-30 2020-03-04 Sony Corporation Image processing device, image processing method, and program
KR102021857B1 (ko) * 2013-07-23 2019-09-17 엘지전자 주식회사 이동 단말기 및 그의 파노라마 촬영방법
KR102067057B1 (ko) 2013-07-24 2020-01-16 엘지전자 주식회사 디지털 디바이스 및 제어 방법
KR101773116B1 (ko) * 2013-07-26 2017-08-31 삼성전자주식회사 영상 촬영 장치 및 이의 촬영 방법
KR101519052B1 (ko) 2013-10-16 2015-05-12 한양대학교 에리카산학협력단 감성광고 기반의 광고 제공 기능을 구비한 스마트 ｔｖ
US20150304559A1 (en) 2014-03-28 2015-10-22 Kogeto, Inc. Multiple camera panoramic image capture apparatus
KR101600860B1 (ko) 2014-05-12 2016-03-09 대동산전주식회사 이벤트 기반의 영상 비교 관리시스템
US10394038B2 (en) 2014-08-29 2019-08-27 Ioculi, Inc. Image diversion to capture images on a portable electronic device
KR20160034037A (ko) 2014-09-19 2016-03-29 삼성전자주식회사 화면 캡쳐를 위한 방법 및 그 전자 장치
KR101844032B1 (ko) * 2014-12-26 2018-05-14 주식회사 케이티 파노라믹 비디오 영상의 관심 영역의 영상 전송 방법, 장치 및 디바이스
CN105825713B (zh) * 2016-04-08 2018-07-24 重庆大学 车载无人机辅助驾驶系统的运行方式
KR102519592B1 (ko) * 2016-09-02 2023-04-10 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040264919A1 (en) * 2003-06-14 2004-12-30 Impressive Ideas Ltd. Display system for views of video item
US20150213577A1 (en) * 2014-01-30 2015-07-30 Google Inc. Zoom images with panoramic image capture

Also Published As

Publication number Publication date
CN109804620A (zh) 2019-05-24
US10440266B2 (en) 2019-10-08
WO2018070638A1 (en) 2018-04-19
US20180103198A1 (en) 2018-04-12
KR20180039939A (ko) 2018-04-19
EP3476118A1 (en) 2019-05-01
EP3476118A4 (en) 2019-06-26

Similar Documents

Publication Publication Date Title
US10334162B2 (en) Video processing apparatus for generating panoramic video and method thereof
US9747723B2 (en) Augmented reality for video system
US10467987B2 (en) Display apparatus and controlling method thereof
US10771684B2 (en) Profiles identifying camera capabilities
CN110636354A (zh) 一种显示设备
US8947488B2 (en) Display apparatus and display method thereof
KR102676837B1 (ko) 디스플레이장치 및 그 제어방법
CN106105246A (zh) 直播显示方法、装置及系统
JP2016025640A (ja) 情報処理装置、情報処理方法およびプログラム
EP3316582B1 (en) Multimedia information processing method and system, standardized server and live broadcast terminal
CN105939497B (zh) 媒体串流系统及媒体串流方法
CN105933764A (zh) 广播接收装置及其控制方法
CN107197172A (zh) 视频直播方法、装置和系统
CN104620594A (zh) 能够识别多个外围设备并且允许选择和显示多个外围设备中之一的内容的电视机
CN103856804A (zh) 信息处理设备、方法和系统、输出设备和方法
US20180070043A1 (en) Display apparatus and controlling method thereof
KR102630681B1 (ko) 디스플레이 장치 및 캡처 이미지 생성 방법
US9491447B2 (en) System for providing complex-dimensional content service using complex 2D-3D content file, method for providing said service, and complex-dimensional content file therefor
CN108882004B (zh) 视频录制方法、装置、设备及存储介质
KR102152627B1 (ko) 미러링 화면에 관련된 콘텐츠 출력 방법 및 그 장치
CN115604566A (zh) 图像生成、图像显示方法和装置
JP2016504802A (ja) ハンドヘルドディスプレイズーム機能
JP5927515B2 (ja) 画像編集方法、画像編集システム、及び画像編集プログラム
JP6258486B2 (ja) 電子機器、方法、及びプログラム
CN201887890U (zh) 具有网络传输功能的监控视听装置

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

AMND Amendment
P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E601 Decision to refuse application
PE0601 Decision on rejection of patent

St.27 status event code: N-2-6-B10-B15-exm-PE0601

AMND Amendment
E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PX0901 Re-examination

St.27 status event code: A-2-3-E10-E12-rex-PX0901

PX0701 Decision of registration after re-examination

St.27 status event code: A-3-4-F10-F13-rex-PX0701

X701 Decision to grant (after re-examination)
GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601