[go: up one dir, main page]

JP6035295B2 - 映像重合領域の補正方法、記録媒体、及び起動装置 - Google Patents

映像重合領域の補正方法、記録媒体、及び起動装置 Download PDF

Info

Publication number
JP6035295B2
JP6035295B2 JP2014171314A JP2014171314A JP6035295B2 JP 6035295 B2 JP6035295 B2 JP 6035295B2 JP 2014171314 A JP2014171314 A JP 2014171314A JP 2014171314 A JP2014171314 A JP 2014171314A JP 6035295 B2 JP6035295 B2 JP 6035295B2
Authority
JP
Japan
Prior art keywords
region
image
brightness
hue
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014171314A
Other languages
English (en)
Other versions
JP2015043573A (ja
Inventor
チョル キム,ファン
チョル キム,ファン
リョン ガン,スゥ
リョン ガン,スゥ
ヒョン カン,ジ
ヒョン カン,ジ
Original Assignee
シゼイ シジブイ カンパニー リミテッド
シゼイ シジブイ カンパニー リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シゼイ シジブイ カンパニー リミテッド, シゼイ シジブイ カンパニー リミテッド filed Critical シゼイ シジブイ カンパニー リミテッド
Publication of JP2015043573A publication Critical patent/JP2015043573A/ja
Application granted granted Critical
Publication of JP6035295B2 publication Critical patent/JP6035295B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/026Control of mixing and/or overlay of colours in general
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • H04N9/3147Multi-projection systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179Video signal processing therefor
    • H04N9/3182Colour adjustment, e.g. white balance, shading or gamut
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0666Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0686Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0693Calibration of display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/04Display device controller operating with a plurality of display units

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)

Description

本発明は、映像重合領域の補正方法、記録媒体、及び起動装置に係り、より詳しくは、複数のプロジェクタにより投射される映像のうち、重なり合う領域を補正して全体的に統一感のある映像を提供するための映像重合領域の補正方法、記録媒体、及び起動装置に関する。
従来は、劇場において、映画や広告などの映像を再生するためには、上映劇場の正面に配置された単一のスクリーンに2次元映像を投射していた。しかしながら、このようなシステム下においては、観客は平面的な(2 Dimension、2D)映像のみを鑑賞せざるを得なかった。
近年、観客に立体感のある映像を提供可能な3D映像を再現する技術が開発された。
3D映像技術は、人間の左眼と右眼に異なる映像が入力され、脳において重ね合わせられた場合に平面映像からでも立体感が感じられるという原理を利用するものであって、映像の撮影に際して、異なる偏光フィルターが取り付けられた二台のカメラを用い、映像の視聴に際して、偏光フィルター付き眼鏡などをかけて左眼と右眼に異なる映像が入力されるようにする。
しかしながら、このような従来の3D技術は、ユーザーに立体感のある映像を提供することはできるが、依然として単一のスクリーンにおいて再生される映像を鑑賞することに留まり、映像そのものへの没入度が低いという限界があった。また、観客が感じる立体感の方向が単一のスクリーンが存在する方向に限定されるという限界もあった。また、従来の3D技術は、映像の視聴に際して偏光フィルター付き眼鏡などを着用することを余儀なくされるため、映像を視聴する観客に不便さを与える虞があり、左眼と右眼に人為的に異なる映像を強制的に入力するため敏感な観客は目眩や吐き気を感じることもあった。
これらの理由から、従来の単一のスクリーンに基づく上映システムの問題点を解決し得る、いわゆる「多面上映システム」が提案(本出願人の先行出願)された。
図1は、多面上映システムの構造の一例を示す図である。
図1に示すように、「多面上映システム」とは、観客席の周囲に複数の投射面(スクリーン、壁面など)を配置し、複数の投射面上に一つの一体感のある映像を再生して、観客に立体感及び没入感を提供するシステムのことをいう。
なお、「多面上映劇場」とは、このような「多面上映システム」が構築された上映劇場のことをいう。
「多面上映システム」を効果的に運営するためには、複数の投射面に投射される映像を効果的に補正する技術が必要である。すなわち、「多面上映システム」においては、単一の投射面ではなく、複数の投射面に投射される多数枚の映像が統合的に補正されなければならず、且つ、上映劇場の構造も変化するため、これに対応して、多数枚の映像が補正される方式も変更されなければならない。このため、映像補正プロセスが非常に複雑になり、しかも、誤りが発生する可能性も非常に高くなる。この理由から、このような「多面上映システム」の映像補正プロセスに役立つ技術を提供することが望まれている。
一方、多面上映システムだけではなく、単一の投射面にも複数のプロジェクタを用いて映像を投射する場合がある。その例として、投射面が広い場合や投射面の横及び縦の割合が1台のプロジェクタではカバーされない場合などが挙げられる。
複数のプロジェクタを用いて映像を投射する場合には、一体感のある映像を提供することが非常に重要である。特に、各プロジェクタから投射される映像の境界が視認されないように、又は、重合領域と非重合領域との区別がつかないように映像を補正する必要がある。
特開2009−16964号公報
本発明の映像重合領域の補正方法は、上記した問題を解決するためのものであって、複数のプロジェクタを用いて映像を投射する場合に、各プロジェクタから投射される映像を全体的に一体感のあるように再生する映像重合領域の補正方法を提供することを目的としている。
本発明は、特に、映像重合領域に投射される映像の様々な要素を制御して重合領域及び非重合領域における異質感を低減することを目的としている。
上記した課題を解決するための本発明の映像重合領域の補正方法は、複数のプロジェクタから投射される映像間の重合領域を識別するステップと、映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断するステップと、明るさ又は色相のうち差分が発生する要素を調節するステップと、を含み、判断ステップにおいては、重合領域と非重合領域との間の明るさ差分を判断し、調節ステップにおいては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節し、判断ステップにおいては、色相のR、G、B値が既定の数値以下である映像を基準として明るさ差分を判断することを特徴とする。
ここで、前記識別ステップにおいては、前記複数のプロジェクタを制御するマスター装置に格納又は演算されたプロジェクタ別の映像投射領域情報を用いて、投射面の上において映像が重なり合う領域を演算し、映像が重なり合う領域の座標又は重なり合う度合いのうちのいずれか一つ以上を演算することを特徴とする。
本発明の一実施形態において、前記判断ステップにおいては、重合領域と非重合領域との間の明るさ差分を判断し、前記調節ステップにおいては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節し、このとき、判断ステップにおいては、色相のR、G、B値が既定の数値以下である映像を基準として明るさ差分を判断する。
本発明の一実施形態において、前記判断ステップにおいては、映像のフレーム別又は映像のピクセル別に判断することを特徴とする。
本発明の一実施形態において、複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、ユーザーに判断ステップの結果値を提供するステップと、ユーザーから入力される調節指令に従い映像の明るさ又は色相のうち少なくともいずれか一つを調節するステップと、を含み、他の実施形態においては、判断ステップにおいては、重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分をフレーム別に演算し、調節ステップにおいては、フレーム別に演算された結果を用いて相対的に暗い領域に投射される映像に明るさ差分又は映像差分を補償することを特徴とする。
また、本発明の他の実施形態においては、複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、を含み、
調節ステップにおいては、重合領域と非重合領域との境界においてブラーフィルターリングを適用することを特徴とする。
また、本発明の一実施形態において、複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、を含み、調節ステップにおいては、各プロジェクタから重合領域に投射される映像に透明度変数を反映し、透明度変数に色収差変数を更に反映することを特徴とする。
更にまた、本発明の一実施形態による映像重合領域の補正方法は、複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、を含み、判断ステップにおいては、重合領域と非重合領域との間の明るさ差分を判断し、調節ステップにおいては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節し、調節ステップ後に、明るさ調節による色相歪みを判断するステップと、歪みに応じて重合領域又は非重合領域の明るさを再調節するステップと、を更に含むことを特徴とする。
本発明は、上述した映像重合領域の補正方法を行うためのプログラムが収録されたコンピュータにて読み取り可能な記録媒体を備え、これを行うためのプログラムを起動するための装置を備える。
本発明の映像重合領域の補正方法によれば、複数のプロジェクタを用いて映像を投射した場合には、全体的に一体感、統一感のある映像を再生することができる。特に、映像重合領域に投射される映像の様々な要素を制御して重合領域及び非重合領域における異質感を低減することができる。
多面上映システムの構造の一例を示す図である。 本発明の一実施形態を示す手順図である。 重合領域及び非重合領域における明るさ差分を示す図である。 本発明の他の実施形態を示す手順図である。 本発明の更に他の実施形態を示す手順図である。 複数のプロジェクタにより映像が投射される一例を示す図である。 本発明の実施形態の適用前後に投射面に表示される映像を比較した図である。
以下、本発明の映像重合領域の補正方法について、添付図面に基づき、詳細に説明する。
図2は、本発明の一実施形態を示す手順図である。図2に示すように、本発明の映像重合領域の補正方法は、複数のプロジェクタから投射される映像間の重合領域を識別するステップと、映像の重合領域と非重合領域の明るさ又は色相のうち少なくともいずれか一つ以上の差分を判断するステップと、明るさ又は色相のうち差分が発生する要素を調節するステップと、を含む。
映像間の重合領域を識別するためのステップは、先ず、各プロジェクタから投射される映像が投射面のどの個所に投射されるかを把握しなければならない。このために、本発明の一実施形態においては、所定のパターン(例えば、格子模様)が形成された基準となるイメージを各プロジェクタ別に投射し、基準となるイメージが投射面上のどの個所に投射されるかを判断し、次いで、各プロジェクタから投射される基準となるイメージ間に重なり合う個所の座標を取得する。これによって、投射面上のどの位置が重合領域、或いは非重合領域であるかを把握することができ、重合領域は映像内のどの部分に相当するかも把握することができる。重合領域を容易に把握するために、連続して配置されたプロジェクタから投射される基準となるイメージを同じにし、色相を異ならせてもよい。
本発明の他の実施形態においては、複数のプロジェクタを制御するマスター装置に格納された又は演算されたプロジェクタ別の映像投射領域情報を用いて、投射面上において映像が重なり合う領域を演算してもよい。本発明の映像重合領域の補正方法が行われる装置であるマスター装置は、各プロジェクタが投射面のどの領域に映像を投射するかに関する情報である映像投射領域情報が既に演算されていてもよく、また格納されていてもよい。このような情報に基づいて、複数のプロジェクタから投射される映像間の重合領域の位置、座標などを取得することができ、特定の重合領域が何台のプロジェクタにより重なり合うか(重なり合う度合い)を演算することもできる。
図3は、重合領域及び非重合領域における明るさ差分を示す図である。
図3の(a)は、2台のプロジェクタ1、2が映像を投射する例であり、aが非重合領域に相当し、bが重合領域に相当する。上述した又は後述する方式により重合領域及び非重合領域の投射面を基準とする座標を求めることができ、当該位置に投射される映像を基準とする座標を求めることもできる。
図3の(b)は、4台のプロジェクタ1〜4が映像を投射する例を示すものであり、aが非重合領域を示し、bが2台のプロジェクタにより映像が重なり合う領域を示し、cが4台のプロジェクタにより重なり合う領域を示す。
本発明の処理用法では、非重合領域と重合領域との区別も重要であるが、また重合領域が何台のプロジェクタにより重なり合うかを把握することも本発明を実施する上で非常に重要である。映像が重なり合う度合いに応じて補正される度合いも異なるためである。
図3に示すように、重合領域は、非重合領域に比べて相対的に明るく表示されているが、これは、映像が重なり合うほど色相が重なり合うように表現されたり光量が増したりするため明るくなることを示す。このような要素を考慮した本発明の実施形態については後述する。
本発明の処理用方法は、重合領域及び非重合領域を識別し、各領域の投射面上の座標、プロジェクタ上の座標などを取得した後に、映像の重合領域と非重合領域との間に発生する明るさ又は色相などの差分を判断するステップを有する。
本発明の一実施形態による明るさ差分の判断に際しては、映像の再生中の特定の時点(特定のフレーム)で投射される映像の光量をピクセル別に抽出する。このとき、映像を分析して抽出してもよく、投射面に投射されている全体の映像の領域(重合領域、非重合領域)別の光量をチェックして抽出してもよい。
映像のフレーム別に各ピクセルにおける光量差を判断した後には、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節するステップを有する。
本発明は、特に暗い映像又は黒色の映像が投射される時点で適用される。
映像内に黒色を表現するためには、プロジェクタからいかなる色相も投射しないことが必要であるだけではなく(R、G、B値が0)、いかなる光も投射しない必要がある。しかしながら、プロジェクタは、ピクセル別に刻一刻と変化する色相、光を投射しなければならないため、黒色を表現するときにも光及び色相を完全に遮断することができず、微量の光を出射する。たとえ黒色を表現する時点で投射面に出射される光の量が微量であるとしても、プロジェクタが映像を投射する環境はほとんど周りが暗いところであるため(例えば、上映劇場)、人間の瞳孔は、開いている状態、すなわち、微細な明るさ差分も感知可能な状態となる。重合領域において光の明るさが増す場合、重合領域と非重合領域との間の明るさ差分は、人間が認知可能な程度になる。
上述したように、暗い(黒色)映像を投射するときに、プロジェクタから光が発せられることは避けられず、しかも、光量を低減することもできないため、本発明の一実施形態においては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節する。すなわち、最も明るい領域に合わせてその他の領域の明るさを調整する。
本発明においては、現在投射される映像が暗い映像であるか否かを判断するために、特定のフレームの特定のピクセルのR、G、B情報を取得し、取得されたR、G、B情報のそれぞれの個別値、又は取得されたR、G、B情報の合計値が、既定の数値以下であるか否かを判断する。R、G、B値が0に近いほど黒色が表現されるため、映像内のフレーム別、ピクセル別のR、G、B値を分析して映像の暗い領域を識別することができる。
本発明においては、明るさ又は色相のうち差分が発生した要素を補正するステップが、下記の方式により行われる。
図4は、本発明の他の実施形態を示す手順図である。
図4に基づいて、本発明の他の実施形態について説明すると、判断ステップにおいて把握された重合領域及び非重合領域の明るさ差分に関する情報をユーザーに提供する。本発明の補正方法を用いる究極的な目的は、重合領域及び非重合領域が視認されないようにするところにある。このため、明るさに関する情報をユーザーが確認可能な形式のインタフェースを介してユーザーに提供し、これに基づいてユーザーから入力される調節指令に従い映像の明るさ又は色相のうちの少なくともいずれか一つを調節する。
例えば、ユーザーインターフェースには、複数のプロジェクタにより投射される投射面の座標、重合領域及び非重合領域の各領域内のピクセル別の明るさなどが表示されており、中央には、ユーザーが視認可能なように、投射面の特定の領域における明るさ、色相情報などが表示されている。ユーザーは、画面(ユーザーインタフェース)を確認しながら一側に配置された調節指令入力手段を調節して明るさなどを制御する。これにより、映像重合領域の映像を補正することができる。
上述した調節指令が入力される場合、本発明の調節ステップにおいては、下記の数式1により映像のピクセル別の明るさを調節する。
(数式1)
R(x,y)=R(x,y)+Offset(x,y)
G(x,y)=G(x,y)+Offset(x,y)
B(x,y)=B(x,y)+Offset(x,y)
上記の数式1において、(x,y)は、プロジェクタから投射される映像の特定の位置、座標を示し、R(x,y)などは、補正前の(x,y)におけるR、G、B値を示し、Offset(x,y)は、(x,y)における色相、明るさ補正値を示し、R(x,y)などは、(x,y)における色相、明るさが補正されたR、G、B値を示す。
図5は、本発明の更に他の実施形態を示す手順図である。
本発明において、明るさ又は色相のうち差分が発生した要素を調節するステップの更に他の実施形態について図5に基づいて説明する。
本実施形態は、重合領域及び非重合領域における明るさ又は色相の差分を、各フレーム別に、且つフレーム内のピクセル別に演算する。明るさ差分情報又は色相差分情報は、特定の時点(特定のフレーム)で投射される映像の光量又は色相に関する情報(R、G、B)値をピクセル別に抽出して得たものである(関連する内容は、上述した通りである)。フレーム別に、且つピクセル別に抽出された色相情報及び光量情報を、重合領域及び非重合領域の座標と共に演算すれば、すなわち、重合領域に属するピクセルの色相/光量情報及び非重合領域に属するピクセルの色相/光量情報を演算し、この差分を求めれば、重合領域及び非重合領域間の映像差分を導き出すことができる。
導き出された差分を非重合領域又は相対的に暗い重合領域に加算することによって、映像重合領域を補正することが可能になる。
一方、本発明の一実施形態においては、明るさ/色相を調節するに際してブラーフィルターリングを適用することにより、重合領域と非重合領域との境界において明るさ/色相が連続して変化し、その結果、境界における異質感を低減し、全体的に一体化された映像を再生することができる。
また本発明の一実施形態においては、調節ステップは、各プロジェクタから重合領域に投射される映像に透明度変数αを反映する。これは、重合により映像の明るさ及び色相が歪むことを補正するためである。例えば、重合映像内のあるピクセルが3台のプロジェクタから投射された映像により3回重なり合うように投射されたとき、各プロジェクタの色相は加算されるため、本来に比べて3倍ほど明るい明るさで映像が再生される。これを防ぐために、各プロジェクタから投射される映像を本来に比べて1/3だけ投射することにより、本来の明るさ通りに映像を表示することができる。このとき、1/3を透明度変数αと呼ぶ。但し、上記の例において透明度変数を1/3に設定したことは一例に過ぎず、透明度変数を設定、適用することは、下記の数式2の通りである。
(数式2)
C=Σα*C、Σα=1
(Cは、各ピクセルにおいて最終的に表現される色相であり、αは、各ピクセルにおける透明度変数である。)
他の例を挙げて上記の数式2について説明すると、i番目のプロジェクタとj番目のプロジェクタが半分ずつ左/右に重なり合っているとしたとき、左側に配設されたプロジェクタiは重合領域においてα値が1から0まで減少し、右側に配設されたプロジェクタjは重合領域においてα値が0から1まで増大する。すなわち、各プロジェクタのピクセル別のα値は、重合領域の境界に近いほど0に近い値を有し、重合領域においてα+α=1を満たせば、映像重合による色相歪みを補正することができる。
一方、本発明は、上記の実施形態に加えて、透明度変数に色収差変数を更に反映する。色収差変数とは、上記の透明度変数による色収差の発生を補正するためのものである。上述した実施形態により重合領域において映像の歪みを補正する実験を行ったところ、ほとんどの領域においては正確に映像が補正されたが、透明度変数αが0に近いほど色収差が発生する現象が見出された。
このような問題を解決するために、本実施形態においては、透明度変数αに色収差変数を更に反映して映像を補正する。色収差変数としては、透明度変数と負の相関関係を有するように(1−α)を設定することができる。但し、これは単なる一例に過ぎず、透明度変数が小さな場合に発生する色収差歪みを再補正するための様々な変数が色収差変数として設定可能である。
本発明の他の実施形態による映像重合領域の補正方法は、調節ステップ後に、明るさ調節による色相歪みを判断するステップ、及び前記歪みに応じて重合領域又は非重合領域の明るさを再調節するステップを更に含む。上述したように、明るさ調節が求められる映像、すなわち、映像の暗い部分又は黒色部分において明るさが調節された後に、当該明るさで明るい色の映像もそのまま表現される場合には本実施形態が適用されることが好ましい。
暗い映像を基準として調節された明るさは、明るい映像においてはむしろ色相を歪ませることがある。このため、本実施形態においては、明るさ調節による色相歪みを判断し、歪んだ度合いに応じて重合領域又は非重合領域の明るさを再調節するステップを更に含む。色相歪みを判断し、且つ、明るさなどを再調節する具体的な方式は、上述した実施形態と同様である。
本実施形態は、下記の数式3などで表わされる。
(数式3)
R(x,y)=R(x,y)+Offset(x,y)*[(255−R(x,y))/255]
G(x,y)=G(x,y)+Offset(x,y)*[(255−R(x,y))/255]
B(x,y)=B(x,y)+Offset(x,y)*[(255−R(x,y))/255]
RGB色相の表示は0から255までの間において決定され、255に近いほど赤色/緑色/青色に近い明るい色となる。このため、上記の数式によれば、色が明るくなるほど、且つ、RGB値が大きくなるほど[(255−R(x,y)/255]の値が小さくなる。その結果、Offset(x,y)の値も小さくなり、(x,y)地点における補正の度合いも小さくなる。上述したように、明るさ調節による映像歪みを低減する方向に明るさが再調節されるのである。
nは整数であり、必要に応じて選択され、実験の結果、nが20である場合に適切な度合いに映像が再補正されることを確認することができた。但し、これは実験例に過ぎず、本発明が上記の数式3及びnの値に限定されることはない。
図6は、複数のプロジェクタにより映像が投射される一例を示す図である。
図6は、1枚の投射面に2台のプロジェクタにより映像が投射される例を示すものである。プロジェクタ1により左側の映像が、プロジェクタ2により右側の映像が投射面に表示され、中間に点線が重なり合う領域が重合領域であり、その他の領域が非重合領域である。図6に示す例は、上述した本発明の映像重合領域の補正方法が適用された状態で、重合領域及び非重合領域において映像が一体感のあるように再生される。
図7は、本発明の実施形態の適用前後に投射面に表示される映像を比較した図である。
図7の(a)は、補正前に投射面に表現される映像であり、中央の重合領域が左右の非重合領域に比べて明るいということを確認することができる。複数のプロジェクタを用いて映像を投射する場合、ユーザーは、図7の(a)に示すように、映像から異質感を感じるため、上述した本発明の実施形態を適用すれば、図7の(b)に示すように、一体化された映像を再生することが可能になる。
本発明は上述した複数の実施形態による映像重合領域の補正方法を行うためのプログラムの形式で実現可能であり、このようなプログラムが収録されたコンピュータにて読み取り可能な記録媒体を備える。ここで、記録媒体とは、単にハードディスクドライブ(HDD)、コンパクトディスク(CD)、磁気ディスクなどの狭い意味の記録媒体のみを意味するだけではなく、格納手段を備えるサーバー、コンピュータなどを含む広い意味で捉えられるべきである。
加えて、本発明は、このようなプログラムを起動するための装置を備え、その例として、プロジェクタ制御装置、コンピュータ、サーバーなどの上記の起動装置(マスター装置)が挙げられる。この場合、上述した実施形態により言及した本発明の補正方法は、これを行う構成要素において行われる。例えば、判断/演算は中央処理装置(CPU)などにおいて行われ、情報の格納は装置内の格納構成要素(例えば、データベースなど)において行われ、ユーザーインタフェースは表示装置などを介してユーザーに提供し、入力装置などを介してユーザー指令を受け取る。

Claims (12)

  1. 複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、
    映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、
    明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、
    を含み、
    前記判断ステップにおいては、重合領域と非重合領域との間の明るさ差分を判断し、
    前記調節ステップにおいては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節し、
    前記判断ステップにおいては、色相のR、G、B値が既定の数値以下である映像を基準として明るさ差分を判断することを特徴とする映像重合領域の補正方法。
  2. 前記識別ステップにおいては、前記複数のプロジェクタを制御するマスター装置に格納され又は演算されたプロジェクタ別の映像投射領域情報を用いて、投射面上において映像が重なり合う領域を演算することを特徴とする請求項1に記載の映像重合領域の補正方法。
  3. 前記識別ステップにおいては、映像が重なり合う領域の座標又は重なり合う度合いのうちのいずれか一つ以上を演算することを特徴とする請求項1に記載の映像重合領域の補正方法。
  4. 前記判断ステップにおいては、映像のフレーム別に判断することを特徴とする請求項1に記載の映像重合領域の補正方法。
  5. 前記判断ステップにおいては、映像のピクセル別に判断することを特徴とする請求項1に記載の映像重合領域の補正方法。
  6. 前記判断ステップにおいては、重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分をフレーム別に演算し、
    前記調節ステップにおいては、フレーム別に演算された結果を用いて相対的に暗い領域に投射される映像に明るさ差分又は映像差分を補償することを特徴とする請求項1に記載の映像重合領域の補正方法。
  7. 複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、
    映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと
    ーザーに判断ステップの結果値を提供するステップと、
    ユーザーから入力される調節指令に従い映像の明るさ又は色相のうち少なくともいずれか一つを調節するステップと、
    を含むことを特徴とする映像重合領域の補正方法。
  8. 複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、
    映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、
    明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、
    を含み、
    前記調節ステップにおいては、重合領域と非重合領域との境界においてブラーフィルターリングを適用することを特徴とする映像重合領域の補正方法。
  9. 複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと、
    映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと、
    明るさ又は色相のうち差分が発生する要素を調節する調節ステップと、
    を含み、
    前記調節ステップにおいては、各プロジェクタから重合領域に投射される映像に透明度変数を反映し、前記透明度変数に色収差変数を更に反映することを特徴とする映像重合領域の補正方法。
  10. 複数のプロジェクタから投射される映像間の重合領域を識別する識別ステップと
    映像の重合領域と非重合領域の明るさ又は色相のうちの少なくともいずれか一つ以上の差分を判断する判断ステップと
    明るさ又は色相のうち差分が発生する要素を調節する調節ステップと
    を含み、
    前記判断ステップにおいては、重合領域と非重合領域との間の明るさ差分を判断し、
    前記調節ステップにおいては、最も明るい重合領域を基準として重合領域又は非重合領域の明るさを調節し、
    前記調節ステップ後に、明るさ調節による色相歪みを判断するステップと、
    前記歪みに応じて重合領域又は非重合領域の明るさを再調節するステップと、
    を更に含むことを特徴とする映像重合領域の補正方法。
  11. 請求項1から請求項10のうちのいずれか1項に記載の映像重合領域の補正方法を行うためのプログラムが収録され、コンピュータにて読み取り可能なことを特徴とする記録媒体。
  12. 請求項1から請求項10のうちのいずれか1項に記載の映像重合領域の補正方法を行うためのプログラムを起動することを特徴とする起動装置。
JP2014171314A 2013-08-26 2014-08-26 映像重合領域の補正方法、記録媒体、及び起動装置 Active JP6035295B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20130101354A KR101511523B1 (ko) 2013-08-26 2013-08-26 영상 중첩 영역의 보정 방법, 기록 매체 및 실행 장치
KR10-2013-0101354 2013-08-26

Publications (2)

Publication Number Publication Date
JP2015043573A JP2015043573A (ja) 2015-03-05
JP6035295B2 true JP6035295B2 (ja) 2016-11-30

Family

ID=52479955

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014171314A Active JP6035295B2 (ja) 2013-08-26 2014-08-26 映像重合領域の補正方法、記録媒体、及び起動装置

Country Status (6)

Country Link
US (1) US9547228B2 (ja)
EP (1) EP3039863A4 (ja)
JP (1) JP6035295B2 (ja)
KR (1) KR101511523B1 (ja)
CN (1) CN104427318B (ja)
WO (1) WO2015030400A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6658520B2 (ja) * 2014-07-01 2020-03-04 ソニー株式会社 画像処理装置および方法
CN104869375B (zh) * 2015-05-18 2018-03-13 北京思朗科技有限责任公司 一种图像边缘融合中的三维平滑曲面颜色校正系统及方法
US10303414B2 (en) 2016-07-15 2019-05-28 Panasonic Intellectual Property Management Co., Ltd. Device, system, and method of controlling projection image
CN107872658A (zh) * 2016-09-28 2018-04-03 株式会社理光 投影接缝区域亮度调节方法、以及投影接缝区域亮度调节装置
CN109791748B (zh) * 2016-09-28 2021-01-08 富士胶片株式会社 光栅显示体、光栅图像的形成方法、光栅显示体的制造方法、及存储介质
CN106791741B (zh) * 2016-12-07 2018-09-21 重庆杰夫与友文化创意有限公司 多屏衔接方法及装置
CN109300084B (zh) * 2017-07-25 2023-07-04 杭州海康汽车技术有限公司 一种图像拼接方法、装置、电子设备及存储介质
CN109587457A (zh) * 2017-09-29 2019-04-05 中强光电股份有限公司 投影系统及其自动设定方法
JP6926948B2 (ja) * 2017-10-27 2021-08-25 セイコーエプソン株式会社 プロジェクター、画像投写システム、及びプロジェクターの制御方法
CN110784690B (zh) 2018-07-30 2022-05-10 中强光电股份有限公司 投影系统及投影方法
WO2020195220A1 (ja) 2019-03-27 2020-10-01 富士フイルム株式会社 画像処理装置、投影システム、画像処理方法、及び画像処理プログラム
CN113449730B (zh) * 2020-03-27 2025-02-18 苏州科瓴精密机械科技有限公司 图像处理方法、系统、自动行走设备及可读存储介质
CN113038102B (zh) * 2021-03-05 2022-03-22 深圳市普汇智联科技有限公司 用于多投影拼接的全自动几何校正方法
CN114103107A (zh) * 2021-11-11 2022-03-01 孙明辉 一种基于自适应切片和自动曝光参数选择的快速光固化3d打印方法
CN118337965B (zh) * 2024-04-10 2025-02-25 山东金东数字创意股份有限公司 一种多控制主机的多投影仪异形幕投影方法、介质及系统

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6781606B2 (en) * 1999-05-20 2004-08-24 Hewlett-Packard Development Company, L.P. System and method for displaying images using foveal video
US7015954B1 (en) * 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6618076B1 (en) * 1999-12-23 2003-09-09 Justsystem Corporation Method and apparatus for calibrating projector-camera system
US6760075B2 (en) * 2000-06-13 2004-07-06 Panoram Technologies, Inc. Method and apparatus for seamless integration of multiple video projectors
JP2002116500A (ja) 2000-10-05 2002-04-19 Olympus Optical Co Ltd 画像投影表示装置
US20020180727A1 (en) * 2000-11-22 2002-12-05 Guckenberger Ronald James Shadow buffer control module method and software construct for adjusting per pixel raster images attributes to screen space and projector features for digital warp, intensity transforms, color matching, soft-edge blending, and filtering for multiple projectors and laser projectors
JP2003274319A (ja) 2002-03-13 2003-09-26 Astro Design Inc 映像補正システム、映像補正方法、プログラム、及び記録媒体
CN1322743C (zh) * 2003-03-26 2007-06-20 松下电工株式会社 建立亮度过滤器的方法及虚拟空间建立系统
JP4345745B2 (ja) 2003-10-15 2009-10-14 セイコーエプソン株式会社 マルチプロジェクションディスプレイ
JP4501481B2 (ja) * 2004-03-22 2010-07-14 セイコーエプソン株式会社 マルチプロジェクションシステムのための画像補正方法
JP4026649B2 (ja) * 2005-02-16 2007-12-26 セイコーエプソン株式会社 プロジェクタ、プロジェクタの制御方法、プロジェクタの制御プログラム、およびこのプログラムを記憶した記憶媒体
US7866832B2 (en) 2006-02-15 2011-01-11 Mersive Technologies, Llc Multi-projector intensity blending system
US7800628B2 (en) * 2006-06-16 2010-09-21 Hewlett-Packard Development Company, L.P. System and method for generating scale maps
US8406562B2 (en) * 2006-08-11 2013-03-26 Geo Semiconductor Inc. System and method for automated calibration and correction of display geometry and color
CN100428136C (zh) * 2006-12-15 2008-10-22 浙江大学 大规模立体拼接显示墙的校正方法
US7852350B2 (en) * 2007-07-26 2010-12-14 Stmicroelectronics S.R.L. Graphic antialiasing method and graphic system employing the method
JP5431312B2 (ja) * 2008-05-21 2014-03-05 パナソニック株式会社 プロジェクタ
US8369625B2 (en) * 2008-06-30 2013-02-05 Korea Institute Of Oriental Medicine Method for grouping 3D models to classify constitution
WO2010066110A1 (zh) 2008-12-10 2010-06-17 宏瞻科技股份有限公司 激光投影系统
JP5273671B2 (ja) * 2009-04-10 2013-08-28 株式会社ジャパンディスプレイ 表示信号変換装置
US8102332B2 (en) * 2009-07-21 2012-01-24 Seiko Epson Corporation Intensity scaling for multi-projector displays
JP2011066738A (ja) * 2009-09-18 2011-03-31 Sanyo Electric Co Ltd 投写型映像表示装置
GB2477793A (en) * 2010-02-15 2011-08-17 Sony Corp A method of creating a stereoscopic image in a client device
JP2011188404A (ja) * 2010-03-11 2011-09-22 Seiko Epson Corp マルチプロジェクションシステムにおける画像処理装置、マルチプロジェクションシステムにおける画像処理方法及びマルチプロジェクションシステム
US20110234921A1 (en) * 2010-03-24 2011-09-29 Victor Ivashin Black-Level Compensation in Multi-Projector Display Systems
JP2011211276A (ja) 2010-03-29 2011-10-20 Seiko Epson Corp 画像処理装置、画像表示システム、画像処理方法
JP2011217304A (ja) 2010-04-02 2011-10-27 Seiko Epson Corp 画像処理装置、プロジェクター、マルチプロジェクションシステム及び画像処理方法
JP2011217305A (ja) 2010-04-02 2011-10-27 Seiko Epson Corp 画像処理方法、画像処理装置及びマルチプロジェクションシステム
JP5477185B2 (ja) 2010-06-17 2014-04-23 セイコーエプソン株式会社 マルチプロジェクションシステム、プロジェクター、及び、画像投射制御方法
JP5471965B2 (ja) * 2010-08-16 2014-04-16 富士通セミコンダクター株式会社 画像処理装置、撮像装置、及び画像処理方法
KR101174075B1 (ko) 2010-08-31 2012-08-16 유한회사 마스터이미지쓰리디아시아 입체영상 상영 시스템과 이를 위한 입체영상 플레이어 및 입체영상용 프로젝터
KR101713366B1 (ko) 2010-09-10 2017-03-07 인텔 코포레이션 이미지 투사 방법 및 장치
US20120075353A1 (en) * 2010-09-27 2012-03-29 Ati Technologies Ulc System and Method for Providing Control Data for Dynamically Adjusting Lighting and Adjusting Video Pixel Data for a Display to Substantially Maintain Image Display Quality While Reducing Power Consumption
JP2012154984A (ja) 2011-01-24 2012-08-16 Seiko Epson Corp マルチプロジェクションシステム、プロジェクター、及び、画像投射制御方法
JP2012169735A (ja) * 2011-02-10 2012-09-06 Canon Inc 画像処理装置、画像処理方法及びプログラム
KR20130035457A (ko) * 2011-09-30 2013-04-09 삼성전자주식회사 디스플레이장치 및 영상처리방법
JP6102215B2 (ja) 2011-12-21 2017-03-29 株式会社リコー 画像処理装置、画像処理方法およびプログラム
JP5971973B2 (ja) * 2012-02-21 2016-08-17 キヤノン株式会社 投影装置

Also Published As

Publication number Publication date
JP2015043573A (ja) 2015-03-05
US20150054848A1 (en) 2015-02-26
WO2015030400A1 (en) 2015-03-05
KR101511523B1 (ko) 2015-04-13
EP3039863A4 (en) 2017-09-27
CN104427318B (zh) 2017-04-12
US9547228B2 (en) 2017-01-17
CN104427318A (zh) 2015-03-18
KR20150024191A (ko) 2015-03-06
EP3039863A1 (en) 2016-07-06

Similar Documents

Publication Publication Date Title
JP6035295B2 (ja) 映像重合領域の補正方法、記録媒体、及び起動装置
KR101583289B1 (ko) 영상 중첩 영역의 보정 방법, 기록 매체 및 실행 장치
CN104702929B (zh) 修正图像交叠区的失真的方法、记录介质和执行装置
US8570319B2 (en) Perceptually-based compensation of unintended light pollution of images for projection display systems
KR101391380B1 (ko) 다면 상영을 위한 영상 보정 시스템 및 방법
US20150138222A1 (en) Image processing device and multi-projection system
US20120307023A1 (en) Disparity distribution estimation for 3d tv
US20200005738A1 (en) Image processing apparatus, image processing method, and storage medium
JP2014059691A (ja) 画像処理装置および方法、並びにプログラム
KR101455662B1 (ko) 다면 상영을 위한 영상 보정 시스템 및 방법
US9172940B2 (en) Two-dimensional video to three-dimensional video conversion based on movement between video frames
KR101564974B1 (ko) 영상 중첩 영역의 보정 방법, 기록 매체 및 실행 장치
CN116033137B (zh) 显示屏的处理方法、装置、非易失性存储介质及电子设备
JP6333952B2 (ja) ビデオフレーム間の動きに基づく2次元ビデオの3次元ビデオへの変換
Minakawa et al. Elliptic vs. rectangular blending for multi-projection displays
TW201306584A (zh) 無縫融接多張影像的投影方法及其系統

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150624

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150721

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151021

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161025

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161031

R150 Certificate of patent or registration of utility model

Ref document number: 6035295

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250