WO2007013652A1

WO2007013652A1 - 画像表示制御装置、画像表示装置、遠隔操作器、画像表示システム

Info

Publication number: WO2007013652A1
Application number: PCT/JP2006/315134
Authority: WO
Inventors: Naoaki Horiuchi; Toshio Tabata
Original assignee: Pioneer Corp
Current assignee: Pioneer Corp
Priority date: 2005-07-29
Filing date: 2006-07-31
Publication date: 2007-02-01
Anticipated expiration: 2008-01-29
Also published as: US20100141578A1; JPWO2007013652A1; JP4712804B2

Abstract

【課題】表示画面から目を離すことなく所望の操作指定部位を容易に選択指定可能とし、遠隔操作時における操作者の利便性を向上する。【解決手段】画像表示制御装置１００は、画像表示装置１の液晶表示部３上に、操作メニューＭＥを表示させるためのメニュー作成部１５４と、遠隔操作器２００から到来する赤外線信号を認識可能な赤外線フィルタ付きカメラ１１０と、この認識結果に基づき、遠隔操作器２００が撮像中において占める位置を特定するリモコン位置特定部１５５と、この特定した遠隔操作器２００の位置を液晶表示部３上に表示させるリモコン位置信号作成部１５６と、液晶表示部３上に表示された操作メニューＭＥのうち操作指定部位を決定するユーザー操作判定部１５２とを有する。

Description

明細書

画像表示制御装置、画像表示装置、遠隔操作器、画像表示システム技術分野

[0001] 本発明は、表示画面における表示制御を行う画像表示制御装置に係わり、特に、遠隔操作によって表示制御を行う画像表示制御装置、画像表示装置、及び画像表示システム、並びにそれらに用いる遠隔操作器に関する。

背景技術

[0002] 元来、離れた場所力例えばテレビ等の画像表示装置の動作を操作するために、携帯型の遠隔操作器 (いわゆるリモコン）がよく知られている。遠隔操作時には、例えば画像表示装置の表示画面に、複数の操作指定部位 (操作領域)を一覧配置した操作対象図象 (操作メニュー)を表示させ、遠隔操作器の操作ボタンを操作することで上記操作対象図象中の複数の操作指定部位のうちひとつを選択指定することで、これに対応した動作 (チャンネル切替、音声切替等)を当該画像表示装置にて実行することができる。

[0003] また、上記の画像表示装置自体に限られず、テレビ等に接続されて当該テレビ等への映像出力やさらに音楽等コンテンツの再生出力を行う、ビデオデッキ、 DVDプレイヤー Zレコーダー、 CDプレイヤー Zレコーダー、 MDプレイヤー Zレコーダ一等の映像出力装置、コンテンツ再生装置、その他画像表示装置へ映像出力機能を備えた製品 (以下適宜、映像出力装置等という）に関しても、上記同様、遠隔操作を行うことができる。すなわち、それら映像出力装置等に対し遠隔操作を行うことで、これに接続された画像表示装置の表示画面に、当該映像出力装置等に関わる複数の操作指定部位 (操作領域)を備えた操作対象図象 (操作メニュー)を一覧表示させる。そしてそれら複数の操作指定部位のうちひとつを選択指定することで、その選択指定した映像出力装置等の動作 (映像再生、予約録画等)を実行することができる。

[0004] ところが、上記のように操作指定部位を選択指定する際には、操作者は、まず表示画面を見て現在の選択指定位置 (カーソル位置等)から自己の所望する操作指定部位 (操作領域)がどちら側の方向に位置するかを確認した後、手元の遠隔操作器に目を移して上記選択指定位置を移動させるべき方向への操作ボタンを押し、さらに表示画面に目を戻して上記遠隔操作器の操作によって選択指定位置が確かに上記所望の操作指定部位へ移動し当該操作指定部位が確力に選択指定された力どうかを確認し、移動不十分の場合は再び手元の遠隔操作器に目を移して同様の手順を繰り返さなければならない。このように、視線を何度も移しながらの非常に煩雑で面倒な操作が必要となる結果、操作者にとって利便性の低ヽ不便なものとなってヽた。

[0005] そこで、このような点に対応し、近年、操作者による遠隔操作性の向上を図るために、例えば特許文献 1や特許文献 2に記載の技術が既に提唱されて、る。

[0006] 特許文献 1記載の従来技術では、撮影手段としてのカメラと、このカメラで撮影された画像の動きを検出する動き検出器と、この動き検出器で検出した画像の動き及び Z又は形状を認識する画像認識器とを有する制御装置が開示されて、る。操作者が所定のパターンにしたがって指を動かす（=ジェスチャー）と、カメラで撮影されたその指の動きが動き検出器によって検出され、さらに画像認識器で当該動きや形状の変化が認識されて、被操作機器に対しそのパターンに対応した制御が行われる。これにより、操作者は遠隔操作器を用いることなぐ被操作機器に対し所望の操作を行えるようになっている。

[0007] 特許文献 2記載の従来技術では、赤外線リモコンと、イメージセンサと、ジエスチヤ一同定手段とを有する遠隔制御システムが開示されている。操作者が所定のパターンにしたがって赤外線リモコンを振り回す（=ジェスチャー）ことにより、イメージセンサを介して取得されたリモコンの動いた方向と加速度とに基づき、ジェスチャー同定手段でそのジェスチャーが同定され、ネットワークを介して被操作機器に対しそのバターンに対応した制御が行われる。これにより、操作者は被操作機器に対し所望の操作を行えるようになって!/、る。

[0008] 特許文献 1 :特開 2001— 5975号公報（段落番号 0013〜0027、図 1〜図 9)

特許文献 2：特開 2004- 178469号公報（段落番号 0013〜0063、図1〜図15) 発明の開示

発明が解決しょうとする課題

[0009] 特許文献 1及び特許文献 2に記載の従来技術では、例えば、被操作機器を遠隔操作する際、操作者が実行したい操作とこれに対応するジェスチャーとの関連付け（= どのように指やリモコンを動力したときにどのような操作が実行される力を予め覚えておく必要がある。また覚えて、な、操作にっ、ては上記関連付けを別途参照しなければならない。このため、結局、操作者の負担が大きくならざるを得ず、操作者にとつて禾 lj便'性の低!、不便なものとなって!/ヽた。

[0010] なお、上記した赤外線通信や無線通信を介した操作器以外に、被操作器側と有線

(ケーブル)等によって接続されて離れたところ力操作する操作器 (V、わゆるベンダント方式）においても、前述したのと同様、例えば視線を何度も移しながらの非常に煩雑で面倒な操作が必要で利便性が低く不便であるという問題があった。

[0011] 本発明の目的は、操作者は、表示画面から目を離すことなく所望の操作指定部位を容易に選択指定可能とすることで、操作時における操作者の利便性を向上できる画像表示制御装置、画像表示装置、及び画像表示システム、並びにそれらに用いる遠隔操作器を提供することにある。

課題を解決するための手段

[0012] 上記目的を達成するために、請求項 1記載の発明は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、携帯型の操作器の背景から到来する第 1光線とは異なる態様又は属性を備え、前記操作器力も到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が前記第 2光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

[0013] 上記目的を達成するために、請求項 21記載の発明は、表示画面と、この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景から到来する第 1光線とは異なる態様又は属性を備え、前記操作器から到来する第 2 光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が前記第 2光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

[0014] 上記目的を達成するために、請求項 22記載の発明は、画像表示操作を行うための携帯型の遠隔操作器であって、通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段と、この光信号生成手段で生成した前記光信号を、当該光信号を前記通常の可視光線と区別して認識可能な第 2光線撮像手段;表示画面上に操作対象図象を表示させるための信号を生成する第 1手段;前記第 2光線撮像手段における前記光信号の認識結果に基づき、前記遠隔操作器の背景の映像中にぉヽて前記遠隔操作器が前記第 2光線撮像手段による撮像中にぉヽて占める位置を特定し前記表示画面上に表示させるための信号を生成する第 2手段;前記特定された前記遠隔操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第 3手段;を備えた画像表示制御装置へ送信する光信号送信手段とを有することを特徴とする。

[0015] 上記目的を達成するために、請求項 23記載の発明は、携帯型の操作器と、この操作器の操作に基づき画像表示を行うための信号を生成する画像表示制御装置とを有する画像表示システムであって、前記画像表示制御装置は、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第 1光線とは異なる態様又は属性を備え、前記操作器力到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が第 2光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

[0016] 上記目的を達成するために、請求項 24記載の発明の画像表示システムは、携帯型の操作器と、画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景力到来する第 1光線とは異なる態様又は属性を備え、前記操作器から到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が前記第 2光線撮像手段による撮像中において占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする。

図面の簡単な説明

[0017] [図 1]本発明の一実施形態による画像表示システムのシステム構成図である。

[図 2]図 1に示された遠隔操作器の機能的構成を表す機能ブロック図である。

[図 3]図 1に示された画像表示制御装置の機能的構成を表す機能ブロック図である。

[図 4]液晶表示部の表示の一例を表す図である。

[図 5]液晶表示部の表示の一例を表す図である。

[図 6]液晶表示部の表示の一例を表す図である。

[図 7]液晶表示部の表示の一例を表す図である。

[図 8]液晶表示部の表示の一例を表す図である。

[図 9]操作領域決定をジェスチャーで指示する変形例の画像表示システムにおいて、液晶表示部の表示の一例を表す図である。

[図 10]図 9に示す変形例における画像表示制御装置の機能的構成を表す機能プロック図である。

[図 11]赤外線フィルタ付カメラがリモコン指示操作を受け取る変形例の機能的構成を表す機能ブロック図である。

圆 12]コールドミラーを用いる変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。

圆 13]位置補正を行う変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。

[図 14]位置補正の様子を表す説明図である。

圆 15]位置補正を行う他の変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。

[図 16]赤外線高感度カメラを用いる変形例における当該赤外線高感度カメラのもつ感度特性の一例を表す特性図である。

圆 17]図 16に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。

[図 18]距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。

[図 19]距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。

圆 20]距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。

圆 21]距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。

圆 22]距離に応じ表示倍率の変化を行う変形例における手法の概略を説明するための説明図である。

圆 23]画像表示制御装置の機能的構成を表す機能ブロック図である。

[図 24]切り出し処理部の詳細構成を表す機能ブロック図である。

[図 25]切り出し処理部全体で実行する制御手順を表すフローチャートである。

[図 26]ステップ S50の詳細手順を表すフローチャートである。

圆 27]操作者が操作範囲を自ら設定する変形例における切り出し処理部の機能的構成を表す機能ブロック図である。圆 28]入力画像における図形の大きさから距離を計算する手法を説明するための説明図である。

圆 29]障害物回避のために切り出し領域を変更する変形例の概略を説明するための説明図である。

[図 30]障害物となりうる物をデータベース化して登録しておく手法を説明するための説明図である。

圆 31]障害物回避のためにメニュー表示領域をずらす変形例の概略を説明するための説明図である。

圆 32]画像表示制御装置の機能的構成を表す機能ブロック図である。

圆 33]切り出し処理部及び 2次映像合成部の詳細構成を、障害物判定部とともに表す機能ブロック図である。

圆 34]切り出し処理部、 2次映像合成部、及び障害物判定部の全体で実行する制御手順を表すフローチャートである。

圆 35]障害物越しの操作感を得られるように延長補完する変形例の概略を説明するための説明図である。

[図 36]画像表示制御装置の機能的構成を表す機能ブロック図である。

圆 37]補完信号生成部が実行する制御手順を表すフローチャートである。

圆 38]延長線の引き方を概念的に説明するための説明図である。

圆 39]障害物越しの操作感を得られるように中間部補完を行う変形例の概略を説明するための説明図である。

[図 40]蓄積コンテンツの再生位置指定に応用した変形例にぉ、て、画像表示装置の液晶表示部の表示の一例を表す図である。

圆 41]図 40に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。

[図 42]液晶表示部の表示の他の例を表す図である。

[図 43]EPGに適用した変形例にぉ、て、画像表示装置の液晶表示部の表示の一例を表す図である。

圆 44]図 43に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。

[図 45]実写画像を省略する変形例において、画像表示装置の液晶表示部の表示の一例を表す図である。

圆 46]図 45に示す変形例における画像表示制御装置の機能的構成を表す機能ブロック図である。

圆 47]有線接続の操作器を用いた変形例における画像表示制御装置の機能的構成の一例を表す機能ブロック図である。

圆 48]操作メニュー等力選択指定できる範囲を制限する変形例の液晶表示部の表示例を表す図である。

圆 49]すべての操作領域を遠隔操作器の狭い移動範囲で選択可能とした変形例の液晶表示部の表示例を表す図である。

符号の説明

3 揿晶表示部（表示画面）

100 画像表示制御装置

110 赤外線フィルタ付きカメラ (第 2光線撮像手段）

110A 赤外線高感度カメラ (第 2光線撮像手段）

HOAa 撮像部 (第 1光線撮像手段）

HOAb 映像信号生成部 (映像表示信号生成手段）

115 距離検出部 (距離検出手段）

120 カメラ

120a 撮像部 (第 1光線撮像手段）

120b 映像信号生成部 (映像表示信号生成手段）

151 ユーザー指示入力部 (指示信号入力手段）

152 ユーザー操作判定部 (操作部位決定手段）

154 メニュー作成部（図象表示信号生成手段）

154B コンテンツ表示作成部（図象表示信号生成手段)

155 リモコン位置特定部 (位置特定手段） 156 リモコン位置信号作成部 (位置表示信号生成手段）

165 補完信号生成部 (予想位置設定手段）

180 切り出し処理部 (抽出処理手段）

180A 切り出し処理部 (抽出処理手段）

180B 切り出し処理部 (抽出処理手段）

183 補完拡大切り出し部 (予想位置設定手段）

195A 2次映像合成部（図象位置設定手段）

200 遠隔操作器

200A 操作器

202 赤外線駆動部 (光信号送信手段）

203 発信器 (光信号生成手段）

204 パルス変調器 (光信号生成手段）

206 FM変調器 (光信号生成手段）

BG 背景

CT コンテンツ表示 (操作対象図象）

MA 位置表示

ME 操作メニュー (操作対象図象）

発明を実施するための最良の形態

[0019] 以下、本発明の一実施の形態を図面を参照しつつ説明する。

[0020] 図 1は、本実施形態による画像表示システムのシステム構成図である。図 1において、この画像表示システムは、画像表示装置 1と、この画像表示装置 1において画像表示を行うための信号を生成する画像表示制御装置 100と、この画像表示制御装置 100を遠隔操作するための携帯型の遠隔操作器 (リモートコントロール端末) 200とを有している。

[0021] 画像表示装置 1は、例えば液晶テレビジョンであり、テレビジョン本体 2の前面に液晶表示部 3 (表示画面）が設けられている。なお、公知の構成で足りるため詳細な図示及び説明は省略するが、テレビジョン本体 2内には、例えば液晶表示部 3で映し出すための映像電波を受信する公知のチャンネルチューナや、受信した電波から映像信号や音声信号を復調する復調手段等が設けられて、る。

[0022] 遠隔操作器 200は、各種操作キーを備えた操作部 201と、発光素子として例えば赤外線発光ダイオードを設けた赤外線駆動部 (赤外線発光部） 202とを有してヽる。

[0023] 図 2は、上記遠隔操作器 200の機能的構成を表す機能ブロック図である。この図 2 及び前述の図 1において、遠隔操作器 200は、識別コード (詳細は後述）の搬送波周波数を発振する発振器 203と、パルス変調器 204と、遠隔操作器 200全体の動作を制御する CPU205と、上記操作部 201と、 FM変調器 206と、送信手段である上記赤外線駆動部 202と、 CPU205の動作プログラム等が記憶された ROM207と、 RA M208とを備えて!/ヽる。

[0024] 上記構成において、 CPU205からの制御信号に基づき、発振器 203から所定 (例えば 38kHz)の搬送波周波数が発振され、パルス変調器 204に出力される。一方 C PU205力操作部 201の操作に対応するコマンド (識別コード）を RAM207から読み出し、ノルス変調器 204に供給する。パルス変調器 204は、上記 CPU205から供給された識別コードで上記発信器 203からの搬送波周波数をパルス変調し、ノルス変調信号を FM変調器 206に供給する。 FM変調器 206は、信号を FM変調した後、その FM変調信号を赤外線駆動部 202に供給する。赤外線駆動部 202は、 FM変調器 206から供給される FM信号で前述の赤外線発光素子を駆動（点灯制御）し、これによって画像表示制御装置 100へ赤外線指示信号の送信が行われる。

[0025] 画像表示制御装置 100は、この例では DVDプレイヤー Zレコーダーであり、筐体 1 01と、この筐体 101の前方側に前面パネル 105を介して設けた操作ユニット 107とを備えている。操作ユニット 107の前面には、操作手段としての各種操作ボタン 108、ダイヤル 109と、受光ロ 106とが設けられている。なお、公知の構成で足りるため詳細な図示及び説明を省略するが、筐体 101内には、公知の DVDの録画'再生機構 140 (後述の図 3参照）やそれら DVDの収納部等が設けられて、る。

[0026] 図 3は、上記画像表示制御装置 100の機能的構成を表す機能ブロック図である。

図 3において、画像表示制御装置 100は、受信手段である赤外線受光部 101と、 F M復調器 102と、所定 (例えば 38kHz)の搬送波周波数を抽出する BPF (帯域通過フィルタ） 103と、パルス復調器 104と、コントローラ 150とを有している。コントローラ 1 50は、図示しない CPU、 ROM、及び RAM等から構成されており、機能的には、図示のように、ユーザー指示入力部 151、ユーザー操作判定部 152、操作信号生成部 153等を備えている。

[0027] 上記構成において、前述の遠隔操作器 200の赤外線駆動部 202から発射された赤外線指示信号が前述の受光ロ 106を介し赤外線受光部 101で受光され、この赤外線受光部 101で光一電気変換されて FM復調器 102に供給される。 FM復調器 1 02は、赤外線受光部 101から入力された FM信号を復調し、 BPF103に供給する。 BPF103は、供給された信号の中から、前述の識別コードによりパルス変調されたパルス変調信号を抽出し、パルス復調器 104に供給する。パルス復調器 104は、パルス変調信号を復調して得られた上記識別コードをコントローラ 150のユーザー指示入力部 151に供給する。ユーザー操作判定部 152は、パルス復調器 104で復調された識別コードを上記ユーザー指示入力部 151を介し入力して識別 (解読)し、対応する操作指示信号を操作信号生成部 153へ出力する。操作信号生成部 153はその操作指示信号に応じて、対応する操作信号を生成し、前述した DVD録画'再生機構 140 に出力し、対応する動作 (録画、再生、編集、予約、ダビング、消去、時計表示、番組表表示等)を行わせる。

[0028] 以上のような基本構成及び動作の画像表示システムにおいて、本実施形態の最も大きな特徴は、画像表示装置 1に DVD録画 ·再生機構 140の操作に関わるメニュー画面を表示させた状態で、遠隔操作器 200の赤外線像を用いてこれをメニュー選択のポインタとして用いることにある。以下、その詳細を順を追って説明する。

[0029] 図 3に示す画像表示制御装置 100において、上記の本実施形態の特徴に関わる構成として、遠隔操作器 200が発光した赤外線信号 (赤外線像、光信号、第 2光線）を可視光線とは区別して認識する赤外線フィルタ付きカメラ 110 (第 2光線撮像手段）と、（可視光線にて撮影を行う）通常のカメラ 120と、映像合成部 130とが設けられている。

[0030] カメラ 120は、遠隔操作器 200の背景 BG力も到来する（なお遠隔操作器 200自体からも到来する)可視光線 (第 1光線)を撮影する撮像部 120a (第 1光線撮像手段)と、その撮影した遠隔操作器 200の背景 BGを画像表示装置 1の液晶表示部 3に表示させるための映像表示信号を生成する映像信号生成部 120b (映像表示信号生成手段）とを備えている。

[0031] また、コントローラ 150には、前述の構成のほかに、メニュー作成部 154 (図象表示信号生成手段)と、リモコン位置特定部 155 (位置特定手段)と、リモコン位置記号作成部 156 (位置表示信号生成手段)とが備えられている。

[0032] 操作者 Sが画像表示制御装置 100に対し所定の操作を行うことを意図し、遠隔操作器 200を手に持って画像表示制御装置 100の前に立つと、その操作者 Sのいる実世界の実写映像（=遠隔操作器 200及び背景 BGの映像)がカメラ 120の撮像部 12 Oaで撮影され、その映像信号が映像信号生成部 120bから映像合成部 130を介し、画像表示装置 1へ入力される。これにより、画像表示装置 1の液晶表示部 3に、操作者 Sがいる実世界が表示される。

[0033] 図 4はこのときの液晶表示部 3の表示の一例を表す図である。図 4の例では、画面中に遠隔操作器 200を持った操作者 Sと、操作者 Sの、る部屋の風景 (この例では、ドア、床、床上の敷物、さらにテーブル、椅子等の家具など）が背景 BGとして表示されている。

[0034] この状態で、操作者 Sが、画像表示制御装置 100の操作メニューを表示させるために、遠隔操作器 200を手に持って操作部 201を適宜に操作すると、これに対応する特定の赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100 の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 150のユーザー指示入力部 151に対応する識別コードが入力されて解読される。ユーザー指示入力部 151ではこれに対応してメニュー作成部 154に作成指示信号を入力し、メニュー作成部 154は、画像表示装置 1の上記液晶表示部 3に複数の操作領域 (後述)からなる操作メニュー (操作対象図象)を表示させるためのメニュー表示信号（図象表示信号)を生成する。このメニュー表示信号は映像合成部 130によって上記カメラ 120の映像信号生成部 120bからの映像表示信号と合成され、その合成信号が画像表示装置 1へ出力されることで、カメラ 120による上記実写映像と上記メニュー作成部 154からのメニュー表示との合成映像が液晶表示部 3に表示される (メニュー選択モード、言い換えれば画面位置選択モードへの移行)。なお、このメニュー選択モードへ移行している間 (メニュー選択モードが終了するまで)、遠隔操作器 200からは上記した特定の赤外線指示信号 (低消費電力であることが好ま U、）を発信し続け、これによつてメニュー選択モード (画面位置選択モード)であることを画像表示制御装置 100側へ伝達するようになって、る。

[0035] 図 5はこのときの液晶表示部 3の表示の一例を表す図である。図 5の例では、映像信号生成部 120bからの映像表示信号に基づく実写映像として、上記図 4と同様、画面中に遠隔操作器 200を持った操作者 Sと、操作者 Sのヽる部屋の背景 (この例では、ドア、床、床上の敷物、さらにテーブル、椅子等の家具など) BGが表示されている。そしてこれに加え、メニュー作成部 154からのメニュー表示信号に基づき、「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各操作をそれぞれ表す複数の領域からなる操作メニュー MEが表示されている。

[0036] 一方このとき、操作者 Sの持った遠隔操作器 200から発せられる上記特定の赤外線指示信号が赤外線像として赤外線フィルタ付きカメラ 110で撮像されて認識され、その撮像信号がリモコン位置特定部 155に入力される。リモコン位置特定部 155は、上記赤外線フィルタ付きカメラ 110における遠隔操作器 200の赤外線像の認識結果に基づき、遠隔操作器 200が赤外線フィルタ付きカメラ 110による撮像中にぉ、て占める位置を特定する。

[0037] 上記リモコン位置特定部 155で特定した遠隔操作器 200の位置情報はリモコン位置記号作成部 156へ入力され、遠隔操作器 200の位置を上記液晶表示部 3に表示させるための位置表示信号が生成される。この生成された位置表示信号は上記映像合成部 130へと入力され、これによつて液晶表示部 3に実写されて、る遠隔操作器 2 00の位置（あるいは近傍）に、所定の位置表示 MA (この例では矢印型のマーク、後述の図 6参照）が重ねて表示される。これにより、操作者 Sが遠隔操作器 200を持つてその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部 3に操作メニュー MEと重なるようにして表示されて、る遠隔操作器 200の位置表示 MAを液晶表示部 3上で動かすことができる。

[0038] 一方、上記リモコン位置特定部 155で特定した遠隔操作器 200の位置情報は上記ユーザー操作判定部 152へも入力される。このとき、ユーザー操作判定部 152には、上記メニュー作成部 154で作成したメニュー表示信号のメニュー表示に関する情報（どのような内容、配列、態様のメニュー表示を行っているか)も入力されている。

[0039] 上記のように操作者 Sが手に持った遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、操作メニュー MEのうち実行した、操作領域に上記位置表示 MAが到達したときにその操作領域の操作を決定すべく操作部 201を適宜に操作する（例えば「決定」ボタンを押す)ことで、これに対応する赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 150 のユーザー指示入力部丄 ₅丄に対応する識別コードが入力されて解読される (指示信号入力手段)。ユーザー指示入力部 151ではこれに対応して上記ユーザー操作判定部 152に決定指示信号を入力する。

[0040] 上記決定指示信号が入力されたユーザー操作判定部 152は、前述したリモコン位置特定部 155から取得した遠隔操作器 200の位置情報と、メニュー作成部 154から取得したメニュー表示情報とに基づき、上記液晶表示部 3に表示された操作メニュー MEのうち選択指定される操作領域 (操作指定部位)を決定し (操作部位決定手段）、これに対応する信号をメニュー作成部 154へと入力する。メニュー作成部 154はその入力された信号に基づき、上記選択指定された操作領域を、それ以外の部位と異なる態様で表示するようなメニュー表示信号を生成して映像合成部 130に出力する。

[0041] 図 6は、このときの液晶表示部 3の表示の一例を表す図である。図 6の例では、操作者 Sが DVDの編集を意図して、手に持った遠隔操作器 200の液晶表示部 3における位置を「時計」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域力なる操作メニュー MEの「編集」領域に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押した状態を表している。この例では、メニュー作成部 154からのメニュー表示信号により、当該選択指定された「編集」領域は他の領域と色が異なって表示されている。そして、この場合には、ユーザー操作判定部 152から上記「編集」領域の選択指定に対応した操作指示信号が操作信号生成部 153へ出力され、操作信号生成部 153がこれに応じて対応する操作信号を上記 DVD録画 · 再生機構 140に出力し、対応する編集動作を行うことができる。 [0042] 同様に、図 7は操作者 Sが DVDの予約録画を意図して遠隔操作器 200の液晶表示部 3における位置を「予約」領域に位置させ「決定」ボタンを押した状態を表し、図 8 は操作者 Sが DVDの再生を意図して遠隔操作器 200の液晶表示部 3における位置を「再生」領域に位置させ「決定」ボタンを押した状態を表して、る。それぞれの場合、上記同様、ユーザー操作判定部 152から上記「予約」又は「再生」領域の選択指定に対応した操作指示信号が操作信号生成部 153へ出力され、操作信号生成部 153 からの対応する操作信号が上記 DVD録画'再生機構 140に出力され、対応する予約録画又は再生動作を行うことができる。他の「時計」「録画」「番組表」「ダビング」「消去」「その他」領域についても同様である。

[0043] なお、上記にぉ、て、遠隔操作器 200に備えられた発信器 203、パルス変調器 20 4、及び FM変調器 206等が、各請求項記載の、通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段を構成する。また赤外線駆動部 202が、この光信号生成手段で生成した光信号を、当該光信号を通常の可視光線と区別して認識可能な第 2光線撮像手段;表示画面上に操作対象図象を表示させるための信号を生成する第 1手段;第 2光線撮像手段における光信号の認識結果に基づき、遠隔操作器の背景の映像中において遠隔操作器が第 2光線撮像手段による撮像中にお、て占める位置を特定し表示画面上に表示させるための信号を生成する第 2手段;特定された遠隔操作器の位置に基づき、表示画面上に表示された操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第 3手段;を備えた画像表示制御装置へ送信する光信号送信手段を構成する。

[0044] 以上説明したように、本実施形態にお!ヽては、画像表示装置 1に備えられた液晶表示部 3上に、操作メニュー MEを表示させるためのメニュー表示信号を生成するメ-ュ一作成部 154と、遠隔操作器 200の背景力到来する可視光線とは異なる態様又は属性を備え、遠隔操作器 200から到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ 110と、この赤外線フィルタ付きカメラ 110における上記赤外線信号の認識結果に基づき、遠隔操作器 200が赤外線フィルタ付き力メラ 110による撮像中にぉ、て占める位置を特定するリモコン位置特定部 155と、このリモコン位置特定部 155で特定した遠隔操作器 200の位置を液晶表示部 3上に表示させるための位置表示信号を生成するリモコン位置信号作成部 156と、リモコン位置特定部 155で特定した遠隔操作器 200の位置に基づき、液晶表示部 3上に表示された操作メニュー MEのうち操作領域を決定するユーザー操作判定部 152とを有し、これによつて、液晶表示部 3における遠隔操作器 200の位置表示 MAを操作メ-ュ一 MEから操作領域を選択指定するためのポインタ (操作位置指定手段)として利用することができる。この結果、操作者 Sは、液晶表示部 3から目を離すことなぐ遠隔操作器 200自体の位置移動とヽぅ体感的 ·直感的に非常に分力ゝりやすヽ動作で、操作メニュー MEのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者 Sの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。

[0045] また、本実施形態では特に、遠隔操作器 200の背景 BG力も到来する可視光線を撮影するカメラ 120の撮像部 120aと、この撮像部 120aで撮影した背景 BGを液晶表示部 3上に表示させるための映像表示信号を生成する映像信号生成部 120bとを有する。これにより、操作者 Sが遠隔操作器 200の位置表示 MAを操作メニュー MEのポインタとして利用するために遠隔操作器 200を持ってその位置を移動させるとき、液晶表示部 3上にカメラ 120で撮影した遠隔操作器 200の背景 BGの実映像が映るので、自分の動作態様や動作距離等を表示画面で確認しながら上記遠隔操作器 20 0の移動を行うことができ、さらに分力りやすい直感的な操作が可能となる。また、液晶表示部 3に映った映像に基づき赤外線フィルタ付きカメラ 110による受光可能範囲を操作者 Sが認識することも可能となるので、操作者 Sが遠隔操作器 200を受光可能範囲外に移動させてしまうのを防止でき、操作の確実性を向上することができる。

[0046] さらに、本実施形態では特に、メニュー作成部 154、リモコン位置信号作成部 156、映像信号生成部 120bは、前記操作メニュー ME、遠隔操作器 200の位置、遠隔操作器 200の背景 BGを、液晶表示部 3上にすべて重ね合わせるように表示するような、メニュー表示信号、位置表示信号、映像表示信号を生成する。これにより、映像合成部 130を介し、操作メニュー ME及び遠隔操作器 200の位置表示 MA力カメラ 2 10で撮像した遠隔操作器 200の背景 BGの実写映像上にすべて重ね合わせるようにして液晶表示部 3に表示されるので、操作者 Sは自身が液晶表示部 3のどの位置を指定している力を直感的に理解でき、さらに確実に分力りやすい直感的な操作を行うことができる。

[0047] さらに、本実施形態では特に、メニュー作成部 154は、操作メニュー MEのうちユーザ一操作判定部 152で決定した操作領域を、それ以外の部位と異なる態様で液晶表示部 3に表示するようなメニュー表示信号を生成する。これにより、操作者 Sが操作対象として指定した操作メニュー ME中の操作領域の色をそれ以外の操作領域と変え、指定位置を視覚的に一目瞭然とすることができるので、自身がどの操作領域を指定したかを確実に認識することができるとともに、確実に操作領域の指定が完了したという安心感を操作者 Sに与えることもできる。

[0048] また本実施形態では特に、遠隔操作器 200からの「決定」操作に対応した指示信号をユーザー指示入力部 150を有し、ユーザー操作判定部 152は、リモコン位置特定部 155で特定した遠隔操作器 200の位置と、ユーザ指示入力部 151で入力した上記決定指示信号とに応じて、操作メニュー MEのうちの操作指定部位を決定する。すなわち、操作者 Sが遠隔操作器 20で適宜の操作を行ヽ（「決定」ボタンを押し)ュ一ザ一指示入力部 151から決定指示信号がユーザー判定操作部 152に入力されることで、操作メニュー MEのうち操作対象の操作領域が最終的に決定されるようにしている。これにより、操作者 Sの確実な操作フィーリングを確保できるとともに、不用意な操作領域の誤指定を防止でき、操作者 Sの安心感を得ることができる。なお、この決定指示信号を与えるために操作器 200にて「決定」ボタンを押すことで発せられる指示信号は、赤外線指示信号に限られず、可視光線を含む電磁波等他の無線信号でもよい。

[0049] また、本実施形態では、遠隔操作器 200からの赤外線指示信号を赤外線受光部 1 01で受光し、 FM復調器 102→BPF103→パルス復調器 104→ユーザー指示入力部 151→ユーザー操作判定部 152を介し、操作信号生成部 153から操作信号を DV D録画'再生機構 140へ入力することで、遠隔操作器 200の操作部 201のみによる従来通りの操作を行うことも可能である。

[0050] なお、本発明は上記実施形態に限られるものではなぐその趣旨や技術的思想を逸脱しない範囲内で種々の変形が可能である。以下、そのような変形例を順次説明する。

[0051] (1)操作領域決定をジェスチャーで指示する場合

図 9は、本変形例の画像表示システムにおいて、画像表示装置 1の液晶表示部 3 の表示の一例を表す図であり、上記図 6に対応する図である。図 6と同等の部分には同一の符号を付している。上記実施形態では、例えば操作者 Sが DVDの編集を意図した場合には、図 6に示したように、手に持った遠隔操作器 200の液晶表示部 3における位置を操作メニュー MEの「編集」領域に位置させた後、例えば「決定」ボタンを押すことで当該操作領域の選択指定を確定した。本変形例ではこの「決定」ボタンを押す代わりに、図 9に示すように、遠隔操作器 200を所定の形状に（この例では一周させるように)動かし（=ジェスチャー）、これによつて操作領域の選択指定を確定するようにしたものである。図 9に示す例では、操作者 Sが DVDの予約録画を意図した例であり、手に持った遠隔操作器 200の液晶表示部 3における位置を操作メ-ュ一 MEの「予約」領域に位置させた後、当該領域内又はその近傍にて略円形状又は略楕円形状を描くように遠隔操作器 200を振りまわし、これによつて当該「予約」操作領域の選択指定を確定して!/、る。

[0052] 図 10は、本変形例における画像表示制御装置 100の機能的構成を表す機能プロック図であり、上記実施形態の図 3に相当する図である。図 3と同等の部分には同一の符号を付し、適宜説明を省略する。図 10において、図 3と異なるのは、コントローラ 150に新たに遠隔操作器 200の赤外線像の動きを判定する動き判定部 157が設けられていることである。

[0053] すなわち、上記実施形態と同様、操作者 Sが手に持った遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、操作メニュー MEのうち実行した、操作領域に上記位置表示 MAが到達したとき、その操作領域の操作を決定すべく当該領域内又はその近傍にて略円形状又は略楕円形状を描くように遠隔操作器 200を振りまわす。このとき、遠隔操作器 200の赤外線像が前述したように赤外線フィルタ付きカメラ 110で撮像認識されその撮像信号がリモコン位置特定部 155に入力され、このリモコン位置特定部 155から上記動き判定部 157へと入力されて、る。上記のように遠隔操作器 200を振り回すことで、動き判定部 157ではこの振り回し運動を認識するとともに、当該領域を操作者 Sが操作対象として選択指定していると判定し、上記ユーザー操作判定部 152に前述の決定指示信号を入力する。以降の動作は上記実施形態と同様なので、説明を省略する。

[0054] 本変形例によっても、上記実施形態と同様の効果を得る。また、操作領域の最終的な選択指定の確定の際にも遠隔操作器 200の操作部 201の操作が不要となるので、さらに確実に液晶表示部 3から目を離さずに操作が可能となる。

[0055] (2)赤外線フィルタ付カメラがリモコン指示操作を受け取る場合

図 11は、本変形例における画像表示制御装置 100の機能的構成を表す機能プロック図であり、上記実施形態の図 3に相当する図である。図 3と同等の部分には同一の符号を付し、適宜説明を省略する。図 11において、図 3と異なるのは、赤外線受光部 101が省略され、遠隔操作器 200からの赤外線指示信号が赤外線フィルタ付き力メラ 110で受光され、この赤外線フィルタ付きカメラ 110内に備えられた変換手段（図示せず、あるいはカメラ 110とは別体に設けられて、てもよ、）で光電気変換された後に FM復調器 102に供給されることである。その後の動作は上記実施形態と同様であるため、説明を省略する。

[0056] 本変形例によっても、上記実施形態と同様の効果を得る。

[0057] (3)コールドミラーを用いる場合

例えば上記実施形態の図 3に示したように、赤外線フィルタ付きカメラ 110と通常のカメラ 120とを別々に設けた場合、それら 2つのカメラ 110, 120のレンズ位置のずれによりそれぞれの撮像は厳密には一致しな、が、操作者 Sがカメラ力も十分離れてヽる場合は、 2つのカメラ 110, 120の差異は小さぐ実用上問題ない。しかしながら、操作者 Sがそれらカメラ 110, 120の近くに、る場合にはその差異が無視できな!/、ほど大きくなり、例えば赤外線フィルタ付きカメラ 110の撮像信号に基づきリモコン位置特定部 155で特定し液晶表示部 3に表示させた遠隔操作器 200の位置と、カメラ 12 0からの映像表示信号をもとに液晶表示部 3に表示させた遠隔操作器 200の実映像とのずれが大きくなる可能性がある。本変形例はそのような場合に対応するためのものである。

[0058] 図 12は、本変形例における画像表示制御装置 100の機能的構成を表す機能プロック図であり、上記図 3や図 11に相当する図である。図 3と同等の部分には同一の符号を付し、適宜説明を省略する。図 12において、本変形例では、赤外線フィルタ付きカメラ 110の入射側に赤外線を透過させるとともに可視光線を反射する機能（=分光機能)を備えた公知のコールドミラー CMを設け、遠隔操作器 200からの赤外線と遠隔操作器 200の背景 BG力もの可視光線とを (前述の受光口 106を介して)赤外線フィルタ付きカメラ 110へと同一の光軸で導入する。そして、その光軸上に設けた上記コールドミラー CMによって上記遠隔操作器 200からの赤外線と遠隔操作器 200の背景 BGからの可視光線とを分光し、赤外線はそのまま透過させて赤外線フィルタ付きカメラ 110へ入射させるとともに、可視光線は反射させて方向転換させカメラ 120へと入射させる。以降の動作は上記実施形態と同様であるので説明を省略する。

[0059] 上記構成の本変形例においては、 2つのカメラ 110, 120に入力される映像は同一のものであるため、操作者 Sがカメラ 110, 120に十分近い位置にいても、 2つのカメラ 110, 120の間に撮像の差異が発生せず、前述したような遠隔操作器 200の位置ずれの弊害を確実に防止できると、う効果を得る。

[0060] (4)位置補正を行なう場合

上記したように、赤外線フィルタ付きカメラ 110と通常のカメラ 120との 2つを設けた場合、それら 2つのカメラ 110, 120のレンズ位置のずれによりそれぞれの撮像は厳密には一致しない (位置ずれが発生する)。この差異が無視できないほど大きくなつた場合に、上記（3)のようにコールドミラー CMを用いることで撮像自体の差異をなくす手法のほか、差異をなくすように一方の信号に対し位置補正 (キャリブレーション）をしてもよい。この変形例を図 13〜図 15を用いて説明する。

[0061] 図 13は、この変形例における画像表示制御装置 100の機能的構成の一例を表す機能ブロック図であり、上記図 3や図 11に相当する図である。図 3と同等の部分には同一の符号を付し、適宜説明を省略する。図 13において、本変形例では、上記信号補正を行うためのリモコン位置補正部 160 (補正手段）を新たに設けている。このリモコン位置補正部 160は、ユーザ指示入力部 151からの指示信号 (詳細は後述）に応じて、リモコン位置特定部 155で特定されリモコン位置記号作成部 156で生成されて映像合成部 130へ入力された位置表示信号に対して所定の補正を行う（詳細は後述)。この補正後の位置表示信号は、映像合成部 130に入力されて映像信号生成部 120bからの映像表示信号と合成される。

[0062] 図 14 (a)〜(c)は、上記位置補正の様子を表す説明図である。この変形例では、例えば以下のようにして位置補正を行う。

[0063] 上記実施形態において図 4を用いて説明したように、操作者 Sが遠隔操作器 200を手に持って画像表示制御装置 100の前に立つと、カメラ 120からの映像表示信号をもとにその操作者 Sのいる実世界の実写映像が画像表示装置 1の液晶表示部 3に表示される。このとき、液晶表示部 3の表示位置の中で位置補正用の所定位置 (この例では画面中央位置、白十字マーク参照）が予め固定的に定められており、位置補正を行うことを意図する場合には、操作者 Sは、立つ位置や手に持った遠隔操作器 20 0の高さ等を調整して、当該所定位置 (画面中央位置）に遠隔操作器 200の実映像が表示されるようにする。図 14 (a)の上段の図は、このときの状態を表している。

[0064] 一方、図 14 (b)の下段の図は、この状態で、上記の位置ずれの発生により、赤外線フィルタ付きカメラ 110の撮像信号に基づきリモコン位置特定部 155で特定し液晶表示部 3に表示させた遠隔操作器 200の位置（=赤外線検出位置、図中では特に X 印マークで表す）力画面中央位置から（この例では図示右側に）ずれている状態を概念的に表した図である。なお、遠隔操作器 200における操作者 Sの適宜の操作によって実際にこの X印マークをリモコン位置記号作成部 156で生成し液晶表示部 3 に表示させてもよい。

[0065] 図 14 (b)は、このような状態のまま (すなわち補正を行わず）、カメラ 120からの映像表示信号に基づく遠隔操作器 200の実映像 (図 14 (a)上段参照）と、リモコン位置特定部 155で特定しリモコン位置記号作成部 156で生成した遠隔操作器 200の位置表示 MA (この例では上記同様 X印で表す。図 14 (a)下段参照）とが重ね合わされて液晶表示部 3に表示された状態を表す図である。

[0066] この状態で、操作者 Sが遠隔操作器 200で適宜の補正指示操作を行うことにより、前述したように、これに対応する特定の赤外線指示信号が前述の赤外線受光部 101 、上記 FM復調器 102、 BPF103、パルス復調器 104を経てユーザー指示入力部 1 51に入力される。そして、ユーザー指示入力部 151ではこれに対応してリモコン位置補正部 160に制御信号を出力し、リモコン位置補正部 160はこれに応じて映像合成部 130にアクセスする（例えば問い合わせ信号を出力する）。映像合成部 130ではこれに応じて所定の演算処理を行い、この時点で入力されているリモコン位置記号作成部 156からの位置表示信号 (位置表示 MA)が上記液晶表示部 3の中央位置 (遠隔操作器 200の実映像位置に相当）からどれだけずれているかを算出する（ずれ量）

[0067] この算出したずれ量と、上記リモコン位置記号作成部 156からの位置表示信号とは、上記リモコン位置補正部 160に入力される。リモコン位置補正部 160では上記ずれ量に基づき、このずれを補正するための補正定数を決定する。例えば液晶表示部 3 の画面上の位置を、 X軸、 y軸を備えた 2次元平面上にて表したとき、上記ずれの量を (dx, dy)とすれば、上記補正定数は（— dx, —dy)とすればよい。そして、リモコン位置補正部 160はこの補正定数を用いて上記映像合成部 130から入力した位置表示信号を補正した後、この補正後の位置表示信号を映像合成部 130へと出力する。なお、リモコン位置補正部 160は補正定数を用いてリモコン位置記号作成部 156から直接入力した位置表示信号を補正するようにしてもょ、（二点鎖線参照）し、ある！/ヽはリモコン位置特定部 155で特定した遠隔操作器 200の位置情報を補正するようにしてちよい。

[0068] 映像合成部 130に入力された補正後の位置表示信号は、前述したように映像信号生成部 120bからの映像表示信号と合成され、これによつて補正後の遠隔操作器 20 0の位置表示 MAは上記液晶表示部 3の画面中央位置（白矢印マーク）と合致することとなる。図 14 (c)はこのときの状態を表している。これ以降の動作は上記実施形態と同様なので、説明を省略する。

[0069] なお、上記は操作者 Sが予め遠隔操作器 200を液晶表示部 3の中央位置に合わせるように調整することを前提としていた力これに限られず、液晶表示部 3の他の所定位置 (例えば画面隅部やその近傍、あるいは背景 BGに対応した特定の位置等）に合わせるように調整させ、これに対して位置表示信号等を補正するようにしてもよ V、。また操作者 Sが遠隔操作器 200をどこかの所定位置に合わせるようにする手法にも限られず、遠隔操作器 200の位置に関係なく (任意の位置で)映像合成部 130 で所定の公知の画像認識処理や解析処理等を行ってその時点での実映像における遠隔操作器 200の位置を特定し、この特定した遠隔操作器 200の位置に対する赤外線検出に基づく遠隔操作器 200の位置のずれ量を算出して補正するようにしてもよい。

[0070] さらに、上記のように赤外線検出に基づく遠隔操作器 200の位置を映像信号側に合致させるように補正するのではなぐその逆に、映像信号を、赤外線検出に基づく遠隔操作器 200の位置に合致させるように補正してもよい。図 15は、この場合における画像表示制御装置 100の機能的構成の一例を表す機能ブロック図であり、上記図 13に相当する図である。図 13と同等の部分には同一の符号を付し、適宜説明を省略する。

[0071] 図 15において、この例では、上記信号補正を行うための映像信号補正部 170 (補正手段）を新たに設けている。この映像信号補正部 170は、ユーザ指示入力部 151 力もの指示信号に応じて、映像信号生成部 120bで生成されて映像合成部 130へ入力されずれ量が算出された映像表示信号に対し、上記リモコン位置補正部 160と同様にしてずれ量に応じた所定の補正を行う。そして、この補正後の映像表示信号が、映像合成部 130に入力されてリモコン位置記号作成部 156からの位置表示信号と合成される。なお、映像信号補正部 170は補正定数を用いて映像信号生成部 120bから直接入力した映像表示信号を補正するようにしてもょヽ（二点鎖線参照)。

[0072] これら 2つの変形例においては、カメラ 120による撮影結果と、赤外線フィルタ付きカメラ 110による撮影結果とに応じて、リモコン位置特定部 155の特定に基づく遠隔操作器 200の位置、若しくは、映像信号生成部 120bで生成した映像表示信号を補正する補正手段（リモコン位置補正部 160又は映像信号補正部 170)を有する。これにより、 2つのカメラ 110, 120の間に撮像の差異が発生したとしてもこれを補正することで、位置ずれによる誤差の発生等を確実に防止することができる。

[0073] (5)赤外線高感度カメラを用いる場合

本変形例は、上記実施形態において第 1光線撮像手段としてのカメラ 120と第 2光線撮像手段としての赤外線フィルタ付きカメラ 110とを用 V、て、たのに代え、 1つの赤外線高感度カメラ 11 OA (後述の図 17参照）を用、ることで両者を兼用する場合である。この場合、赤外線高感度カメラ 110Aは、第 1光線としての可視光線に対する感度よりも第 2光線としての赤外線に対する感度が高くなつている。

[0074] 図 16は、この赤外線高感度カメラ 110Aのもつ感度特性の一例を表す特性図である。横軸には波長 (nm)をとり、縦軸にカメラ感度 (相対値)をとつて表している。図 16 において、この例では、カメラ 110Aの感度は、波長 940nm〜950nmをピーク領域とし、それより短波長でも長波長でも急激に感度が小さくなる特性となっている。このようなカメラ 110Aの感度特性において、例えば遠隔操作器 200からの赤外線を上記波長 940ηπ！〜 950nmの範囲のものを用いることで、遠隔操作器 200の背景 BG 力もの可視光線 (波長範囲 760nm以下）を受光したときの感度と、遠隔操作器 200 力もの赤外線を受光したときの感度との間に、大きな差をつけることができる。この特性を利用して、上記 2つの高低感度値の間になるような図 16に示す感度しきい値 X を設定すれば、上記遠隔操作器 200の背景 BG力ゝらの可視光線と、遠隔操作器 200 力もの赤外線とを 1つのカメラ 110Aで受光しても、しき、値 Xより高、感度で得られる撮像は赤外線像 (赤外線指示信号)、しき!ヽ値 Xより低ヽ感度で得られる撮像は可視光線像と、うように分けて処理することができる。

[0075] 図 17は、本変形例における画像表示制御装置 100の機能的構成を表す機能プロック図であり、上記図 11に相当する図である。図 11と同等の部分には同一の符号を付し、適宜説明を省略する。図 17において、本変形例では、上記赤外線フィルタ付きカメラ 110及び通常のカメラ 120に代えて、前述した感度特性を備えた赤外線高感度カメラ 110Aを設けて、る。上記遠隔操作器 200の背景 BGからの可視光線実像と、遠隔操作器 200からの赤外線像とは、ずれも赤外線高感度カメラ 110Aの撮像部 l lOAaに入力される。撮像部 l lOAaでは、上記した原理に基づき、高感度側の赤外線像 (赤外線指示信号)と低感度側の可視光線像に分けて撮像し、赤外線像及び赤外線指示信号については図 11と同様にリモコン位置特定部 155及び FM復調部 102にそれぞれ出力し、可視光線像については映像信号生成部 l lOAbに供給する。映像信号生成部 1 lOAbでは対応する映像表示信号を生成して映像合成部 130 へ出力する。これ以降の動作は上記図 11に示した（2)の変形例と同様であるので説明を省略する。 [0076] 本変形例によれば、第 2光線撮像手段として、可視光線に対する感度よりも赤外線に対する感度が高く設定され、第 1光線撮像手段を兼ねた赤外線高感度カメラ 110 Aを用いる。これにより、赤外線フィルタを用いることなぐかつ、カメラ 1台で上記実施形態と同様の効果を得ることができる。

[0077] なお、前述の図 3のように、赤外線指示信号については赤外線受光部 101で受光するようにし、赤外線像のみを赤外線高感度カメラ 110Aで撮像するようにしてもょヽ

[0078] (6)操作者までの距離に応じて拡大表示する場合

上記実施形態及び（1)〜（5)の変形例は、カメラ 120等による映像表示信号に基づき画像表示装置 1の液晶表示部 3に表示する背景 BGの表示倍率は固定的に設定されていたが、これに限られず、操作者 Sまでの距離に応じて当該表示倍率を変ィ匕させるようにしてちょい。

[0079] 図 18〜図 22は、この距離に応じた表示倍率の変化の手法の概略を説明するための説明図である。

[0080] 図 18は、まず操作者 Sが（言い換えれば操作器 200が、以下同様)カメラ 120から比較的近い距離に位置する場合の例を表している。この場合、カメラ 120が撮影した領域のうち、操作者 Sの近傍の所定の範囲を切り出した後、その切り出した部分を同一の倍率で液晶表示部 3に表示する。

[0081] 図 19は、操作者 Sのカメラ 120からの距離が中程度の場合の例を表しており、上記図 18と同様、この場合も、カメラ 120が撮影した領域のうち、所定の範囲を切り出して同一倍率でそのまま液晶表示部 3に表示する。このとき上記したように、操作者 Sは、遠隔操作器 200を移動操作することで、その液晶表示部 3における位置表示 MAを操作メニュー MEから操作領域を選択指定するためのポインタとして利用することができる。図 20はその移動操作における操作の最小単位を表す図であり、上記のように拡大することなく同一倍率で切り出して、ることから、この場合の操作最小単位は十分に小さい。この結果、操作者 Sによる手や腕の動作によって遠隔操作器 200を移動させ液晶表示部 3上で位置表示 MAを感度良くなめらかに動かし、円滑に操作領域を選択指定することができる。 [0082] 図 21は、操作者 Sがカメラ 120から比較的遠く離れている場合の例を表している。この場合、カメラ 120が撮影した領域のうち操作者 Sの近傍の所定の範囲をそのまま同一倍率で表示したのでは非常に小さく液晶表示部 3で表示されてしま、、液晶表示部 3に位置表示 MAや操作メニュー MEを表示するのが困難となる。そこでこれを回避するために、切り出した範囲を拡大して液晶表示部 3にお、て大きく表示する。

[0083] し力しながらこのように切り出し後の拡大表示を行う関係上、移動操作における操作の最小単位を図 22に示すように、この場合の操作最小単位が大きくなつて比較的粗くなつてしまう。この結果、操作者 Sによる手や腕の動作によって遠隔操作器 200を動力したとき、液晶表示部 3上で位置表示 MAを感度良くなめらかに動かすことが困難 (しばらく一点で止まった後に突然離れたところに飛ぶ等、動きがぎくしゃくする)又は不可能となる。そこで、この場合には、隣接する上記操作最小単位の 2点の間に別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示 MAを補完した形で表示する (実際の操作器 200がある位置力も次の位置へ移動したとき、位置表示 MAは、その実際の操作器 200の移動よりも遅れて、当該「ある位置」→「それら 2つの位置間に予想した移動位置」→当該「次の位置」のように、 2つの位置の中間部に予想位置を介在させつつ遅れて追従表示する。なおこの中間部は必ずしも中点である必要はな、）ことで、上記操作性の低下を防止するようにして、る。

[0084] 図 23は、上記の手法を実現するための本変形例の画像表示制御装置 100の機能的構成を表す機能ブロック図であり、上記実施形態の図 3等に相当する図である。図 23において、この変形例の画像表示制御装置 100は、図 3に示した構成における映像合成部 130に代えて 1次映像合成部 135を設けるとともに、新たに距離検出部 11 5、切り出し処理部 180、 2次映像合成部 195を設けている。

[0085] 距離検出部 115は、公知の手法により遠隔操作器 200との距離を測定するものであり、例えば超音波距離計等が用いられる。検出した距離は距離検出信号として切り出し処理部 180へ入力される。

[0086] 1次映像合成部 135は、図 3の映像合成部 130と同様、カメラ 120の撮像部 120a での撮影に基づく映像信号生成部 120bからの映像信号が入力されるとともに、リモコン位置特定部 155での特定に基づくリモコン位置記号作成部 156からの位置表示信号が入力される。これによつて、液晶表示部 3に実写されている遠隔操作器 200の位置 (あるいは近傍）に所定の位置表示 MAが重ねられた状態の映像信号が実現される。

[0087] 切り出し処理部 180は、上記 1次映像合成部 135からの位置表示 MAつき実写映像信号と、上記距離検出部 115からの距離検出信号と、上記リモコン位置特定部 15 5からの位置特定信号とを入力する。そして、上記位置表示 MA付き実写映像のうち、上記位置特定信号により特定される操作器 200位置近傍の所定範囲切り出しを行い、さらに上記距離検出信号の距離の遠近に応じて、当該切り出した映像を液晶表示部 3に表示するときの拡大倍率を設定し、その倍率に拡大した位置表示 MA付き実写映像信号を 2次映像合成部 195へ出力する（詳細は後述の図 24参照)。

[0088] 2次映像合成部 195は、上記切り出し処理部 180からの（適宜拡大された)位置表示 MAつき実写映像信号と、メニュー作成部 154からのメニュー表示信号とを合成する。そして、この合成信号が画像表示装置 1へ出力されることで、カメラ 120の撮影に基づく上記位置表示 MA付き実写映像と上記メニュー作成部 154からのメニュー表示との合成映像が液晶表示部 3に表示される。

[0089] 図 24は、上記切り出し処理部 180の詳細構成を表す機能ブロック図である。

[0090] 図 24において、切り出し処理部 180は、拡大を伴わない単純な切り出しを行うための単純切り出し部 181と、拡大を伴う切り出しを行うための拡大切り出し部 182と、拡大切り出しにさらに上記の予想移動位置の補完を行うための補完拡大切り出し部 18 3と、距離検出部 115からの距離検出信号とリモコン位置特定部 155からの信号に基づく遠隔操作器 200の移動の態様 (操作解像度、移動解像度、速度等。詳細は後述 )とに応じて上記補完を行うかどうかを判定する補完判定部 184と、この補完判定部 1 84からの切替制御信号によって切り替えられ、上記切り換えスィッチ 187 (後述)からの入力を拡大切り出し部 182又は補完拡大切り出し部 183の、ずれか一方に選択的に出力する切り換えスィッチ 185と、距離検出部 115からの距離検出信号に応じて拡大表示を行うかどうかの判定を行う拡大判定部 186と、この拡大判定部 186からの切替制御信号によって切り替えられ、上記 1次映像合成部 135からの出力を単純切り出し部 181又は切り換えスィッチ 185のいずれか一方に選択的に出力する切り換えスィッチ 187とを備えている。

[0091] 単純切り出し部 181、拡大切り出し部 182、及び補完拡大切り出し部 183には、それぞれリモコン位置特定部 155からの位置特定信号が入力され、それぞれの切り出し部 181〜 183はその特定された操作器 200の位置に基づき、操作器 200位置の近傍の所定範囲（例えば予め固定的に設定されて、る）の切り出しを行う。

[0092] 図 25は、切り出し処理部 180全体で実行する制御手順を表すフローチャートである。

[0093] 図 25において、まずステップ S10において、拡大判定部 186で、距離検出部 115 で検出した操作者 S (操作器 200)とカメラ 120との距離を取得する。

[0094] その後、ステップ S20において、拡大判定部 186で、上記ステップ S 10で取得した距離が比較的近、かどうか (例えば予め定められた所定のしき!/、値よりも小さ!/、かどう力を判定する。距離が小さい場合にはステップ S20の判定が満たされてステップ S 30に移り、拡大判定部 186で切り替えスィッチ 187に切替制御信号を出力して単純切り出し部 182側へ切り替え、これによつて 1次映像合成部 135からの位置表示 MA つき映像信号を単純切り出し部 181へ供給して拡大のな、通常の切り出しを行!、、このフローを終了する。

[0095] 距離が大きい場合には、ステップ S20の判定が満たされずステップ S35に移り、拡大判定部 186で切り替えスィッチ 187に切替制御信号を出力して切り替えスィッチ 1 85側へ切り替え、これによつて 1次映像合成部 135からの位置表示 MAつき映像信号を拡大切り出し部 182又は補完拡大切り出し部 183へ供給し拡大を伴う切り出し処理を行う。その後ステップ S50に移り、補完処理を行ってこのフローを終了する。

[0096] 図 26は、上記ステップ S50の詳細手順を表すフローチャートである。

[0097] まずステップ S52において、補完判定部 184で、距離検出部 115からの距離検出信号に応じて (その距離により拡大切り出し部 182又は補完拡大切り出し部 183で実行される拡大倍率を想定した場合に)距離が長くなるほど低下する傾向となる操作解像度が所定のしきい値より悪いかどうかを判定する。操作解像度が当該しきい値より悪、場合は判定が満たされ、そのままでは操作がぎくしゃくし操作性が悪くなる (補完の必要がある）とみなされて後述のステップ S60に移る。操作解像度が当該しきい値以上である場合には判定が満たされず、ステップ S54に移る。

[0098] ステップ S54では、補完判定部 184で、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、何らかの理由により位置特定信号として読みとれる読み取り解像度 (移動解像度)が所定のしき!ヽ値より悪くなつて!ヽなヽかどうかを判定する。移動解像度が当該しきヽ値より悪ヽ場合は判定が満たされ、例えば障害物（後述）の存在等の理由によりそのままでは読み取りが断片的となり円滑な操作が困難 (補完の必要がある）とみなされて後述のステップ S60に移る。移動解像度が当該しきい値以上である場合には判定が満たされず、ステップ S56 に移る。

[0099] ステップ S56では、補完判定部 184で、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、実際の操作器 200の移動速度が所定のしき、値より小さ、 (遅、)力どうかを判定する。移動速度が当該しき、値未満である場合は判定が満たされ、例えば操作者 Sがゆっくりと精度の高い操作をしたがっている等とみなされて後述のステップ S60に移る。移動速度が当該しきい値以上である場合には判定が満たされず、ステップ S58に移る。

[0100] ステップ S58では、補完判定部 184で、操作者 Sからの補完指示信号が入力されたかどうかを判定する。すなわち、本変形例では上記ステップ S52、ステップ S54、ステツプ S56等の判定条件を満たす満たさないに関係なぐ操作者 Sが意図的に (強制的に)補完拡大切り出し部 183による補完実行を指示できる操作手段が備えられており、その操作手段による補完指示信号は補完判定部 184に入力される。このステツプ S58は、この補完指示信号の入力があった力どうかを判定するものである。操作者 Sによる補完実行指示があった場合には判定が満たされて後述のステップ S60 に移る。補完実行指示がない場合には判定が満たされず、このフローを終了する。

[0101] ステップ S52、ステップ S54、ステップ S56、ステップ S58のいずれかの判定が満たされて移行するステップ S60では、補完判定部 184で、補完を「おいかけモード」で実行する設定になって、るかどうかを判定する。

[0102] すなわち、本変形例で実行する補完処理には、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、操作器 200の現在位置よりも少し前に位置して、たと思われる位置力現在位置までを追跡するように補完する追いかけモード（=現実の操作器 200の動き力も少し遅れて位置表示 MA が滑らかに追いかけてくるように表示される）と、操作器 200の現在位置から、少し前に位置して、たと思われる位置までを逆に遡るように補完する逆戻りモード（ =現実の操作器 200の動きとは逆方向に位置表示 MAが滑らかに少し戻るように表示される）とが備えられている。そして、操作者 Sが補完処理時に上記 2つのモードのうちいずれを用いる力を指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完判定部 184に入力される。このステップ S60は、このモード選択信号で上記追、かけモードが選択されて、るかどうかを判定するものである。

[0103] 操作者 Sにより追いかけモードが選択されていた場合にはステップ S60の判定が満たされてステップ S62に移る。ステップ S62では、補完拡大切り出し部 183で、前述したように実際の操作器 200の移動よりも遅れて追従表示するときの追従動作開始点 Psを、操作器 200の移動軌跡上における補完を開始 (発動)した点 (例えば操作器 2 00の現在位置とそれより少し前の位置との中間部位置。なお必ずしも中点である必要はない）とし、追従表示するときの追従終了点 Peを、現在位置とする。

[0104] 一方操作者 Sにより逆戻りモードが選択されていた場合にはステップ S60の判定が満たされず、ステップ S64に移る。ステップ S64では、補完拡大切り出し部 183で、上記追従動作開始点 Psを操作器 200の現在位置とし、追従表示するときの追従終了点 Peを、上記補完開始 (発動)点とする。

[0105] 上記ステップ S62又はステップ S64が終了すると、ステップ S66に移る。

[0106] ステップ S66では、補完判定部 184で、補完しつつ実際の操作器 200に遅れて追従してくるときの位置表示 MAの追従 (移動）速度を一定値とする設定になって、るかどうかを判定する。

[0107] すなわち、本変形例で実行する補完処理時の位置表示 MAの追従速度として、 ( 操作器 200の実際の移動速度に関係なく）予め定められた一定速度で追従する定速モードと、操作器 200の実際の移動速度に応じて追従速度が変化する可変速モードとが備えられている。そして、操作者 Sが補完処理時に上記 2つのモードのうちいずれを用いる力を指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完判定部 184に入力される。このステップ S66は、このモード選択信号で上記定速モードが選択されているかどうかを判定するものである。

[0108] 操作者 Sにより定速モードが選択されていた場合にはステップ S66の判定が満たされてステップ S68に移る。ステップ S68では、補完拡大切り出し部 183で、前述したように実際の操作器 200の移動よりも遅れて追従表示するときの位置表示 MA (ポインタ）の追従速度 fpvを、所定の一定値 Ssとする。

[0109] 一方操作者 Sにより可変速モードが選択されていた場合にはステップ S66の判定が満たされず、ステップ S70に移る。ステップ S70では、補完判定部 184で、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、実際の操作器 200の移動速度が所定のしきい値 α (予め設定される）以下となって、るかどうかを判定する。操作器 200の移動速度がそれほど遅くなつて、なヽ場合にはステップ S70の判定が満たされず、上記ステップ S68へ移行する。操作器 2 00の移動速度が十分に遅くなつている場合にはステップ S 70の判定が満たされ、ステツプ S72に移る。

[0110] ステップ S72では、補完拡大切り出し部 183で、前述したように実際の操作器 200 の移動よりも遅れて追従表示するときの位置表示 ΜΑ (ポインタ）の追従速度 fpvを、 fpv= j8 / ( l + a -rpv) … （式 1)

により算出する。ここで、 rpvは実際の操作器 200 (実際の位置表示 MA)の移動速度 (実ポインタ速度)であり、 βは予め固定的に上限として設定されている追従ポインタ最高速度である。また αはステップ S70で前述した移動速度のしきい値である。

[0111] 上記式 1には、以下のような意義がある。すなわち、ステップ S 70での判定が満たされていることからステップ S72の時点で実際の操作器 200の移動速度 rpv≤ aとなつているため、上記式 1のうち a—rpvは 0以上の値となり、実際の操作器 200の移動速度が遅い (操作がゆっくりである）ほど大きな値となる。この結果、これに 1を加えた l + α—rpvは 1以上の値であって操作がゆっくりであるほど 1よりも大きくなる性質を備え、このような値を用いて追従ポインタ最高速度 |8を除することにより、上限値を超えることなくかつ操作がゆっくりであるほど遅くなるポインタ追従速度 fpvを実現することがでさる。 [0112] 上記ステップ S68又はステップ S72が終了すると、ステップ S74に移る。ステップ S7 4では、補完拡大切り出し部 183で、上記リモコン位置記号作成部 156で作成され 1 次映像合成部 135を介して入力された位置表示 (ポインタ) MAに所定の遅延処理を施すとともに上記の補完処理を施し、上記ステップ S62又はステップ S64で決定した追従動作開始点 Psから追従終了点 Peまで、上記ステップ S68又はステップ S72で決定した追従ポインタ速度 fpvにより（実際の操作器 200の移動よりも遅れて)位置表示 MAが表示されるように信号を再合成し、上記 2次映像合成部 195へ出力する。なお、後述する（8)の変形例の補完信号生成部 165のように、リモコン位置特定部 155 力もの位置特定信号に基づきリモコン位置記号作成部 156に信号を出力してリモコン位置記号作成部 156で作成する位置表示信号自体を修正 (補正)し、同様の表示を行わせるようにしても同じ効果が得られる。ステップ S74が終了すると、このルーチンを終了する。

[0113] 本変形例の画像表示装置 1においては、映像表示信号生成手段 120bで生成した映像表示信号における操作器 200の背景の一部分を抽出し、表示画面上に拡大表示可能とするための抽出処理手段 (この例では切り出し処理部 180, 180A)を有している。

[0114] これにより、操作者 Sが比較的遠く離れていて第 1光線撮像手段 120aで撮影した操作器 200の背景全体の画像に占める操作者 Sの映像の割合力 S小さい場合等、背景 BG全体の画像に占める操作器 200を移動操作可能な領域 (操作領域)の割合が小さい場合において、操作者 S付近の映像を抽出して拡大することにより、表示画面 3上における操作領域の大きさを増大させることが可能となる。この結果、操作困難性を低減し、操作性を向上することができる。

[0115] また本変形例の画像表示制御装置 1においては、操作器 200との距離を検出する距離検出手段 (この例では距離検出部 115)を有し、抽出処理手段 180は、距離検出手段 115の検出結果に応じて、抽出及び拡大の態様 (拡大有無を含む）を決定する。

[0116] これにより、距離検出手段 115で検出した操作器 200までの距離が比較的遠く離れてヽる場合には、抽出処理手段 180で操作者 S付近の映像を抽出して拡大することで、表示画面 3上における操作領域の大きさを増大させることが可能となる。この結果、必要以上に大きな範囲で操作する必要がなくなり、また操作位置を限定されることもなくなる。

[0117] また、本変形例の画像表示制御装置 1においては、予想位置設定手段 (この例では補完拡大切り出し部 183)は、操作器 200の移動時に位置特定手段 155により順次特定される隣接する 2点の中間部となるように、予想移動位置を設定する。

[0118] これにより、表示画面 3における操作器 20の移動軌跡が粗くぎくしゃくした場合に、隣接 2点間に予想移動位置を設定して仮想的に表示画面 3上における移動軌跡を補い、粗い移動軌跡を細力べ表現することで、操作円滑性を向上することができる。

[0119] なお、上記（6)の変形例においては、切り出し処理部 180で切り出し処理を行う際、単純切り出し部 181、拡大切り出し部 182、及び補完拡大切り出し部 183は、リモコン位置特定部 155からの位置特定信号で特定された操作器 200の位置に基づき、固定的に決められたその近傍の所定範囲を (操作者 Sの操作可能範囲とみなして）切り出しを行ったが、これに限られず、操作者 Sが当該操作範囲 (操作可能範囲)を自ら設定して装置側に認識させるようにしてもょ、。

[0120] 図 27はそのような変形例における切り出し処理部 180Aの機能的構成を表す機能ブロック図であり、前述の図 24に相当する図である。図 27に示されるように、この変形例による切り出し処理部 180Aでは、操作領域決定部 188が新たに備えられている。この操作領域決定部 188は、リモコン位置特定部 155からの位置特定信号に基づき、所定時間範囲内における操作器 200の移動領域に対応して操作者 Sの操作領域を設定するものである。

[0121] すなわち操作領域決定部 188は、カメラ 120の映像信号生成部 120bからの映像信号 (又はリモコン位置特定部 155からの位置特定信号でもよ、）に対し例えば公知の動体認識技術を適用し、上記所定時間範囲内 (例えば基準時の直後又は直前）における動体領域 (動画像内で動きの激し力つた領域)を検出する。そして、その検出した動体領域は操作者 Sの腕近辺の領域であると仮定すれば、これによつて操作者 Sによる操作可能領域を推定することができる。そしてこれを操作領域として単純切り出し部 181、拡大切り出し部 182、補完拡大切り出し部 183に出力することで、それら切り出し部 181〜183は当該領域の切り出し処理を実行することができる。

[0122] この変形例における画像表示装置 1においては、抽出処理手段 180Aは、映像表示信号生成手段 120bで生成した映像表示信号、若しくは、位置特定手段 155による位置特定結果に基づき認識される操作器 200の移動 (範囲)情報に応じて、抽出及び拡大の態様 (拡大有無を含む)を決定する。

[0123] これにより、操作器 200の移動範囲が小さく背景 BG全体の画像に占める操作領域の割合が小さい場合には、抽出処理手段 180Aで操作者 S付近の映像を抽出して拡大することで、表示画面 3上における操作領域の大きさを増大させることが可能となる。この結果、必要以上に大きな範囲で操作する必要がなくなり、また操作位置を限定されることちなくなる。

[0124] なお、上記距離検出部 115による距離検出には、上記超音波検出計を用いる以外にも種々の方法が考えられる。

[0125] すなわち例えば、公知の顔認識技術を活用すれば、カメラ 120の撮像部 120aで撮影し映像信号生成部 120bで生成した映像信号より操作者 Sの顔を識別し、その顔の大きさと、人間の一般的な顔の大きさの平均値とを比較することで、操作者 Sまでの距離を求めることが可能である。なおこの場合、この顔認識領域の周囲一定範囲の領域を操作領域と決定して切り出し部 181〜183に切り出しを行わせるようにしてもよい。あるいは顔認識領域と、前述のリモコン位置特定部 155で特定される操作器 200を含む所定の範囲を操作領域と決定して切り出し部 181〜183に切り出しを行わせるようにしてもょヽ。また顔でなヽ部分に対し公知の画像認識を用いて距離計測を行うことも可能である。

[0126] また、上記（3)の変形例において説明したように、例えば図 3に示した構成において、赤外線フィルタ付きカメラ 110と通常のカメラ 120とを別々に設けた場合にはそれら 2つのカメラ 110, 120のレンズ位置のずれによりそれぞれの撮像は厳密には一致せず、視差が生じる。このようなカメラの視差を利用して、例えば距離検出用の左側カメラと右側カメラとをそれぞれ設け (少なくとも一方をカメラ 110, 120と兼用も可能）、それらの視差を利用して距離を計測するようにしてもよ!、。

[0127] また、入力画像における図形の大きさから計算する手法もある図 28は、この手法を説明するための説明図である。図 28において、例えば操作器 200の先端部に図示のように略「口」の字状に IR— LEDが設置されていたとすると、カメラ 120で撮影された映像信号における上記 IR— LEDの「口」の字の大きさは、操作器 200までの距離が大きくなるほど小さくなる。この相関関係を利用して、映像信号中の「口」の字の大きさを取得することで、操作器 200までの距離を逆算して求めることができる。

[0128] (7)障害物回避の対策を講じる場合

すなわち、操作者 Sとカメラ 120との間に操作器 200による操作範囲の妨げとなるような障害物がある場合、この障害物の存在する弊害を回避するような手法を実行しても良い。

[0129] 図 29 (a)、図 29 (b)、図 29 (c)は、この障害物回避手法の 1つとして切り出し領域を変更する変形例の概略を説明するための説明図である。

[0130] 図 29 (a)は、前述の図 18等に相当する図であり、カメラ 120が撮影した領域と、切り出される領域との位置関係を表している。操作者 Sが比較的近い距離 (カメラ 120から見て障害物よりも手前側に出ている状態）〖こ位置する場合は、図 29 (b)に示すように、カメラ 120が撮影した領域のうち操作者 Sの近傍の所定の範囲を切り出した後、その切り出した部分を同一の倍率で液晶表示部 3に表示する。この状態では操作メニュー MEが図示のように障害物（この例では本棚）上にかぶって表示されることとなるが、操作者 Sが障害物よりも手前側に位置するので、操作者 Sが操作器 200をもつて腕を振ることで当該本棚にかぶった状態の操作メニュー ME上に位置表示 MAを位置させることができ、通常通りの操作を行うことができる。

[0131] 一方、操作者 Sが後ろに下がった位置に立ち、カメラ 120から見て障害物のほうが操作者 Sよりも手前側に出ている状態になると、前述のようにそのまま操作メニュー M Eを障害物 (本棚)上にかぶって表示しても、操作者 Sがカメラ 120から見て障害物よりも奥側に位置するので操作者 Sが腕を振っても操作メニュー ME上に位置表示 MA を位置させることができず操作を行うことができな!/、。

[0132] そこで本変形例においては、このような状態となったら、図 29 (c)及び図 29 (a)に示すように、切り出し位置を、障害物を回避する（なるべく含まない)ような位置にずらす。これにより、図 29 (c)に示すように、障害物の影響のほとんどない状態で操作メ- ユー MEを表示でき、通常通り、操作者 Sが操作器 200をもって腕を振ることで操作メニュー ME上に位置表示 MAを位置させることができる。

[0133] なお、図 29 (b)に示す状態 (カメラ 120から見て操作者 Sが障害物よりも手前側に出ている、障害物の非活性化状態)と、図 29 (c)に示す状態 (カメラ 120から見て障害物が操作者 Sよりも手前側になる、障害物の活性ィ匕状態）との区別は、種々の手法が考えられる。一例としては、図 30に示すように、予めカメラ 120からの距離に対応させる形で、障害物となりうる物をデータベース化して登録しておく手法がある（後述の図 33のデータベース 145参照）。図 30において、右側の欄が各物体のカメラ 120からの距離 (活性ィ匕距離)であり、距離検出部 115から操作者 Sまでの距離がこの活性化距離よりも大きくなつた場合に、当該物体が障害物となるとみなすことができる。またこのときに、公知の物体認識技術 (例えば、ディジタル画像処理 (CG-ARTS協会) p .192-P.200参照）を併せて用いるようにしてもよ!、。

[0134] また、操作器 200をある方向に連続的に動力して移動操作していたとき、あるときからリモコン位置特定部 155の位置特定信号に基づく移動軌跡が検出できなくなった場合、これをもって活性ィ匕状態にある障害物を検出したとしてもよ!/、 (後述の（8)の変形例も参照)。少し逆方向に元に戻したときに操作器 200の移動軌跡が検出できるようになった（ =非活性状態への復帰)ことを確認できればなお確実である。

[0135] 図 31 (a)、図 31 (b)、図 31 (c)は、障害物回避手法の他の例としてメニュー表示領域をずらす変形例の概略を説明するための説明図である。

[0136] 図 31 (a)は、前述の図 29 (a)や図 18等に相当する図であり、カメラ 120が撮影した領域と、切り出される領域との位置関係を表している。操作者 Sがカメラ 120から見て障害物よりも手前側に出ている状態では、図 31 (b)に示すように、通常通り、例えば操作メニュー MEを障害物 (本棚)上にかぶって表示させる。この状態では、操作者 S が障害物よりも手前側に位置するので、操作者 Sが操作器 200をもって腕を振ることで当該本棚にかぶった状態の操作メニュー ME上に位置表示 MAを位置させることができ、通常通りの操作を行うことができる。

[0137] 一方、操作者 Sが後ろに下がった位置に立ち、カメラ 120から見て障害物のほうが操作者 Sよりも手前側に出ている状態になると、前述と同様、操作者 Sがカメラ 120から見て障害物よりも奥側に位置するので操作者 Sが腕を振っても操作メニュー ME上に位置表示 MAを位置させることができな!/、。

[0138] そこで本変形例においては、このような状態となったら、図 31 (c)に示すように、（この例のように切り出しを行う場合には必ずしも切り出し位置を変えず）、障害物を回避する（なるべく含まな、）ような位置に操作メニューの表示位置を（図示の例では左側に）ずらす。これにより、図 31 (c)に示すように、カメラ 120から見て障害物とかぶらず (障害物の影響のほとんどない状態で)操作メニュー MEを表示でき、通常通り、操作者 Sが操作器 200をもって腕を振ることで操作メニュー ME上に位置表示 MAを位置させることがでさる。

[0139] なお、障害物の非活性ィ匕状態と活性ィ匕状態との区別は、前述と同様の手法で行えば足りる。

[0140] 図 32は、上記の手法を実現するための本変形例の画像表示制御装置 100の機能的構成を表す機能ブロック図であり、前述の図 23や図 3等に相当する図である。図 3 2において、この変形例の画像表示制御装置 100は、先に（6)の変形例において図 23に示した構成における切り出し処理部 180及び 2次映像合成部 195にそれぞれ対応する機能を備えた切り出し処理部 180B及び 2次映像合成部 195Aを設けるとともに、新たに障害物判定部 125を設けている。

[0141] 障害物判定部 125は、上記距離検出部 115からの距離検出信号と、リモコン位置特定部 155からの位置特定信号とが入力され、前述したように障害物が非活性ィ匕状態か活性ィ匕状態かを判定する。

[0142] 切り出し処理部 180Bは、この例では前述の切り出し処理部 180, 180Aのような拡大機能は備えておらず、上記障害物判定部 125における上記判定結果信号と、リモコン位置特定部 155からの位置特定信号とに基づき、上記障害物判定結果に応じた態様 (通常の切り出し力位置をずらした切り出しか)で、 1次映像合成部 135からの位置表示 MA付き映像信号を切り出す (詳細は後述の図 33参照)。

[0143] 2次映像合成部 195Aは、上記障害物判定部 125における上記判定結果に応じた態様 (通常メニュー表示位置かずらしたメニュー表示位置力 )で、切り出し処理部 18 OBで切り出された映像に対し、メニュー作成部 154から入力した操作メニュー MEを合成する。

[0144] 図 33は、上記切り出し処理部 180B及び 2次映像合成部 195Aの詳細構成を、障害物判定部 125とともに表す機能ブロック図である。

[0145] 図 33において、切り出し処理部 180Bは、障害物回避のためのずらしを行わず通常の切り出しを行うための通常切り出し部 189と、障害物回避のためのずらしを伴う切り出しを行うためのずらし切り出し部 190と、上記障害物判定部 125からの切替制御信号によって切り替えられ、上記 1次映像合成部 135からの入力を通常切り出し部 189又はずらし切り出し部 190のいずれか一方に選択的に出力する切り換えスイツチ 191とを備えている。

[0146] 通常切り出し部 189には、リモコン位置特定部 155からの位置特定信号が入力され、その特定された操作器 200の位置に基づき、操作器 200位置の近傍の所定範囲（例えば予め固定的に設定されて、る）の切り出しを行う。ずらし切り出し部 190には、上記同様のリモコン位置特定部 155からの位置特定信号と障害物判定部 125からの障害物判定結果 (障害物位置情報を含む)とが入力され、操作器 200の位置と障害物の位置とに基づき、上記操作器 200位置の近傍の所定範囲の切り出しを、前述のように障害物位置をなるベく回避するように位置をずらしながら行う。

[0147] 一方、 2次映像合成部 195Aは、障害物回避のためのずらしを行わず通常のメ-ュ一表示のための映像合成を行うための通常合成部 196と、障害物を回避するずらしたメニュー表示のための映像合成を行うずらし合成部 197と、上記障害物判定部 12 5からの切替制御信号によって切り替えられ、上記切り出し処理部 180B力の入力を通常合成部 196又はずらし合成部 197のいずれか一方に選択的に出力する切り換えスィッチ 198とを備えている。

[0148] 通常合成部 196には、メニュー作成部 154からのメニュー表示信号が入力され、その入力された操作メニュー MEを、切り出し処理部 180B力も入力した画像の所定位置 (例えば予め固定的に設定されている）となるように合成する。ずらし合成部 197には、上記同様のメニュー作成部 154からのメニュー表示信号と、障害物判定部 125 力もの障害物判定結果 (障害物位置情報を含む)とが入力され、障害物の位置情報に基づき、上記入力された操作メニュー MEを、前述のように障害物位置をなるベく回避できるように位置をずらして合成する。

[0149] なおこの例では、前述の図 29に示したずらし切り出し機能を実行可能な上記切り出し処理部 180Bと、前述の図 31に示したずらしメニュー表示機能を実行可能な上記 2次映像合成部 195Aとを両方併せて備える場合を例にとって示している。しかしながら、いずれか一方のみの機能を実行すれば良い場合は、反対側は一般的な機能を備えてヽれば足りる。例えば上記切り出し処理部 180Bでのずらし切り出し機能のみで障害物対策を行う場合には、 2次映像合成部 195Aにおけるずらし合成部 19 7は (切り換えスィッチ 198とともに)省略して良い。同様に上記 2次映像合成部 195A でのずらしメニュー表示機能のみで障害物対策を行う場合には、切り出し処理部 18 OBにおけるずらし切り出し部 190は (切り換えスィッチ 191とともに)省略して良い。

[0150] 図 34は、切り出し処理部 180B、 2次映像合成部 195A、及び障害物判定部 125の全体で実行する制御手順を表すフローチャートである。先の図 25と同等の手順には同一の符号を付し、適宜説明を簡略化する。

[0151] 図 34において、まずステップ S10において、障害物判定部 125で、距離検出部 11 5で検出した操作者 S (操作器 200)とカメラ 120との距離を取得する。

[0152] その後、ステップ S15において、障害物判定部 125で、前述のデータベース化された障害物情報を備えたデータベース 145より、今回問題となる障害物に関する情報（少なくとも活性ィ匕距離を含み、その他障害物の大きさ等を含んでいても良い)を取得する。

[0153] そして、ステップ S40に移り、障害物判定部 125で、上記ステップ S 10で取得した距離と、上記ステップ S15で取得した障害物情報とに基づき、障害物が活性化した状態 (カメラ 120から見て障害物が操作者 Sよりも手前側)であるかどうかを判定する。活性ィ匕状態になければ判定が満たされず、このフローを終了する。

[0154] 障害物が活性ィ匕状態にあればステップ S40の判定が満たされ、ステップ S43に移る。ステップ S43では、障害物判定部 125で、上記障害物情報に基づき、（障害物を回避するずらし切り出しを行わなくても）障害物以外の領域で十分な操作メニュー M Eの表示スペースを確保できるかどうかを判定する。

[0155] 例えば障害物自体が比較的カメラ 120より遠い距離にある場合や障害物の大きさ自体がそれほど大きくな、場合等で上記表示スペースを確保できる場合にはステツプ S43の判定が満たされ、ステップ S46に移る。ステップ S46では、障害物判定部 12 5で切り替えスィッチ 191に切替制御信号を出力して通常切り出し部 189側へ切り替えるとともに、切り替えスィッチ 198に切替制御信号を出力してずらし合成部 197側へ切り替える。これ〖こより、 1次映像合成部 135からの位置表示 MAつき映像信号を通常切り出し部 189へ供給してずらしのな、通常の切り出しを行うとともに、その通常切り出し部 189からの切り出し映像信号をずらし合成部 197に供給して、前述のように障害物を回避するずらしたメニュー表示のための映像合成を行い、このフローを終了する。

[0156] 一方、上記ステップ S43において、例えば障害物自体が比較的カメラ 120に近い距離にある場合や障害物の大きさ自体が大き!、場合等で、障害物以外の領域で十分な操作メニュー MEの表示スペースを確保できない場合にはステップ S43の判定が満たされず、ステップ S49に移る。

[0157] ステップ S49では、障害物判定部 125で切り替えスィッチ 191に切替制御信号を出力してずらし切り出し部 190側へ切り替えるとともに、切り替えスィッチ 198に切替制御信号を出力して通常合成部 196側へ切り替える。これにより、 1次映像合成部 135 からの位置表示 MAつき映像信号をずらし切り出し部 190へ供給して前述のように障害物を回避するずらした切り出しを行うとともに、そのずらし切り出し部 190からの切り出し映像信号を通常合成部 196に供給して、ずらしのない通常のメニュー表示のための映像合成を行い、このフローを終了する。

[0158] 本変形例の画像表示制御装置 1においては、抽出処理手段 (この例では切り出し処理部 180B)は、映像表示信号生成手段 120bで生成した映像表示信号において操作器 200との間に介在する障害物の映像を回避するように、抽出及び拡大の態様 (拡大有無を含む)を決定する。

[0159] これにより、操作器 200と装置 1との間に障害物が存在するような場合に、その障害物の映像を回避するように抽出及び拡大を行うことで、表示画面 3上において障害物の映像に阻害されることなく操作器 200の操作領域を確保することができ、操作性の低下を防止することができる。また操作位置を限定されることもなくなる。 [0160] また、本変形例の画像表示制御装置 1にお!/、ては、図象表示信号生成手段 154で生成した操作対象図象 MEの表示画面 3上における表示位置を、映像表示信号生成手段 120bで生成した映像表示信号において操作器 200との間に介在する障害物の映像を回避するように設定するための図象位置設定手段 (この例では 2次映像合成部 195A)を有する。

[0161] これにより、操作器 200と装置 1との間に障害物が存在し、そのままでは背景全体の画像に占める操作器 200を移動操作可能な領域 (操作領域)の割合が小さくなる場合にお 1ヽて、障害物の映像を回避するように操作対象図象 MEの表示を行うことで、表示画面 3上において操作器 200の操作領域を確保することができ、操作性の低下を防止することができる。

[0162] (8)障害物越しの操作感を得られるようにする場合

すなわち、操作者 Sとカメラ 120との間に操作器 200による操作範囲の妨げとなるような障害物があった場合にも、その障害物の存在していないかのような、あた力も障害物越しに操作できているような操作感を操作者 Sに与えるような手法を実行しても良い。

[0163] 図 35 (a)、図 35 (b)、図 35 (c)、図 35 (d)は、このような操作感を得る変形例の概略を説明するための説明図である。

[0164] 図 35 (a)は、前述の図 18等に対応する図であり、カメラ 120が撮影した領域を表しており、この例では、カメラ 120が撮影した領域をそのまま同一の倍率で液晶表示部 3に表示する。ここで、図示のように、操作者 Sよりも障害物が手前側に位置し、操作メニュー MEが図示のように障害物（この例では観葉植物）上にかぶって表示されたような場合を想定する。この場合、そのままでは、操作者 Sが操作器 200をもって操作メニュー ME側に腕を振ったとしても、図 35 (b)に示すように、操作器 200が当該観葉植物にかぶつた状態になるとリモコン位置特定部 155による操作器 200の位置特定が困難又は不可能となるため、操作メニュー ME上に位置表示 MAを位置させることができなくなる。

[0165] そこで本変形例においては、このような状態となったら、図 35 (c)及び図 35 (d)に示すように、それまでに (操作器 200が当該観葉植物にかぶる状態となる前に）リモコン位置特定部 155により特定できた操作器 200の特定位置（「 X」印で示す)の移動軌跡を用いて、これを延長するように別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示 MAを補完した形で表示する（「參」印で示す)。これによって、操作者 Sにとつてあた力も障害物がないかのような (障害物越しに操作できて!、るかのような)操作感を与え、操作性の低下を防止するようにして、る。

[0166] 図 36は、上記の手法を実現するための本変形例の画像表示制御装置 100の機能的構成を表す機能ブロック図であり、上記実施形態の図 3等に相当する図である。図 36において、この変形例の画像表示制御装置 100は、図 3に示した構成に、新たに補完信号生成部 165を設けて、る。

[0167] 補完信号生成部 165は、リモコン位置特定部 155からの位置特定信号を入力し、これに基づく前述した操作器 200の特定位置の移動軌跡を延長するように別途新たに仮想的な操作器 200の移動位置を想定し、この予想移動位置を用いて位置表示 M Aを補完して表示するための補完信号を生成し、リモコン位置記号作成部 156へと出力する。

[0168] これにより、リモコン位置記号作成部 156は、通常通りリモコン位置特定部 155からの位置特定信号によって特定される位置に、遠隔操作器 200の位置を上記液晶表示部 3に表示させるための位置表示 MAを生成するのにカ卩え、前述のように障害物にかぶつてリモコン位置特定部 155からの位置特定信号が入力されなくなっても、これに代わるように補完信号生成部 165から入力される補完信号によって位置表示 M Aを生成し、映像合成部 130へと出力する。これにより、液晶表示部 3に実写されている障害物の映像上に対し、遠隔操作器 200の上記想定移動位置に対応した位置表示 MAが重ねられて表示される。

[0169] 図 37は、補完信号生成部 165が実行する制御手順を表すフローチャートであり、前述の図 25や図 26に対応する図である。

[0170] 図 37において、まずステップ S102において、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、実際の操作器 200の移動速度が所定のしき、値より小さヽ (遅、)力どうかを判定する。移動速度が当該しきヽ値未満である場合は判定が満たされ、例えば操作者 Sが障害物の存在を意識して障害物越しの操作をしたがっている等とみなされて後述のステップ S 108に移る。移動速度が当該しきい値以上である場合には判定が満たされず、ステップ S104に移る。

[0171] ステップ S104では、リモコン位置特定部 155からの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、実際の操作器 200の移動速度が所定のしきい値より（上記ステップ S102のしき、値よりも大き!/、値)大き!/、（速、)かどうかを判定する。移動速度が当該しきい値より大きい場合は判定が満たされ、例えば操作者 Sが障害物の存在を意識して障害物越しの操作をしたがっている等とみなされて後述のステツプ S108に移る。移動速度が当該しきい値未満である場合には判定が満たされず、ステップ S 106に移る。

[0172] ステップ S106では、操作者 Sからの補完指示信号が入力されたかどうかを判定する。すなわち、本変形例では上記ステップ S102、ステップ S 104等の判定条件を満たす満たさないに関係なぐ操作者 Sが意図的に (強制的に)補完信号生成部 165による補完実行を指示できる操作手段が備えられており、その操作手段による補完指示信号は補完信号生成部 165に入力される (図 36のユーザ指示入力部 151から入力する矢印参照)。このステップ S106は、この補完指示信号の入力があつたかどうかを判定するものである。操作者 Sによる補完実行指示があった場合には判定が満たされて後述のステップ S108に移る。補完実行指示がない場合には判定が満たされず、このフローを終了する。

[0173] ステップ S102、ステップ S104、ステップ S 106のいずれかの判定が満たされて移行するステップ S 108では、前述したように実際の操作器 200の移動軌跡が途絶えその延長表示を開始するときの延長動作開始点 Psを、操作器 200の現在位置とする。また、延長動作終了点 Peを以下のようにして決定する。

[0174] すなわち、図 38に概念的に示すように、操作器 200の現在位置と、それより少し前の位置との間に線分を引き、この少し前の位置から上記現在位置に向力つて当該線分を延長した直線を引き、その延長線と表示画面の画面端との交点を、延長終了点 Peとする。このようにして延長開始点 Ps及び延長終了点 Peを決定したら、ステップ S 110へ移る。 [0175] ステップ S110では、上記ステップ S108で延長終了点 Peとして決定した地点（上記延長線と表示画面の画面端との交点）が、実際に延長動作の終了点として指定可能であるかどうかを判定する。例えば通常の操作者 Sの身長等から見て上記終了点が明らかに操作可能な範囲力も逸脱している等、指定できない場合には判定が満たされず、ステップ S 112へ移る。指定可能であった場合にはステップ S 110の判定が満たされ、後述のステップ S 114へ移る。

[0176] ステップ S112では、上記ステップ S108で決定した延長終了点 Peとは異なる、別の指定可能要素（例えばメニュー作成部 154からのメニュー表示信号により表示される操作メニュー ME上。前述の図 38参照）の所定箇所 (この例では重心位置）を上記延長線が通過するように、延長終了点 Peの位置を変更する。その後、ステップ S 114 へ移る。

[0177] ステップ S114では、延長線上を伸びていくように延長補完 (追従)するときの位置表示 MAの延長補完 (追従)速度を一定値とする設定になって、るかどうかを判定する。

[0178] すなわち、本変形例でも、先に (6)の変形例で述べたのと同様、実行する延長補完処理時の位置表示 MAの追従速度として、（操作器 200の実際の移動速度に関係なく）予め定められた一定速度で追従する定速モードと、操作器 200の実際の移動速度に応じて追従速度が変化する可変速モードとが備えられている。そして、操作者 S が上記延長補完処理時に上記 2つのモードのうちいずれを用いるかを指示できる選択手段が備えられており、その選択手段によるモード選択信号は補完信号生成部 1 65に入力される。このステップ S114は、このモード選択信号で上記定速モードが選択されて、るかどうかを判定するものである。

[0179] 操作者 Sにより定速モードが選択されていた場合にはステップ S114の判定が満たされてステップ S 116に移る。ステップ S116では、前述したように実際の操作器 200 の移動軌跡を延長するように追従表示するときの位置表示 MA (ポインタ）の追従速度 fpvを、所定の一定値 Ssとする。

[0180] 一方操作者 Sにより可変速モードが選択されていた場合にはステップ S114の判定が満たされず、ステップ S118に移る。ステップ S118では、リモコン位置特定部 155 力もの位置特定信号 (及び所定時間範囲内におけるその挙動）に基づき、実際の操作器 200の移動速度が所定のしき、値 oc (予め設定される）以下となって!/、るかどうかを判定する。操作器 200の移動速度がそれほど遅くなつて、な、場合にはステツプ S 118の判定が満たされず、上記ステップ S 116へ移行する。操作器 200の移動速度が十分に遅くなつている場合にはステップ S 118の判定が満たされ、ステップ S 12 0に移る。

[0181] ステップ S 120では、前述したように実際の操作器 200の移動軌跡を延長するように追従表示するときの位置表示 MA (ポインタ）の追従速度 fpvを、前述の式 1と同様の、

fpv= j8 / ( l + a -rpv) … （式 2)

により算出する。前述と同様、 rpvは実際の操作器 200 (実際の位置表示 MA)の移動速度（実ポインタ速度)であり、 βは予め固定的に上限として設定されている追従ポインタ最高速度である。また αはステップ S 118で前述した移動速度のしきい値である。

[0182] 上記式 2においても、前述した式 1と同様の意義がある。すなわち、ステップ S 118 での判定が満たされていることからステップ S 120の時点で実際の操作器 200の移動速度 rpv≤ aとなっているため、上記式 2のうち a rpvは 0以上の値となり、実際の操作器 200の移動速度が遅い (操作がゆっくりである）ほど大きな値となる。この結果、これに 1をカ卩えた 1 + a—rpvは 1以上の値であって操作がゆっくりであるほど 1よりも大きくなる性質を備え、このような値を用いて追従ポインタ最高速度 βを除することにより、上限値を超えることなくかつ操作がゆっくりであるほど遅くなるポインタ追従速度 fpvを実現することができる。

[0183] 上記ステップ S 116又はステップ S 120が終了すると、ステップ S 122に移る。ステツプ S 122では、上記リモコン位置記号作成部 156で作成され入力された位置表示 (ポインタ） MAに上記の延長補完処理を施し、上記ステップ S 108 (又はステップ S 112) で決定した延長開始点 Psから延長終了点 Peまで、上記ステップ S 116又はステップ S 120で決定した追従ポインタ速度 fpvにより位置表示 MAが表示されるようにリモコン位置記号作成部 156へ補完信号を出力する。ステップ S 122が終了すると、このル一チンを終了する。

[0184] なお、上記実施形態等においては、操作者 Sが手に持った遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、操作メニュー MEのうち実行したヽ操作領域に上記位置表示 MAが到達したときにその操作領域の操作を決定すべく操作部 201を適宜に操作する（例えば「決定」ボタンを押す)。そしてこれによつて、対応する赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100 側でこれに基づく処理を行って対応した操作信号が上記 DVD録画'再生機構 140 に出力され、対応する動作を行わせることができた。

[0185] 本変形例においては、上記のようにして障害物に遮られたままその延長線上に位置表示 MAを到達させた状態では、対応する赤外線指示信号を画像表示制御装置 100側で受け取ることが不可能又は困難であり、そのままでは、操作メニュー MEのうち実行したい操作領域に上記位置表示 MAが到達したときにその操作領域の操作を決定することができない。この操作領域の決定に関しては、例えば、上記延長補完動作を開始してから所定時間の経過後に位置表示 MAが到達した位置を自動的に操作者 Sが決定した操作領域とみなすようにしたり、別途の (操作領域決定のための )指示手段を設けて決定指示を行うようにすればょ、。

[0186] 本変形例の画像表示制御装置 1においては、位置特定手段 155による位置特定結果に基づき認識される操作器 200の移動情報に基づき、特定された位置とは異なる操作器 200の予想移動位置を設定する予想位置設定手段 (この例では補完信号生成部 165)を有する。

[0187] これにより、例えば障害物の存在により操作器 200の移動軌跡を途中で検出できなくなつた場合等にぉ、て、操作器 200の位置特定結果以外にも移動位置を予想して設定することで、仮想的に表示画面 3上における移動軌跡を補って連続的に表現し、操作性を向上することができる。

[0188] また本変形例の画像表示制御装置 1においては、予想位置設定手段 165は、操作器 200の移動時に位置特定手段 155により順次特定される移動方向延長線上となるように、予想移動位置を設定する。

[0189] これにより、障害物の存在等により移動軌跡を途中で検出できなくなった場合に、操作器 200の移動方向延長線上に移動位置を予想して仮想的に表示画面 3上における移動軌跡を補い、途切れた移動軌跡を再現することで、操作性を向上することができる。

[0190] なお、上記は操作器 200を障害物方向に移動させているときに障害物によって操作器 200が完全に遮られて移動軌跡が途中で検出できなくなり、これに対応して移動方向延長線上に移動位置を予想する場合を例にとって説明したが、これに限られない。すなわち例えば、図 39 (a)のように、操作者 Sより手前側に位置する障害物 (この例では観葉植物）があり、操作メニュー MEが図示のように障害物を挟んで操作者 Sと反対側に表示された (操作メニュー ME自体は障害物とかぶって、な、)ような場合を考える。この場合、操作者 Sが操作器 200をもって腕を振ることで、 (操作メニュ一 MEは障害物とかぶっていないため）最終的に操作メニュー ME上に側に位置表示 MAを位置させ、通常の操作を行うことはできる。し力しながら、上記のように操作メニュー ME上に側に位置表示 MAを位置させるまでの途中の段階で、図 39 (b)に示すように、操作器 200が当該観葉植物にかぶった状態になるとリモコン位置特定部 1 55による操作器 200の位置特定が困難又は不可能となり、この状態の間、位置表示 MAが (例えば観葉植物の枝葉に遮られて）断片的 ·離散的にしか表示されなくなる（あるいは移動解像度が低くなる）可能性がある。

[0191] このような場合、上記（8)の変形例における延長補完の手法を、前述と同様にして、この移動軌跡中間部における補完についても適用することができる。すなわち、図 39 (c)及び図 39 (d)に示すように、操作器 200が当該観葉植物にかぶる状態となる前や、枝葉の間から操作器 200が断片的に覼く状態においてリモコン位置特定部 1 55により特定できた操作器 200の特定位置（「 X」印で示す)の移動軌跡を用いて、これを結ぶように (操作器 200の特定位置の隣接する 2点を結ぶように)別途新たに仮想的な移動位置を想定し、この予想移動位置を用いて位置表示 MAを補完した形で表示する（「拳」印で示す)。これによつて、操作者 Sにとつてあた力も障害物による障害がな、ような連続的な操作感を与えるようにして、る。

[0192] この画像表示制御装置 1においては、予想位置設定手段 165は、操作器 200の移動時に位置特定手段 155により順次特定される隣接する 2点の中間部となるように、予想移動位置を設定する。

[0193] これにより、表示画面 3における操作器 200の移動軌跡が障害物の存在により断片的-離散的にしか検出できな力た場合に、隣接 2点間に予想移動位置を設定して仮想的に表示画面 3上における移動軌跡を補い連続的に表現することで、操作円滑性を向上することができる。

[0194] (9)蓄積コンテンツの再生位置指定に応用する場合

以上は、画像表示装置 1に DVD録画'再生機構 140の操作に関わるメニュー画面を表示させ、遠隔操作器 200の赤外線像をメニュー選択のポインタとして用いた場合を例にとって説明した。し力しながら、このポインタとしての活用はこれに限られるものではなぐそれ以外にも適用可能である。本変形例は、上記ポインタの機能を蓄積コンテンッの再生位置の自在な指定に応用した場合の例である。

[0195] 図 40は、本変形例の画像表示システムにお、て、画像表示装置 1の液晶表示部 3 の表示の一例を表す図であり、前述の図 6に対応する図である。図 6と同等の部分には同一の符号を付している。図 40において、この例では、画像表示制御装置 100の図示しない上記収納部に収納された DVDに予め録画された長さ 1時間のコンテンツ (番組等)表示 CTを実行させた状態で、操作者 Sがそのコンテンツを所望の時間位置（図示の例では再生開始位置力も 42分経過した位置)から再生させることを意図し、手に持った遠隔操作器 200の液晶表示部 3における位置をコンテンツ表示 CTの当該 42分経過点に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表している。なお、この例では液晶表示部 3の右上部に当該 42分経過点（再生開始位置）における当該コンテンツの画像 CC (静止画でも動画でもよい）が割り込み表示されている。あるいはこのコンテンツ再生開始位置指定操作とは関係なぐ所定のチャンネルにおける現在の放映画像をこの位置に表示するようにしてもよい。

[0196] 図 41は、上記画像表示制御装置 100の機能的構成を表す機能ブロック図である。

図 41において、画像表示制御装置 100は、図 3等に示されたメニュー表示作成部 1 54に代えて、上記コンテンツを上記液晶表示部 3に表示させるための信号を生成するコンテンツ表示作成部 154Aが設けられて、る。 [0197] 本変形例では、前述したように、カメラ 120からの映像表示信号をもとに画像表示装置 1の液晶表示部 3に操作者 Sがいる実世界が表示された状態において、操作者 Sが遠隔操作器 200を手に持って操作部 201を適宜に操作すると、これに対応する特定の赤外線指示信号 (コンテンツ再生位置指定モードに対応)が赤外線駆動部 2 02から出射され、前述と同様、画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 15 0のユーザー指示入力部 151に対応する識別コードが入力されて解読される。ユーザ一指示入力部 151ではこれに対応してコンテンツ表示作成部 154Aに作成指示信号を入力し、コンテンツ表示作成部 154Aは、これに対応して、 DVD録画'再生機構 140に対応する再生コンテンツについての問い合わせを行ってその情報 (コンテンッの有無、全録画時間等）を取得した後、画像表示装置 1の上記液晶表示部 3に図 4 0に示したような帯状の表示力なるコンテンツ時間枠 (操作対象図象)を表示させるためのコンテンツ表示信号（図象表示信号)を生成する。

[0198] このコンテンツ表示信号は、前述と同様、映像合成部 130によって上記カメラ 120 の映像信号生成部 120bからの映像表示信号と合成され、その合成信号が画像表示装置 1へ出力されることで、カメラ 120による上記実写映像と上記コンテンツ表示作成部 154Aからのコンテンツ表示 CTとの合成映像が液晶表示部 3に表示される（コンテンッ再生位置指定モード、言い換えれば画面位置選択モードへの移行)。なお、本変形例でも、前述と同様、このコンテンツ再生位置指定モードへ移行している間（このモードが終了するまで)、遠隔操作器 200からは上記した特定の赤外線指示信号 (低消費電力）を発信し続けるようになって、る。

[0199] 一方このとき、前述と同様、操作者 Sの持った遠隔操作器 200から発せられる上記特定の赤外線指示信号が赤外線フィルタ付きカメラ 110で撮像されて、リモコン位置特定部 155にお、て遠隔操作器 200が赤外線フィルタ付きカメラ 110による撮像中において占める位置が特定され、その位置情報をもとにリモコン位置記号作成部 15 6で位置表示信号が生成されて映像合成部 130へと入力され、これによつて液晶表示部 3に実写されている遠隔操作器 200の位置 (あるいは近傍）に位置表示 MA (矢印型のマーク、上記図 40参照）が重ねて表示される。これにより、操作者 Sが遠隔操作器 200を持ってその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部 3にコンテンツ表示 CTと重なるようにして表示されている遠隔操作器 200の位置表示 MAを液晶表示部 3上で動かすことができる。

[0200] 一方、前述と同様、上記リモコン位置特定部 155で特定した遠隔操作器 200の位置情報は上記ユーザー操作判定部 152へも入力され、このときユーザー操作判定部 152には、上記コンテンツ表示作成部 154Aで作成したコンテンツ表示信号のコンテンッ表示に関する情報（どのような内容、時間長さのコンテンツ表示を行っているか )も入力されている。

[0201] 上記のように操作者 Sが遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、コンテンツ表示 CTのうち再生開始した!/、位置に上記位置表示 MAが到達したときにその選択指定を決定すべく操作部 201を適宜に操作する (例えば「決定」ボタンを押す)ことで、上記同様、これに対応する赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 150のユーザ一指示入力部 151に対応する識別コードが入力されて解読され (指示信号入力手段 )、対応して上記ユーザー操作判定部 152に決定指示信号が入力される。

[0202] 上記決定指示信号が入力されたユーザー操作判定部 152は、前述したのと同様、リモコン位置特定部 155から取得した遠隔操作器 200の位置情報と、コンテンツ表示作成部 154Aから取得したコンテンツ表示情報とに基づき、上記液晶表示部 3に表示されたコンテンツ表示 CTのうち選択指定された再生開始位置 (操作指定部位)を決定し (操作部位決定手段）、これに対応する信号をコンテンツ表示作成部 154Aへと入力する。コンテンツ表示作成部 154Aはその入力された信号に基づき、上記選択指定された再生開始位置及びその近傍領域を、それ以外の部位と異なる態様で表示するようなコンテンツ表示信号を生成して映像合成部 130に出力する。

[0203] 上記の結果、図 40に示したように、この例では当該選択指定された再生開始位置力も 42分経過位置及びその近傍領域は他の領域と色が異なって表示されている。そして、ユーザー操作判定部 152から上記再生開始位置の選択指定に対応した操作指示信号が操作信号生成部 153へ出力され、操作信号生成部 153がこれに応じて対応する操作信号を上記 DVD録画'再生機構 140に出力し、対応する位置からの再生動作を行うことができる。

[0204] 以上説明した本変形例においても、上記実施形態と同様の効果を得ることができる。すなわち、液晶表示部 3における遠隔操作器 200の位置表示 MAをコンテンツ表示 CTから再生開始位置を選択指定するためのポインタとして利用することができ、操作者 Sは、液晶表示部 3から目を離すことなぐ遠隔操作器 200自体の位置移動と V、う体感的 ·直感的に非常に分力りやす、動作で、コンテンツ表示 CTのうち所望の再生開始位置を容易に選択指定することができる。このとき、従来技術のようにジエスチヤ一を記憶する必要もなく操作者 Sの負担を増大させることがな、ので、遠隔操作時の利便性を大きく向上することができる。またそれ以外の効果についても、詳細は省略するが上記実施形態とほぼ同様の効果を得ることができる。

[0205] なお、上記においては、図 40に示したように、液晶表示部 3のほぼ全体に実世界映像及びコンテンツ表示 CTを大きく表示するとともに、右上部に当該再生開始位置におけるコンテンツ画像 CC (ある、は所定チャンネルにおける現在の放映画像)を割り込み表示させたが、これに限られない。すなわち、上記の逆に、図 42に示すように、液晶表示部 3のほぼ全体に再生開始位置におけるコンテンツ画像 CC (あるいは所定チャンネルにおける現在の放映画像)を大きく表示するとともに、右上部に実世界映像及びコンテンツ表示 CTを割り込み表示させるようにしてもょヽ。

[0206] さらに、上記のように遠隔操作器 200の位置によって再生開始位置を指定するのにも限られず、例えば再生映像や再生音楽の音量、表示画面の明るさ等を指定できるようにしても良い。また再生に限られず、録画開始位置等を指定できるようにしてもよい。

[0207] (10) EPGに適用した場合

さらに、上記ポインタの機能は、近年急速に普及しつつある電子番組ガイド (EPG) に適用することもできる。本変形例はそのような場合の例である。

[0208] 図 43は、本変形例の画像表示システムにお、て、画像表示装置 1の液晶表示部 3 の表示の一例を表す図であり、前述の図 6や図 40に対応する図である。図 6と同等の部分には同一の符号を付している。図 43において、この例では、画像表示制御装置 100又は画像表示装置 1側の公知の機能を用いて液晶表示部 3に電子番組ガイド Eを表示させた状態で、操作者 Sがその電子番組ガイド Eに表示された所定の番組を視聴することを意図し、手に持った遠隔操作器 200の液晶表示部 3における位置を電子番組ガイド Eの当該番組の領域 (枠）に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表して、る。

[0209] 図 44は、上記画像表示制御装置 100の機能的構成を表す機能ブロック図である。

図 44において、画像表示制御装置 100は、前述の（9)の変形例の図 41に示されたコンテンツ表示作成部 154Aに代えて、前述した視聴した、所望の番組を含む電子番組ガイド Έを上記液晶表示部 3に表示させるための信号を生成する番組表表示作成部 154Bが設けられて、る。

[0210] 本変形例でも、前述した (9)の変形例と同様、カメラ 120からの映像表示信号をもとに画像表示装置 1の液晶表示部 3に操作者 Sがいる実世界が表示された状態において、操作者 Sが遠隔操作器 200を手に持って操作部 201を適宜に操作すると、これに対応する特定の赤外線指示信号 (電子番組ガイド表示モードに対応）が赤外線駆動部 202から出射され画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 150のュ一ザ一指示入力部 151に対応する識別コードが入力されて解読される。ユーザー指示入力部 151ではこれに対応して番組表表示作成部 154Bに作成指示信号を入力し、番組表表示作成部 154Bは、これに対応して、 DVD録画 ·再生機構 140に対し（あるいはさらにこれを介して画像表示装置 1に対し)取得可能な電子番組ガイドにつ V、ての問、合わせを行ってその情報 (電子番組ガイドに表示する番組内容、時間等 )を取得した後、画像表示装置 1の上記液晶表示部 3に図 43に一例を示したような所定の態様の電子番組ガイド Έ (操作対象図象)を表示させるための番組表表示信号（図象表示信号)を生成する。

[0211] この番組表表示信号は、前述と同様、映像合成部 130によって上記カメラ 120の映像信号生成部 120bからの映像表示信号と合成され、その合成信号が画像表示装置 1へ出力されることで、カメラ 120による上記実写映像と上記番組表表示作成部 15 4Bからの電子番組ガイド Eとの合成映像が液晶表示部 3に表示される（電子番組ガイド表示モード、言い換えれば画面位置選択モードへの移行)。なお、本変形例でも、この電子番組ガイド表示モードへ移行している間（このモードが終了するまで）、遠隔操作器 200からは上記した特定の赤外線指示信号 (低消費電力）を発信し続けるようになっている。

[0212] 一方、前述した (9)の変形例と同様、操作者 Sの持った遠隔操作器 200から発せられる上記特定の赤外線指示信号が赤外線フィルタ付きカメラ 110で撮像されて、リモコン位置特定部 155において遠隔操作器 200が赤外線フィルタ付きカメラ 110による撮像中において占める位置が特定され、その位置情報をもとにリモコン位置記号作成部 156で位置表示信号が生成されて映像合成部 130へと入力され、これによつて液晶表示部 3に実写されてヽる遠隔操作器 200の位置 (あるヽは近傍）に位置表示 MA (矢印型のマーク、上記図 43参照）が重ねて表示される。これにより、操作者 Sが遠隔操作器 200を持ってその位置を移動させる (空間的に存在位置を変える)ことで、液晶表示部 3に電子番組ガイド Eと重なるようにして表示されて、る遠隔操作器 20 0の位置表示 MAを液晶表示部 3上で動かすことができる。

[0213] 一方、前述した (9)の変形例と同様、上記リモコン位置特定部 155で特定した遠隔操作器 200の位置情報は上記ユーザー操作判定部 152へも入力され、このときユーザ一操作判定部 152には、上記番組表表示作成部 154Bで作成した番組表表示信号の電子番組ガイド表示に関する情報（どのような長さでどのような内容の番組を何時の時間帯にいくつ表示を行っているか等)も入力されている。

[0214] 上記のように操作者 Sが遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、電子番組ガイド Έのうち視聴した、番組の表示領域に上記位置表示 MAが到達したときにその選択指定を決定すべく操作部 201を適宜に操作する (例えば「決定」ボタンを押す)ことで、前述した (9)の変形例と同様、これに対応する赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ i ₅₀のユーザー指示入力部 1₅1に対応する識別コードが入力されて解読され (指示信号入力手段)、対応して上記ユーザー操作判定部 152に決定指示信号が入力される。 [0215] 上記決定指示信号が入力されたユーザー操作判定部 152は、前述した (9)の変形例と同様、リモコン位置特定部 155から取得した遠隔操作器 200の位置情報と、番組表表示作成部 154Bから取得した電子番組ガイド表示情報とに基づき、上記液晶表示部 3に表示された電子番組ガイド Έのうち選択指定された視聴希望番組の領域（操作指定部位)を決定し (操作部位決定手段)、これに対応する信号を番組表表示作成部 154Bへと入力する。番組表表示作成部 154Bはその入力された信号に基づき、上記選択指定された番組領域 (番組枠)を、それ以外の部位と異なる態様で表示するような番組表表示信号を生成して映像合成部 130に出力する。

[0216] 上記の結果、図 2に示したように、この例では当該選択指定された番組領域は他の領域と色が異なって表示されている。そして、ユーザー操作判定部 152から上記番組領域の選択指定に対応した操作指示信号が操作信号生成部 153へ出力され、操作信号生成部 153がこれに応じて対応する操作信号を上記 DVD録画 ·再生機構 14 0を介し画像表示装置 1に出力し、対応する番組を画像表示装置 1の液晶表示部 3 に表示させ視聴することができる。

[0217] 以上説明した本変形例においても、上記実施形態と同様の効果を得ることができる。すなわち、液晶表示部 3における遠隔操作器 200の位置表示 MAを電子番組ガイド E力も視聴した、番組を選択指定するためのポインタとして利用することができ、操作者 Sは、液晶表示部 3から目を離すことなぐ遠隔操作器 200自体の位置移動という体感的 ·直感的に非常に分力ゝりやすヽ動作で、電子番組ガイド Έのうち所望の番組の領域を容易に選択指定することができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者 Sの負担を増大させることがな、ので、遠隔操作時の利便性を大きく向上することができる。またそれ以外の効果についても、詳細は省略するが上記実施形態とほぼ同様の効果を得ることができる。

[0218] (11)実写画像を省略する場合

以上は、画像表示装置 1の液晶表示部 3に、赤外線撮像に基づく遠隔操作器 200 の位置と、カメラによる実世界映像とを重ねて表示し、その状態で上記遠隔操作器 2 00の赤外線像をポインタとして利用した力前述した、体感的 ·直感的に非常に分かりやす、動作で操作メニュー MEの所望の操作領域を容易に選択指定できると!、う効果を得る限りにおいては、上記実写映像は必ずしも必要なぐ省略してもよい。本変形例はそのような場合の例である。

[0219] 図 45は、本変形例の画像表示システムにお、て、画像表示装置 1の液晶表示部 3 の表示の一例を表す図であり、前述の図 6、図 40、図 43等に対応する図である。図 6 と同等の部分には同一の符号を付している。なお、説明の便宜と理解の容易のために図 6等と同様に操作者 Sや遠隔操作器 200の実映像を図示しているが、実際はこれは表示されず（二点鎖線参照）、前述の遠隔操作器 200の位置表示 MA (白矢印）のみが液晶表示部 3に表示される。

[0220] 図 45において、この例では、液晶表示部 3に前述の操作メニュー MEを表示させた状態で、操作者 Sがその操作メニュー MEに含まれる所定の操作を行うことを意図し、手に持った遠隔操作器 200の液晶表示部 3における位置を操作メニュー MEの対応する操作領域に位置させた後（矢印型のマーク参照）、前述の「決定」ボタンを押してその選択指定を確定させた状態を表して、る。

[0221] 図 46は、上記画像表示制御装置 100の機能的構成を表す機能ブロック図である。

図 46において、画像表示制御装置 100は、上記実施形態の図 3に示された構成よりカメラ 120を削除するとともに、映像合成部 130に代えて信号合成部 130Aが設けられている。信号合成部 130Aには、前述したリモコン位置記号作成部 156からの位置表示信号と、メニュー作成部 154からのメニュー表示信号との 2つのみが入力され、これらが合成されて画像表示装置 1に出力され、これに応じて画像表示装置 1の液晶表示部 3には図 45を用いて説明したような表示が実行される。

[0222] すなわち、操作者 Sの持った遠隔操作器 200から発せられる特定の赤外線指示信号が赤外線像として赤外線フィルタ付きカメラ 110で撮像されて認識され、その撮像信号がリモコン位置特定部 155に入力され、リモコン位置特定部 155が上記認識結果に基づき、遠隔操作器 200が赤外線フィルタ付きカメラ 110による撮像中にぉ、て占める位置を特定する。

[0223] 上記リモコン位置特定部 155で特定した遠隔操作器 200の位置情報はリモコン位置記号作成部 156へ入力され、遠隔操作器 200の位置を上記液晶表示部 3に表示させるための位置表示信号が生成され、この生成された位置表示信号は上記信号合成部 130Aへと入力される。これによつて、液晶表示部 3において前述した手法でメニュー作成部 154からのメニュー表示信号に基づき既に表示されている操作メ-ュ一 MEに対し、遠隔操作器 200の位置に対応した所定の位置表示 MA (矢印型のマ →、図 45参照）が重ねて表示される。これにより、操作者 Sが遠隔操作器 200を持つてその位置を移動させる（空間的に存在位置を変える）ことで、液晶表示部 3に操作メニュー MEと重なるようにして表示されて、る遠隔操作器 200の位置表示 MAを液晶表示部 3上で動かすことができる。

[0224] 上記のように操作者 Sが手に持った遠隔操作器 200を移動させて位置表示 MAを液晶表示部 3上で動かし、操作メニュー MEのうち実行した、操作領域に上記位置表示 MAが到達したときにその操作領域の操作を決定すべく操作部 201を適宜に操作する（例えば「決定」ボタンを押す)ことで、これに対応する赤外線指示信号が赤外線駆動部 202から出射され、画像表示制御装置 100の赤外線受光部 101で受光された後、上記 FM復調器 102、 BPF103、パルス復調器 104を経てコントローラ 150 のユーザー指示入力部丄 ₅丄に対応する識別コードが入力されて解読される (指示信号入力手段)。ユーザー指示入力部 151ではこれに対応して上記ユーザー操作判定部 152に決定指示信号を入力する。

[0225] 上記決定指示信号が入力されたユーザー操作判定部 152は、前述したリモコン位置特定部 155から取得した遠隔操作器 200の位置情報と、メニュー作成部 154から取得したメニュー表示情報とに基づき、上記液晶表示部 3に表示された操作メニュー MEのうち選択指定される操作領域 (操作指定部位)を決定し (操作部位決定手段）、これに対応する信号をメニュー作成部 154へと入力する。メニュー作成部 154はその入力された信号に基づき、上記選択指定された操作領域を、それ以外の部位と異なる態様で表示するようなメニュー表示信号を生成して信号合成部 130Aに出力する。

[0226] その他の動作は、上記実施形態とほぼ同様であるので、説明を省略する。

[0227] 以上説明した本変形例においても、上記実施形態と同様、画像表示装置 1に備えられた液晶表示部 3上に、操作メニュー MEを表示させるためのメニュー表示信号を生成するメニュー作成部 154と、遠隔操作器 200の背景力到来する可視光線とは異なる態様又は属性を備え、遠隔操作器 200から到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ 110と、この赤外線フィルタ付きカメラ 110における上記赤外線信号の認識結果に基づき、遠隔操作器 200が赤外線フィルタ付きカメラ 110による撮像中にぉ、て占める位置を特定するリモコン位置特定部 155と、このリモコン位置特定部 155で特定した遠隔操作器 200の位置を液晶表示部 3上に表示させるための位置表示信号を生成するリモコン位置信号作成部 156と、リモコン位置特定部 155で特定した遠隔操作器 200の位置に基づき、液晶表示部 3上に表示された操作メニュー MEのうち操作領域を決定するユーザー操作判定部 152とを有し、これによつて、液晶表示部 3における遠隔操作器 200の位置表示 MAを操作メニュー MEカゝら操作領域を選択指定するためのポインタとして利用することができる。この結果、操作者 Sは、液晶表示部 3から目を離すことなぐ遠隔操作器 200自体の位置移動と、う体感的 ·直感的に非常に分力りやす、動作で、操作メニュー MEのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者 Sの負担を増大させることがないので、遠隔操作時の利便性を大きく向上することができる。

[0228] (12)有線接続の操作器を用いた場合

以上は、操作者側の携帯型の操作器として、無線遠隔操作を行う（=いわゆるリモコン)の遠隔操作器 200を用いた場合を例にとって説明したが、これに限られない。すなわち、画像表示制御装置 100と所定のケーブル等により有線接続された携帯型の操作器を用いてもよい。

[0229] 図 47は、この変形例における画像表示制御装置 100の機能的構成の一例を表す機能ブロック図であり、上記図 3等に相当する図である。図 3と同等の部分には同一の符号を付し、適宜説明を省略する。図 47において、本変形例では、図 3の遠隔操作器 200に代えて、同等の機能を果たす有線接続 (V、わゆるペンダントタイプ)の携帯型の操作器 200Aが設けられ、この操作器 200Aと上記ユーザー指示入力部 151 とが適宜の電線やケーブル等によって有線接続されている。これに対応して、図 3における赤外線受光部 101、 FM復調器 102、 BPF103、パルス復調器 104は省略されている。 [0230] 図 47におヽて、本変形例では、操作者 Sによる所定の操作指示に対応して操作器 200Aから出力された信号は上記ケーブル等を介しユーザー指示入力部 151に入力される。そして、ユーザー操作判定部 152は、上記ユーザー指示入力部 151で入力された信号に対応する操作指示信号を操作信号生成部 153へ出力し、操作信号生成部 153はその操作指示信号に応じて、対応する操作信号を生成し、前述した D VD録画 ·再生機構 140に出力する。その他の動作は上記実施形態と同様であるので説明を省略する。

[0231] 以上説明した本変形例においても、上記実施形態と同様、画像表示装置 1に備えられた液晶表示部 3上に、操作メニュー MEを表示させるためのメニュー表示信号を生成するメニュー作成部 154と、操作器 200Aの背景カゝら到来する可視光線とは異なる態様又は属性を備え、操作器 200Aから到来する赤外線信号を、上記可視光線と区別して認識可能な赤外線フィルタ付きカメラ 110と、この赤外線フィルタ付きカメラ 110における上記赤外線信号の認識結果に基づき、操作器 200Aが赤外線フィルタ付きカメラ 110による撮像中にぉ、て占める位置を特定するリモコン位置特定部 15 5と、このリモコン位置特定部 155で特定した操作器 200Aの位置を液晶表示部 3上に表示させるための位置表示信号を生成するリモコン位置信号作成部 156と、リモコン位置特定部 155で特定した操作器 200Aの位置に基づき、液晶表示部 3上に表示された操作メニュー MEのうち操作領域を決定するユーザー操作判定部 152とを有し、これによつて、液晶表示部 3における操作器 200Aの位置表示 MAを操作メニュー ME力も操作領域を選択指定するためのポインタとして利用することができる。この結果、操作者 Sは、液晶表示部 3から目を離すことなぐ操作器 200A自体の位置移動 t 、う体感的 ·直感的に非常に分力りやす、動作で、操作メニュー MEのうち所望の操作領域を容易に選択指定し、対応する操作を行うことができる。このとき、従来技術のようにジェスチャーを記憶する必要もなく操作者 Sの負担を増大させることがなヽので、遠隔操作時の利便性を大きく向上することができる。

[0232] (13)その他

(1)操作メニュー等力選択指定できる範囲を制限する場合

例えば図 6等において液晶表示部 3に表示された操作メニュー MEに含まれる複数の操作領域のうち、 V、くつかの操作領域を選択指定できな、ように制限してもよ!/、。図 48は、そのような場合の液晶表示部 3の表示例を表しており、この場合操作メ-ュ一 MEに含まれる「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域のうち、「ダビング」「消去」「その他」については文字表示が他のものと異なる態様 (この例では白抜き表記）となっているとともに、各領域には前述のカメラ 120による実写映像を表示して、な、（言、換えればそのような表示となるようなメニュー表示信号をメニュー作成部 154が生成している)。すなわち、選択可能範囲のみに限定して実世界を投影するようになっている。これにより、選択指定可能な領域と、そうでない領域とが操作者 Sにとつて一目瞭然になる。

[0233] (2)すべての操作領域を遠隔操作器の狭、移動範囲で選択可能とした例

例えば図 6等において、液晶表示部 3のほぼ全面にわたって表示される操作メ-ュ一 MEの「時計（時刻セット）」「録画」「編集」「番組表」「再生」「予約」「ダビング」「消去」「その他」の各領域をすベて選択指定可能とするには、図 6に示されるように、操作者 Sは同一箇所で左右に手を、つぱいに伸ばして遠隔操作器 200を左右に移動させるか、場合によってはそれでも足りずに操作者 S自らが部屋の中で歩いて移動しなければならない。

[0234] 本変形例はこれに対応し、なるべく少ない遠隔操作器 200の移動量ですベての操作領域の選択指定を可能とするものである。この例では、公知の顔画像認識技術を用い、前述のメニュー選択モードに入った時にまず遠隔操作器 200の近くにある顔を検出して認識した後、その位置力もある程度下の部分のみが操作範囲となるように、前述したカメラ 120の映像信号生成部 120bが映像信号を加工して映像合成部 13 0へ出力する。この結果、画像表示装置 1の液晶表示部 3には、図 49に示すように、通常の形状の操作メニュー MEと、操作者 Sの上記首から下の比較的小さ、範囲が液晶表示部 3のほぼ全面にわたるように加工された (この例では上下方向に大きく拡大、さらに左右方向にも若干拡大するように歪められた)背景 (部屋) BGの上記加工後の実写映像とが表示されている。このようにすることで、操作者 Sはより小さな遠隔操作器 200移動挙動（この例では首下の比較的小さ!、範囲での移動）で希望の操作領域を選択指定できる。さらに、操作範囲を操作者 Sの位置に応じて特定することで、操作に必要な遠隔操作器 200の移動量を減らすことも可能である。

[0235] (3)各映像の重ね合わせ方のバリエーション

上記においては、例えば上記図 6等に示すように、操作メニュー MEと、遠隔操作器 200の位置表示 MAと、カメラ 210で撮像した遠隔操作器 200の背景 BGの実写映像とを、すべて重ね合わせるようにして液晶表示部 3にて表示した力これに限られない。すなわち、位置表示 MAを操作メニュー MEのポインタとして利用し、操作者 Sが液晶表示部 3から目を離さず、遠隔操作器 200自体の位置移動と、う体感的 ·直感的に非常に分力ゝりやすヽ動作で操作領域を容易に選択指定できるとヽぅ効果を得る限りにおいては、上記は必ずしも必要ではない。すなわち例えば、それら遠隔操作器 200の位置表示 MA、操作メニュー ME、背景 BGの実写映像のうち 2つは液晶表示部 3上で同一領域に重ねて表示するが残りの 1つはそれらの横に（又は割り込むようにして)別画面又は別ウィンドウにて表示してもよ、。ある、は上記 3つをすベてバラバラに横並び (又は割り込むようにして)別画面又は別ウィンドウにて表示するようにしてもよい。この場合でも、同一の液晶表示部 3において、ほぼ同時に操作者 Sが閲覧できるように一覧表示するようにすれば、上記効果を得ることができる。

[0236] (4)録画による実写映像を用いる場合

例えば上記実施形態等にぉ、ては、遠隔操作器 200の背景 BGの実写映像を通常のカメラ 120で (リアルタイムで)撮影してその映像表示信号を映像合成部 130へ出力し、赤外線フィルタ付きカメラ 110での撮像に基づくリモコン位置記号作成部 15 6からの遠隔操作器 200の位置情報信号や、メニュー作成部 154からのメニュー表示信号と合成して、液晶表示部 3における表示を行ったが、これに限られない。

[0237] すなわち、背景 BGに時間的に大きな変動がない、あるいは、それほど厳密な背景 BGの映像を必要としない等の場合には、 1台のカメラのみを用意しておき、まずあら力じめ背景 BGのみの画像を撮影し（=上記カメラ 120と同等の機能として使用）これを適宜の録画手段に録画しておく。その後、そのカメラに赤外線フィルタをつけて遠隔操作器 200の赤外線像を撮像し（=上記カメラ 110と同等の機能として使用）、前述した録画手段に録画した画像を再生してその映像表示信号を映像合成部 130へ出力しつつ、これに対して、上記赤外線フィルタを取り付けたカメラでの撮像に基づくリモコン位置記号作成部 156からの遠隔操作器 200の位置情報信号と、メニュー作成部 154からのメニュー表示信号とを上記映像合成部 130で合成し、液晶表示部 3 における表示を行うようにしてもょ、。

[0238] この場合、実写映像につ!ヽては遠隔操作器 200や操作者 Sの存在しなヽ背景 BG のみの画像となり、これに対して操作メニュー ME及び遠隔操作器位置表示 MAが重ねて表示されることとなるが、上記実施形態と同様、位置表示 MAを操作メニュー MEのポインタとして利用し、操作者 Sが液晶表示部 3から目を離さず、遠隔操作器 2 00自体の位置移動と、う体感的 ·直感的に非常に分力りやす、動作で操作領域を容易に選択指定できるという効果を得ることができる。またカメラ力 ^台で足りることからより安価にシステムを構築できるという効果もある。

[0239] (5)反射光を利用する場合

以上においては、遠隔操作器 200自らが第 2光線としての赤外線を発光したが、これに限られず、例えば赤外線を画像表示制御装置 100側（あるいはさらに別の装置 )から投影し、遠隔操作器 200はこの赤外線を反射することで画像表示制御装置 10 0側に赤外線像や赤外線指示信号 (あるいはそれらのうち一方）を伝達するようにしても良い。この場合も上記実施形態と同様の効果を得られるとともに、遠隔操作器 20 0側に赤外線発光機能がいらなくなることから、電源を不要にできるという効果も得られる。

[0240] (6)赤外線以外の光線を使用する場合

上記においては、遠隔操作器 200の背景 BG力もカメラ 120等に入射する第 1光線を通常の可視光線、遠隔操作器 200からカメラ 110等に入射する第 2光線を赤外線としたが、これに限られない。例えば第 2光線は、可視光線と波長の異なる光（=可視光線の波長範囲外となる波長を備えた光）、たとえば紫外線等の他の光線としてもよい。また必ずしも波長などの属性が異なる必要もなぐ例えば第 1光線は連続性の通常の可視光線、第 2光線は断続的に発光される断続性の可視光線とする等、互いに態様のみが異なる同じ属性の光としてもよい。さらには例えば背景が真つ白である等、背景力到来する第 1光線がある決まった属性をとる場合に、これと異なる属性 (例えば真っ赤な色等)をとる可視光線を第 2光線に用いてもよい。要は第 2光線は第 1 光線と区別して認識可能な属性又は態様を備えていれば足り、これによつて上記同様、体感的 ·直感的に非常に分力りやす、動作で操作領域を容易に選択指定できる t 、う効果を得ることができる。

[0241] (7)他の AV機器等への適用

以上は、画像表示制御装置 100が DVDプレイヤー Zレコーダーである例を説明した力これには限られない。すなわち、画像表示制御装置 100は、ビデオデッキ、 C Dプレイヤー Zレコーダー、 MDプレイヤー Zレコーダ一等の映像出力装置、コンテンッ再生装置、その他画像表示装置 1へ映像出力機能を備えた制御装置であればよぐ例えばビデオデッキ、 CDプレイヤー Zレコーダー、 MDプレイヤー Zレコーダ一等の場合は、公知のビデオテープ、 CD、 MDの録画'再生機構やそれらビデオテープ、 CD、 MDの収納部等が筐体 101内に設けられている。

[0242] さらに、一般家庭で用いられるものにも限られず、事業所、研究所等で用いられるものに適用してもよいし、さらに固定的に配置されるものにも限られず、車両搭載用のオーディオ機器等の各種機器に適用しても良、。

[0243] (8)表示制御装置と表示装置の一体ィ匕

以上は、画像表示制御装置 100と画像表示装置 1とが別体であり、それぞれに機能分ィ匕してシステムが構成されている場合を例にとって説明した力これに限られない。すなわち、画像表示制御装置 100の機能を画像表示装置 1に組み込んだ 1つの画像表示装置として構成してもよヽ。

[0244] この場合、上記図象表示信号生成手段としてのメニュー作成部 154の機能や、位置表示信号生成手段としてのリモコン位置記号作成部 156の機能等がすべて当該画像表示装置の中に組み込まれることから、本発明の技術思想は、表示画面と、この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景力到来する第 1光線とは異なる態様又は属性を備え、前記操作器から到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が前記第 2 光線撮像手段による撮像中にぉ、て占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示装置として具現化してとらえることができる。

その他、一々例示はしないが、本発明は、その趣旨を逸脱しない範囲内において、種々の変更が加えられて実施されるものである。

Claims

請求の範囲

[1] 画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、

携帯型の操作器の背景力到来する第 1光線とは異なる態様又は属性を備え、前記操作器力も到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、

この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が前記第 2光線撮像手段による撮像中において占める位置を特定する位置特定手段と、

この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、

前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示制御装置。

[2] 請求項 1記載の画像表示制御装置において、

前記第 2光線撮像手段は、無線通信により信号送受を行う遠隔式の前記操作器から到来する前記第 2光線を、前記第 1光線と区別して認識可能であることを特徴とする画像表示制御装置。

[3] 請求項 1又は 2記載の画像表示制御装置にお、て、

前記図象表示信号生成手段は、前記操作対象図象のうち前記操作部位決定手段で決定した前記操作指定部位を、それ以外の部位と異なる態様で前記表示画面に表示するような前記図象表示信号を生成することを特徴とする画像表示制御装置。

[4] 請求項 1乃至 3のいずれか 1項記載の画像表示制御装置において、

前記操作器の背景から到来する前記第 1光線を撮影する第 1光線撮像手段を有することを特徴とする画像表示制御装置。

[5] 請求項 4記載の画像表示制御装置にお、て、

前記第 1光線撮像手段で撮影した前記操作器の背景を前記表示画面上に表示させるための映像表示信号を生成する映像表示信号生成手段を有することを特徴とする画像表示制御装置。

[6] 請求項 5記載の画像表示制御装置にお、て、

前記図象表示信号生成手段、前記位置表示信号生成手段、前記映像表示信号生成手段は、前記操作対象図象、前記操作器の位置、前記操作器の背景を、前記表示画面上にすべて重ね合わせるように表示するような、前記図象表示信号、前記位置表示信号、前記映像表示信号を生成することを特徴とする画像表示制御装置。

[7] 請求項 6記載の画像表示制御装置にお、て、

前記映像表示信号生成手段で生成した前記映像表示信号における前記操作器の背景の一部分を抽出し、前記表示画面上に拡大表示可能とするための抽出処理手段を有する

ことを特徴とする画像表示制御装置。

[8] 請求項 7記載の画像表示制御装置にお、て、

前記操作器との距離を検出する距離検出手段を有し、

前記抽出処理手段は、

前記距離検出手段の検出結果に応じて、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。

[9] 請求項 7記載の画像表示制御装置にお、て、

前記抽出処理手段は、

前記映像表示信号生成手段で生成した前記映像表示信号、若しくは、前記位置特定手段による位置特定結果に基づき認識される前記操作器の移動情報に応じて、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。

[10] 請求項 7記載の画像表示制御装置において、

前記抽出処理手段は、

前記映像表示信号生成手段で生成した前記映像表示信号において前記操作器との間に介在する障害物の映像を回避するように、前記抽出及び拡大の態様を決定することを特徴とする画像表示制御装置。

[11] 請求項 6記載の画像表示制御装置において、

前記図象表示信号生成手段で生成した前記操作対象図象の前記表示画面上における表示位置を、前記映像表示信号生成手段で生成した前記映像表示信号において前記操作器との間に介在する障害物の映像を回避するように設定するための図象位置設定手段を有する

ことを特徴とする画像表示制御装置。

[12] 請求項 6乃至 11のいずれか 1項記載の画像表示制御装置において、

前記位置特定手段による位置特定結果に基づき認識される前記操作器の移動情報に基づき、特定された位置とは異なる前記操作器の予想移動位置を設定する予想位置設定手段を有する

ことを特徴とする画像表示制御装置。

[13] 請求項 12記載の画像表示制御装置において、

前記予想位置設定手段は、

前記操作器の移動時に前記位置特定手段により順次特定される隣接する 2点の中間部となるように、前記予想移動位置を設定する

ことを特徴とする画像表示制御装置。

[14] 請求項 12記載の画像表示制御装置において、

前記予想位置設定手段は、

前記操作器の移動時に前記位置特定手段により順次特定される移動方向延長線上となるように、前記予想移動位置を設定する

ことを特徴とする画像表示制御装置。

[15] 請求項 5乃至 14のいずれか 1項記載の画像表示制御装置において、

前記第 2光線撮像手段は、前記第 2光線として、可視光線の波長範囲外となる波長を備えた光を受光し認識することを特徴とする画像表示制御装置。

[16] 請求項 15記載の画像表示制御装置において、

前記第 2光線撮像手段は、前記第 1光線としての可視光線と区別して前記第 2光線としての赤外線を認識可能な赤外線フィルタ付きカメラであることを特徴とする画像表示制御装置。

[17] 請求項 15記載の画像表示制御装置において、

前記第 2光線撮像手段は、前記第 1光線としての可視光線に対する感度よりも前記第 2光線としての赤外線に対する感度が高く設定され、前記第 1光線撮像手段を兼ねた赤外線高感度カメラであることを特徴とする画像表示制御装置。

[18] 請求項 5乃至 17のいずれか 1項記載の画像表示制御装置において、

前記第 1光線撮像手段による撮影結果と、前記第 2光線撮像手段による撮影結果とに応じて、前記位置特定手段の特定に基づく前記操作器の位置若しくは前記映像表示信号生成手段で生成した映像表示信号を補正する補正手段を有することを特徴とする画像表示制御装置。

[19] 請求項 1乃至 18のいずれか 1項記載の画像表示制御装置において、

前記操作器からの決定指示信号を入力する指示信号入力手段を有し、前記操作部位決定手段は、前記位置特定手段で特定した前記操作器の位置と、前記指示信号入力手段で入力した前記決定指示信号とに応じて、前記操作対象図象のうちの前記操作指定部位を決定することを特徴とする画像表示制御装置。

[20] 請求項 1乃至 19のいずれか 1項記載の画像表示制御装置において、

前記第 2光線撮像手段は、前記第 2光線として、前記操作器の発光した所定の光信号を受光し認識することを特徴とする画像表示制御装置。

[21] 表示画面と、

この表示画面上に、操作対象図象を表示させる図象表示制御手段と、携帯型の操作器の背景力到来する第 1光線とは異なる態様又は属性を備え、前記操作器力も到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、

この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させる位置表示制御手段と、

前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示装置。

[22] 画像表示操作を行うための携帯型の遠隔操作器であって、

通常の可視光線とは異なる態様又は属性の光信号を生成する光信号生成手段と、この光信号生成手段で生成した前記光信号を、当該光信号を前記通常の可視光線と区別して認識可能な第 2光線撮像手段;表示画面上に操作対象図象を表示させるための信号を生成する第 1手段;前記第 2光線撮像手段における前記光信号の認識結果に基づき、前記遠隔操作器の背景の映像中にぉヽて前記遠隔操作器が前記第 2光線撮像手段による撮像中にぉヽて占める位置を特定し前記表示画面上に表示させるための信号を生成する第 2手段;前記特定された前記遠隔操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定して表示するための信号を生成する第 3手段；を備えた画像表示制御装置へ送信する光信号送信手段と

を有することを特徴とする遠隔操作器。

[23] 携帯型の操作器と、この操作器の操作に基づき画像表示を行うための信号を生成する画像表示制御装置とを有する画像表示システムであって、

前記画像表示制御装置は、

画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第 1光線とは異なる態様又は属性を備え、前記操作器力も到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、この第 2光線撮像手段における前記第 2光線の認識結果に基づき、前記操作器が第 2光線撮像手段による撮像中にお、て占める位置を特定する位置特定手段と、この位置特定手段で特定した前記操作器の位置を前記表示画面上に表示させるための位置表示信号を生成する位置表示信号生成手段と、前記位置特定手段で特定した前記操作器の位置に基づき、前記表示画面上に表示された前記操作対象図象のうち操作指定部位を決定する操作部位決定手段とを有することを特徴とする画像表示システム。

[24] 携帯型の操作器と、

画像表示装置に備えられた表示画面上に、操作対象図象を表示させるための図象表示信号を生成する図象表示信号生成手段と、前記操作器の背景から到来する第 1光線とは異なる態様又は属性を備え、前記操作器力も到来する第 2光線を、前記第 1光線と区別して認識可能な第 2光線撮像手段と、

前記位置特定手段で特定した前記操作器の位置に基づき、前記操作対象図象のうち操作指定部位を決定する操作部位決定手段と

を有することを特徴とする画像表示システム。