JP4971594B2 - プログラム及び表示制御装置 - Google Patents

Description

本発明は、プログラム及び表示制御装置に関するものである。

デジタルカメラによって撮影された複数の画像を所望のレイアウトに配置する種々の方法が提案されている。例えば、予め用意されたレイアウトの中から表示する画像の枚数に応じたレイアウトを選択し、画像データおよび文字データ、図形データを挿入して配置する方法が提案されている（特許文献１参照）。また、レイアウトを指定する図柄を記述したシートと配置する画像データを指定するシートを読み込むことによってレイアウトを指定する方法も提案されている（特許文献２参照）。しかしながら、これらの提案においては、レイアウトが予め定められており、自由にレイアウトすることができない。そのため、例えば、画像同士の重なりを含むレイアウトにおいては、表示する画像の内容によっては重要な領域が重なってしまうことがある。従って、重要な領域が隠されてしまうなど、必ずしも適切でない場合がある。また、リビングに置かれたＴＶ装置にこうした画像を表示しつつ、画像内容に応じた会話を楽しむ場合など、画像内容に沿った、あるいはその場の会話に沿った、よりインタラクティブな画像の配置が望まれる。

多くのパーソナルコンピュータ向けの図形配置に関するユーザ操作技術によれば、画像データを自由にレイアウトする場合には、画像を選択する操作と、選択した画像を配置する操作とが必要となる。図１２はこうした操作のための表示の例を示す図である。図中、符号９００は画像データを自由に配置して表示するアプリケーションの表示部，符号９０１は表示する画像を選択するために、複数の候補となる画像のアイコン９０２が表示されるアイコン表示部，符号９０３は表示画面上にレイアウトされた複数の表示画像，９０４は表示画像９０３あるいはアイコン９０２のうち、操作の対象であることを示すカーソル表示である。

アイコン表示部９０１に示された画像の一つを選択し、表示部９００の任意の位置にこれを配置しようとする場合、先ず、アイコン選択モードにおいて、アイコン表示部９０１にカーソルを移し、その中から表示しようとする画像のアイコン９０２にカーソルを移動する。次にアイコン９０２を選択するための決定操作を行ってアイコン移動モードに移行した後、カーソル表示９０４のついたアイコン９０２を任意の位置に移動して、レイアウト決定操作を行い、表示状態を決定する。即ち、表示すべき画像を選択するための操作と、表示位置を決定するための操作と、二つの操作に対してそれぞれカーソルを移動する操作が必要となる。

こうした操作方法は、例えばマウスポインタやペン入力のように表示画面上を直接指定して、直接その位置に操作対象となるカーソルを移動することが可能な操作デバイスを用いた場合、比較的容易に実行することができる。

一方、テレビ受信装置あるいは家庭のリビングで使用されるＡＶ機器の場合には、表示画面の前にマウスポインタやペン入力デバイスなどを操作するためのスペースがある環境にはない。そのため、手にもってボタンを操作する形のリモコンデバイスで操作することが一般的である。

リモコンに設けられた方向ボタンによって、前述のカーソル移動操作を行おうとすると、例えば、図１２にあるカーソル表示９０４をアイコン表示部９０１のなかで移動させる
場合には、一回のボタン操作によってアイコン一つ分の移動となる。そのため、アイコン表示部９０１の中で離れた位置にあるアイコン９０２を選択するためには多くのカーソル移動操作が必要となる。また、表示部９００の中で、任意の位置に移動する際は、移動のステップごとのボタン操作が必要となる。従って、離れた位置の間を移動する操作は煩雑であり、いずれも、好適な操作系を構成することが困難となる。

その他に関連する公知技術として、特許文献３に開示されたものがある。
特開平７−１８４０３２号公報 特開平１０−５１５７６号公報 特開２００３−５１９８１号公報

本発明の目的は、ディスプレイ上に画像をレイアウトする操作の操作性を向上することである。

本発明は、上記課題を解決するために以下の手段を採用した。

本発明に係るプログラムは、画像記憶装置から第１の画像を取得するステップと、前記画像記憶装置から第２の画像を取得するステップと、前記画像記憶装置の移動を示す所定の情報を検出するステップと、前記第１の画像をディスプレイに表示するステップと、前記第２の画像を前記ディスプレイに表示するステップと、前記第１の画像及び前記第２の画像が前記ディスプレイに表示されている場合、前記画像記憶装置によって前記第２の画像が選択されることなく前記第１の画像が選択されたとき、前記所定の情報に応じて、前記ディスプレイに表示されている前記第１の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動するように前記第１の画像の表示の位置を制御するとともに、前記所定の情報に応じて、前記ディスプレイに表示されている前記第２の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動しないように制御するステップとをコンピュータに実行させるためのプログラムである。
また、本発明に係る表示制御装置は、画像記憶装置から第１の画像を取得し、前記画像記憶装置から第２の画像を取得する取得手段と、前記画像記憶装置の移動を示す所定の情報を検出する検出手段と、前記第１の画像をディスプレイに表示させ、前記第２の画像を前記ディスプレイに表示させる制御手段とを有し、前記第１の画像及び前記第２の画像が前記ディスプレイに表示されている場合、前記画像記憶装置によって前記第２の画像が選択されることなく前記第１の画像が選択されたとき、前記制御手段は、前記所定の情報に応じて、前記ディスプレイに表示されている前記第１の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動するように前記第１の画像の表示の位置を制御するとともに、前記所定の情報に応じて、前記ディスプレイに表示されている前記第２の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動しないように制御することを特徴とする。

これにより、ディスプレイを見ながら、画像記憶装置のディスプレイに対する相対的な位置を変えつつ、選択画像を所望の領域に表示させていくことで、ディスプレイ上に画像をレイアウトできる。

本発明によれば、ディスプレイ上に画像をレイアウトする操作の操作性が向上する。

以下に図面を参照して、この発明を実施するための最良の形態を、実施例に基づいて例示的に詳しく説明する。ただし、この実施例に記載されている構成部品の寸法、材質、形状、その相対配置などは、特に特定的な記載がない限りは、この発明の範囲をそれらのみに限定する趣旨のものではない。

図１〜図５を参照して、本発明の実施例１に係る画像表示方法について説明する。

本実施例においては、デジタルカメラと、デジタルカメラの撮影データを可視化して視聴する機能を有するデジタルテレビと、で構成される画像表示システムを用いた場合を例にして説明する。

図１は本発明の実施例１に係る画像表示方法に用いるデジタルテレビのブロック構成図
である。図中、符号１０１はチューナ部である。このチューナ部１０１には、図示しないデジタル放送の受信アンテナからの放送信号やＣＡＴＶの放送信号が入力される。そして、チューナ部１０１は、後述する表示制御部１１１からの制御に基づいて受信信号から所定の伝送チャンネルを選択し、受信された伝送チャンネルの受信データに対する復調、誤り訂正などを実行してトランスポートストリーム（ＴＳ）信号を出力する。符号１０２はデマルチプレクサ部である。このデマルチプレクサ部１０２は、ＴＳ信号から番組配列情報を抽出して後述の表示制御部１１１に出力するとともに、表示制御部１１１の制御に従ってＴＳ信号から目的の映像信号、音声信号、データ放送データを分離する。音声信号は映像・音声デコーダ部１０３でデコードされ、ＤＡ変換を含む音声出力部１０４から音声として出力される。映像信号は、映像・音声デコーダ部１０３でデコードされ、一旦ビデオメモリ１０７に書き込まれた後、映像合成部１０８を通じて表示器１１３に表示される。表示器１１３を構成するデバイスは、例えば液晶ディスプレイ、プラズマディスプレイを含むマトリクス電極構造を持つフラットパネルや、ブラウン管によるＣＲＴなどである。分離されたデータ放送信号は記憶部１１２へ格納され、データ放送の視聴時に表示制御部１１１へ出力するために読み出される。

符号１１０は操作入力部である。この操作入力部１１０は、赤外線信号を利用したリモコンの受信部やデジタルテレビ１００に直接設けられた操作スイッチを含み、ユーザの操作を入力して表示制御部１１１に送る。表示制御部１１１は、操作入力部１０７から受信するユーザの操作入力、デマルチプレクサ部１０２から受信する番組配列情報、あるいは記憶部１１２から読み出したデータ放送データが入力されて、次の制御を行う。すなわち、表示制御部１１１は、これらの入力データに基づいて、ユーザに提示するグラフィックデータをビデオメモリ１０７に書き込み、映像・音声デコーダ部１０３による映像信号と、後述のデジタルカメラ撮影の静止画像信号を映像合成部１０８において適宜合成し、表示器１１３に表示させる。デジタルテレビ１００は、以上の構成要素において表示制御部１１１の統合的な制御動作によってユーザの操作に基づきデジタル放送を受信することにより、目的とする放送番組を視聴することを可能とする。

また、デジタルテレビ１００において、符号１０５はメモリカード入出力部である。このメモリカード入出力部１０５は、あとで説明するデジタルカメラ２００で撮影した画像データを格納した着脱型メモリカードとの接続により、撮影された画像データと付加情報を含む画像データの入出力を行う。また、メモリカード入出力部１０５は、読み込んだデータを記憶部１１２に画像ファイルとして格納する。表示制御部１１１は予め格納されたプログラムに基づいてグラフィカルユーザインタフェースとなる表示をビデオメモリに出力して表示器１１３に表示する。更に、表示制御部１１１は、操作入力部１１０を通じて入力されるユーザ操作に従い、メモリカードから読み込んだ画像データまたは記憶部１１２に格納された画像ファイルを読み出して画像データを画像処理部１０６に送る。画像処理部１０６では画像データのデコードが行われ、ビデオメモリ１０７を介して、映像合成部１０８において操作のためのグラフィックと合成される。そして、合成された画像が表示器１１３に表示される。

また、符号１０９は無線入出力部である。この無線入出力部１０９は、後で説明するデジタルカメラ２００の無線入出力部２０８と通信し、制御データおよび画像ファイルの伝送を行う。受信したデジタルカメラの撮影画像ファイルデータはメモリカード入出力部１０５から入力された画像データと同様に画像ファイルとして記憶部１１２に格納される。また、デジタルカメラの撮影画像ファイルデータに基づく画像は、画像処理部１０６を通じて表示器１１３に表示される。無線通信の手段には、ＩＥＥＥ８０２．１１ｂによる無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（Ｒ）による近距離無線などが使用される。

デジタルテレビ１００においては、以上の構成要素において表示制御部１１１の統合的
な制御動作によって、ユーザの操作に基づきデジタルカメラ２００で撮影した画像を視聴することが可能となる。

図２は本発明の実施例１に係る画像表示方法に用いるデジタルカメラのブロック構成図である。図中、符号２０１は、レンズ、絞り、などの光学系と撮像素子、素子駆動回路などを含み、画像を電子的に撮影して非圧縮画像データを出力するデジタルカメラの撮像部である。符号２０２は非圧縮の画像データを圧縮し、また、記録メディアから後述のメモリカード入出力部２０６から読み出された圧縮画像データを伸張すると同時に表示部２０３に表示するための画像データ信号を出力する圧縮伸張部である。符号２０６はメモリカード入出力部である。このメモリカード入出力部２０６は、圧縮された画像データに必要な付加データを加えて画像ファイルを構成して、これを記録メディアであるメモリカード２０９に格納する。また、メモリカード入出力部２０６は、記録メディアから画像ファイルを読み出し表示部２０３で表示するための圧縮画像データや必要な情報を取り出す。表示部２０３は、例えば、液晶ディスプレイ（ＬＣＤ）で構成される。液晶ディスプレイに代えて、有機ＥＬディスプレイやその他の平面ディスプレイを用いることもできる。

符号２０８は無線入出力部である。この無線入出力部２０８は、デジタルテレビ１００の無線入出力部１０９と通信して、画像データおよび制御情報を送信する。画像データは、デジタルカメラ２００で撮影されてメモリカード２０９に格納された画像ファイルから制御部２０５によって読み出され、無線入出力部２０８に供給される。また、制御データは、操作入力部２０４及び位置検出部２０７から出力される情報に基づき制御部２０５によって生成されるデータである。無線通信の手段には、ＩＥＥＥ８０２．１１ｂによる無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（Ｒ）による近距離無線などが使用されることはデジタルテレビの無線入出力部１０９で述べたとおりである。

符号２０７は位置検出部である。この位置検出部２０７は、ユーザがデジタルカメラ２００本体を上下左右または前後に動かしたり、傾けたりすることでデジタルカメラ２００に対する操作入力を行うものである。本実施例においては、位置検出部にＸＹＺ三軸の加速度センサを用い、加速度センサ出力信号に応じて移動の方向、時間あたりの移動量、回転角度を出力する。

符号２０４は撮影のトリガーとなるシャッターボタンや表示画像を選択し決定するための方向／決定ボタンを始め、ユーザのデジタルカメラ２００への操作を入力する操作入力部である。

図３は本発明の実施例１に係るデジタルカメラの外観図である。なお、図３においては、上方から見た外観図（上）と裏面から見た外観図（下）を示している。この図は、上記図２を参照して説明した操作入力部２０４を構成するボタンなどの要素を説明するものである。図中、符号２２１は電源ボタンである。この電源ボタン２２１は、デジタルカメラ２００の電源の投入および遮断を操作する。符号２２２はシャッターボタンである。このシャッターボタン２２２の全押しによって撮影時の撮像動作にトリガー操作を与えるとともに、ボタンの半押しによって撮影直前に撮影のためのフォーカス動作を開始させ、撮影条件に関する表示を開始させる操作を行うボタンである。符号２２３はズームボタンであり、これにより撮影時のズーム操作を行う。また、このズームボタン２２３は、撮影画像の視聴時においては表示画像の拡大、縮小の操作を行うために用いられる。符号２２４はファインダーであり、図示しない撮像部のレンズを通して撮影範囲の確認を行うものである。符号２２５はデジタルカメラ２００の動作モードを切り替えるスイッチである。このスイッチ２２５により、撮像部２０１によって画像を撮影する撮影モード、メモリカード２０９に格納された撮影画像を液晶モニタ２２６に表示して視聴する再生モード、メモリカード２０９に格納された撮影画像をデジタルテレビ１００の表示器１１３で表示して視
聴するテレビ視聴モード、のいずれかを選択することができる。符号２２７は表示部２０３に表示される操作に関するグラフィックデータ上のフォーカスを移動して操作項目を選択し決定する操作を行うための方向ボタン及び決定ボタンである。また、符号２２６は表示部２０３を構成する液晶モニタであり、２２８はその他の操作ボタンである。

図２中、符号２０５は、これまで説明したデジタルカメラ２００の構成要素を有機的に制御して、デジタルカメラの機能をユーザに提供する制御部である。制御部２０５は、ユーザがデジタルカメラ２００を目的の撮影に適した状態に設定するためのグラフィック要素を表示部２０３に表示するとともに、操作入力部２０４を介して入力されるユーザ操作に基づいてデジタルカメラ２００の各部の動作条件を制御する。デジタルカメラ２００が撮影モードに設定されたとき、被写体に向けられた撮像部２０１への画像の入力状態を、逐次圧縮伸張部２０２を通じて表示部２０３に表示する。そのため、表示部２０３はファインダーとして機能する。また、制御部２０５は、ユーザが目的の撮影条件が整ったと判断した瞬間に操作入力部２０４のシャッターボタンを押すと、設定に応じて図示しないストロボ手段の発光を制御し、そのタイミングで撮像部２０１において撮影された画像データを圧縮伸張部２０２で圧縮する。更に、制御部２０５は、図示しないカレンダ時計から現在の日付時刻データを獲得し、デジタルカメラの情報及び撮影条件に関する情報とともに付加情報として画像ファイルを構成する。そして、制御部２０５は、当該画像ファイルを、メモリカード入出力部２０６を介してメモリカード２０９に格納する。

また、制御部２０５は、デジタルカメラ２００が再生モードに設定されたとき、メモリカード入出力部２０６を介してメモリカード２０９に格納された画像データから撮影画像データを読出し、圧縮伸張部２０２を介して表示部２０３に表示する。操作入力部２０４の左右の方向ボタン操作により、表示対象となる画像が順次変更される、また、操作入力部２０４のズームボタンの操作により、表示される画像が拡大、または縮小される。拡大表示状態にあるとき、操作入力部２０４の上下左右の方向ボタン操作により、画像データ内の表示領域を移動することができる。

デジタルカメラ２００がテレビ視聴モードにあるとき、制御部２０５の動作により、またデジタルテレビ１００の表示制御部１１１と連携して動作することによって、撮影画像を本システムのデジタルテレビ１００の表示器１１３に表示して視聴することが出来る。

図４は本発明の実施例１に係る画像表示方法の手順を示すフローチャート図である。この図においては、テレビ視聴モードにおけるデジタルカメラ２００とデジタルテレビ１００の動作を制御データ、画像データのフローを中心に説明する図である。

テレビ視聴モードは、ユーザのデジタルカメラ２００への動作モード切替操作で開始される（Ｓ１０１）。動作モードスイッチ２２５の操作を検出した制御部２０５はデジタルカメラ２００の無線入出力部２０８とデジタルテレビ１００の無線入出力部１０９を通じ、動作モードがテレビ視聴モードに設定された旨の動作モード情報通知をデジタルテレビ１００の表示制御部１１１へ通知する（Ｓ１０２〜Ｓ１０４）。デジタルカメラ２００の制御部２０５は、続いてメモリカード２０９に格納され表示の対象となる画像データをデジタルテレビ１００に送信するよう制御する（Ｓ１０５）。画像データはメモリカード２０９から無線を通じてデジタルテレビ１００の記憶部１１２に転送され、格納される（Ｓ１０６〜Ｓ１０８）。

動作モードをテレビ視聴モードに設定したユーザは、デジタルテレビ１００に表示して視聴しようとする画像をデジタルテレビ１００の液晶モニタを用いて選択する。即ち、デジタルカメラ２００の左右の方向ボタン２２７を操作すると、操作入力部２０４の出力（Ｓ１０９、Ｓ１１２）が制御部２０５で検出される。そして、制御部２０５は対象となる
画像データをメモリカードから読み出して表示部２０３で表示するよう制御する（Ｓ１１０、Ｓ１１３およびＳ１１１、Ｓ１１４）。

ユーザは表示しようとする画像を見つけると、デジタルカメラ２００をデジタルテレビ１００に向けてシャッターボタン２２２を半押しする。仮表示操作としての操作入力部２０４の出力は制御部２０５で検出される（Ｓ１１５）。そして、無線を通じてデジタルテレビ１００の表示制御部１１１に、選択された画像を指定する情報と仮選択操作が行われたことが通知される（Ｓ１１６〜Ｓ１１８）。表示制御部１１１は指定された画像の画像データを記憶部１１２から読出し、画像処理部１０６を通じて表示器１１３に表示されるよう制御する（Ｓ１１９〜Ｓ１２０）。ここで、画像が表示器１１３に表示されるとは、画像が表示器１１３上の一部の領域に表示されること、すなわち、表示器１１３の表示領域の外周内における一部の領域に画像が表示されることをいう。

デジタルテレビ１００の表示器１１３に目的の画像が表示された状態で、ユーザがデジタルカメラ２００の本体を上下および左右に移動させることにより、表示器１１３に表示された画像の表示位置を調整することができる。即ち、デジタルカメラ本体の位置検出部２０７で検出されるデジタルカメラ２００の移動量に基づき制御部２０５から位置情報が無線を通じてデジタルテレビ１００の表示制御部１１１に通知される（Ｓ１２１〜Ｓ１２４）。表示制御部１１１は通知された位置情報をもとに、ビデオメモリ１０７及び映像合成部１０８を制御して表示器１１３上に表示される画像データの表示位置を制御する（Ｓ１２５）。位置情報の通知はデジタルカメラ２００の移動検出ごと、または一定時間ごとに繰り返し行われ（Ｓ１２６〜Ｓ１３０及びＳ１３１〜Ｓ１３５）、ユーザは表示器１１３上の所望の表示位置に画像を移動させることができる。

ユーザが半押し状態に操作していたシャッターボタン２２２を全押しすることにより、表示器１１３上の画像の表示位置を決定することできる。即ち、シャッターボタン２２２の全押しを、制御部２０５が検出した場合（Ｓ１３６）、無線を通じ表示位置決定通知をデジタルテレビ１００の表示制御部１１１に通知する（Ｓ１３７〜Ｓ１３９）。表示制御部１１１はこの通知に基づき、ビデオメモリ１０７及び映像合成部１０８を制御して表示器１１３上に表示される画像データの表示位置を決定する（Ｓ１４０）。

図５は本発明の実施例１に係る画像表示方法の具体的手順の説明図である。すなわち、図５は上述したデジタルカメラ本体の移動と表示器１１３上の画像表示位置の変化を説明する図である。図５（ａ）はデジタルテレビ１００とデジタルカメラ２００の位置関係を示す図である。この図においては、デジタルカメラ２００をデジタルテレビ１００の表示面に対向した位置で上下左右、あるいは回転方向に移動させると、デジタルテレビ１００の表示器１１３に表示された画像の表示位置も同じ方向に移動することを示している。また、デジタルカメラ２００の左右ボタンによって液晶モニタ上で表示対象となる画像を選択することができ（同図（ｂ））、シャッターボタン２２２の半押しによってデジタルテレビ１００の表示器１１３に選択した画像（図では画像Ｂ）を表示させることができ（同図（ｃ））、デジタルカメラ２００の移動によって選択画像の表示位置を移動させることができる（同図（ｄ））。また、デジタルカメラ２００の回転によって表示方向を回転させることができ（同図（ｅ））、デジタルテレビ１００に近づける動作によって他の画像との重なり関係をより下側になるようにすることができる（同図（ｆ））。つまり、重なった領域部分においていずれの画像を表示させるかを選ぶことができる。更に、シャッターの全押しによって表示状態の決定を行うことができる（同図（ｇ））。図５において、選択して位置調整の対象となった画像（図の画像Ｂ）には、表示された画像の周囲を着色し、操作対象であることを示している。こうしたフォーカス表示は表示状態を決定した時点で終了する（同図（ｇ））。図５においては、他の画像（図の画像Ａ）との重なり関係をより下側に変更する動作を示したが、デジタルカメラ２００をデジタルテレビ１００か
ら遠ざける動作によって、より上に重なるように変更することも可能である。

図４に戻り、デジタルカメラ２００において、既にデジタルテレビ１００に表示された画像を選択した場合の動作について説明する。図において、ユーザの操作入力によってデジタルカメラ上の液晶モニタ上で画像が選択され（Ｓ１５１〜Ｓ１５７）、制御部２０５から無線を介してデジタルテレビ１００の表示制御部１１１に選択画像の指定情報および仮選択操作が通知される。このとき、指定された画像がデジタルテレビ１００の表示器１１３において既に表示されている画像であった場合には、表示制御部１１１は既に表示されている画像を表示位置制御の対象とする（Ｓ１６１〜Ｓ１６３）。そして、その後通知されるデジタルカメラ２００の位置情報によって、指定された画像の既に決定された位置を移動して表示する（Ｓ１６４〜Ｓ１７８）。

デジタルカメラ２００の位置に応じて画像の表示位置を移動する仮選択表示状態において、ユーザがデジタルカメラ２００のズームボタン２２３を操作した場合、操作入力部２０４の出力（Ｓ１７９）を検出した制御部２０５は、無線を介してデジタルテレビの表示制御部１１１へズーム操作を表示制御情報として通知する（Ｓ１８０〜Ｓ１８２）。表示制御部１１１は画像処理部１０６を通じて表示する画像の拡大、または縮小画像を作成し、ビデオメモリ１０７、映像合成部１０８を介して表示器１１３に拡大、または縮小画像を表示させる（Ｓ１８３〜Ｓ１８４）。このとき、デジタルカメラ２００の制御部２０５は液晶モニタにも同様の拡大、または縮小画像を表示させる。

また、拡大縮小操作中にユーザが方向ボタン２２７を操作した場合、同様の経路を通じて表示制御部１１１に表示制御情報を通知する（Ｓ１８５〜Ｓ１８８）。表示制御部１１１では、拡大，縮小表示の中心位置を調整し、表示器１１３に表示する画像中の表示領域を変更する（Ｓ１８９〜Ｓ１９０）。ユーザがデジタルカメラ２００のシャッターボタン２２２を全押しする操作によって、こうした表示状態が決定され、デジタルテレビ１００の表示器１１３上の表示状態が固定される（Ｓ１９１〜Ｓ１９５）ことは、すでに説明した通りである。

以上説明したとおり、本実施例のシステムにおいては、複数の撮影した画像を格納しているデジタルカメラにおいて表示の対象となる画像を選択し、画像を表示するデジタルテレビの表示器上で、デジタルカメラとデジタルテレビとの相対位置に応じた位置に選択した画像を表示するステップと、さらにデジタルカメラ上で選択した別の画像をデジタルカメラとデジタルテレビの他の相対位置に表示するステップと、を有する。これにより、デジタルテレビの表示画面上で表示の対象となる画像を選択するための操作が不要となる。従って、リビングなどに設置され机など平面スペースがなく、マウスやペン入力など直接平面内の位置を指定できる入力デバイスが使用できない操作環境においても、簡便な操作による複数の画像のレイアウトを実現することができる。

また、画像データを選択して液晶モニタに表示させたデジタルカメラ本体を、直接移動することで、デジタルテレビの表示器上の画像位置を移動させることができる。従って、あたかも掌中にある複数の写真カードの束から目的の写真カードを一番表に移し、この写真カードの束を直接動かして表示したい場所に置くことができるかのような操作が可能となり、現実の模倣による直感的で判りやすい操作をすることができる。

本実施例の説明においては、デジタルカメラのメモリカードに格納された画像データを、操作の開始時に一括して転送し、デジタルカメラ上の画像選択時には選択情報のみを通知するとして説明した。これは、画像の選択からデジタルテレビ上への画像表示までに要する時間を短縮するために採用した構成である。ただし、画像データの転送が充分な性能であれば、ユーザ操作による画像の選択の度に画像データを転送する構成を採用すること
も可能である。

また、画像データの一括転送の方法は、表示対象となる複数の画像データを格納したメモリカードなどのリムーバブルメディアを、操作の開始時、あるいはそれ以前に予めデジタルカメラからデジタルテレビに移して接続してもよい。また、無線による一括転送であって、デジタルカメラとデジタルテレビとが無線を通じてお互いを認識した時点で、動作モードがテレビ視聴モードに操作される前に画像データを予め転送し、デジタルテレビの記憶部に格納してもよい。

また、無線通信には赤外線を用いた方法も利用することができる。ただし画像データの転送に時間を要するため、予め画像データを転送する手段や、メモリカードによって予め画像データを移動するなどの手段と併用するとより効果的である。また、デジタルカメラの移動を妨げない範囲においてであれば、有線による接続を用いた通信であっても本発明の趣旨を損なうものではない。

図６〜図１１を参照して、本発明の実施例２に係る画像表示方法について説明する。

本実施例においては、デジタルカメラとデジタルビデオカメラを接続し、デジタルカメラの撮影画像を可視化して視聴する機能を有するデジタルテレビ同士をネットワークで接続し、デジタルカメラの撮影画像の視聴を共有するシステムを用いた場合を例にして説明する。

図６は本発明の実施例２に係る画像表示方法に用いるシステム全体の構成図である。図６において、符号３０１は、アンテナ３０２を通じて放送波を受信しテレビ番組を視聴するデジタルテレビ（１）である。デジタルテレビ（１）３０１は、無線通信手段で接続されたデジタルカメラ（１）３０４からの撮影画像データを受信し、これを表示する機能を有する。また、デジタルテレビ（１）３０１は、デジタルビデオインタフェースを通じて接続されたデジタルビデオカメラ（１）３０３が撮影するユーザの様子を撮影した映像データとデジタルカメラ（１）３０４の撮影画像データを、接続されたネットワーク３２０（インターネット）に送信する機能を持つ。ネットワーク３２０には、同様のデジタルテレビ（２）３１１が接続され、デジタルテレビ（２）３１１は受信した映像データおよび画像データを表示する。このように、デジタルテレビ（２）３１１は、そのユーザに対して、デジタルテレビ（１）３０１のユーザとともにデジタルカメラ（１）３０４の撮影画像の視聴を共有させる機能を持つ。

デジタルテレビ（２）３１１はデジタルテレビ（１）３０１同様の構成を有している。すなわち、デジタルテレビ（２）３１１はアンテナ３１２を通じて放送波を受信してテレビ番組視聴を行わせる機能と、無線接続されたデジタルカメラ（２）３１４の撮影画像データを受信して視聴させる機能と、デジタルビデオインタフェースを通じて接続されたデジタルビデオカメラ（２）３１３が撮影するユーザの様子を撮影した映像データとデジタルカメラ（２）３１４の撮影画像データをネットワーク３２０に送信する機能を有する。一方、デジタルテレビ（１）３０１は、受信したこれらの映像データおよび画像データを表示させ、その視聴をデジタルテレビ（２）３１１のユーザと共有させる機能を持つ。

図７は本発明の実施例２に係る画像表示方法に用いるデジタルテレビのブロック構成図である。図中、符号３２１はチューナ部である。このチューナ部３２１には、デジタルテレビ放送の受信アンテナ（図１０に示したアンテナ３０２）からの放送信号やＣＡＴＶの放送信号が入力される。そして、チューナ部３２１は、後述する制御部３３０からの制御に基づいて受信信号から所定の伝送チャンネルを選択し、受信された伝送チャンネルの受
信データに対する復調、誤り訂正などを実行しトランスポートストリーム（ＴＳ）信号を出力する。符号３２２はデマルチプレクサ部であり、ＴＳ信号から番組配列情報を抽出して後述の制御部３３０に出力するとともに、制御部３３０の制御に従ってＴＳ信号から目的の映像信号、音声信号、データ放送データを分離する。音声信号は映像・音声デコーダ部３２３でデコードされ、ＤＡ変換を含む音声出力部３２４から音声として出力される。映像信号は映像・音声デコーダ部３２３でデコードされ、映像合成部３２７に含まれるビデオメモリに書き込まれた後、映像合成部３２７を通じて表示部３２９に表示される。表示部３２９を構成するデバイスは、例えば液晶ディスプレイ、プラズマディスプレイを含むマトリクス電極構造を持つフラットパネルや、ブラウン管によるＣＲＴなどである。

分離されたデータ放送信号は記憶部３３１へ格納され、データ放送の視聴時に制御部３３０に再び読み出される。

符号３３２は操作入力部である。この操作入力部３３２は、赤外線信号を利用したリモコンの受信部やデジタルテレビ（１）３０１に直接設けられた操作スイッチを含み、ユーザの操作を入力して制御部３３０に送る。制御部３３０は操作入力部３３２から受信するユーザの操作入力、デマルチプレクサ部３２２から受信する番組配列情報、あるいは記憶部３３１から読み出したデータ放送データが入力されて、次の制御を行う。すなわち、制御部３３０は、これらの入力データに基づいて、ユーザに提示するグラフィック信号を映像合成部３２７に含まれるビデオメモリに書き込み、映像・音声デコーダ部３２３による映像信号と、後述のデジタルカメラ撮影の静止画像信号を合成し、表示部３２９に表示させる。デジタルテレビ（１）３０１は、以上の構成要素において制御部３３０の統合的な制御動作によって、ユーザの操作に基づきデジタル放送を受信することにより、目的とする放送番組を視聴することを可能とする。

また、デジタルテレビ（１）３０１において、符号３３３はメモリカード入出力部である。このメモリカード入出力部３３３は、あとで説明するデジタルカメラ（１）３０４で撮影した画像データを格納した着脱型メモリカードとの接続により、撮影された画像データと付加情報を含む画像データの入出力を行う。また、メモリカード入出力部３３３は読み込んだデータを記憶部３３１に画像ファイルとして格納する。制御部３３０は予め格納されたプログラムに基づいてグラフィカルユーザインタフェースとなる表示をビデオメモリに出力して表示部３２９に表示する。更に、制御部３３０は操作入力部３３２を通じて入力されるユーザ操作に従い、メモリカードから読み込んだ画像データまたは記憶部３３１に格納された画像ファイルを読み出して画像データを静止画デコーダ部３２６に送る。静止画デコーダ部３２６では圧縮符号化された画像データのデコードが行われ、画像処理部３２８により必要に応じて縮小拡大処理が施された後、映像合成部３２７において操作のためのグラフィックと合成される。そして、合成された画像が表示部３２９に表示される。

また、符号３３４は無線入出力部である。この無線入出力部３３４は、後で説明するデジタルカメラ（２）３１４の無線入出力部２０８と通信し、制御データおよび画像ファイルの伝送を行う。受信したデジタルカメラの撮影画像ファイルデータはメモリカード入出力部３３３から入力された画像データと同様に画像ファイルとして記憶部３３１に格納され、同様の信号処理を通じて表示部３２９に表示される。無線通信の手段には、ＩＥＥＥ８０２．１１ｂによる無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（Ｒ）による近距離無線などが使用される。

デジタルテレビ（１）３０１においては、以上の構成要素において制御部３３０の統合的な制御動作によって、ユーザの操作に基づきデジタルカメラで撮影した画像を視聴することが可能となる。

また、符号３３５はデジタルビデオインタフェース部である。このデジタルビデオインタフェース部３３５は、デジタルビデオカメラ（１）３０３との接続により、デジタルビデオカメラ（１）３０３の制御のための通信、およびデジタルビデオデータの通信を行う。制御部３３０はユーザに提示するグラフィックによるデジタルビデオカメラ（１）３０３の操作パネルを表示部３２９に表示する。そして、ユーザはリモコンによって操作パネル上のグラフィック要素を操作することによって、デジタルビデオカメラ（１）３０３を操作することができる。即ち、制御部３３０は操作パネルの表示に対して操作入力部３３２を通じて入力されるユーザの操作入力に基づき、デジタルビデオカメラ（１）３０３の制御コマンドを生成し、これを、デジタルビデオインタフェース部３３５を通じてデジタルビデオカメラ（１）３０３へ送信する。デジタルビデオカメラ（１）３０３はこのコマンドに応じて記録されたビデオ映像データ、またはビデオカメラで撮影されたビデオ映像データを送信する。そして、デジタルビデオインタフェース部３３５を通じて受信されたビデオ映像データは、映像・音声デコーダに送られ音声出力部３２４および表示部３２９を通じて映像と音声が再生される。

デジタルビデオカメラ（１）３０３の接続には、例えばＩＥＥＥ１３９４に定める高速シリアル通信を用いることが出来る。デジタルビデオカメラ（１）３０３は、例えば１３９４ Ｔｒａｄｅ Ａｓｓｏｃｉａｔｉｏｎが定めるＡＶ／Ｃ Ｃａｍｅｒａ Ｓｕｂｕｎｉｔ ＳｐｅｃｉｆｉｃａｔｉｏｎおよびＡＶ／Ｃ Ｔａｐｅ Ｒｅｃｏｒｄｅｒ／Ｐｌａｙｅｒ Ｓｕｂｕｎｉｔ Ｓｐｅｃｉｆｉｃａｔｉｏｎに基づくコマンドセットによって制御され、ＩＥＣ６１８８３ Ｃｏｎｓｕｍｅｒ ａｕｄｉｏ／ｖｉｄｅｏ ｅｑｕｉｐｍｅｎｔ−Ｄｉｇｉｔａｌ ｉｎｔｅｒｆａｃｅに従って映像信号を転送する。

以上の構成要素において制御部３３０の統合的な制御動作によって、ユーザの操作に基づきデジタルビデオカメラによる映像および音声をデジタルテレビ（１）３０１で視聴することが可能となる。

図８は本発明の実施例２に係る画像表示方法に用いるデジタルカメラのブロック構成図である。デジタルカメラ（１）３０４においては、上記実施例１におけるデジタルカメラ２００とほぼ同様の構成を持ち、同様の動作を行う。図８において上記実施例１で説明したデジタルカメラ２００と同一の構成であり、かつ同一の機能（動作）行う部材には同一の符号を付与して、その説明は省略する。デジタルカメラ２００との相違は、位置検出部を持たない点にある。従って、制御部３０５は位置検出部の制御機能を持たず、デジタルカメラ（１）３０４の位置変化に関する通信をデジタルテレビ３０４と行わない点において、実施例１におけるデジタルカメラ２００の制御部２０５と異なっている。

以上、デジタルテレビ（１）３０１とデジタルカメラ（１）３０４について説明した。ここで、デジタルテレビ（２）３１１はデジタルテレビ（１）３０１と同一の構成を持ち、同様の動作を行うものである。また、デジタルカメラ（２）３１４はデジタルカメラ３０１と同一の構成を持ち、同様の動作を行うものである。従って、これらの説明は省略する。デジタルテレビ（１）３０１およびデジタルテレビ（２）３１１は、放送番組を視聴する動作、デジタルカメラの画像を視聴する動作、デジタルビデオカメラの映像を視聴する動作に加え、ネットワークを通じて相互に接続し、双方のユーザの姿を互いに相手のデジタルテレビに示し、デジタルカメラの画像視聴を共有する動作を行うことができる。本実施例においては、この動作を同期視聴動作と呼ぶ。

デジタルカメラ３０４の構成は、上記実施例１で図３に示すデジタルカメラ２００と基本的に同一であるので、同一の構成部分に同一の符号を付して、その説明は省略する。

図９は本発明の実施例２に係る画像表示方法の手順を示すフローチャート図である。この図は本実施例のシステムにおける同期視聴動作について、デジタルテレビ（１）および（２）、デジタルカメラ（１）および（２）、デジタルビデオカメラ（１）および（２）の間の制御データ、画像データ、映像データのフローを中心に説明する図である。

デジタルテレビの同期視聴動作はデジタルカメラへの動作モード切替操作で開始される。デジタルテレビ（１）３０１のユーザ（１）がデジタルカメラ（１）３０４のスイッチ２２５をテレビ視聴モードに設定する（Ｓ２００）。これをデジタルカメラ（１）３０４が検出すると、デジタルカメラ（１）３０４は無線を通じデジタルテレビ（１）３０１へ通知する（Ｓ２０１）。デジタルテレビ（１）３０１では通知を受けた制御部３３０がネットワークインターフェース部３３８を介し、ネットワーク３２０を通じて動作モード情報としてデジタルテレビ（２）３１１へ通知する（Ｓ２０２）。この通知を受けたデジタルテレビ（２）３１１ではデジタルビデオインタフェース部を通じてデジタルビデオカメラ（２）３１３へコマンドによるビデオ制御信号を送り（Ｓ２０２）、デジタルビデオカメラ（２）３１３に撮影したビデオ映像信号を出力させる（Ｓ２０３）。これを受信したデジタルテレビ（２）３１１は、ネットワーク２２０を通じてデジタルテレビ（１）３０１へビデオ映像信号を転送する。そして、デジタルテレビ（１）３０１ではネットワークインターフェース部３３８でこれを受信する。そして、受信したビデオ映像信号はデマルチプレクサを介し映像・音声デコーダ部へ送られ、音声出力部３２４と表示部３２９で出力される。即ち、デジタルテレビ（２）３１１のユーザ（２）の様子を撮影した映像データがデジタルテレビ（１）３０１へ送信され、表示される。

デジタルテレビ（１）３０１では、ユーザ（２）のビデオ映像の表示を開始するとともに、デジタルビデオカメラ（１）３０３へデジタルビデオインタフェースを通じてコマンドによるビデオ制御信号を送り（Ｓ２０５）、デジタルビデオカメラ（１）３０３で撮影したビデオ映像信号を出力させる（Ｓ２０６）。これを受信したデジタルテレビ（１）３０１は、ネットワーク２２０を通じてデジタルテレビ（２）３１１へビデオ映像信号を転送する（Ｓ２０７）。そして、デジタルテレビ（２）３１１ではデジタルテレビ（１）３０１と同様の動作によってビデオ映像の出力を行う。即ち、デジタルテレビ（１）３０１のユーザ（１）の様子を撮影した映像データがデジタルテレビ（２）３１１へ送信され、表示される。こうしてユーザ（１）とユーザ（２）は、デジタルテレビ（１）３０１とデジタルテレビ（２）３１１によってお互いの姿を映像で見ながら会話を行う、所謂テレビ会議のような状況を開始することができる。

次に、ユーザ（１）は、手元のデジタルカメラ（１）３０４の液晶モニタを用いて視聴しようとする画像を選択する。即ち、デジタルカメラ（１）３０４の左右の方向ボタン２２７を操作し、液晶モニタに表示される画像を順に変更する（Ｓ２０８〜Ｓ２０９）。ユーザ（１）は表示しようとする画像を見つけるとデジタルカメラ（１）３０４をデジタルテレビ（１）３０１に向けて、デジタルカメラ（１）３０４のシャッターボタン２２２を半押しする。デジタルカメラ（１）３０４では検出された操作をデジタルテレビ（１）３０１に通知する（Ｓ２１１）とともに、該当する画像の画像データをデジタルテレビ（１）３０１へ無線を通じて送信する（Ｓ２１３）。デジタルテレビ（１）３０１では、デジタルテレビ（２）３１１に対しネットワークを通じて仮選択された画像に関する情報を通知する（Ｓ２１２）とともに、受信した画像データを送信する（Ｓ２１４）。デジタルテレビ（２）３１１においては、ネットワークインターフェース部３３８で受信した画像データを一旦記憶部３３１に格納する。

デジタルカメラ（１）３０４から仮選択の通知を受けったデジタルテレビ（１）３０１においては、制御部３３０の制御において仮選択送信動作を行う。即ち、デジタルビデオカメラ（１）３０３から入力される映像データの中からデジタルカメラ（１）３０４の位
置（デジタルテレビ（１）３０１に対する位置）を検出し、位置情報としてデジタルテレビ（２）３１１へ通知する。

映像データからデジタルカメラ（１）３０４の位置情報を抽出する機能は、デジタルテレビ（１）３０１の画像パターン検出部３３６で行われる。画像パターン検出部３３６はデジタルビデオインタフェース部３３５で受信されるデジタル映像データをデコードし、フレームごとの映像のなかから予め登録されたデジタルカメラ（１）３０４の外観を示す画像パターンを検出し、フレーム平面内の位置情報および傾き情報として制御部３３０に通知する。制御部３３０は他の操作入力を加味しつつ、ネットワークインターフェース部３３８を通じ、位置情報通知としてデジタルテレビ（２）３１１へ送信する。

仮選択の通知を受け取ったデジタルテレビ（２）３１１においては、制御部３３０の制御において仮選択受信動作を行う。即ちデジタルテレビ（１）３０１から受信した画像データを、継続して受信する位置情報通知に基づいてデジタルテレビ（１）３０１から受信する映像データに重畳して表示する。

仮選択受信操作においてデジタルテレビ（２）３１１の制御部３３０は、ネットワークを通じて受信し、かつ記憶部３３１に格納した画像データを、静止画デコーダ部３２６に送り、圧縮符号化された画像を展開する。画像処理部３２８へ送られた非圧縮の画像データは、後で説明する表示制御通知に基づくズーム設定に従い画像データの拡大または縮小処理が行われ、映像合成部３２７のビデオメモリに書き込まれる。映像合成部３２７においては、通知された位置情報で指定された映像データのフレーム内位置に画像データを合成して、表示部３２９へ出力する。表示部３２９においては、映像データ内に写されたデジタルカメラ（１）３０４の画像の位置に、ユーザ（１）がデジタルカメラ（１）３０４で選択した撮影画像が合成されて表示される。

次に、ユーザ（１）は、選択した画像が所望の位置に達したとき、デジタルカメラ（１）３０４のシャッターボタン２２２を全押しして、画像の表示位置を決定する。即ち、シャッターボタン２２２の全押し操作（Ｓ２１８）は無線を介してデジタルテレビ（１）３０１へ通知される。デジタルテレビ（１）３０１は、ネットワークを通じてデジタルテレビ（２）３１１へ表示位置決定通知として送信する。デジタルテレビ（２）３１１においては、制御部３３０が、ネットワークインターフェース部３３８で受信した表示位置決定通知に基づき、映像合成部３２７に対して映像データに対する画像データの合成位置を現在の位置で固定するように制御する。以後、映像データ内に写されたデジタルカメラ（１）３０４の位置が変化しても、合成される画像の位置はそれに追従しない。表示部３２９においては、固定した位置に画像が表示され、その後ろでユーザ（１）の姿を写した映像が表示される。

図１０及び図１１は本発明の実施例２に係る画像表示方法にしたがって画像表示を行っている様子の一例を示す模式図である。すなわち、図１０及び図１１は、上記の動作におけるユーザの動作とデジタルテレビの表示の状態を模式的に示したものである。図１０は、デジタルテレビ（１）３０１とデジタルテレビ（２）３１１における表示レイアウトと、デジタルカメラ（１）３０４の動きに対するデジタルテレビ（２）３１１上の画像データの表示位置との関係を示している。図中、符号４０１はユーザ（１）であり、右手にデジタルカメラ（１）３０４を持ち、デジタルテレビ（１）３０１の表示を見ている様子がデジタルビデオカメラ３０３によって撮影されている。図示されないが、デジタルカメラ（１）３０４のシャッターボタンは半押し状態である。デジタルカメラ（１）３０４の液晶モニタ４０２にはユーザ（１）４０１が選択した操作した画像Ａが表示されている。デジタルテレビ（１）３０１の表示部には相手ユーザの様子（４０３）が表示され、子画面４０４には相手デジタルテレビに表示される自分の様子がモニタとして表示されている。

一方、４２０はユーザ（２）であり、デジタルテレビ（２）３１１の表示を見ている様子がデジタルカメラ３１３によって撮影されている。デジタルテレビ（２）３１１の表示器には相手ユーザであるユーザ（１）の様子（４２２）が表示され、子画面４２１には相手デジタルテレビに表示される自分の様子がモニタとして表示されている。相手ユーザの様子（４２２）において、ユーザ（１）が右手に持つデジタルカメラ（１）３０４の位置には、ユーザ（１）４０１がデジタルカメラ（１）３０４で選択した画像（Ａ）４２２が表示されている。

今、ユーザ（１）４０１が右手に持ったデジタルカメラ（１）３０４をデジタルテレビ（１）３０１の表示面に対しおよそ平行な面内で上または右に移動させる。デジタルビデオカメラ３０３が撮影する映像中のデジタルカメラ（１）３０４の位置は上または左に移動するので、デジタルテレビ（２）３１１に表示される画像Ａ（４２２）の位置は表示面内で上または左に移動する。即ち、デジタルテレビ（２）３１１に合成表示されるユーザ（１）４０１の様子は、デジタルカメラ（１）３０４の代りに選択した画像Ａを持ってユーザ（２）４２０に示しているようかの様に表示される。デジタルカメラ（１）３０４をデジタルテレビ（１）３０１の表示面に対しおよそ平行な面内で回転させた場合も同様である。この様子はデジタルテレビ（１）３０１の子画面４０４によって表示されるので、ユーザ（１）は合成された映像画面の効果を確かめながらデジタルカメラ（１）３０４を操作することができる。

図１１における（ａ）から（ｇ）は、ユーザ（１）４０１がデジタルカメラ（１）３０４で画像Ｂを選択し、仮選択状態で表示位置を調整して、表示位置を決定するまでのユーザの様子とデジタルテレビの表示状態を模式的に示した図である。図の最左列はデジタルテレビ（１）３０１に正対し、デジタルビデオカメラ（１）３０３に撮影されるユーザ（１）の姿を後ろから見た様子、次の第２列はデジタルテレビ（１）３０１の表示の様子、第３列はデジタルテレビ（２）３１１の表示の様子、最右列はデジタルテレビ（２）３１１に正対し、デジタルビデオカメラ（２）３１３に撮影されるユーザ（２）４２０の姿を後ろから見た様子を模式的に示すものである。

同図（ａ）において、ユーザ（１）４０１はデジタルカメラ（１）３０４の左右ボタンによって液晶モニタ上で表示対象となる画像（Ｂ）を選択する。この様子を表示するデジタルテレビ（２）３１１の表示には、それ以前の操作によって表示された画像（Ａ）が表示され、デジタルカメラ（１）３０４の像が表示されている。ユーザ（１）４０１のシャッターボタンの半押しによって、デジタルテレビ（２）３１１においてはデジタルカメラ（１）３０４の位置に選択した画像（図ではＢ）を表示させることができる（同図（ｂ））また、ユーザ（１）がデジタルカメラ（１）３０４を移動することによって選択画像の表示位置を移動でき（同図（ｃ））、また、デジタルカメラ（１）３０４の回転によって画像（Ｂ）の表示方向を回転できる（同図（ｄ））。また、デジタルカメラ（１）３０４の他の操作入力によって、デジタルテレビ（２）３１１に表示された他の画像（Ａ）との重なり関係をより下側になるように制御でき（同図（ｅ））、シャッターの全押しによって表示状態を決定できる（同図（ｆ））ことを示している。図の（ｆ）においてはデジタルテレビ（２）３１１に表示されるデジタルカメラ（１）３０４の像が画像（Ｂ）の裏側に隠れているが、表示状態を決定した時点で画像（Ｂ）の表示位置は固定されており、デジタルカメラ（１）３０４を移動させれば、その像はデジタルテレビ（２）３１１の表示上に現れる（同図（ｇ））。

図において選択して位置調整の対象となった画像（図のＢ）には、表示された画像の周囲を着色し、操作対象であることを示している。こうしたフォーカス表示は表示状態を決定した時点で終了する（同図（ｆ））。図の（ｅ）においては、他の画像（Ａ）との重な
り関係をより下側に変更する動作を示したが、デジタルカメラ（１）３０４における同様の操作入力によって、他の画像より上に重なるように変更することも可能である。

図９に戻り、デジタルカメラ（１）３０４において、既にデジタルテレビ（２）３１１に表示された画像を選択した場合の動作について説明する。図において、ユーザの操作入力によってデジタルカメラの液晶モニタ上で画像が選択され（Ｓ２５０〜Ｓ２５２）、デジタルカメラ（１）３０４から無線を介してデジタルテレビ（１）３０１に当該画像が通知される（Ｓ２５３）。このとき、指定された画像がデジタルテレビ（２）３１１において既に表示する指定を通知した画像であった場合には、デジタルテレビ（１）３０１はネットワークを通じて選択画像の指定情報および仮選択操作をデジタルテレビ（２）３１１に送信する（Ｓ２５４）が、通知とともにデジタルカメラ（１）３０４から受信した画像データをデジタルテレビ（２）３１１へは送信しない。画像選択および仮選択通知を受信したデジタルテレビ（２）３１１では、制御部３３０の制御において既に表示されている画像を表示位置制御の対象として、その後通知される位置情報（Ｓ２５６〜２５８）によって、指定された画像を既に決定された位置から通知された位置情報に従った位置に移動して表示する。

デジタルカメラの位置に応じて画像の表示位置を移動する仮選択表示状態において、ユーザがデジタルカメラ（１）３０４のズームボタン２２３を操作した場合（Ｓ２５９）、デジタルカメラ（１）３０４は無線を介してデジタルテレビ（１）３０１へズーム操作を通知し（Ｓ２６０）、デジタルテレビ（１）３０１はネットワークを通じデジタルテレビ（２）３１１へ表示制御情報として通知する（Ｓ２６１）。デジタルテレビ（２）３１１では、制御部３３０の制御において、画像処理部３２８を制御し表示する画像の拡大、または縮小画像を作成し、映像合成部３２７を介して表示部３２９に拡大、または縮小画像を表示する。このとき、デジタルカメラ（１）３０４の制御部３０５は液晶モニタにも同様の拡大、または縮小画像を表示する。

また、拡大縮小操作中にユーザが方向ボタン２２７を操作した場合（Ｓ２６２）、同様の経路を通じてデジタルテレビ（２）３１１に表示制御情報を通知する（Ｓ２６３〜Ｓ２６４）。そして、デジタルテレビ（２）３１１では、制御部３３０の制御において映像合成部３２７で拡大、縮小表示の中心位置を調整し、表示部３２９に表示する画像中の表示領域を変更する。ユーザがデジタルカメラ（１）３０４のシャッターボタン２２２を全押しする操作によって（Ｓ２６５）こうした表示状態が決定され、デジタルテレビ（２）３１１における表示部３２９の画像合成の位置が固定される（Ｓ２６６〜Ｓ２６７）ことは、すでに説明した通りである。

以上説明したとおり、本実施例のシステムにおいては、ネットワークを介して接続され、デジタルビデオカメラを接続してユーザの姿を撮影した映像データを、ネットワークを通じて相互に通信して表示し、映像によるコミュニケーションを実現するデジタルテレビシステムにおいて、一方のデジタルテレビの前で撮影されるユーザが持つデジタルカメラの相対位置を映像データ内で検出し、このユーザがデジタルカメラが格納する複数の撮影画像から表示の対象となる画像を選択し、他方のデジタルテレビにおいては、映像データ内で検出された相対位置に応じた位置に選択された画像データを合成して表示するステップと、さらにデジタルカメラで選択された別の画像データを、検出された別の相対位置に合成して表示するステップとを有する。これにより、ユーザが他方のデジタルテレビの表示画面上で表示の対象となる画像を選択する際、表示画面上での選択操作が不要となる。従って、デジタルテレビが家庭内で好適に設置されるリビングルームなどで机などの平面スペースがなく、マウスやペン入力など表示平面内の位置を指定する入力デバイスが使用できない操作環境においても、簡便な操作を実現することが可能となり、よりスムーズな映像コミュニケーションを図ることが可能となる。

また、画像データを選択して液晶モニタに表示させたデジタルカメラ本体を、直接移動することで、合成表示上の画像位置を移動させることができる。従って、あたかも掌中にある複数の写真カードの束から目的の写真カードを一番表に移し、この写真カードの束を直接動かして表示したい場所に置くことができるかのような操作が可能となり、現実の模倣による直感的で判りやすい操作をすることができる。

本実施例の説明においては、デジタルカメラのメモリカードに格納された画像データを、画像選択操作の度にネットワークを通じて送信するものとして説明した。これは、メモリカードに格納された画像データの総データ量が多く全ての画像データを転送することに好適でない状況を想定して採用した構成である。ただし、ネットワークの転送速度に対して転送するデータ量が適切である場合においては、操作の開始時にメモリカードに格納された画像データを一括して他方のデジタルテレビへ転送し、デジタルカメラ上の画像選択時には選択情報のみを通知する構成であってもよい。

また、画像データの一括転送を前提とした構成においては、必ずしもネットワークを介した転送ではなく、表示対象となる複数の画像データを格納したメモリカードなどのリムーバブルメディアを、操作の開始以前に予め他方のユーザに送付して、他方のデジタルテレビに接続してもよい。

また、デジタルカメラとデジタルテレビの間の無線通信には赤外線を用いた方法も利用することができる。ただし画像データの転送に時間を要するため、予め画像データを転送する手段や、メモリカードによって予め画像データを移動するなどの手段と併用するとより効果的である。また、デジタルカメラの移動を妨げない範囲においてであれば、有線による接続を用いた通信であっても本発明の趣旨を損なうものではない。

また、本発明は、上記に述べた実施の形態を、デジタルテレビあるいはセットトップボックス（コンピュータ）に実行させるためのプログラムコードを有する、コンピュータで実行可能なプログラムであることを含む。したがって、実施例１及び２で説明した機能を有していないデジタルテレビあるいはセットトップボックス（コンピュータ）を用意し、実施例１及び２に記載した方法を実行するプログラムをダウンロードして、デジタルテレビあるいはセットトップボックスが、実施例１及び２に記載した方法を実行するようにしてもよい。

図１は本発明の実施例１に係る画像表示方法に用いるデジタルテレビのブロック構成図である。 図２は本発明の実施例１に係る画像表示方法に用いるデジタルカメラのブロック構成図である。 図３は本発明の実施例１に係るデジタルカメラの外観図である。 図４は本発明の実施例１に係る画像表示方法の手順を示すフローチャート図である。 図５は本発明の実施例１に係る画像表示方法の具体的手順の説明図である。 図６は本発明の実施例２に係る画像表示方法に用いるシステム全体の構成図である。 図７は本発明の実施例２に係る画像表示方法に用いるデジタルテレビのブロック構成図である。 図８は本発明の実施例２に係る画像表示方法に用いるデジタルカメラのブロック構成図である。 図９は本発明の実施例２に係る画像表示方法の手順を示すフローチャート図である。 図１０は本発明の実施例２に係る画像表示方法にしたがって画像表示を行っている様子の一例を示す模式図である。 図１１は本発明の実施例２に係る画像表示方法にしたがって画像表示を行っている様子の一例を示す模式図である。 図１２は従来例に係る画像表示方法にしたがって表示されたレイアウトの一例である。

符号の説明

１００ デジタルテレビ
２００ デジタルカメラ
３０１ デジタルテレビ（１）
３０３ ビデオカメラ（１）
３０４ デジタルカメラ（１）
３１１ デジタルテレビ（２）
３１３ ビデオカメラ（２）
３１４ デジタルカメラ（２）

Claims (6)

1. 画像記憶装置から第１の画像を取得するステップと、
   前記画像記憶装置から第２の画像を取得するステップと、
   前記画像記憶装置の移動を示す所定の情報を検出するステップと、
   前記第１の画像をディスプレイに表示するステップと、
   前記第２の画像を前記ディスプレイに表示するステップと、
   前記第１の画像及び前記第２の画像が前記ディスプレイに表示されている場合、前記画像記憶装置によって前記第２の画像が選択されることなく前記第１の画像が選択されたとき、前記所定の情報に応じて、前記ディスプレイに表示されている前記第１の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動するように前記第１の画像の表示の位置を制御するとともに、前記所定の情報に応じて、前記ディスプレイに表示されている前記第２の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動しないように制御するステップと
   をコンピュータに実行させるためのプログラム。
2. 前記所定の情報は、前記画像記憶装置の移動方向を示す情報、前記画像記憶装置の移動量を示す情報及び前記画像記憶装置の回転角度を示す情報を含むことを特徴とする請求項１に記載のプログラム。
3. 前記画像記憶装置は、前記所定の情報を検出するための加速度センサを有することを特徴とする請求項１または２に記載のプログラム。
4. 画像記憶装置から第１の画像を取得し、前記画像記憶装置から第２の画像を取得する取得手段と、
   前記画像記憶装置の移動を示す所定の情報を検出する検出手段と、
   前記第１の画像をディスプレイに表示させ、前記第２の画像を前記ディスプレイに表示させる制御手段とを有し、
   前記第１の画像及び前記第２の画像が前記ディスプレイに表示されている場合、前記画像記憶装置によって前記第２の画像が選択されることなく前記第１の画像が選択されたとき、前記制御手段は、前記所定の情報に応じて、前記ディスプレイに表示されている前記
   第１の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動するように前記第１の画像の表示の位置を制御するとともに、前記所定の情報に応じて、前記ディスプレイに表示されている前記第２の画像の表示の位置が前記画像記憶装置の移動方向と一致する方向に移動しないように制御することを特徴とする表示制御装置。
5. 前記所定の情報は、前記画像記憶装置の移動方向を示す情報、前記画像記憶装置の移動量を示す情報及び前記画像記憶装置の回転角度を示す情報を含むことを特徴とする請求項４に記載の表示制御装置。
6. 前記画像記憶装置は、前記所定の情報を検出するための加速度センサを有することを特徴とする請求項４または５に記載の表示制御装置。

Images