WO2019102897A1 - 制御装置、および制御方法、電子機器、並びにプログラム - Google Patents

Abstract

本開示は、自然な操作方法で様々な制御対象装置を切り替えて遠隔操作することができるようにする制御装置、および制御方法、電子機器、並びにプログラムに関する。 複数の制御対象装置が固有のIDからなる赤外光コードを所定のパターンで発光している。ユーザは、コントローラを把持し、制御対象装置に赤外光受光部を向ける。このとき、コントローラが受光した赤外光コードにより特定される制御対象装置に対して制御状態を確立する。制御状態が確立された後は、ユーザにより、コントローラ本体が回転されると回転量に応じた制御パラメータを算出して、制御パラメータに応じた制御コマンドを制御対象装置に送信し、制御対象装置を制御する。本開示は、リモートコントローラに適用することができる。

Description

制御装置、および制御方法、電子機器、並びにプログラム

　本開示は、制御装置、および制御方法、電子機器、並びにプログラムに関し、特に、自然な操作方法で様々な制御対象装置を遠隔操作できるようにした制御装置、および制御方法、電子機器、並びにプログラムに関する。

　制御対象装置を遠隔操作することが可能な制御装置が提案されている（特許文献１参照）。

特開２０１３－２２２３９９号公報

　上述した特許文献１の技術においては、制御装置側に備えられた表示部を利用し、対象に向けると機器の種類と制御可能なパラメータやフィードバックが表示され、表示内容を視認した上で、対応した操作が求められる。

　このため、上述の制御装置を使った遠隔操作では、ユーザは基本的に操作対象装置を注視することが多いにも関わらず、制御装置自体の表示部をフィードバックとして利用する必要があり、ユーザの視線は、前方の制御対象装置と、手元の制御装置の表示部とを頻繁に行き来することになり、使い勝手の低下を招く。

　このような事態を回避するため、例えば、触覚フィードバックを構成することが考えられるが、ボタン押下や単純な振動だけでは、単に何かが起こった以上の情報が伝えられない。

　本開示は、このような状況に鑑みてなされたものであり、特に、自然な操作方法で様々な制御対象装置を遠隔操作できるようにさせるものである。

　本開示の第１の側面の制御装置は、制御装置であって、指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部とを含み、前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する制御装置である。

　前記制御装置の本体の方向を検出する方向検出部をさらに含ませるようにすることができ、前記制御部には、前記方向検出部により検出された前記制御装置の本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを生成し、生成した前記制御コマンドを、前記識別信号を送信した前記制御対象装置に送信させるようにすることができる。

　前記制御部には、前記方向検出部により検出された本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出させ、前記制御パラメータに応じた制御コマンドを生成させ、前記識別信号を送信した前記制御対象装置に送信させるようにすることができる。

　前記制御部には、前記方向検出部により検出された前記制御装置の本体が、所定の軸を中心に捻るように回転したときの回転量に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出させ、前記制御パラメータに応じた制御コマンドを生成させ、前記識別信号を送信した前記制御対象装置に送信させるようにすることができる。

　前記制御装置の本体を振動させる振動部をさらに含ませるようにすることができ、前記制御部には、前記制御パラメータに応じて、前記振動部を振動させるようにすることができる。

　前記制御部には、前記制御パラメータに応じて、所定の時間間隔で、かつ、所定の強度で前記振動部を振動させるようにすることができる。

　前記制御部には、前記制御パラメータが連続変量である場合、前記制御パラメータに応じた時間間隔で、かつ、前記制御パラメータに応じた強度で前記振動部を振動させるようにすることができる。

　前記制御部には、前記制御パラメータが離散変量である場合、前記制御パラメータに応じた時間間隔で、かつ、一定の強度で前記振動部を振動させるようにすることができる。

　前記制御部には、前記識別信号を送信した前記制御対象装置が、前記制御コマンドを実行した後における、前記制御対象装置の状態を示すフィードバック情報を受信させ、前記フィードバック情報に基づいて、前記振動部を振動させるようにすることができる。

　音声を発生する音声出力部をさらに含ませるようにすることができ、前記制御部は、前記制御パラメータに応じて、前記音声出力部より音声を出力させるようにすることができる。

　前記制御対象装置は、スピーカ装置とすることができ、前記制御コマンドは、前記スピーカ装置の音量を制御するコマンドとすることができる。

　前記制御対象装置は、テレビジョン受像器とすることができ、前記制御コマンドは、前記テレビジョン受像器のチャンネルを制御するコマンドとすることができる。

　前記制御対象装置は、照明装置とすることができ、前記制御コマンドは、前記照明装置の明るさを制御するコマンドとすることができる。

　前記制御対象装置は、プロジェクタ装置とすることができ、前記制御コマンドは、前記プロジェクタ装置により壁面に投影されるコンテンツの移動を制御するコマンドとすることができる。

　前記制御装置の本体を振動させる振動部と、前記プロジェクタ装置により前記コンテンツが投影される壁面を撮像する撮像部とをさらに含ませるようにすることができ、前記制御部には、前記撮像部により撮像される画像に基づいて、前記壁面のテクスチャを推定させ、前記壁面に投影されるコンテンツを移動させる際、前記コンテンツを移動させる動線上の前記テクスチャによる凹凸に応じて、前記振動部を振動させるようにすることができる。

　前記制御対象装置には、所定の発光パターンの赤外光、指向性アンテナにより出力される電磁波、又は指向性スピーカにより出力される超音波により、前記識別信号を発するようにさせることができる。

　本開示の第１の側面の制御方法は、制御装置の制御方法であって、指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信処理と、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御処理とを含み、前記識別信号受信処理は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する制御方法である。

　本開示の第１の側面のプログラムは、制御装置を制御するコンピュータを機能させるプログラムであって、指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部としてコンピュータを機能させ、前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信するプログラムである。

　本開示の第１の側面においては、指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号が受信され、前記識別信号により特定される前記制御対象装置を制御する制御コマンドが、前記識別信号を送信した前記制御対象装置に送信され、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号が受信される。

　本開示の第２の側面の電子機器は、制御装置により制御される電子機器であって、指向性を有する無線信号により、前記電子機器である自らを識別する識別信号を発生する識別信号発生部と、前記識別信号に基づいて、前記電子機器が制御対象装置として認識されることにより、前記制御装置より送信される前記電子機器を制御する制御コマンドを実行することにより、動作を制御する制御部とを含み、前記識別信号は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記電子機器を識別する前記識別信号として前記制御装置により受信される。

　本開示の第２の側面においては、制御装置により制御される電子機器であって、指向性を有する無線信号により、前記電子機器である自らを識別する識別信号が発生され、前記識別信号に基づいて、前記電子機器が制御対象装置として認識されることにより、前記制御装置より送信される前記電子機器を制御する制御コマンドを実行することにより、動作を制御され、前記識別信号は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記電子機器を識別する前記識別信号として前記制御装置により受信される。

　本開示の一側面によれば、自然な操作方法で様々な制御対象装置を遠隔操作させることが可能となる。

本開示の第１の実施の形態の制御システムを説明する図である。 図１のコントローラの物理的な構成例を説明する図である。 図１のコントローラの機能を実現する構成例を説明する図である。 振動アクチュエータの離散変量からなるパラメータと連続変量からなるパラメータとのそれぞれにおける振動を説明する図である。 スピーカ装置の機能を実現する構成例を説明する図である。 テレビジョン受像器の機能を実現する構成例を説明する図である。 照明装置の機能を実現する構成例を説明する図である。 図１の制御システムにおけるスピーカ装置の遠隔操作制御処理を説明するフローチャートである。 図１の制御システムにおけるコントローラの遠隔操作制御処理を説明するフローチャートである。 図１の制御システムにおけるコントローラの遠隔操作制御処理を説明するフローチャートである。 図１の制御システムにおけるコントローラの遠隔操作制御処理を説明するフローチャートである。 図１の制御システムにおけるテレビジョン受像器の遠隔操作制御処理を説明するフローチャートである。 図１の制御システムにおける照明装置の遠隔操作制御処理を説明するフローチャートである。 コントローラにより制御されるその他の制御対象装置とパラメータを説明する図である。 本開示の第２の実施の形態の制御システムを説明する図である。 図１５のコントローラの物理的な構成例を説明する図である。 図１５のコントローラの機能を実現する構成例を説明する図である。 図１５のプロジェクタ装置の機能を実現する構成例を説明する図である。 コンテンツを移動する際のグリッドの機能を説明する図である。 壁面例におけるテクスチャの例を説明する図である。 図１５の制御システムにおけるプロジェクタ装置の遠隔操作制御処理を説明するフローチャートである。 図１５の制御システムにおけるコントローラの遠隔操作制御処理を説明するフローチャートである。 追加装置を接続する場合のスピーカ装置の機能を実現する構成例を説明する図である。 汎用のパーソナルコンピュータの構成例を説明する図である。

　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

　以下、本技術を実施するための形態について説明する。説明は以下の順序で行う。
　１．第１の実施の形態
　２．第２の実施の形態
　３．変形例
　４．ソフトウェアにより実行させる例

　＜＜１．第１の実施の形態＞＞
　本開示の制御装置は、複数の制御対象装置を自然な操作により切り替えて遠隔操作できるようにさせるものである。

　図１は、本開示の制御装置を実現するための制御システムの構成例を示している。

　本開示の制御システム１１は、コントローラ（制御装置）３１、スピーカ装置３２、テレビジョン受像器（TV）３３、照明装置３４、および無線通信ネットワーク３５より構成されている。

　コントローラ３１は、スピーカ装置３２の音量、テレビジョン受像器（TV）３３のチャンネル、照明装置３４の明るさを遠隔操作により制御する。

　より具体的には、スピーカ装置３２、テレビジョン受像器（TV）３３、および照明装置３４は、それぞれ固有IDに応じた発光パターンで赤外光を発光することで、赤外光コードを発している。コントローラ３１は、赤外光受光部５５を備えており、コントローラ３１の赤外光受光部５５が、制御対象としたい装置（制御対象装置）に向けられると、制御対象装置からの赤外光コードが受信される。コントローラ３１は、赤外光受光部５５により受光された赤外線コードに基づいて特定される装置を制御対象装置として認識する。

　すなわち、図１のコントローラ３１のように、スピーカ装置３２を制御対象としたいときには、赤外光受光部５５を、スピーカ装置３２に向けることで、赤外光受光部５５により、スピーカ装置３２の赤外光コードが受光される。これによりコントローラ３１は、スピーカ装置３２を制御対象装置として認識する。

　また、テレビジョン受像器３３を制御対象としたいときには、コントローラ３１’のように、赤外光受光部５５’をテレビジョン受像器３３に向けることで、テレビジョン受像器３３からの赤外光コードが受光される。これにより、コントローラ３１’は、テレビジョン受像器３３を制御対象装置として認識する。

　そして、照明装置３４を制御対象としたいときには、コントローラ３１’’のように、赤外光受光部５５’’を照明装置３４に向けることで、照明装置３４からの赤外光コードが受光されるので、コントローラ３１’’は、照明装置３４を制御対象装置として認識する。

　コントローラ３１、スピーカ装置３２、テレビジョン受像器（TV）３３、および照明装置３４は、例えば、WiFiやブルートゥース（登録商標）などの無線通信ネットワーク３５を介して、相互に通信することができる。

　コントローラ３１は、赤外光コードに基づいて、制御対象として認識した装置と、無線通信ネットワーク３５を介して無線通信により制御状態を確立する。

　コントローラ３１は、加速度センサやジャイロセンサを備えており、制御状態が確立されると、例えば、図１で示されるように、本体の軸Axを中心にして、図中の＋または－で示される方向への回転量を計測する。そして、コントローラ３１は、計測された回転量に応じて音量、チャンネル、または明るさを制御する制御パラメータを求め、求めた制御パラメータに基づいて、制御コマンドを生成して、無線通信ネットワーク３５を介して、制御対象装置に送信する。

　制御対象となるスピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４は、無線通信ネットワーク３５を介してコントローラ３１より送信されてくる制御コマンドに基づいて、音量、チャンネル、および明るさを制御する。また、制御対象となるスピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４は、制御コマンドによる制御後の状態をフィードバック情報としてコントローラ３１に送信する。

　コントローラ３１は、スピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４から送信されてくる、制御コマンドによる制御後の、音量、チャンネル、または明るさを示すフィードバック情報を受信する。

　コントローラ３１には、振動アクチュエータが設けられているので、コントローラ３１は、振動アクチュエータを制御して、フィードバック情報に応じて、現状の音量、チャンネル、および明るさを表現する振動を発生する。この振動に応じて、ユーザは、コントローラ３１を把持するだけで、スピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４における、制御コマンドによる制御がなされた後の、音量、チャンネル、または明るさを認識することができる。

　したがって、ユーザは、コントローラ３１を制御対象としたい装置に向けて、制御対象の制御パラメータである、音量、チャンネル、または明るさを、コントローラ３１本体を、軸Axを中心として回転させるだけで制御することが可能となる。また、この際、制御対象装置の制御コマンドによる制御後の状態を示すフィードバック情報に応じて、コントローラ３１が振動する。これにより、ユーザは、振動の状態に応じて、制御コマンドにより制御がなされた後の制御対象装置の音量、チャンネル、または明るさを認識することができる。

　結果として、コントローラと制御対象装置との間で視線移動させることなく、様々な装置を、自然な動作で遠隔操作することが可能となる。

　＜コントローラの物理的な構成例＞
　次に、図２を参照して、コントローラ３１の物理的な構成例について説明する。尚、図２においては、上部がコントローラ３１の本体の外観の上面図および側面図であり、下部が、上面からの断面構造図、および側面からの断面構造図である。

　コントローラ３１は、図２の上部で示されるように、全体として角が丸くされた、平らな板状の棒であり、一方の端部に赤外光受光部５５が設けられている。この赤外光受光部５５は、上述したスピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４から送信される固有の赤外光コードを受光する。すなわち、コントローラ３１は、図中において右側の赤外光受光部５５が制御対象装置に向けられた状態で把持される。

　また、コントローラ３１は、図２の下部で示されるように、その内部において、制御モジュール５１、スピーカ５２、振動アクチュエータ５３、タクトスイッチ５４－１乃至５４－３、および赤外光受光部５５を備えている。

　制御モジュール５１は、コントローラ３１の全体の動作を制御するプロセッサなどから構成される。より詳細には、制御モジュール５１は、制御部７１（図４）、加速度センサ７２（図４）、ジャイロセンサ７３（図４）、および通信部７４（図４）を備えている。尚、制御部７１（図４）、加速度センサ７２（図４）、ジャイロセンサ７３（図４）、および通信部７４（図４）については、詳細を、図４を参照して後述する。

　スピーカ５２は、制御モジュール５１により制御され、遠隔操作の制御対象装置との通信が確立されたことを示す情報や、フィードバック情報に基づいて、遠隔操作がなされた後の制御対象装置の各種の状態を通知する音声を発生する。

　振動アクチュエータ５３は、制御モジュール５１により制御され、遠隔操作の制御対象装置との通信が確立されたことを示す情報や、フィードバック情報に基づいて、遠隔操作がなされた後の制御対象装置の各種の状態を通知する振動を発生する。

　タクトスイッチ５４－１乃至５４－３は、図２の上部で示されるような外装面に対して内側から接触するように構成されており、指で外側から軽く押さえることでボタンのようにクリックが可能な構造となっており、操作内容に応じた操作信号を制御モジュール５１に出力する。尚、タクトスイッチ５４－１乃至５４－３のそれぞれについて、特に区別する必要がない場合、単に、タクトスイッチ５４と称するものとし、その他の構成も同様に称する。

　赤外光受光部５５は、制御対象装置である、スピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４より送信される赤外光コードを受光し、受光した赤外光コードに対応する信号を制御モジュール５１に出力する。

　すなわち、コントローラ３１は、ユーザである人間の手で把持できる程度の大きさであり、赤外光受光部５５を制御対象装置が存在する方向に（前方に）向けた状態で把持して使用する。そして、ユーザは、コントローラ３１を握った状態で、図１の軸Axを中心として、図中の＋または－が表示される方向に回転させることで、制御対象装置を制御する。

　＜コントローラの構成例＞
　次に、図３を参照して、コントローラ３１の詳細な構成例について説明する。

　コントローラ３１は、上述した制御モジュール５１、スピーカ５２、振動アクチュエータ５３、タクトスイッチ５４－１乃至５４－３、および赤外光受光部５５を備えている。また、制御モジュール５１は、制御部７１、加速度センサ７２、ジャイロセンサ７３、および通信部７４より構成されている。

　制御部７１は、プロセッサなどから構成されており、制御モジュール５１の動作の全体を制御する。

　加速度センサ７２は、コントローラ３１の本体の３次元方向の加速度を計測し、制御部７１に出力する。

　ジャイロセンサ７３は、コントローラ３１の角速度および角度を検出して制御部７１に出力する。

　通信部７４は、WiFiやブルートゥースなどからなる無線通信ネットワーク３５を介して、制御対象装置となるスピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４と通信することで制御状態を確立し、制御パラメータに応じたコマンドを送信して、制御対象装置を制御する。

　ここで、「コントローラ３１が特定の装置との制御状態を確立する」とは、「コントローラ３１が、特定の装置を制御対象装置として認識し、制御できる状態にする」ことである。

　制御部７１は、赤外光受光部５５からの赤外光の受光状態に応じて出力される信号に基づいて、制御対象装置からの赤外光コードの有無を検出する。

　制御部７１は、赤外光コードが受信されると、赤外光コードに基づいて制御対象を特定し、通信部７４を制御して、無線通信ネットワーク３５を介して制御対象装置との制御状態を確立する。

　このとき、制御部７１は、スピーカ５２を制御して、制御状態が確立されたことを音声として通知するようにしてもよい。

　また、制御状態が確立されると、制御対象装置から、現状の音量、チャンネル、および明るさを示す情報が、フィードバック情報として通知される。これにより、制御部７１は、振動アクチュエータ５３を制御して、フィードバック情報に基づいて、制御対象装置の、現状の音量、チャンネル、および明るさに対応する振動を発生させると共に、スピーカ５２を制御して、対応する音声を出力させる。

　このような動作により、ユーザは、制御状態が確立されたことを認識すると共に、現状の制御対象装置の状態を認識することができる。

　制御状態が確立されると、制御対象装置を制御できる状態となるので、制御部７１は、加速度センサ７２からの加速度の情報、および、ジャイロセンサ７３からの角速度および角度の情報に基づいて、コントローラ３１の姿勢変化を検出することで、例えば、軸Axを中心としたときの回転量を算出する。

　制御部７１は、求めた回転量に応じて、制御対象装置の制御パラメータを算出し、対応する制御コマンドを生成して、通信部７４を制御して、制御対象装置に送信する。

　＜振動アクチュエータの動作＞
　振動アクチュエータ５３は、制御対象装置から供給されるフィードバック情報に基づいて、現状の制御対象装置の制御パラメータに応じた振動を発生させる。

　ここでは、制御対象は、スピーカ装置３２、テレビジョン受像器（TV）３３、または照明装置３４であるので、制御パラメータは、音量、チャンネル、および明るさを制御する制御パラメータとなる。ここで、音量と明るさの制御パラメータは、連続変量であるが、チャンネルを制御する制御パラメータは、離散変量である。

　そこで、スピーカの音量や照明の明るさを制御する制御パラメータについては、図４の上段で示されるように、制御部７１は、振動アクチュエータ５３を制御して、制御パラメータの大きさに応じた強度で、かつ、制御パラメータの大きさに応じた時間だけ振動させると共に、スピーカ５２を制御して、対応する音声を出力させる。

　尚、図４においては、上下共に、縦軸が振動アクチュエータ５３の振動強度（、およびスピーカ５２から出力される音声の音量）、並びに、制御パラメータＣＶを表しており、横軸が振動アクチュエータ５３の振動間隔、および、スピーカ５２から出力される音声の出力間隔を表す時間を表している。

　すなわち、図４の上段で示されるように、連続変量である音量または明るさを表す、制御パラメータがＣＶ１であるときには、時刻ｔ０乃至ｔ１の時間間隔で、時刻ｔ１乃至時刻ｔ２の長さだけ、強さＳｔ１の振動が振動アクチュエータ５３から出力され、時刻ｔ０乃至ｔ１の時間間隔で、時刻ｔ１乃至時刻ｔ２の長さだけ、強さＳｔ１に相当する音量の音声がスピーカ５２から出力される。

　すなわち、制御パラメータＣＶの大きさに応じた時間間隔と強度で振動アクチュエータ５３が振動されて、対応するタイミングと音量でスピーカ５２から音声が出力される。

　また、テレビジョン受像器３３のチャンネルを制御する制御パラメータについては、図４の下段で示されるように、制御部７１は、振動アクチュエータ５３を制御して、制御パラメータの大きさによらず同一の強度で、かつ、制御パラメータの大きさに応じた時間間隔で、連続変量である制御パラメータよりも、長い時間、振動アクチュエータ５３を振動させたり、スピーカ５２から音声を出力する。

　すなわち、例えば、チャンネルを表現する離散変量からなる制御パラメータがＤＶ１であるときには、時刻ｔ０乃至ｔ１１の時間間隔で、時刻ｔ１１乃至時刻ｔ１２の長さだけ、強さＳｔ１１の振動が振動アクチュエータ５３から出力され、同様の間隔と長さで、かつ、同様の強さＳｔ１に相当する音量の音声がスピーカ５２から出力される。

　すなわち、一定の強度Ｓｔ１１で、時刻ｔ１１乃至時刻ｔ１２の一定の長さで、かつ、制御パラメータＤＶの大きさに応じた時間間隔で、振動アクチュエータ５３が振動されて、対応するタイミングと音量でスピーカ５２から出力される。

　このように、制御パラメータが連続変量であるか、または、離散変量であるかに応じて、異なる振動、または、音声により制御対象装置の状態を認識することが可能となる。結果として、ディスプレイなどにフィードバック情報が表示される場合と異なり、視線を動かすことなく、制御対象装置の状態を確認することが可能となる。

　＜スピーカ装置の構成例＞
　次に、図５のブロック図を参照して、スピーカ装置３２の構成例について説明する。

　スピーカ装置３２は、例えば、図示せぬオーディオアンプからの音声信号や、テレビジョン受像器（TV）３３からの音声信号を外部から受け付けて、増幅するなどした音声を出力する。

　より詳細には、スピーカ装置３２は、制御部９１、赤外光発光部９２、通信部９３、ボリュームコントローラ９４、スピーカ９５、および外部入力部９６を備えている。

　制御部９１は、プロセッサなどから構成されており、スピーカ装置３２の全体の動作を制御する。

　赤外光発光部９２は、制御部９１により制御され、スピーカ装置３２の固有のIDを含む赤外光コードを所定のパターンで発光する。

　通信部９３は、制御部９１により制御され、WiFiやブルートゥースなどからなる無線通信ネットワーク３５を介して、コントローラ３１と通信し、音量を制御する制御パラメータに応じた制御コマンドを受信して、制御部９１に出力する。

　ボリュームコントローラ９４は、制御部９１により制御され、入力された音声信号を制御コマンドに応じたボリューム（音量）でスピーカ９５に出力して音声として出力させる。

　外部入力部９６は、図示せぬオーディオアンプからの音声信号や、テレビジョン受像器（TV）３３からの音声信号の入力を受け付けて、制御部９１に出力する。

　制御部９１は、通信部９３を介して受信した制御コマンドを取得し、制御コマンドをボリュームコントローラ９４に供給する。ボリュームコントローラ９４は、制御コマンドに基づいて、スピーカ９５の音量を調整して、外部入力部９６を介して供給された音声信号をスピーカ９５より音声として出力させる。

　＜テレビジョン受像器の構成例＞
　次に、図６のブロック図を参照して、テレビジョン受像器３３の構成例について説明する。

　テレビジョン受像器（TV）３３は、例えば、所定のチャンネルを選局して、選局したチャンネルの放送波を受信して、放送波より画像信号と音声信号とをそれぞれデコードし、デコード結果である画像信号に基づいて画像を生成して表示すると共に、デコード結果である音声信号に基づいて音声を出力する。

　より詳細には、テレビジョン受像器３３は、制御部１１１、赤外光発光部１１２、通信部１１３、チャンネルコントローラ１１４、チューナ１１５、表示部１１６、スピーカ１１７、ボリュームコントローラ１１８、および外部入力部１１９を備えている。

　制御部１１１は、プロセッサなどから構成されており、テレビジョン受像器３３の全体の動作を制御する。

　赤外光発光部１１２は、制御部１１１により制御され、テレビジョン受像器３３の固有のIDを含む赤外光コードを所定のパターンで発光する。

　通信部１１３は、制御部１１１により制御され、WiFiやブルートゥースなどからなる無線通信ネットワーク３５を介して、コントローラ３１と通信し、チャンネルを制御する制御パラメータに応じた制御コマンドを受信して、制御部１１１に出力する。

　制御部１１１は、チャンネルコントローラ１１４を制御し、制御コマンドに基づいたチャンネルをチューナ１１５が選局するように制御させる。

　チューナ１１５は、チャンネルコントローラ１１４より制御され、制御コマンドに基づいて指定されているチャンネルより放送波を受信し、受信した放送波を、デコードして画像信号と音声信号とを生成する。そして、チューナ１１５は、生成した画像信号を表示部１１６に出力して表示させ、生成した音声信号をスピーカ１１７に出力して音声として出力させる。

　外部入力部１１９は、図示せぬ外部の装置より、画像信号および音声信号の入力を受け付けて、制御部１１１に出力する。

　すなわち、制御部１１１は、通信部１１３を介して受信した制御コマンドを取得し、制御コマンドに基づいて、チャンネルコントローラ１１４を制御して、チューナ１１５に対して、制御コマンドにより指定されたチャンネルの放送波を受信させる。

　チューナ１１５は、対応するチャンネルの放送波を受信し、受信した放送波の信号をデコードして、画像信号および音声信号を抽出し、画像信号を表示部１１６に出力して表示させると共に、音声信号をスピーカ１１７に出力して音声として出力させる。

　ボリュームコントローラ１１８は、制御部１１１により制御され、入力された音声信号を制御コマンドに応じた音量でスピーカ１１７に出力して音声として出力させる。尚、ボリュームコントローラ１１８の構成は、基本的にスピーカ装置３２と同様である。このため、テレビジョン受像器３３においても、コントローラ３１によりボリュームを遠隔操作することも可能であるが、ここでは、テレビジョン受像器３３に対してはチャンネルを遠隔操作するときの動作のみを説明する。

　制御部１１１は、通信部１１３を介して受信した制御コマンドを取得し、制御コマンドに基づいて、チャンネルコントローラ１１４を制御して、チューナ１１５が受信するチャンネルを制御する。これにより、チューナ１１５は、指定されたチャンネルの放送波を受信し、受信した放送波をデコードして、画像信号および音声信号を生成し、画像信号を表示部１１６に出力して画像として表示させると共に、音声信号をスピーカ１１７に出力して音声として出力させる。

　＜照明装置の構成例＞
　照明装置３４は、室内の照明器具として機能するものである。

　より詳細には、照明装置３４は、制御部１３１、赤外光発光部１３２、通信部１３３、照度コントローラ１３４、発光部１３５、および外部入力部１３６を備えている。

　制御部１３１は、プロセッサなどから構成されており、照明装置３４の全体の動作を制御する。

　赤外光発光部１３２は、制御部１３１により制御され、照明装置３４の固有のIDを含む赤外光コードを所定のパターンで発光する。

　通信部１３３は、制御部１３１により制御され、WiFiやブルートゥースなどからなる無線通信ネットワーク３５を介して、コントローラ３１と通信し、明るさを制御する制御パラメータに応じた制御コマンドを受信して、制御部１３１に出力する。

　照度コントローラ１３４は、制御部１３１により制御され、制御コマンドに応じた明るさで発光部１３５を発光させる。

　外部入力部１３６は、図示せぬ外部デバイスからの各種の信号の入力を受け付けて、制御部１３１に出力する。

　制御部１３１は、通信部１３３を介して受信した制御コマンドを取得し、制御コマンドに基づいて、照度コントローラ１３４を制御して、発光部１３５の明るさを調整して発光させる。

　＜図１の制御システムによる遠隔操作制御処理＞
　次に、図８乃至図１３のフローチャートを参照して、図１の制御システム１１による遠隔操作制御処理について説明する。

　尚、図８のフローチャートがスピーカ装置３２の処理を説明したものであり、図９乃至図１１のフローチャートがコントローラ３１の処理を説明したものであり、図１２のフローチャートがテレビジョン受像器３３の処理を説明したものであり、図１３のフローチャートが照明装置３４の処理を説明したものである。

　スピーカ装置３２を制御する場合の処理について説明し、テレビジョン受像器３３、および照明装置３４を制御する処理について説明する。

　＜スピーカ装置の遠隔操作制御処理＞
　まず、スピーカ装置の遠隔操作制御処理について説明する。

　ステップＳ１１（図８）において、制御部９１は、赤外光発光部９２を制御して、スピーカ装置３２の固有のIDを示す赤外光コードを所定のパターンで発光させる。

　ステップＳ１２において、制御部９１は、通信部９３を制御して、コントローラ３１から制御対象として認識されて、制御状態が確立されたことが通知されたか否かを判定し、制御対象として認識されて制御状態が確立されたことが通知されていない場合、処理は、ステップＳ１１に戻る。

　すなわち、制御対象として認識されて、制御状態が確立されるまで、スピーカ装置３２は、ステップＳ１１，Ｓ１２の処理を繰り返す。

　一方、ステップＳ３１（図９）において、コントローラ３１の制御部７１は、赤外光受光部５５を制御して、スピーカ装置３２を識別するIDを含む赤外光コードが受光されたか否かを判定する。例えば、ユーザがコントローラ３１を把持し、スピーカ装置３２を制御対象にするために、赤外光受光部５５をスピーカ装置３２の方向に向けることにより、スピーカ装置３２からの赤外光コードが受光されると、ステップＳ３１において、例えば、スピーカ装置３２からの赤外光コードが受光されたものとみなされて、処理は、ステップＳ３２に進む。

　ステップＳ３２において、制御部７１は、通信部７４を制御して、スピーカ装置３２に対して、無線通信ネットワーク３５を介して、制御対象として認識し、制御状態を確立したことを通知する。

　この処理により、ステップＳ１２（図８）において、制御対象として認識されて制御状態が確立されたことを示す通知が受信されて、処理は、ステップＳ１３に進む。

　ステップＳ１３において、制御部９１は、通信部９３を制御して、無線通信ネットワーク３５を介した、コントローラ３１による制御状態を確立した状態とする。

　ステップＳ１４において、制御部９１は、ボリュームコントローラ９４に問い合わせて、現状の音量を示す制御パラメータの情報を読み出し、フィードバック情報として、通信部９３を制御して、コントローラ３１に送信させる。

　ステップＳ３３（図９）において、コントローラ３１の制御部７１は、通信部７４を制御して、制御対象となっているスピーカ装置３２からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ３３において、ステップＳ１４の処理によりフィードバック情報が送信されてきたとみなされた場合、処理は、ステップＳ３４に進む。

　ステップＳ３４において、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のスピーカ装置３２における音量に相当する制御パラメータに対応する時間間隔と強度で振動を発生させることにより、現在のスピーカ装置３２における音量の情報をフィードバックする。また、制御部７１は、スピーカ５２を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のスピーカ装置３２における音量に相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させることにより、現在のスピーカ装置３２における音量の情報をフィードバックする。

　すなわち、ここまでの処理により、ユーザは、制御対象にしたいスピーカ装置３２に赤外光受光部５５を向けるだけで、制御状態を確立させ、制御状態が確立したことを振動と音声により認識することが可能になると共に、現在のスピーカ装置３２の音量も認識することができる。

　ステップＳ３５において、制御部７１は、タクトスイッチ５４が押下された状態で、かつ、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、例えば、図１の軸Axを中心にコントローラ３１の本体を図中の＋方向または－方向に捻るような回転が加えられたか否かを判定する。ステップＳ３５において、例えば、タクトスイッチ５４が押下された状態で、かつ、図１の軸Axを中心にコントローラ３１の本体を捻るような回転が加えられたとみなされた場合、処理は、ステップＳ３６に進む。

　ステップＳ３６において、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、回転量を検出し、回転量に応じた制御パラメータを生成する。すなわち、制御部７１は、回転量に応じて、スピーカ装置３２の音量をどの程度大きくする、または、小さくするといった制御パラメータを生成する。

　ステップＳ３７において、制御部７１は、生成した制御パラメータに応じた制御コマンドを生成し、通信部７４を制御してスピーカ装置３２に送信する。

　ステップＳ１５（図８）において、スピーカ装置３２の制御部９１は、通信部９３を制御して、コントローラ３１から制御コマンドが送信されてきたか否かを判定する。ステップＳ１５において、ステップＳ３７の処理により、制御コマンドが送信されてくると、処理は、ステップＳ１６に進む。

　ステップＳ１６において、制御部９１は、ボリュームコントローラ９４を制御して、制御コマンドに対応する制御パラメータに対応してスピーカ９５の音量を制御させる。すなわち、制御部９１は、制御パラメータに基づいて、音量をどれだけ大きくする、または、どの程度音量を小さくするのかをボリュームコントローラ９４に対して指令する。ボリュームコントローラ９４は、この指令に基づいて、スピーカ９５より出力される音量を制御する。

　ステップＳ１７において、制御部９１は、ボリュームコントローラ９４に対して問い合わせて、現状の音量の情報を取得し、通信部９３を制御して、フィードバック情報として、コントローラ３１に送信させる。

　ステップＳ１８において、制御部９１は、通信部９３を制御して、コントローラ３１から制御対象から外れたことが通知されたか否かを判定し、制御対象から外れたことが通知されない場合、処理は、ステップＳ１５に戻る。

　また、ステップＳ１５において、制御コマンドが送信されてきていない場合、ステップＳ１６，Ｓ１７の処理はスキップされる。

　すなわち、コントローラ３１から制御対象から外れたことが通知されるまでは、ステップＳ１５乃至Ｓ１８の処理が繰り返されて、制御コマンドが送信されてくる度に、音量を制御する処理が繰り返される。

　ステップＳ３８（図９）において、コントローラ３１の制御部７１は、通信部７４を制御して、スピーカ装置３２からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ３８において、ステップＳ１７の処理によりフィードバック情報が送信されてきた場合、処理は、ステップＳ３９に進む。

　ステップＳ３９において、制御部７１は、通信部７４を制御して、送信されてきたフィードバック情報を受信する。そして、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のスピーカ装置３２における連続変量からなる音量に相当する制御パラメータに対応する時間間隔と強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のスピーカ装置３２における連続変量からなる音量に相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させる。

　ステップＳ４０において、制御部７１は、１度でも制御コマンドを送信したときは、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したか否か、または、制御コマンドを送信していないときは、制御状態が確立されてからの経過時間が所定時間以上経過したか否かを判定する。ステップＳ４０において、最後に制御コマンドが送信されてからの経過時間も、制御状態が確立されてからの経過時間も、所定時間以上経過していない場合、処理は、ステップＳ３５に戻る。

　また、ステップＳ３５において、コントローラ３１の本体の回転が検出されていない場合、ステップＳ３６乃至Ｓ３９の処理がスキップされる。

　すなわち、１度でも制御コマンドを送信したときは、最後に制御コマンドを送信してからの経過時間が所定時間以上経過するまで、制御コマンドを送信していないときは、制御状態が確立されてからの経過時間が所定時間以上経過するまで、ステップＳ３５乃至Ｓ４０の処理が繰り返されて、スピーカ装置３２の音量を制御するための、コントローラ３１の回転操作が受け付けられる状態が継続される。

　そして、ステップＳ４０において、１度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したとき、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したとき、処理は、ステップＳ４１に進む。

　ステップ４１において、制御部７１は、通信部７４を制御して、スピーカ装置３２に対して制御対象から外れたことを通知し、制御状態を解除する。

　ステップＳ４２において、制御部７１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ３１に戻る。また、ステップＳ４２において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　これに応じて、スピーカ装置３２においては、ステップＳ１８（図８）において、制御対象から外れたことが通知されると、処理は、ステップＳ１９に進む。

　ステップＳ１９において、制御部９１は、通信部９３を制御して、無線通信ネットワーク３５を介したコントローラ３１による制御状態を解除する。

　ステップＳ２０において、制御部９１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ１１に戻る。また、ステップＳ２０において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　すなわち、制御状態が確立された後、所定時間以上の間隔を空けずに、コントローラ３１が回転されて、スピーカ装置３２に対して音量を調整するための制御コマンドが送信され続けている間、または、制御コマンドが送信されることがなくても、所定時間の間は、コントローラ３１を回転させることで、スピーカ装置３２に対して音量を制御する制御コマンドを送信して、音量を調整することができる状態が継続される。

　そして、スピーカ装置３２の音量を制御する処理がなされない状態が所定時間継続すると、制御状態が解除される。

　すなわち、ユーザは、コントローラ３１を把持して、制御対象にしたいスピーカ装置３２に赤外光受光部５５を向けると制御状態の確立を促すことができ、制御状態が確立されると、振動と音声により制御状態の確立を認識することができると同時に、その時のスピーカ装置３２の音量の状態を認識することができる。

　さらに、制御状態が確立した後は、タクトスイッチ５４を押下しながら、図１の軸Axを中心として捻るような操作をするだけで、スピーカ装置３２に対して音量を調整させるための制御コマンドを送信することができ、制御コマンドに基づいて、スピーカ装置３２の音量が調整される。この際、スピーカ装置３２からは、フィードバック情報として、現状の音量を示す情報が返信されて、振動と音声により認識することができる。

　そして、スピーカ装置３２の音量が所望の大きさになった後は、コントローラ３１を用いたスピーカ装置３２の音量を制御するような捻る操作がなされない状態が、所定の時間以上経過すると、制御状態が解除される。

　このような一連の自然な操作で、スピーカ装置３２を遠隔操作することが可能となる。

　＜テレビジョン受像器の遠隔操作制御処理＞
　次に、テレビジョン受像器の遠隔操作制御処理について説明する。

　ステップＳ８１（図１２）において、制御部１１１は、赤外光発光部１１２を制御して、テレビジョン受像器３３を識別するための固有のIDを示す赤外光コードを所定のパターンで発光させる。

　ステップＳ８２において、制御部１１１は、通信部１１３を制御して、コントローラ３１から制御対象として認識されて、制御状態が確立されたことが通知されたか否かを判定し、制御対象として認識されて制御状態が確立されたことが通知されていない場合、処理は、ステップＳ８１に戻る。

　すなわち、制御対象として認識されて、制御状態が確立されるまで、テレビジョン受像器３３は、ステップＳ８１，Ｓ８２の処理を繰り返す。

　一方、ステップＳ３１（図９）において、スピーカ装置３２からの赤外線コードが送信されてきていない場合、処理は、ステップＳ４３に進む。

　ステップＳ４３（図１０）において、コントローラ３１の制御部７１は、赤外光受光部５５を制御して、テレビジョン受像器３３を識別するIDを含む赤外光コードが受信されたか否かを判定する。例えば、ユーザがコントローラ３１を把持し、テレビジョン受像器３３を制御対象とするために、赤外光受光部５５をテレビジョン受像器３３の方向に向けることにより、テレビジョン受像器３３からの赤外光コードが受光されると、ステップＳ４３において、例えば、テレビジョン受像器３３からの赤外光コードが受光され、処理は、ステップＳ４４に進む。

　ステップＳ４４において、制御部７１は、通信部７４を制御して、テレビジョン受像器３３に対して、無線通信ネットワーク３５を介して、制御対象として認識し、制御状態を確立したことを通知する。

　この処理により、ステップＳ８２（図１２）において、制御対象として認識されて、制御状態が確立されたことを示す通知が受信されて、処理は、ステップＳ８３に進む。

　ステップＳ８３において、制御部１１１は、通信部１１３を制御して、無線通信ネットワーク３５を介した、コントローラ３１による制御状態を確立した状態とする。

　ステップＳ８４において、制御部１１１は、チャンネルコントローラ１１４に問い合わせて、現状のチャンネルを示す制御パラメータの情報を読み出し、フィードバック情報として、通信部１１３を制御して、コントローラ３１に送信させる。

　ステップＳ４５（図１０）において、コントローラ３１の制御部７１は、通信部７４を制御して、制御対象となっているテレビジョン受像器３３からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ４５において、ステップＳ８４の処理によりフィードバック情報が送信されてきたとみなされた場合、処理は、ステップＳ４６に進む。

　ステップＳ４６において、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のテレビジョン受像器３３における離散変量であるチャンネルに相当する制御パラメータに対応する時間間隔と強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のテレビジョン受像器３３における離散変量であるチャンネルに相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させる。

　すなわち、ここまでの処理により、ユーザは、制御対象にしたいテレビジョン受像器３３に赤外光受光部５５を向けるだけで、制御状態を確立させ、制御状態が確立したことを振動と音声により認識することが可能になると共に、現在のテレビジョン受像器３３のチャンネルも認識することができる。

　ステップＳ４７において、制御部７１は、タクトスイッチ５４が押下された状態で、かつ、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、例えば、図１の軸Axを中心にコントローラ３１の本体を捻るような回転が加えられたか否かを判定する。ステップＳ４７において、例えば、タクトスイッチ５４が押下された状態で、かつ、図１の軸Axを中心にコントローラ３１の本体を捻るような回転が加えられたとみなされた場合、処理は、ステップＳ４８に進む。

　ステップＳ４８において、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、回転量を検出し、回転量に応じた制御パラメータを生成する。すなわち、制御部７１は、回転量に応じて、テレビジョン受像器３３のチャンネルをどの程度大きくする、または、小さくするといった制御パラメータを生成する。

　ステップＳ４９において、制御部７１は、生成した制御パラメータに応じた制御コマンドを生成し、通信部７４を制御してテレビジョン受像器３３に送信する。

　ステップＳ８５（図１２）において、テレビジョン受像器３３の制御部１１１は、通信部１１３を制御して、コントローラ３１から制御コマンドが送信されてきたか否かを判定する。ステップＳ８５において、ステップＳ４９の処理により、制御コマンドが送信されてくると、処理は、ステップＳ８６に進む。

　ステップＳ８６において、制御部１１１は、チャンネルコントローラ１１４を制御して、制御コマンドに対応する制御パラメータに基づいて、チューナ１１５におけるチェンネルを制御させる。

　すなわち、制御部１１１は、制御パラメータに基づいて、チャンネルをどれだけ大きくする、または、どの程度チャンネルを小さくするのかをチャンネルコントローラ１１４に対して指令する。チャンネルコントローラ１１４は、この指令に基づいて、チューナ１１５より選局されるチャンネルを制御する。

　この結果、チューナ１１５により選局されるチャンネルが切り替えられて、切り替えられて選局されたチャンネルの放送波が受信されて、受信された放送波がデコードされて、画像信号と音声信号が生成されて、生成された画像信号に基づいた画像が表示部１１６に表示されると共に、生成された音声信号に対応する音声がスピーカ１１７より出力される。

　ステップＳ８７において、制御部１１１は、チャンネルコントローラ１１４に対して問い合わせて、現状のチャンネルの情報を取得し、通信部１１３を制御して、フィードバック情報として、コントローラ３１に送信させる。

　ステップＳ８８において、制御部１１１は、通信部１１３を制御して、コントローラ３１から制御対象から外れたことが通知されたか否かを判定し、制御対象から外れたことが通知されない場合、処理は、ステップＳ８５に戻る。

　また、ステップＳ８５において、制御コマンドが送信されてきていない場合、ステップＳ８６，Ｓ８７の処理はスキップされる。

　すなわち、コントローラ３１から制御対象から外れたことが通知されるまでは、ステップＳ８５乃至Ｓ８８の処理が繰り返されて、制御コマンドが送信されてくる度に、チャンネルを制御する処理が繰り返される。

　ステップＳ５０（図１０）において、コントローラ３１の制御部７１は、通信部７４を制御して、テレビジョン受像器３３からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ５０において、ステップＳ８７の処理によりフィードバック情報が送信されてきた場合、処理は、ステップＳ５１に進む。

　ステップＳ５１において、制御部７１は、通信部７４を制御して、送信されてきたフィードバック情報を受信する。そして、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のテレビジョン受像器３３における離散変量であるチャンネルに相当する制御パラメータに対応する時間間隔と強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在のテレビジョン受像器３３における離散変量であるチャンネルに相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させる。

　ステップＳ５２において、制御部７１は、１度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したか否か、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したか否かを判定する。ステップＳ５２において、最後に制御コマンドが送信されてからの経過時間も、制御状態が確立されてからの経過時間も、所定時間以上経過していない場合、処理は、ステップＳ４７に戻る。

　また、ステップＳ４７において、コントローラ３１の本体の回転が検出されていない場合、ステップＳ４８乃至Ｓ５１の処理がスキップされる。

　そして、ステップＳ５２において、１度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したとき、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したとき、処理は、ステップＳ５３に進む。

　ステップＳ５３において、制御部７１は、通信部７４を制御して、テレビジョン受像器３３に対して制御対象から外れたことを通知し、制御状態を解除する。

　これに応じて、テレビジョン受像器３３においては、ステップＳ８８（図１２）において、制御対象から外れたことが通知されると、処理は、ステップＳ８９に進む。

　ステップＳ８９において、制御部１１１は、通信部１１３を制御して、無線通信ネットワーク３５を介した制御状態を解除する。

　ステップＳ９０において、制御部１１１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ８１に戻る。また、ステップＳ９０において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　すなわち、制御状態が確立された後、所定時間以上の間隔を空けずに、コントローラ３１が回転されて、テレビジョン受像器３３に対してチャンネルを調整するための制御コマンドが送信され続けている間、または、制御コマンドが送信されることがなくても、所定時間の間は、コントローラ３１を回転させることで、テレビジョン受像器３３に対してチャンネルを制御する制御コマンドを送信して、チャンネルを調整することができる状態が継続される。

　そして、テレビジョン受像器３３のチャンネルを制御する処理がなされない状態が所定時間継続すると、制御状態が解除される。

　すなわち、ユーザは、コントローラ３１を把持して、制御対象にしたいテレビジョン受像器３３に赤外光受光部５５を向けると制御状態の確立を促すことができ、制御状態が確立されると、振動と音声により制御状態の確立を認識することができると同時に、その時のテレビジョン受像器３３のチャンネルの状態を認識することができる。

　さらに、制御状態が確立した後は、タクトスイッチ５４を押下しながら、図１の軸Axを中心として捻るような操作をするだけで、テレビジョン受像器３３に対してチャンネルを調整させるための制御コマンドを送信することができ、制御コマンドに基づいて、テレビジョン受像器３３のチャンネルが調整される。この際、テレビジョン受像器３３からは、フィードバック情報として、現状のチャンネルを示す情報が返信されて、振動と音声により認識することができる。

　そして、テレビジョン受像器３３のチャンネルが所望のチャンネルになった後は、所定の時間が経過すると、制御状態が解除される。

　このような一連の自然な操作で、テレビジョン受像器３３を遠隔操作することが可能となる。

　＜照明装置の遠隔操作制御処理＞
　次に、照明装置３４の遠隔操作制御処理について説明する。

　ステップＳ１０１（図１３）において、制御部１３１は、赤外光発光部１３２を制御して、自らを識別するための固有のIDを示す赤外光コードを所定のパターンで発光させる。

　ステップＳ１０２において、制御部１３１は、通信部１３３を制御して、コントローラ３１から制御対象として認識されて、制御状態が確立されたことが通知されたか否かを判定し、制御対象として認識されて制御状態が確立されたことが通知されていない場合、処理は、ステップＳ１０１に戻る。

　すなわち、制御対象として認識されて、制御状態が確立されるまで、照明装置３４は、ステップＳ１０１，Ｓ１０２の処理を繰り返す。

　一方、ステップＳ４３（図１０）において、テレビジョン受像器３３からの赤外線コードが送信されてきていない場合、処理は、ステップＳ５４に進む。

　ステップＳ５４（図１１）において、コントローラ３１の制御部７１は、赤外光受光部５５を制御して、照明装置３４を識別するIDを含む赤外光コードが受信されたか否かを判定する。例えば、ユーザがコントローラ３１を把持し、照明装置３４を制御するために、赤外光受光部５５を照明装置３４の方向に向けることにより、照明装置３４からの赤外光コードが受光されると、ステップＳ５４において、例えば、照明装置３４からの赤外光コードが受光され、処理は、ステップＳ５５に進む。

　ステップＳ５５において、制御部７１は、通信部７４を制御して、照明装置３４に対して、無線通信ネットワーク３５を介して、制御対象として認識し、制御状態を確立したことを通知する。

　この処理により、ステップＳ１０２（図１３）において、制御対象として認識されて制御状態が確立されたことを示す通知が受信されて、処理は、ステップＳ１０３に進む。

　ステップＳ１０３において、制御部１３１は、通信部１３３を制御して、無線通信ネットワーク３５を介した、コントローラ３１による制御状態を確立した状態とする。

　ステップＳ１０４において、制御部１３１は、照度コントローラ１３４に問い合わせて、現状の明るさを示す制御パラメータの情報を読み出し、フィードバック情報として、通信部１３３を制御して、コントローラ３１に送信させる。

　ステップＳ５６（図１１）において、コントローラ３１の制御部７１は、通信部７４を制御して、制御対象となっている照明装置３４からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ５６において、ステップＳ１０４の処理によりフィードバック情報が送信されてきたとみなされた場合、処理は、ステップＳ５７に進む。

　ステップＳ５７において、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在の照明装置３４における連続変量からなる明るさに相当する制御パラメータに対応する時間間隔と強度で振動を発生させる。また、制御部７１は、照明装置３４を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在の照明装置３４における連続変量からなる明るさに相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させる。

　すなわち、ここまでの処理により、ユーザは、制御対象にしたい照明装置３４に赤外光受光部５５を向けるだけで、制御状態を確立させ、制御状態が確立したことを振動と音声により認識することが可能になると共に、現在の照明装置３４の明るさも認識することができる。

　ステップＳ５８において、制御部７１は、タクトスイッチ５４が押下された状態で、かつ、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、例えば、図１の軸Axを中心にコントローラ３１の本体を捻るような回転が加えられたか否かを判定する。ステップＳ５８において、例えば、タクトスイッチ５４が押下された状態で、かつ、図１の軸Axを中心にコントローラ３１の本体を捻るような回転が加えられたとみなされた場合、処理は、ステップＳ５９に進む。

　ステップＳ５９において、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、回転量を検出し、回転量に応じた制御パラメータを生成する。すなわち、制御部７１は、回転量に応じて、照明装置３４の明るさをどの程度明るくする、または、暗くするといった制御パラメータを生成する。

　ステップＳ６０において、制御部７１は、生成した制御パラメータに応じた制御コマンドを生成し、通信部７４を制御して照明装置３４に送信する。

　ステップＳ１０５（図１３）において、照明装置３４の制御部１３１は、通信部１３３を制御して、コントローラ３１から制御コマンドが送信されてきたか否かを判定する。ステップＳ１０５において、ステップＳ６０の処理により、制御コマンドが送信されてくると、処理は、ステップＳ１０６に進む。

　ステップＳ１０６において、制御部１１１は、照度コントローラ１３４を制御して、制御コマンドに対応する制御パラメータに対応して発光部１３５における明るさを制御させる。

　すなわち、制御部１３１は、制御パラメータに基づいて、発光部１３５をどれだけ明るく発光させる、または、発光部１３５をどの程度暗くするのかを照度コントローラ１３４に対して指令する。照度コントローラ１３４は、この指令に基づいて、発光部１３５より発光する明るさを制御する。この結果、発光部１３５の明るさが調整される。

　ステップＳ１０７において、制御部１３１は、照度コントローラ１３４に対して問い合わせて、現状の明るさの情報を取得し、通信部１３３を制御して、フィードバック情報として、コントローラ３１に送信させる。

　ステップＳ１０８において、制御部１３１は、通信部１３３を制御して、コントローラ３１から制御対象から外れたことが通知されたか否かを判定し、制御対象から外れたことが通知されない場合、処理は、ステップＳ１０５に戻る。

　また、ステップＳ１０５において、制御コマンドが送信されてきていない場合、ステップＳ１０６，Ｓ１０７の処理はスキップされる。

　すなわち、コントローラ３１から制御対象から外れたことが通知されるまでは、ステップＳ１０５乃至Ｓ１０８の処理が繰り返されて、制御コマンドが送信されてくる度に、明るさを制御する処理が繰り返される。

　ステップＳ６１（図１１）において、コントローラ３１の制御部７１は、通信部７４を制御して、照明装置３４からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ６１において、ステップＳ１０７の処理によりフィードバック情報が送信されてきた場合、処理は、ステップＳ６２に進む。

　ステップＳ６２において、制御部７１は、通信部７４を制御して、送信されてきたフィードバック情報を受信する。そして、制御部７１は、振動アクチュエータ５３を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在の照明装置３４における連続変量からなる明るさに相当する制御パラメータに対応する時間間隔と強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、図４を参照して説明したように、通信部７４を介して受信されたフィードバック情報である、現在の照明装置３４における連続変量からなる明るさに相当する制御パラメータに対応する時間間隔と強度（音量）で音声を発生させる。

　ステップＳ６３において、制御部７１は、一度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したか否か、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したか否かを判定する。ステップＳ６３において、最後に制御コマンドが送信されてからの経過時間も、制御状態が確立されてからの経過時間も、所定時間以上経過していない場合、処理は、ステップＳ５８に戻る。

　また、ステップＳ５８において、コントローラ３１の本体の回転が検出されていない場合、ステップＳ５９乃至Ｓ６２の処理がスキップされる。

　そして、ステップＳ６３において、一度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したとき、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したとき、処理は、ステップＳ６４に進む。

　ステップ６４において、制御部７１は、通信部７４を制御して、照明装置３４に対して制御対象から外れたことを通知し、制御状態を解除する。

　これに応じて、照明装置３４においては、ステップＳ１０８（図１３）において、制御対象から外れたことが通知されると、処理は、ステップＳ１０９に進む。

　ステップＳ１０９において、制御部１３１は、通信部１３３を制御して、無線通信ネットワーク３５を介した制御状態を解除する。

　ステップＳ１１０において、制御部１３１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ１０１に戻る。また、ステップＳ１１０において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　すなわち、制御状態が確立された後、所定時間以上の間隔を空けずに、コントローラ３１が回転されて、照明装置３４に対して明るさを調整するための制御コマンドが送信され続けている間、または、制御コマンドが送信されることがなくても、所定時間の間は、コントローラ３１を回転させることで、照明装置３４に対して明るさを制御する制御コマンドを送信して、明るさを調整することができる状態が継続される。

　そして、照明装置３４の明るさを制御する処理がなされない状態が所定時間継続すると、制御状態が解除される。

　すなわち、ユーザは、コントローラ３１を把持して、制御対象にしたい照明装置３４に赤外光受光部５５を向けると制御状態の確立を促すことができ、制御状態が確立されると、振動と音声により制御状態の確立を認識することができると同時に、その時の照明装置３４の明るさの状態を認識することができる。

　さらに、制御状態が確立した後は、タクトスイッチ５４を押下しながら、図１の軸Axを中心として捻るような操作をするだけで、照明装置３４に対して明るさを調整させるための制御コマンドを送信することができ、制御コマンドに基づいて、照明装置３４の明るさが調整される。この際、照明装置３４からは、フィードバック情報として、現状の明るさを示す情報が返信されて、振動と音声により認識することができる。

　そして、照明装置３４が所望の明るさになった後は、所定の時間が経過すると、制御状態が解除される。

　このような一連の自然な操作で、照明装置を遠隔操作することが可能となる。

　尚、以上においては、テレビジョン受像器３３は、チャンネルを切り替える制御をする例について説明してきたが、例えば、タクトスイッチを切り替えることで、チャンネルと音量と両方を切り替えて制御できるようにしてもよい。

　以上の処理により、１個のコントローラ３１により、スピーカ装置３２、テレビジョン受像器３３、および照明装置３４のうち、制御対象装置に赤外光受光部５５を向けるだけで、制御状態の確立を促すことができ、制御状態が確立されると、制御状態の確立と、制御対象装置の音量、チャンネル、および明るさの状態を認識することができる。

　また、制御状態が確立された後は、タクトスイッチ５４を押下しながら、所定の軸Axを中心として捻るように回転させることにより、音量、チャンネル、および明るさを制御することが可能となる。

　さらに、所望の音量、チャンネル、および明るさに調整された後は、所定の時間が経過すると制御状態の確立が解除される。

　すなわち、これらの一連の自然の動作により、複数の制御対象装置を切り替えて制御することが可能となる。

　また、以上においては、１個のコントローラ３１により、スピーカ装置３２、テレビジョン受像器３３、および照明装置３４の３種類の制御対象装置を切り替えて制御する例について説明してきたが、それ以外の装置を同様に制御することもできる。

　例えば、スピーカ装置３２、テレビジョン受像器３３、および照明装置３４に加えて、例えば、空調装置、ブラインド、およびドアなどを制御するようにしてもよい。この場合、制御パラメータは、連続変量パラメータと離散変量パラメータとを設定することができる。連続変量パラメータは、連続した値をとる制御値であり、例えば、音量や明るさ等である。また、離散変量パラメータは、飛び飛びの値を取る制御値であり、例えば、電源や機能のON/OFFやテレビジョン受像器３３のチャンネル等である。

　より具体的には、図１４で示されるように、スピーカ装置３２の場合、連続変量パラメータからなる音量とし、テレビジョン受像器３３の場合、離散変量パラメータであるチャンネル、および連続変量パラメータである音量とし、照明装置３４の場合、連続変量パラメータである光量（明るさ）としてもよい。また、空調装置の場合、連続変量パラメータとしての設定温度、および設定風量とし、ブラインドの場合、連続変量パラメータである遮光角度とし、ドアの場合、離散変量パラメータとなる開錠／施錠とするようにしてもよい。ただし、連続変量パラメータである音量、明るさ、設定温度、および設定風量、並びに、遮光角度などは、大/中/小、または高/低などの連続した値を設定できない場合、選択可能な制御値が限定的である場合、または、制御を簡素化したい場合等には、離散変量パラメータとして扱うようにしてもよい。

　また、以上においては、赤外光発光部９２，１１２，１３２により発光される赤外光からなる赤外光コードにより認識される固有のIDに基づいて、制御対象装置を認識する例について説明してきたが、指向性のある無線信号であれば、赤外光以外の手法で制御対象装置を認識するようにしてもよく、例えば、赤外光以外の光（ただし、非可視光が望ましい）を用いるようにしてもよいし、指向性を備えた電磁波（いわゆる無線）、または超音波などを用いるようにしてもよい。

　＜＜２．第２の実施の形態＞＞
　以上においては、コントローラ３１の赤外光受光部５５を制御対象装置に向けて制御状態を確立し、軸Axを中心に回転させることにより、制御対象装置を制御する例について説明してきたが、制御対象装置により実現されているコンテンツがある場合、そのコンテンツを制御できるようにしてもよい。

　図１５は、本開示の第２の実施の形態の制御システムの構成例が示されている。

　図１５の制御システム１１は、コントローラ３１、プロジェクタ装置２０１、および無線通信ネットワーク３５より構成されている。

　図１５の制御システム１１においては、プロジェクタ装置２０１により壁面Ｋ１，Ｋ２に対して投影されるプロジェクション領域Ｚ１，Ｚ２内において、写真Ｐ１のようなコンテンツを投影し、コントローラ３１によりコンテンツである写真Ｐ１を選択して、プロジェクション領域Ｚ１，Ｚ２上を移動させて投影させる。

　図１５のコントローラ３１は、赤外光受光部５５の付近にカメラが新たに設けられており、壁面Ｋ１，Ｋ２に投影された写真Ｐ１のようなコンテンツを画像として認識することにより、どのコンテンツを選択したのかを認識する。

　ここで、例えば、ユーザが、コントローラ３１を把持して、プロジェクション領域Ｚ１上に投影された写真Ｐ１に向けた状態でタクトスイッチ５４を押下すると、そのタイミングで、カメラにより撮像された画像内の情報に基づいて、コントローラ３１は、写真Ｐ１が選択されたことを認識し、振動と音声によりコンテンツである写真Ｐ１が選択されたことを通知する。

　そして、ユーザが、コントローラ３１の向きを変えると、向きの変化に応じて写真Ｐ１がプロジェクション領域Ｚ１上を移動して表示され、例えば、図１５で示されるようにコントローラ３１ａ乃至３１ｅで示されるように向きを変えると、対応して順次写真Ｐ１が写真Ｐ２乃至Ｐ５へと順次移動するように投影して表示される。

　選択されたコンテンツを移動させるとき、タクトスイッチ５４の押下が中止されると、コンテンツの選択が解除されて、選択されていたコンテンツである写真は、そのときの移動位置から最も近い位置に設定されているグリッドＧ１乃至Ｇ３上に移動して停止した状態で投影される。ここでグリッドとは、プロジェクタ装置２０１の投影面であるプロジェクション領域Ｚ１，Ｚ２上において、コンテンツである写真が停留できる、予め所定の間隔で設定される位置である。図１５においては、点線で示される位置がグリッドＧ１乃至Ｇ３に設定されている。

　このとき、例えば、コントローラ３１により写真Ｐ１が選択されて、矢印方向に移動させる途中で、点線で示されるように、グリッドＧ１とＧ２との間に写真Ｐ１１で示されるように移動されたタイミングにおいて、タクトスイッチ５４が離されると、写真Ｐ１１は、図中の点線で示された位置には留まらず、グリッドＧ１とＧ２とのいずれか、写真Ｐ１１の中心位置（中心位置以外でもよい）が、近い方のグリッドに吸い付けられるように移動して停留する。

　すなわち、図１５の場合、点線で示される写真Ｐ１１の中心位置は、グリッドＧ２とＧ３との中間であって、グリッドＧ２に近い位置であるので、写真Ｐ１１の位置においてタクトスイッチ５４の押下が解除されると、写真Ｐ１１は、グリッドＧ２の位置が中心位置になるよう、吸い寄せられるように移動して、写真Ｐ２として停留する。この際、写真Ｐ１１が、グリッドＧ２に吸い寄せられるように移動するように表示を演出すると共に、コントローラ３１から吸着音のような効果音を発する。

　また、コントローラ３１は、図１５で示されるように、写真Ｐ１を選択して、矢印方向（図中の左方向）に移動させる際、移動経路上の壁面Ｋ１，Ｋ２のテクスチャに応じて壁面Ｋ１，Ｋ２の表面の凹凸を振動により表現したり、壁面Ｋ１，Ｋ２との境界となる角Ｃに当接したときや、壁面Ｋ１，Ｋ２上に所定値以上の段差があるようなときには、コツンといった擬態音を発生し、選択したコンテンツを壁面Ｋ１，Ｋ２上をあたかも物理的に引き摺るように移動しているような演出をする。

　＜図１５で示されるコンテンツを遠隔制御する際のコントローラの物理的な構成例＞
　次に、図１６を参照して、図１５で示されるようなコンテンツを遠隔制御する際のコントローラ３１の物理的な構成例について説明する。尚、図１６において、図２の構成と同一の機能を備えた構成については、同一の符号を付しており、その説明は適宜省略する。

　すなわち、図１６において、図２のコントローラ３１と異なる構成は、新たにカメラ２２１が設けられた点である。カメラ２２１は、CMOS（Complementary Metal Oxide Semiconductor）やCCD（Charge Coupled Device）からなるイメージセンサであり、赤外光受光部５５とほぼ同一の方向を撮像し、撮像した画像を制御部７１に出力する。

　＜図１５のコントローラの構成例＞
　次に、図１６を参照して、図１５におけるコントローラ３１の詳細な構成例について説明する。尚、図１６のコントローラ３１において、図３のコントローラ３１と同一の機能を備えた構成については、同一の符号を付しており、その説明は適宜省略する。

　すなわち、図１６のコントローラ３１において、図３のコントローラ３１と異なる点は、カメラ２２１が設けられた点であり、対応して制御部７１の動作が異なる点である。

　制御部７１は、タクトスイッチ５４が押下されたタイミングにおけるカメラ２２１により撮像された画像内の、壁面Ｋ１，Ｋ２のプロジェクション領域Ｚ１，Ｚ２上に投影された写真からなるコンテンツの有無により、コンテンツが選択されたことを認識する。尚、複数の写真がカメラ２２１により撮像されているような場合については、例えば、画像内の中心に近い写真が選択されたものとみなすようにしてもよい。

　また、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、タクトスイッチ５４が押下された状態におけるコントローラ３１の指し示す方向の変化を検出する。そして、制御部７１は、コントローラ３１の指し示す方向に対応する位置にコンテンツとなる選択された写真を移動させる制御コマンドを生成し、通信部７４を制御して、プロジェクタ装置２０１に対して制御コマンドを送信する。

　さらに、制御部７１は、カメラ２２１により撮像された画像に基づいて、図１５で示される壁面Ｋ１，Ｋ２の表面のテクスチャを推定して、推定結果に基づいた壁面Ｋ１，Ｋ２の表面の凹凸に基づいて、振動アクチュエータ５３を制御して振動させる。また、制御部７１は、推定結果に基づいた壁面Ｋ１，Ｋ２の表面の凹凸に基づいて、スピーカ５２を制御して音声を出力させる。

　＜プロジェクタ装置の構成例＞
　次に、図１８を参照して、プロジェクタ装置２０１の構成例について説明する。

　プロジェクタ装置２０１は、記憶しているコンテンツとなる写真を壁面に投影して表示する。この際、コントローラ３１の動きに応じた制御コマンドを受け付けて、写真の投影する位置を移動させる。

　より詳細には、プロジェクタ装置２０１は、制御部２４１、赤外光発光部２４２、通信部２４３、投影制御部２４４、投影部２４５、および記憶部２４６を備えている。

　制御部２４１は、プロセッサなどから構成されており、プロジェクタ装置２０１の全体の動作を制御する。また、制御部２４１は、記憶部２４６に記憶されている写真をコンテンツとして読み出し、投影制御部２４４に出力し、投影部２４５から、例えば、図１５の壁面Ｋ１，Ｋ２等に投影し、プロジェクション領域Ｚ１，Ｚ２内に表示させる。

　赤外光発光部２４２は、制御部２４１により制御され、プロジェクタ装置２０１の固有のIDを含む赤外光コードを所定のパターンで発光する。

　通信部２４３は、制御部２４１により制御され、WiFiやブルートゥースなどからなる無線通信ネットワーク３５を介して、コントローラ３１との通信を確立し、制御パラメータに応じた制御コマンドを受信して、制御部２４１に出力する。

　投影制御部２４４は、制御部９１により制御され、入力された音声信号を制御コマンドに応じて、コンテンツとなる写真の、例えば、プロジェクション領域Ｚ１，Ｚ２内の投影位置を制御し、投影部２４５より壁面に投影させる。

　＜壁面のテクスチャを再生させる例＞
　次に、壁面Ｋ１，Ｋ２の凹凸であるテクスチャを振動と音声により再生させる例について説明する。

　制御部７１は、カメラ２２１により撮像された画像に基づいて、壁面Ｋ１，Ｋ２の表面のテクスチャを表現する凹凸を推定し、振動アクチュエータ５３およびスピーカ５２を制御して、振動と音声により再現する。

　より具体的には、例えば、図１９の画像Ｔ１で示されるような壁面の画像がカメラ２２１により撮像されるような場合、コントローラ３１が選択した写真からなるコンテンツを図中の矢印で示されるように左から右方向に移動させるとき、制御部７１は、動線上の表面を、例えば、図１９の波形Ｗ１で示されるように表面がざらついたような凹凸であるものと推定する。尚、図１９の波形Ｗ１乃至Ｗ３の横軸は、図１９の画像Ｔ１乃至Ｔ３上を矢印方向に移動するときの移動位置であり、縦軸は、それぞれの移動位置における表面形状の高さを表現している。

　この場合、制御部７１は、振動アクチュエータ５３を制御して、波形Ｗ１で示されるような、のこぎり状の波形を再現するように振動を発生させる。また、制御部７１は、スピーカ５２を制御して、波形Ｗ１で示されるような、のこぎり状の波形を再現するように音声を発生させる。

　また、例えば、図１９の画像Ｔ２で示されるような壁面の画像がカメラ２２１により撮像されるような場合、コントローラ３１が選択した写真からなるコンテンツを図中の矢印で示されるように左から右方向に移動させるとき、制御部７１は、動線上の表面を、例えば、図１９の波形Ｗ２で示されるような段差のある表面であるものとして推定する。

　この場合、制御部７１は、振動アクチュエータ５３を制御して、波形Ｗ２で示されるような、パルス波形に近い波形を再現するように、不定期に発生する凹部を通過する際には、コツッといった振動を発生させる。また、制御部７１は、スピーカ５２を制御して、波形Ｗ２で示されるような、パルス波形に近い波形を再現するように、不定期に発生する凹部を通過する際には、コツッといった音声を発生させる。

　さらに、例えば、図１９の画像Ｔ３で示されるような壁面の画像がカメラ２２１により撮像されるような場合、コントローラ３１が選択した写真からなるコンテンツを図中の矢印で示されるように左から右方向に移動させるとき、制御部７１は、動線上の表面を、例えば、図１９の波形Ｗ３で示されるような段差のある表面であるものとして推定する。

　この場合、制御部７１は、振動アクチュエータ５３を制御して、波形Ｗ３で示されるような、細かい周期のパルス波形に近い波形を再現するように、連続する凹部を通過する際には、コツコツコツといった振動を発生させる。また、制御部７１は、スピーカ５２を制御して、波形Ｗ３で示されるような、細かい周期のパルス波形に近い波形を再現するように、連続する凹部を通過する際には、コツコツコツといった音声を発生させる。

　尚、この例においては、カメラ２２１により撮像された画像に基づいて、制御部７１が、表面形状を推定し、推定結果に応じた波形を用いて振動と音声を発生させる例について説明しているが、カメラ２２１に代えてデプスセンサを用いて、実際に、壁面までの距離を測定して、表面の凹凸を計測し、計測結果に基づいて波形を形成するようにしてもよい。また、予めデプスセンサにより壁面までの距離を計測して記憶しておき、記憶された計測結果を利用して表面の凹凸の情報を求めて利用するようにしてもよい。

　＜グリッドの例＞
　次に、写真からなるコンテンツの移動位置を規定するグリッドについて説明する。

　グリッドは、プロジェクタ装置２０１によりコンテンツである写真を投影する位置を規定するものである。例えば、図１５においては、水平方向に所定の間隔で設定されるグリッドＧ１乃至Ｇ３の例が示されている。このグリッドＧ１乃至Ｇ３により、例えば、複数のコンテンツである写真を管理する場合、写真がグリッドにより規定された水平位置でのみ停留するので、例えば、水平方向に細かい位置決めをしなくても、水平方向に対して、グリッドとして設定された位置に揃えて配置させることができる。

　尚、図１５においては、写真であるコンテンツの中心位置が、いずれかのグリッドＧ１乃至Ｇ３に位置するように停留される例について説明してきたが、グリッドに揃えられるコンテンツである写真の位置は、コンテンツである写真の中心位置以外でもよい。

　例えば、コントローラ３１により選択されるコンテンツが、図２０の左部で示されるような丸印で示されるようなマークであるような場合、丸印からなるコンテンツＣ１１の左端部がグリッドＧ１に接触するように停留されるようにしてもよい。

　この場合、例えば、丸印からなるコンテンツをコントローラ３１で選択して移動させ、図２０の左部で示されるコンテンツＣ１の位置で、タクトスイッチ５４の押下が解除されると、コンテンツＣ１の左端部がグリッドＧ１に吸着されるように移動して投影され、コンテンツＣ１１で示されるように左端部がグリッドＧ１に接触したところで移動が停止して、停留される。

　また、例えば、図２０の中央部で示されるように、丸印からなるコンテンツＣ１２の中央部がグリッドＧ２に接触するように停留されるようにしてもよい。

　この場合、例えば、丸印からなるコンテンツをコントローラ３１で選択して移動させ、図２０の中央部で示されるコンテンツＣ２の位置で、タクトスイッチ５４の押下が解除されると、コンテンツＣ２の中央部がグリッドＧ２に吸着されるように移動して投影され、コンテンツＣ１２で示されるように中央部がグリッドＧ２に接触したところで移動が停止して、停留される。

　さらに、例えば、図２０の右部で示されるように、丸印からなるコンテンツＣ１３の右端部がグリッドＧ３に接触するように停留されるようにしてもよい。

　この場合、例えば、丸印からなるコンテンツをコントローラ３１で選択して移動させ、図２０の右部で示されるコンテンツＣ３の位置で、タクトスイッチ５４の押下が解除されると、コンテンツＣ３の右端部がグリッドＧ３に吸着されるように移動して投影され、コンテンツＣ１３で示されるように右端部がグリッドＧ３に接触したところで移動が停止し、停留される。

　尚、図１５および図２０においては、グリッドが水平方向に対して設定される例について説明してきたが、垂直方向に設定されてもよいし、水平方向および垂直方向に格子状にグリッドが設定されてもよい。

　＜図１５の制御システムによる遠隔操作制御処理＞
　次に、図２１，図２２のフローチャートを参照して、図１５の制御システム１１による遠隔操作制御処理について説明する。

　ステップＳ１３１（図２１）において、プロジェクタ装置２０１の制御部２４１は、記憶部２４６より記憶されている写真のデータをコンテンツとして読み出して、投影制御部２４４に出力する。投影制御部２４４は、供給された写真を、投影部２４５を制御して、コンテンツとして、例えば、図１５の壁面Ｋ１，Ｋ２上のプロジェクション領域Ｚ１，Ｚ２内に投影する。

　ステップＳ１３２において、プロジェクタ装置２０１の制御部２４１は、赤外光発光部２４２を制御して、自らを識別するための固有のIDを示す赤外光コードを所定のパターンで発光させる。

　ステップＳ１３３において、制御部２４１は、通信部２４３を制御して、コントローラ３１から制御対象として認識されて、制御状態が確立されたことが通知されたか否かを判定し、制御対象として認識されて制御状態が確立されたことが通知されていない場合、処理は、ステップＳ１３２に戻る。

　すなわち、制御対象として認識されて、制御状態が確立されるまで、プロジェクタ装置２０１は、ステップＳ１３２，Ｓ１３３の処理を繰り返す。

　一方、ステップＳ１５１（図２２）において、コントローラ３１の制御部７１は、赤外光受光部５５を制御して、プロジェクタ装置２０１を識別するIDを含む赤外光コードが受信されたか否かを判定する。例えば、ユーザがコントローラ３１を把持し、プロジェクタ装置２０１を制御するために、赤外光受光部５５をプロジェクタ装置２０１の方向に向けることにより、プロジェクタ装置２０１からの赤外光コードが受光されると、ステップＳ１５１において、例えば、プロジェクタ装置２０１からの赤外光コードが受光され、処理は、ステップＳ１５２に進む。

　ステップＳ１５２において、制御部７１は、通信部７４を制御して、プロジェクタ装置２０１に対して、無線通信ネットワーク３５を介して、制御対象として認識し、制御状態を確立したことを通知する。

　この処理により、ステップＳ１３３（図２１）において、制御対象として認識されて制御状態が確立されたことを示す通知が受信されて、処理は、ステップＳ１３４に進む。

　ステップＳ１３４において、制御部２４１は、通信部２４３を制御して、無線通信ネットワーク３５を介した、コントローラ３１による制御状態を確立した状態とする。

　ステップＳ１３５において、制御部２４１は、制御状態が確立したことを示す情報をフィードバック情報として、通信部９３を制御して、コントローラ３１に送信させる。

　ステップＳ１５３（図２２）において、コントローラ３１の制御部７１は、通信部７４を制御して、制御対象となっているプロジェクタ装置２０１からフィードバック情報が送信されてきたか否かを判定し、送信されてくるまで、同様の処理を繰り返す。ステップＳ１５３において、ステップＳ１３５の処理によりフィードバック情報が送信されてきたとみなされた場合、処理は、ステップＳ１５４に進む。

　ステップＳ１５４において、制御部７１は、振動アクチュエータ５３を制御し、通信部７４を介して受信されたフィードバック情報である、現在のプロジェクタ装置２０１の制御状態が確立されたことを示す所定の強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、通信部７４を介して受信されたフィードバック情報である、現在のプロジェクタ装置２０１の制御状態が確立されたことを示す所定の強度（音量）で音声を発生させる。

　すなわち、ここまでの処理により、ユーザは、制御対象にしたいプロジェクタ装置２０１に赤外光受光部５５を向けるだけで、制御状態を確立させ、制御状態が確立したことを振動と音声により認識することが可能になる。

　ステップＳ１５５において、制御部７１は、カメラ２２１により撮像された画像内であって、中心位置付近にコンテンツである写真が存在する状態で、かつ、タクトスイッチ５４が押下されているか否かにより、コンテンツが選択されたか否かを判定する。

　ステップＳ１５５において、いずれかのコンテンツが選択されたとみなされた場合、処理は、ステップＳ１５６に進む。尚、コンテンツが選択されたとみなされた場合、制御部７１は、カメラ２２１により撮像されている画像に基づいて、選択されたコンテンツの、プロジェクタ装置２０１により投影されているプロジェクション領域Ｚ１，Ｚ２上の位置を検出する。

　ステップＳ１５６において、制御部７１は、振動アクチュエータ５３を制御し、コンテンツが選択されたことを示す強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、コンテンツが選択されたことを示す強度（音量）で音声を発生させる。

　ステップＳ１５７において、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、図１５で示されるコントローラ３１ａ乃至３１ｅで示されるように赤外光受光部５５およびカメラ２２１の向きが変化するように回転が加えられ、コンテンツが投影される位置の移動が指示されたか否かを判定する。ステップＳ１５７において、例えば、コンテンツが選択された状態で、かつ、コントローラ３１の本体の向きに回転が加えられて、コンテンツを移動させるような操作がなされたとみなされた場合、処理は、ステップＳ１５８に進む。

　ステップＳ１５８において、制御部７１は、加速度センサ７２およびジャイロセンサ７３の検出結果に基づいて、回転量を検出し、回転量に応じた制御パラメータを生成する。すなわち、制御部７１は、回転量に応じて、コンテンツの移動方向と移動量とからなる、コンテンツの移動を指示する制御パラメータを生成する。

　ステップＳ１５９において、制御部７１は、生成した制御パラメータに応じた制御コマンドを生成し、選択されているコンテンツが、現状でプロジェクタ装置２０１のプロジェクション領域Ｚ１，Ｚ２上のどの位置のコンテンツであるかを特定するコンテンツ特定情報と共に、通信部７４を制御してプロジェクタ装置２０１に送信する。

　ステップＳ１３６（図２１）において、プロジェクタ装置２０１の制御部２４１は、通信部２４３を制御して、コントローラ３１からコンテンツの移動を指示する制御コマンドが送信されてきたか否かを判定する。ステップＳ１３６において、ステップＳ１５９の処理により、制御コマンドが送信されてくると、処理は、ステップＳ１３７に進む。

　ステップＳ１３７において、制御部２４１は、コンテンツ特定情報と、制御コマンドとを投影制御部２４４に供給する。投影制御部２４４は、投影部２４５を制御して、コンテンツ特定情報と、制御コマンドとに基づいて、選択されているコンテンツとなる写真を、制御コマンドにより特定される移動方向に特定される移動量だけ移動するようにプロジェクション領域Ｚ１，Ｚ２内に投影させる。

　尚、ステップＳ１３６において、コンテンツの移動を指示する制御コマンドが送信されてこない場合、ステップＳ１３７の処理がスキップされる。

　すなわち、ここまでの処理により、コントローラ３１のカメラ２２１の撮像方向を向けてタクトスイッチ５４を押下することで、選択したい写真からなるコンテンツに向けることにより、制御対象となるコンテンツを特定することができる。さらに、制御対象となるコンテンツを移動させたい方向に、カメラ２２１の撮像方向を変化させることで、コンテンツの表示位置を移動させることが可能となる。

　一方、ステップＳ１６０（図２２）において、制御部７１は、カメラ２２１により撮像される画像に基づいて、コンテンツを移動させる動線上の投影面のテクスチャを推定する。

　ステップＳ１６１において、制御部７１は、図１９を参照して説明したように、振動アクチュエータ５３を制御し、テクスチャの推定結果に基づいた強度で振動を発生させる。また、制御部７１は、図１９を参照して説明したように、スピーカ５２を制御し、テクスチャの推定結果に基づいた強度（音量）で音声を発生させる。

　ステップＳ１６２において、制御部７１は、テクスチャの推定結果に基づいて、選択した写真からなるコンテンツの動線上に所定値よりも大きな段差が存在するか否かを判定する。ステップＳ１６２において、所定値よりも大きな段差が存在するとみなされた場合、処理は、ステップＳ１６３に進む。

　ステップＳ１６３において、制御部７１は、選択されているコンテンツが段差を通過するタイミングで、振動アクチュエータ５３を制御し、段差を乗り越えたことを認識させるような所定の強度よりも高い強度で振動を発生させる。また、制御部７１は、スピーカ５２を制御し、段差を乗り越えたことを認識させるような、例えば、「コツッ」といった所定の音量よりも大きな音声を発生させる。

　すなわち、例えば、図１５で示される写真Ｐ１からなるコンテンツが選択されて、矢印方向に移動されて、写真Ｐ２乃至Ｐ４で示されるように順次移動するとき、動線上のプロジェクション領域Ｚ１のテクスチャに応じた振動と音声により、選択されたコンテンツを、プロジェクション領域Ｚ１上を引き摺って移動させているような感覚を持つことが可能となる。

　また、選択されたコンテンツの移動を継続し、プロジェクション領域Ｚ１とＺ２とが交わる角Ｃに当接するような位置に移動したタイミングで、振動と音声により、ユーザは、選択したコンテンツが、角Ｃにぶつかったような感覚を得ることが可能となる。

　いずれにおいても、プロジェクタ装置２０１により投影されている写真からなるコンテンツを、物理的に存在するものであるかのような感覚で、壁面Ｋ１，Ｋ２上を引き摺って移動しているような感覚を持たせることが可能となる。

　尚、ステップＳ１６２において、写真からなるコンテンツの動線上に所定値よりも大きな段差が存在しないとみなされた場合、ステップＳ１６３の処理は、スキップされる。

　ステップＳ１６４において、制御部７１は、タクトスイッチ５４の押下が解放されて、コンテンツの選択が解除されたか否かを判定する。ステップＳ１６４において、コンテンツの選択が解除されていないとみなされた場合、処理は、ステップＳ１５７に戻る。

　また、ステップＳ１５７において、コントローラ３１の本体の回転が検出されない場合、ステップＳ１５８乃至Ｓ１６２の処理がスキップされる。

　すなわち、コンテンツの選択が解除されるまで、ステップＳ１５７乃至Ｓ１６４の処理が繰り返されて、コンテンツを移動させることが可能になると共に、動線上のテクスチャに応じた振動や音声が出力される処理が繰り返される。

　そして、ステップＳ１６４において、タクトスイッチ５４の押下が解放されて、コンテンツの選択が解除された場合、処理は、ステップＳ１６５に進む。

　ステップＳ１６５において、制御部７１は、移動されたコンテンツの位置に応じて、最も近い位置のグリッドに吸着するようにコンテンツを移動させる制御コマンドを生成し、コンテンツ特定情報と共に、通信部７４を制御して、プロジェクタ装置２０１に送信する。

　このとき、制御部７１は、振動アクチュエータ５３を制御し、コンテンツがグリッド位置に吸着されるような動きを感じさせる振動を発生させる。また、制御部７１は、スピーカ５２を制御し、コンテンツがグリッド位置に吸着されるような印象を与える音声を発生させる。

　ステップＳ１３８（図２１）において、制御部２４１は、通信部２４３を制御して、移動されたコンテンツの位置に応じて、最も近い位置のグリッドに吸着するようにコンテンツを移動させる制御コマンドが送信されてきたか否かを判定する。

　ステップＳ１３８において、グリッドに吸着するようにコンテンツを移動させる制御コマンドが送信されてきた場合、処理は、ステップＳ１３９に進む。

　ステップＳ１３９において、制御部２４１は、投影制御部２４４に対して、グリッドに吸着するようにコンテンツを移動させる制御コマンドとコンテンツ特定情報とを供給する。投影制御部２４４は、投影部２４５を制御して、制御コマンドとコンテンツ特定情報に基づいて、コンテンツ特定情報により特定されるコンテンツを、図２０を参照して説明したように、現状の位置における最も近い位置のグリッドに移動するように表示するように投影させる。

　尚、ステップＳ１３８において、グリッドに吸着するようにコンテンツを移動させる制御コマンドが送信されてこない場合、ステップＳ１３９の処理がスキップされる。

　ステップＳ１４０において、制御部２４１は、通信部２４３を制御して、コントローラ３１から制御対象から外れたことが通知されたか否かを判定し、制御対象から外れたことが通知されない場合、処理は、ステップＳ１３６に戻る。

　すなわち、コントローラ３１から制御対象から外れたことが通知されるまでは、ステップＳ１３６乃至Ｓ１４０の処理が繰り返されて、コンテンツの移動を指示する制御コマンド、または、コンテンツを現在の位置から最も近いグリッドに移動させる制御コマンドが送信されてくる度に、移動させて投影させる処理が繰り返される。

　ステップＳ１６６において、制御部７１は、一度でも制御コマンドを送信した場合、最後に制御コマンドを送信してからの経過時間が所定時間以上経過したか否か、または、制御コマンドを送信していない場合、制御状態が確立されてからの経過時間が所定時間以上経過したか否かを判定する。ステップＳ１６６において、最後に制御コマンドが送信されてからの経過時間も、制御状態が確立されてからの経過時間も、所定時間以上経過していない場合、処理は、ステップＳ１５５に戻る。

　そして、ステップＳ１６６において、最後に制御コマンドを送信してからの経過時間が所定時間以上経過した、または、制御コマンドを送信していないときは、制御状態が確立されてからの経過時間が所定時間以上経過した場合、処理は、ステップＳ１６７に進む。

　ステップ１６７において、制御部７１は、通信部７４を制御して、プロジェクタ装置２０１に対して制御対象から外れたことを通知し、制御状態を解除する。

　ステップＳ１６８において、制御部７１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ１５１に戻る。また、ステップＳ１６８において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　これに応じて、プロジェクタ装置２０１においては、ステップＳ１４０（図２１）において、制御対象から外れたことが通知されると、処理は、ステップＳ１４１に進む。

　ステップＳ１４１において、制御部２４１は、通信部２４３を制御して、無線通信ネットワーク３５を介した制御状態を解除する。

　ステップＳ１４２において、制御部９１は、遠隔操作制御処理の終了が指示されたか否かを判定し、終了が指示されていない場合、処理は、ステップＳ１３２に戻る。また、ステップＳ１４２において、遠隔操作制御処理の終了が指示された場合、処理は、終了する。

　すなわち、制御状態が確立された後、所定時間以上の間隔を空けずに、コントローラ３１が回転されて、プロジェクタ装置２０１によりコンテンツが投影されているプロジェクション領域Ｚ１，Ｚ２内でコンテンツを選択して移動させる制御コマンドが送信され続けている間、または、制御コマンドが送信されることがなくても、所定時間の間は、コントローラ３１を回転させることで、コンテンツの移動を制御する制御コマンドを送信して、コンテンツを移動することができる状態が継続される。

　そして、プロジェクタ装置２０１により投影されているコンテンツの移動を制御する処理がなされない状態が所定時間継続すると、制御状態が解除される。

　すなわち、ユーザは、コントローラ３１を把持して、制御対象にしたいコンテンツにカメラ２２１を向けて、タクトスイッチ５４を押下すると制御対象のコンテンツを選択することができる。

　また、コンテンツが選択されると、タクトスイッチ５４を押下しながら、コントローラ３１のカメラ２２１の撮像方向をコンテンツの移動させたい方向に回転させることで移動方向と移動量とを指示する制御コマンドを送信することができ、制御コマンドに基づいて、コンテンツの移動が制御される。この際、コンテンツの移動に伴う動線上の壁面のテクスチャが推定されて、テクスチャに応じた振動と音声が発生されることにより、壁面に投影されているだけの写真からなるコンテンツを、物理的に存在する写真を、壁面上を引き摺るように移動させているような感覚を持つことが可能となる。

　そして、写真からなるコンテンツを所望の位置に移動させた後は、所定の時間が経過すると、制御状態が解除される。

　このような一連の自然な操作で、プロジェクタ装置２０１により投影される写真からなるコンテンツを、物理的に実態のある写真を、壁面上を引き摺りながら移動させているような感覚を持ちながら、遠隔操作させることが可能となる。

　＜＜３．変形例＞＞
　以上においては、コントローラ３１により制御対象装置には、赤外光発光部のような専用の構成が設けられている場合の実施例について説明してきた。このため、コントローラ３１の制御対象装置は、赤外光発光部のような専用の構成を備えた装置以外は制御できなかった。

　そこで、コントローラ３１の制御に必要とされる、赤外光発光部のような構成を備えた追加装置を、例えば、USBなどの外部端子で装置に接続することにより、専用の構成を備えていない装置でも制御対象装置にできるようにしてもよい。

　図２３は、コントローラ３１による制御に必要とされる赤外光発光部が設けられていないスピーカ装置３２に、赤外光発光部を備えた追加装置３３１が追加して接続される場合の構成が示されている。

　図２３のスピーカ装置３２は、制御部３０１、記憶部３０２、通信部３０３、ボリュームコントローラ３０４、スピーカ３０５、および外部入力部３０６を備えている。尚、通信部３０３、ボリュームコントローラ３０４、およびスピーカ３０５は、図５の通信部９３、ボリュームコントローラ９４、およびスピーカ９５と同様であるので、その説明は省略する。

　制御部３０１は、USB（Universal Serial Bus）などからなる外部入力部３０６を介して、追加装置３３１が接続されたとき、実質的に制御部９１と同様の機能を実現する。

　また、追加装置３３１は、制御部３５１、記憶部３５２、赤外光発光部３５３、および外部出力部３５４を備えている。

　制御部３５１は、追加装置３３１の動作の全体を制御する。

　記憶部３５２は、コントローラ３１により制御されるときに必要とされるドライバやプログラムを格納している。

　外部出力部３５４は、例えば、USB端子などから構成されており、スピーカ装置３２の外部入力部３０６と接続する。

　すなわち、制御部３５１は、追加装置３３１の外部出力部３５４とスピーカ装置３２の外部入力部３０６とが接続されると、記憶部３５２に記憶されているドライバやプログラムをスピーカ装置３２に供給する。

　制御部３０１は、追加装置３３１より供給されるドライバやプログラムを取得して、記憶部３０２に記憶させる。そして、制御部３０１は、記憶部３０２に記憶されているドライバやプログラムを実行させることにより、制御部９１と同様の機能を実現する。このとき、制御部３０１は、自らを識別するIDを追加装置３３１の制御部３５１に供給する。

　制御部３５１は、接続されたスピーカ装置３２を識別するIDを記憶部３５２に記憶させる。そして、制御部３５１は、記憶部３５２に記憶されているスピーカ装置３２を識別するIDに基づいて、赤外光コードを生成して、赤外光発光部３５３より発光させる。

　以上のような構成により、赤外光発光部などを備えていない、図２３の右部のスピーカ装置３２のような装置であっても、コントローラ３１により遠隔操作制御処理を実現させることが可能となる。

　尚、図２３においては、スピーカ装置３２の例が示されているが、外部入力部３０６を備えている構成であれば、その他の装置でもよく、例えば、赤外光発光部などのコントローラ３１による制御に必要な構成を備えていない、テレビジョン受像器３３、照明装置３４、およびプロジェクタ装置２０１などであってもよい。

　また、以上においては、スピーカ３２、テレビジョン受像機３３、および照明装置３４などの制御対象装置から、赤外光に代表される指向性のある、自らを識別する赤外光コードからなる無線信号が常時送信され、制御装置であるコントローラ３１の方向を調整することで、無線信号を受信させることにより制御対象として認識し、制御状態を確立する例について説明してきた。

　しかしながら、制御装置であるコントローラ３１が、自らを識別する赤外光コードなどの指向性のある無線信号を制御対象装置に送信し、制御対象装置がコントローラ３１からの無線信号を受信したとき、自らを識別する赤外光コードからなる指向性のある無線信号をコントローラ３１に送信して制御状態を確立するようにしてもよい。

　この場合、コントローラ３１には、赤外光などの指向性のある無線信号を送信する指向性無線信号送信部がさらに設けられ、例えば、タクトスイッチ５４－１乃至５４－３のいずれかが操作されたとき、無線信号を送信させる。また、制御対象装置には、赤外光などの指向性のある無線信号を受信させる指向性無線信号受信部がさらに設けられ、例えば、コントローラ３１からの赤外光からなる無線信号が受信されるとき、赤外光発光部９２，１１２，１３２，２４２，または３５３が、赤外光コードからなる所定のパターンで発光する。

　＜＜４．ソフトウェアにより実行させる例＞＞
　ところで、上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。

　図２４は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタフェース１００５が接続されている。バス１００４には、ROM(Read Only Memory)１００２およびRAM(Random Access Memory)１００３が接続されている。

　入出力インタフェース１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。

　CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１ら読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM１００３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。

　以上のように構成されるコンピュータでは、CPU１００１が、例えば、記憶部１００８に記憶されているプログラムを、入出力インタフェース１００５及びバス１００４を介して、RAM１００３にロードして実行することにより、上述した一連の処理が行われる。

　コンピュータ（CPU１００１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア１０１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。

　コンピュータでは、プログラムは、リムーバブルメディア１０１１をドライブ１０１０に装着することにより、入出力インタフェース１００５を介して、記憶部１００８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１００９で受信し、記憶部１００８にインストールすることができる。その他、プログラムは、ROM１００２や記憶部１００８に、あらかじめインストールしておくことができる。

　なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

　尚、図３，図１７のコントローラ３１の制御部７１、図５のスピーカ装置３２の制御部９１、図６のテレビジョン受像器３３の制御部１１１、図７の照明装置３４の制御部１３１、並びに、図１８のプロジェクタ装置２０１の制御部２４１が、図２４のパーソナルコンピュータのCPU１００１に対応するものである。

　また、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。

　なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。

　例えば、本開示は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

　また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。

　さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。

　尚、本開示は、以下のような構成も取ることができる。
＜１＞　制御装置であって、
　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、
　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部とを含み、
　前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
　制御装置。
＜２＞　前記制御装置の本体の方向を検出する方向検出部をさらに含み、
　前記制御部は、前記方向検出部により検出された前記制御装置の本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを生成し、生成した前記制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する
　＜１＞に記載の制御装置。
＜３＞　前記制御部は、前記方向検出部により検出された本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出し、前記制御パラメータに応じた制御コマンドを生成し、前記識別信号を送信した前記制御対象装置に送信する
　＜２＞に記載の制御装置。
＜４＞　前記制御部は、前記方向検出部により検出された前記制御装置の本体が、所定の軸を中心に捻るように回転したときの回転量に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出し、前記制御パラメータに応じた制御コマンドを生成し、前記識別信号を送信した前記制御対象装置に送信する
　＜３＞に記載の制御装置。
＜５＞　前記制御装置の本体を振動させる振動部をさらに含み、
　前記制御部は、前記制御パラメータに応じて、前記振動部を振動させる
　＜４＞に記載の制御装置。
＜６＞　前記制御部は、前記制御パラメータに応じて、所定の時間間隔で、かつ、所定の強度で前記振動部を振動させる
　＜５＞に記載の制御装置。
＜７＞　前記制御部は、前記制御パラメータが連続変量である場合、前記制御パラメータに応じた時間間隔で、かつ、前記制御パラメータに応じた強度で前記振動部を振動させる
　＜６＞に記載の制御装置。
＜８＞　前記制御部は、前記制御パラメータが離散変量である場合、前記制御パラメータに応じた時間間隔で、かつ、一定の強度で前記振動部を振動させる
　＜６＞に記載の制御装置。
＜９＞　前記制御部は、前記識別信号を送信した前記制御対象装置が、前記制御コマンドを実行した後における、前記制御対象装置の状態を示すフィードバック情報を受信し、前記フィードバック情報に基づいて、前記振動部を振動させる
　＜５＞に記載の制御装置。
＜１０＞　音声を発生する音声出力部をさらに含み、
　前記制御部は、前記制御パラメータに応じて、前記音声出力部より音声を出力させる
　＜３＞に記載の制御装置。
＜１１＞　前記制御対象装置は、スピーカ装置であり、
　前記制御コマンドは、前記スピーカ装置の音量を制御するコマンドである
　＜１＞乃至＜９＞のいずれかに記載の制御装置。
＜１２＞　前記制御対象装置は、テレビジョン受像器であり、
　前記制御コマンドは、前記テレビジョン受像器のチャンネルを制御するコマンドである
　＜１＞乃至＜９＞のいずれかに記載の制御装置。
＜１３＞　前記制御対象装置は、照明装置であり、
　前記制御コマンドは、前記照明装置の明るさを制御するコマンドである
　＜１＞乃至＜９＞のいずれかに記載の制御装置。
＜１４＞　前記制御対象装置は、プロジェクタ装置であり、
　前記制御コマンドは、前記プロジェクタ装置により壁面に投影されるコンテンツの移動を制御するコマンドである
　＜１＞乃至＜９＞のいずれかに記載の制御装置。
＜１５＞　前記制御装置の本体を振動させる振動部と、
　前記プロジェクタ装置により前記コンテンツが投影される壁面を撮像する撮像部とをさらに含み、
　前記制御部は、前記撮像部により撮像される画像に基づいて、前記壁面のテクスチャを推定し、前記壁面に投影されるコンテンツを移動させる際、前記コンテンツを移動させる動線上の前記テクスチャによる凹凸に応じて、前記振動部を振動させる
　＜１４＞に記載の制御装置。
＜１６＞　前記制御対象装置は、所定の発光パターンの赤外光、指向性アンテナにより出力される電磁波、又は指向性スピーカにより出力される超音波により、前記識別信号を発する
　＜１＞乃至＜１５＞のいずれかに記載の制御装置。
＜１７＞　制御装置の制御方法であって、
　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信処理と、
　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御処理とを含み、
　前記識別信号受信処理は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
　制御方法。
＜１８＞　制御装置を制御するコンピュータを機能させるプログラムであって、
　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、
　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部としてコンピュータを機能させ、
　前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
　プログラム。
＜１９＞　制御装置により制御される電子機器であって、
　指向性を有する無線信号により、前記電子機器である自らを識別する識別信号を発生する識別信号発生部と、
　前記識別信号に基づいて、前記電子機器が制御対象装置として認識されることにより、前記制御装置より送信される前記電子機器を制御する制御コマンドを実行することにより、動作を制御する制御部とを含み、
　前記識別信号は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記電子機器を識別する前記識別信号として前記制御装置により受信される
　電子機器。

　１１　制御システム，　３１　コントローラ，　３２　スピーカ装置，　３３　テレビジョン受像器，　３４　照明装置，　３５　無線通信ネットワーク，　５１　制御モジュール，　５２　スピーカ，　５３　振動アクチュエータ，　５４，５４－１乃至５４－３　タクトスイッチ，　５５　赤外光受光部，　７１　制御部，　７２　加速度センサ，　７３　ジャイロセンサ，　７４　通信部，　９１　制御部，　９２　赤外光受光部，　９３　通信部，　９４　ボリュームコントローラ，　９５　スピーカ，　１１１　制御部，　１１２　赤外光受光部，　１１３　通信部，　１１４　チャンネルコントローラ，　１１５　チューナ，　１１６　表示部，　１１７　スピーカ，　１１８　ボリュームコントローラ，　１３１　制御部，　１３２　赤外光受光部，　１３３　通信部，　１３４　照度コントローラ，　１３５　発光部，　２０１　プロジェクタ装置，　２２１　カメラ，　２４１　制御部，　２４２　赤外光発光部，　２４３　通信部，　２４４　投影制御部，　２４５　投影部，　３０１　制御部，　３０２　赤外光受光部，　３０３　通信部，　３０４　ボリュームコントローラ，　３０５　スピーカ，　３０６　外部入力部，　３３１　追加装置，　３５１　制御部，　３５２　通信部，　３５３　赤外光受光部，　３５４　外部出力部

Claims (19)

1. 　制御装置であって、
   　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、
   　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部とを含み、
   　前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
   　制御装置。
2. 　前記制御装置の本体の方向を検出する方向検出部をさらに含み、
   　前記制御部は、前記方向検出部により検出された前記制御装置の本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御コマンドを生成し、生成した前記制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する
   　請求項１に記載の制御装置。
3. 　前記制御部は、前記方向検出部により検出された本体の方向の変化に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出し、前記制御パラメータに応じた制御コマンドを生成し、前記識別信号を送信した前記制御対象装置に送信する
   　請求項２に記載の制御装置。
4. 　前記制御部は、前記方向検出部により検出された前記制御装置の本体が、所定の軸を中心に捻るように回転したときの回転量に基づいて、前記識別信号により特定される前記制御対象装置を制御する制御パラメータを算出し、前記制御パラメータに応じた制御コマンドを生成し、前記識別信号を送信した前記制御対象装置に送信する
   　請求項３に記載の制御装置。
5. 　前記制御装置の本体を振動させる振動部をさらに含み、
   　前記制御部は、前記制御パラメータに応じて、前記振動部を振動させる
   　請求項４に記載の制御装置。
6. 　前記制御部は、前記制御パラメータに応じて、所定の時間間隔で、かつ、所定の強度で前記振動部を振動させる
   　請求項５に記載の制御装置。
7. 　前記制御部は、前記制御パラメータが連続変量である場合、前記制御パラメータに応じた時間間隔で、かつ、前記制御パラメータに応じた強度で前記振動部を振動させる
   　請求項６に記載の制御装置。
8. 　前記制御部は、前記制御パラメータが離散変量である場合、前記制御パラメータに応じた時間間隔で、かつ、一定の強度で前記振動部を振動させる
   　請求項６に記載の制御装置。
9. 　前記制御部は、前記識別信号を送信した前記制御対象装置が、前記制御コマンドを実行した後における、前記制御対象装置の状態を示すフィードバック情報を受信し、前記フィードバック情報に基づいて、前記振動部を振動させる
   　請求項５に記載の制御装置。
10. 　音声を発生する音声出力部をさらに含み、
    　前記制御部は、前記制御パラメータに応じて、前記音声出力部より音声を出力させる
    　請求項３に記載の制御装置。
11. 　前記制御対象装置は、スピーカ装置であり、
    　前記制御コマンドは、前記スピーカ装置の音量を制御するコマンドである
    　請求項１に記載の制御装置。
12. 　前記制御対象装置は、テレビジョン受像器であり、
    　前記制御コマンドは、前記テレビジョン受像器のチャンネルを制御するコマンドである
    　請求項１に記載の制御装置。
13. 　前記制御対象装置は、照明装置であり、
    　前記制御コマンドは、前記照明装置の明るさを制御するコマンドである
    　請求項１に記載の制御装置。
14. 　前記制御対象装置は、プロジェクタ装置であり、
    　前記制御コマンドは、前記プロジェクタ装置により壁面に投影されるコンテンツの移動を制御するコマンドである
    　請求項１に記載の制御装置。
15. 　前記制御装置の本体を振動させる振動部と、
    　前記プロジェクタ装置により前記コンテンツが投影される壁面を撮像する撮像部とをさらに含み、
    　前記制御部は、前記撮像部により撮像される画像に基づいて、前記壁面のテクスチャを推定し、前記壁面に投影されるコンテンツを移動させる際、前記コンテンツを移動させる動線上の前記テクスチャによる凹凸に応じて、前記振動部を振動させる
    　請求項１４に記載の制御装置。
16. 　前記制御対象装置は、所定の発光パターンの赤外光、指向性アンテナにより出力される電磁波、又は指向性スピーカにより出力される超音波により、前記識別信号を発する
    　請求項１に記載の制御装置。
17. 　制御装置の制御方法であって、
    　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信処理と、
    　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御処理とを含み、
    　前記識別信号受信処理は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
    　制御方法。
18. 　制御装置を制御するコンピュータを機能させるプログラムであって、
    　指向性を有する無線信号を送信または受信する制御対象装置から、前記制御対象装置を識別する識別信号を受信する識別信号受信部と、
    　前記識別信号により特定される前記制御対象装置を制御する制御コマンドを、前記識別信号を送信した前記制御対象装置に送信する制御部としてコンピュータを機能させ、
    　前記識別信号受信部は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記制御対象装置を識別する前記識別信号を受信する
    　プログラム。
19. 　制御装置により制御される電子機器であって、
    　指向性を有する無線信号により、前記電子機器である自らを識別する識別信号を発生する識別信号発生部と、
    　前記識別信号に基づいて、前記電子機器が制御対象装置として認識されることにより、前記制御装置より送信される前記電子機器を制御する制御コマンドを実行することにより、動作を制御する制御部とを含み、
    　前記識別信号は、前記制御装置の本体の方向が前記識別信号を受信できる状態に調整されたとき、前記電子機器を識別する前記識別信号として前記制御装置により受信される
    　電子機器。

Images