WO2018105544A1 - コレクションシステム，端末用プログラム，及びコレクション方法 - Google Patents

Abstract

【課題】撮影画像の解析処理を行わずに端末装置が撮影した対象の種類を特定する。 【解決手段】管理装置２０は，対象の映像を表示させる表示装置４０，当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する対象出現情報に基づいて，特定の表示装置４０に，特定の表示時間の間，特定種類の対象の映像を表示させる。端末装置１０は，撮影部１４によって撮影した撮影場所と撮影時刻とを特定する。本システムでは，対象出現情報に基づいて，ある端末装置１０による撮影場所がある表示装置４０と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する。

Description

コレクションシステム，端末用プログラム，及びコレクション方法

　本発明は，ディジタル図鑑にキャラクタの画像などをコレクションすることができるシステム，プログラム，及びその方法に関する。具体的に説明すると，本発明は，例えばプロジェクタなどによって表示された対象の映像を，携帯端末のカメラで撮影することで，その対象に関する情報を撮影画像とともにディジタル図鑑にコレクションするというレクリエーションを提供するためのシステムなどに関するものである。

　近年，高機能かつ多機能の携帯端末（いわゆるスマートフォン）の普及率が高まったことに伴い，利用者が持つ携帯端末に魅力的なコンテンツを提供することで，展示会や店舗への集客力を高めようとする試みが多く見受けられる。

　例えば，特許文献１には，いわゆるＡＲ（Augmented Reality）技術を利用した店舗集客支援システムが開示されている。特許文献１のシステムでは，店舗内の商品が配置されるエリアに設けられたスクリーンに所定のキャラクタの映像を投影し，この映像を利用者に携帯端末で撮影させ，その撮影画像に含まれるキャラクタを特定して，特定したキャラクタを捕獲済みとして図鑑に登録する。このシステムでは，利用者の携帯端末で撮影した画像をインターネットを介して管理サーバへ送信し，管理サーバにおいて撮影画像の解析を行い，その画像に含まれるキャラクタを特定する。スクリーンに投影されたキャラクタの映像にはマーキング情報（例：キャラクタの帽子の形状など）が埋め込まれているため，管理サーバは，撮影画像からこのマーキング情報を抽出することで，利用者がどの種類のキャラクタを撮影したのかを特定することができるようになっている。

特開２０１６－６２２７３号公報

　ところで，特許文献１のシステムでは，管理サーバで携帯端末が撮影した画像を解析し，その画像からマーキング情報を抽出して，画像に含まれるキャラクタを特定することとしている。このシステムでは，管理サーバが画像の解析処理を一極集中的に担っているといえる。しかしながら，展示会場内や店舗内にこのシステムを導入した場合，多数の携帯端末が同時に管理サーバにアクセスすることが想定される。この場合に，管理サーバに画像の解析という比較的に重い処理を一手に担当させると，管理サーバに対して多数の撮影画像が同時に送信されてきたときにその処理能力が追いつかずシステムエラーを起こしたり，ボトルネックが発生して利用者の携帯端末に対して迅速に画像解析結果を提供できなくなるという問題がある。

　また，特許文献１のシステムでは，利用者の携帯端末がインターネットに接続できる状態（オンライン状態）となっていることを前提としており，インターネットに接続できない状態（オフライン状態）では機能しない。つまり，特許文献１のシステムでは，携帯端末から管理サーバへ撮影画像を送信し，この管理サーバで撮影画像を解析してその画像に含まれるキャラクタを特定することとしているため，携帯端末がオフライン状態にあっては画像の解析を行うことができない。しかしながら，展示会場内や店舗内では携帯端末に電波が届かない場所が点在している場合があり，携帯端末が常にオンライン状態にあることを前提としてシステムを構築すると，システムが上手く機能せず，利用者に対して却ってストレスを与えかねないという問題がある。

　そこで，本発明は，表示装置によって表示された対象（キャラクタ等）の映像を利用者の端末装置で撮影させるコレクションシステムにおいて，撮影画像の解析処理を行わなくても，端末装置が撮影した対象の種類を特定できるようにすることを主たる目的とする。

　本発明の発明者は，上記従来発明の問題を解決する手段について鋭意検討した結果，対象の映像を表示する場所（表示装置）・対象の種類・表示時間を特定する対象出現情報に基づいて表示装置を制御することで，端末装置による撮影場所と撮影時刻が対象出現情報と一致したときには，端末装置の撮影画像を解析しなくても，端末装置によって撮影された対象の種類を特定することができるという知見を得た。また，上記対象出現情報を端末装置に提供し，端末装置自身で撮影場所と撮影時刻が対象出現情報と一致するかどうかを判定させることで，迅速に端末装置によって撮影された対象の種類を特定することができる。そして，本発明者は，上記知見に基づけば，従来技術の課題を解決できることに想到し，本発明を完成させた。具体的に説明すると，本発明は以下の構成・工程を有する。

　本発明の第１の側面は，コレクションシステムに関する。本発明に係るシステムは，少なくとも，撮影部を有する端末装置と，対象の映像を表示する複数の表示装置と，この表示装置を制御する管理装置とを備える。
　管理装置は，表示装置制御部を有する。表示装置制御部は，「対象出現情報」に基づいて，特定の表示装置に，特定の表示時間の間，特定種類の対象の映像を表示させる制御を行う。ここにいう「対象出現情報」とは，少なくとも，対象の映像を表示させる表示装置（場所），当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する情報である。なお，対象出現情報は，例えば，“特定の時間帯に”特定種類の対象の映像を特定表示装置に表示させることを規定した情報であってもよいし，“今現在”特定種類の対象の映像を特定表示装置に表示させているということを規定した情報であってもよい。
　端末装置は，位置情報特定部と計時部とを有する。位置情報特定部は，撮影部によって撮影した撮影場所を特定する。なお，位置情報取得部の例は，ＧＰＳ受信部や，後述する超音波センサなどである。計時部は，撮影部によって撮影した撮影時刻を特定する。
　ここで，本発明に係るシステムは，上記の対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定する。そして，本発明のシステムは，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する。

　上記構成のように，本発明のシステムでは，どの表示装置（Where）が，どの時間帯（When）に，どの種類（What）の対象を表示するのかという情報が，対象出現情報（タイムテーブル）によって定められている。このため，端末装置の撮影場所（Where）及び撮影時刻（When）をこの対象出現情報（タイムテーブル）と照合することで，端末装置がどの種類（What）の対象を撮影したのかを推定できる。つまり，端末装置の撮影画像に対象の映像が実際に写っているかどうかは判定しなくても，端末装置が，ある特定種類の対象の表示場所において，その表示時間内に撮影を行ったのであれば，その撮影画像には特定種類の対象の映像が写っている可能性が極めて高いといえる。このため，本発明のシステムでは，撮影場所と撮影時刻が上記対象出現情報（タイムテーブル）と一致したときに，その撮影画像には特定種類の対象の映像が写っているものと見做すこととした。これにより，撮影画像を解析しなくても，利用者が撮影した対象の種類を特定することができる。

　本発明のシステムにおいて，表示装置が設置されたエリアには，当該エリアの位置情報を端末装置に報知するための報知装置が設置されていることが好ましい。報知装置の例は，所定周波数の超音波を発生させてエリアの位置情報を伝達する超音波発生装置や，可視光又は不可視光に情報を乗せてエリアの位置情報を伝達する発光装置，或いはビーコンを利用した近距離無線通信（いわゆるＢＬＥ）によってエリアの位置情報を伝達する無線基地局などである。この場合，端末装置の位置情報特定部は，報知装置から位置情報を取得することで，撮影場所を特定する。端末装置の位置情報取得部は，報知装置の形態に合わせて，超音波センサや，光センサ，或いはビーコン受信装置を採用すればよい。

　上記のように，表示装置が設置されたエリア内に，各表示装置と対応付けた報知装置を設置しておくことで，端末装置に対して迅速に位置情報を伝達することができる。また，端末装置としては，表示装置と同じエリアに属するか否かの判定が容易になる。

　本発明のシステムにおいて，端末装置は，さらに記憶部と対象撮影成否判断部を有することが好ましい。記憶部は，対象出現情報（タイムテーブル）を記憶する。また，対象撮影成否判断部は，対象出現情報に基づいて，端末装置自身の撮影場所がある表示装置と同じエリアに属し，かつ，自身の撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，自身によって当該特定種類の対象の映像が撮影されたと判断する

　上記構成のように，端末装置に対象出現情報を記憶させ，端末装置自身で撮影場所と撮影時刻がこの対象出現情報と一致するかどうかを判定させることで，端末装置が仮にオフライン状態であっても，撮影画像に含まれる対象の種類を特定することが可能となる。つまり，対象の種類を特定する際に，端末装置は管理装置とインターネット等を介して接続されている必要はない。

　本発明において，管理装置は，対象出現情報を生成する対象出現情報生成部と，対象出現情報を端末装置に向けて送信する通信部とを有することとしてもよい。

　上記構成のように，管理装置に対象出現情報を生成する機能を持たせることで，対象が出現する場所や時間帯を，展示会や店舗の現場でリアルタイムに変更・追加することができる。これにより，例えば客が少ない場所に希少な対象を出現させたり，客が多い場所には対象が出現する頻度を低くするなどの対処が可能となる。

　本発明のシステムは，端末装置及び管理装置にインターネットを介して接続されたサーバ装置をさらに備えていてもよい。この場合に，サーバ装置は，管理装置によって生成された対象出現情報を受け取り，端末装置に対して送信する通信部を有することが好ましい。

　上記構成のように，管理装置にて生成した対象出現情報をサーバ装置を介して端末装置に送信してもよい。この場合には，端末装置が展示会場内や店舗内に入る前に対象出現情報を端末装置に提供しておけば，端末装置が仮にオフライン状態になっても特に問題が発生しないようにすることができる。

　本発明のシステムは，端末装置及び管理装置にインターネットを介して接続されたサーバ装置をさらに備えていてもよい。この場合に，サーバ装置が，対象出現情報生成部（対象出現情報を生成する要素）と，対象撮影成否判断部（対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する要素）を有することとすることもできる。この場合には，端末装置が撮影時にオンライン状態にないと撮影画像に含まれる対象の種類を特定できないこととなるが，本発明のシステムは，このような形態も含み得る。このような形態であっても，少なくとも前述した第１の目的は達成できる。

　本発明の第２の側面は，端末装置用のプログラムに関する。本発明に係るプログラムは，携帯型情報通信端末（例えば汎用的なスマートフォン）を，前述した第１の側面に係るシステムにおける端末装置として機能させる。本発明のプログラムは，インターネットを介して携帯型情報通信端末にダウンロードできるものであってもよいし，携帯型情報通信端末に予めインストールされたものであってもよい。

　本発明の第３の側面は，コンピュータシステムが実行するコレクション方法に関する。本発明に係るコレクション方法は，第１工程と第２工程を含む。第１工程では，対象の映像を表示させる表示装置，当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する対象出現情報に基づいて，特定の表示装置に，特定の表示時間の間，特定種類の対象の映像を表示させる。第２工程では，対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する。本発明の第３の側面に係る方法は，前述した第１の側面に係るシステムによって実行できる。

　本発明によれば，撮影画像の解析処理を行わなくても，端末装置が撮影した対象の種類を特定することができる。

図１は，本発明に係るコレクションシステムの全体構成を模式的に示した概念図る。 図２は，本発明に係るコレクションシステムの機能構成を示したブロック図である。 図３は，対象出現情報（タイムテーブル）の例を示した概念図である。 図４は，端末装置が行う処理の一例を示したフローチャートである。 図５は，ディジタル動物図鑑の一例を示している。

　以下，図面を用いて本発明を実施するための形態について説明する。本発明は，以下に説明する形態に限定されるものではなく，以下の形態から当業者が自明な範囲で適宜変更したものも含む。

　まず，図１を参照して，本発明のコレクションシステム１００の概要を説明する。図１は，本発明の一実施形態に係るコレクションシステム１００の全体構成を模式的に示している。図１に示されるように，本実施形態に係るシステム１００は，端末装置１０と，管理装置２０と，サーバ装置３０と，複数の表示装置４０と，複数の報知装置５０とを備えている。端末装置１０は，利用者によって所有されるものであり，一般的なスマートフォンなどの携帯型情報通信端末がこれに相当する。管理装置２０は，展示会場や店舗などの現場に配備されシステムの管理者によって操作されるものであり，一般的なラップトップ型のパーソナルコンピュータなどがこれに相当する。サーバ装置３０は，インターネットを通じて端末装置１０及び管理装置２０に接続されたウェブサーバであり，システムの管理者によって運用される。各表示装置４０は，管理装置２０に有線又は無線接続されており，管理装置２０の制御に従って映像を表示する。報知装置５０は，表示装置４０と同じエリアに配置され，端末装置１０に対して各エリアを識別するための位置情報を報知するための装置である。

　図１にされるように，本システムにおいて，展示会場や店舗は複数のエリアに区分けされる。図示した例では，便宜的に，エリアＡ，エリアＢ，エリアＣの３つのエリアに区分けされているが，実際にはより多くのエリアが設けられる。各エリアには，表示装置４０と報知装置５０が少なくとも１つずつ設置されている。エリアＡ内の報知装置５０ａは，当該報知装置５０ａが設置されたエリアが「エリアＡ」であることを端末装置１０に伝達し，同様に，エリアＢ内の報知装置５０ｂは，当該報知装置５０ｂが設置されたエリアが「エリアＢ」であることを端末装置１０に伝達する。これにより，端末装置１０は各報知装置５０からの情報を受けて自身の現在位置がどのエリアに属するかを判別できる。また，各エリアには表示装置４０が設置されており，別のエリアに属する表示装置４０は，管理装置２０によって別々に制御されている。例えば，図示した例では，エリアＡに属する表示装置４０ａは，ゾウの映像を表示しており，エリアＢに属する表示装置４０ｂは，ウサギの映像を表示しており，エリアＢに属する表示装置４０ｃは，映像を表示していない。このように，各エリアの表示装置４０は，表示する映像の種類と映像を表示するタイミングについて，個別に管理装置２０からの制御を受けることとなる。

　利用者は，自身が所有する端末装置１０を各エリア内に持ち込み，各表示装置４０が表示する映像を，端末装置１０が備える撮影手段（カメラ）を利用して撮影する。本システムは，各エリアにおいて，特定種類の対象の映像が表示されている表示時間内に，端末装置１０が撮影を行った場合，その端末装置１０の撮影画像にはその特定種類の対象の映像が写っていると判断する。例えば，エリアＡでは，表示装置４０ａによってゾウの映像が映し出されている。このゾウの映像の表示時間内に，エリアＡにおいて端末装置１０が撮影を行った場合，その撮影画像にはゾウの映像が写っていると判断される。本システムは，表示装置によって映し出された映像を端末装置で撮影するという趣旨のレクリエーションで利用されるものであるため，上記のように，特定種類の対象の映像が表示されている表示時間内に同じエリアで端末装置１０による撮影が行われた場合，その撮影画像にはその特定種類の対象の映像が写っている可能性が高いといえる。なお，実際の撮影画像に特定種類の対象の映像が写っているかどうかは，本システムにおいては判断しない。

　図２は，本発明の一実施形態に係るコレクションシステム１００の機能構成を示している。以下，図２を参照して，本システムを構成する各要素について詳しく説明する。

　図２に示されるように，端末装置１０は，端末制御部１１，記憶部１２，通信部１３，撮影部１４，位置情報特定部１５，計時部１６，入力部１７，及び出力部１８を有している。なお，図２では，端末装置１０の機能構成として一般的なものを例示している。本システムでは，端末装置１０が複数台存在することを想定しているが，各端末装置１０はすべてが同じ構成を有している必要はなく，異なる構成を有していてもよい。

　端末制御部１１は，端末装置１０が備える他の要素１２～１８を制御する演算処理を行う。端末制御部１１としては，ＣＰＵ又はＧＰＵといったプロセッサを利用することができる。端末制御部１１は，記憶部１２に記憶されているアプリケーションプログラムを読み出し，このアプリケーションプログラムに従って他の要素を制御する。また，端末制御部１１は，アプリケーションプログラムに従った演算結果を，端末装置１０に適宜書き込んだり読み出したりすることができる。

　また，本実施形態において，端末制御部１１は，対象撮影成否判断部１１ａを有している。対象撮影成否判断部１１ａは，端末制御部１１によって実現される一機能部である。対象撮影成否判断部１１ａは，管理装置２０によって生成された対象出現情報に基づいて，端末装置１０自身の撮影場所がある表示装置４０と同じエリアに属し，かつ，自身の撮影時刻が当該表示装置４０による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，自身によって当該特定種類の対象の映像が撮影されたと判断する機能を持つ。対象撮影成否判断部１１ａが行う処理の詳細については，図４を参照して後述する。

　端末装置１０の記憶部１２は，端末制御部１１での演算処理等に用いられる情報を記憶するための要素である。具体的に説明すると，記憶部１２は，汎用的な携帯型の情報通信端末を，本発明に係るコレクションシステム１００における端末装置１０として機能させるアプリケーションプログラムを記憶している。このアプリケーションプログラムは，インターネットを経由して端末装置１０にダウンロードされたものであってもよいし，端末装置１０にプリインストールされたものであってもよい。また，記憶部１２には，本システム用のアプリケーションプログラム以外にも，その他のプログラムが記憶されていてもよい。ユーザからの指示により，本システム用のアプリケーションプログラムが起動されると，このプログラムに従った処理が実行される。記憶部１２のストレージ機能は，例えばＨＤＤ及びＳＤＤといった不揮発性メモリによって実現できる。また，記憶部１２は，端末制御部１１による演算処理の途中経過などを書き込む又は読み出すためのメモリとしての機能を有していてもよい。記憶部１２のメモリ機能は，ＲＡＭやＤＲＡＭといった揮発性メモリにより実現できる。また，端末装置１０の記憶部１２には，それを所持する利用者固有のユーザＩＤが記憶されていてもよい。また，記憶部１２には，ネットワーク上の識別情報であるＩＰアドレスが記憶されている。

　端末装置１０の通信部１３は，端末装置１０とサーバ装置３０との間で，インターネットを介して情報の授受を行うための要素である。通信部１３は，端末制御部１１の制御に従って，各種の情報をサーバ装置３０から受信することもできるし，サーバ装置３０へと送信することもできる。本実施形態では，端末装置１０は，通信部１３を介して，管理装置２０が生成した対象出現情報（タイムテーブル）を，サーバ装置３０から受信する。通信部１３によってサーバ装置３０から受信した情報（具体的には対象出現情報）は，記憶部１２に記憶される。

　撮影部１４は，静止画又は動画の画像データを取得するためのカメラである。撮影部１４を構成するカメラは，端末装置１０に内蔵されているものを利用する。撮影部１４によって取得された画像データは，端末制御部１１へと送出され所定の演算処理が行われた後に，記憶部１２に保存される。カメラは，例えば，レンズ，メカシャッター，シャッタードライバ，ＣＣＤイメージセンサユニットやＣＭＯＳイメージセンサユニットといった光電変換素子，光電変換素子から電荷量を読み出し画像データを生成するデジタルシグナルプロセッサ（ＤＳＰ），ＩＣメモリなどで実現される。

　位置情報特定部１５は，端末装置１０の現在の位置情報を特定するための要素である。本実施形態において，端末装置１０の位置情報特定部１５は，報知装置５０から発信される位置情報を受信可能な機能を持つ。例えば，報知装置５０が超音波発生装置である場合には，位置情報特定部１５としては超音波センサを採用し，報知装置５０が発光装置である場合には，位置情報特定部１５としては光センサを採用し，報知装置５０が無線基地局である場合には，位置情報特定部１５としてはビーコン受信装置を採用すればよい。例えば，報知装置５０が超音波発生装置である場合を例に挙げて説明すると，エリアＡ内の報知装置５０ａからは１００ｋＨｚの超音波が放出され，エリアＢ内の報知装置５０ｂからは１５０ｋＨｚの超音波が放出され，エリアＣ内の報知装置５０ｃからは２００ｋＨｚｎ超音波が放出される。このため，端末装置１０の位置情報特定部１５は，例えば約１００ｋＨｚの超音波を検知したときに，現在のエリアがエリアＡであることを特定できる。なお，超音波の周波数と各エリアとを関連付けるための情報は，端末装置１０の記憶部１２に記憶されている。このため，位置情報特定部１５は，超音波の周波数を検出し，その周波数を記憶部１２に記憶されている情報と照合することで，その周波数がどのエリアのものであるかを特定できる。このように，端末装置１０の位置情報特定部１５として，同じエリア内に属する報知装置５０から直接位置情報を入手できる機能構成を採用することにより，端末装置１０は，仮にオフライン状態であっても自己の現在位置を特定することができる。その他，端末装置１０の位置情報特定部１５は，ＧＰＳ（Global Positioning System）を利用した測位を行う機能を持つＧＰＳ測位部であってもよい。具体的には，ＧＰＳ測位部は，複数のＧＰＳ衛星から送られた電波に含まれる電波送信時間の情報に基づき，それぞれの電波を受信するのに要した時間を測定し，その時間を示す時間情報に基づいて，端末装置１０の所在位置の緯度経度に関する情報を算出する。

　計時部１６は，ＲＴＣ（Real Time Clock）などのシステムクロックを利用してさまざまな計時処理を行う。例えば，計時部１６は，現在時刻の計時や，撮影部１４によって画像を撮影した撮影時刻の計時を行う。計時部１６が取得した時刻に関する情報は端末制御部１１へと送出され，端末制御部１１での演算処理に利用される。

　端末装置１０の入力部１７は，利用者から端末装置１０に対する情報の入力を受け付けるための要素である。入力部１７を介して入力された情報は，端末制御部１１へと伝達される。入力部１７は，公知の情報通信端末に利用されている種々の入力装置を採用することができる。入力部１７の例は，タッチパネル，ボタン，カーソル，マイクロフォン，キーボード，及びマウスであるが，これらに限定されない。また，入力部１７を構成するタッチパネルは，出力部１８を構成するディスプレイと共に，タッチパネルディスプレイを構成していてもよい。

　端末装置１０の出力部１８は，端末装置１０の利用者に向けて各種の情報を出力するための要素である。端末制御部１１で演算処理された情報は，出力部１８によって出力される。出力部１８は，公知の情報通信端末に利用されている種々の外部出力装置を採用することができる。出力部１８の例は，ディスプレイ，スピーカ，フラッシュライト，及びバイブレータであるが，これらに限定されない。前述のとおり，ディスプレイは，タッチパネルディスプレイであってもよい。出力部１８は，端末制御部１１の制御に従って，種々の情報を出力できる。

　図２に示されるように，管理装置２０は，管理制御部２１，記憶部２２，通信部２３，入力部２４，及び出力部２５を有している。管理装置２０は，基本的に，各エリアに配置された各表示装置４０を制御するためのコンピュータであり，各表示装置４０と同じ施設内に配置され，各表示装置４０に対して有線又は無線にて接続されていることが好ましい。ただし，管理装置４０は，各表示装置４０とインターネットを介して接続されていてもよいし，また各表示装置４０と異なる施設に配置されたものであってもよい。

　管理制御部２１は，管理装置２０が備える他の要素２２～３５の全体制御を行う。管理制御部２１としては，ＣＰＵ又はＧＰＵといったプロセッサを利用することができる。管理制御部２１は，端末装置１０に対する情報を生成して，通信部２３を介してこの情報を送信することもできる。このため，管理端末２０の管理制御部２１は，本システムにおける端末装置１０を制御する機能も担っている。

　管理制御部２１は，対象出現情報を生成するための対象出現情報生成部２１ａを有する。「対象出現情報」とは，少なくとも，対象の映像を表示させる表示装置（場所），当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する情報である。さらに具体的に説明すると，対象出現情報には，あるエリアに関する情報とそこに属する表示装置に関する情報が関連付けて規定されており，さらに，あるエリアに関する情報とそのエリアを特定するために報知装置５０から出力される位置情報（超音波の周波数など）が関連付けて規定されている。例えば，図３には，対象出現情報の一例が，模式的に示されている。図３の例では，エリアＡに属するプロジェクタ４０ａは，ＡＭ１０時台において，ＡＭ１０：０５～１０：２０分の間はゾウ（識別Ｎｏ．００１）の映像を表示し，ＡＭ１０：２５～３０の間はウサギ（識別Ｎｏ．００２）の映像を表示し，ＡＭ１０：４０～１０：５０の間はイヌ（識別Ｎｏ．００３）の映像を表示することが，対象出現情報として規定されている。また，例えば，エリアＡには表示装置４０ａが配置されていることと，エリアＡでは報知装置５０から１００ｋＨｚの周波数の超音波が出力されていることが，対象出現情報として規定されている。

　このように，対象出現情報は，各表示装置について，どの時間帯にどの種類の対象の映像を表示させるかを定めた情報であり，タイムテーブル型のデータに類するものである。また，対象出現情報では，各表示装置がどのエリアに属するのか，及び各エリアでは報知装置５０からどのような位置情報が報知されているのかが定められている。なお，ここで説明した対象出現情報は，過去から将来に亘る“特定の時間帯に”，特定種類の対象の映像を特定表示装置に表示させることを規定している。ただし，対象出現情報の例はこれに限られず，例えば，“今現在”，特定種類の対象の映像を特定表示装置に表示させているということを規定した情報であってもよい。前者と後者は，対象の種類・表示場所・表示時間を規定したものである点において共通の情報を規定したものであるといえる。

　対象出現情報生成部２１ａは，管理者が入力部２４を介して入力した情報を受け付けて，対象出現情報を生成したり修正したりすることができる。つまり，図３に示した対象出現情報（タイムテーブル）は，管理者が管理装置２０を操作することで自由に生成及び修正することが可能である。このように，対象出現情報生成部２１ａを管理装置２０に設け，管理者がその情報を任意に生成等できるようにすることで，展示会場や店舗などの施設内の状況に応じて，表示装置４０に表示させる映像の種類やタイミングを自由に調整できる。なお，対象出現情報は予め記憶部２２に記憶しておくことも可能であり，その場合には，対象出現情報生成部２１ａは，この記憶部２２内の情報を読み出すこととすればよい。

　また，管理制御部２１は，表示装置４０を制御するための表示装置制御部２１ｂを有する。表示装置制御部２１ｂは，対象出現情報生成部２１ａが生成した対象出現情報に従って，各エリアに配備された表示装置４０を制御する。前述したとおり，対象出現情報には，表示装置４０ごとに映像を表示する対象の種類とその表示時間とが規定されているため，この対象出現情報に従い，表示装置制御部２１ｂは，表示装置４０ごとに，映像を表示する対象の種類とその表示時間を制御することができる。このように，各エリアに配置された表示装置４０は，対象出現情報に従って動作する。

　また，管理制御部２１は，各エリアに配備された報知装置５０を制御する報知装置制御部２１ｃを有する。報知装置制御部２１ｃは，エリアごとに各報知装置５０から異なる位置情報が報知されるように，各報知装置５０を制御する。例えば，報知装置５０が超音波発生装置である場合を例に挙げて説明すると，報知装置制御部２１ｃは，エリアＡ，エリアＢ，エリアＣに配備された報知装置５０ａ～５０ｃから，それぞれ１００ｋＨｚ，１５０ｋＨｚ，２００ｋＨｚといったように異なった周波数の超音波が発生されるように，各報知装置を制御している。これにより，端末装置１０の位置情報特定部１５は，報知装置５０から出力された位置情報（例えば超音波の周波数）を検知することで，現在位置するエリアがどのエリアであるのかを特定できる。

　管理装置２０の記憶部２２は，管理制御部２１での演算処理等に用いられる情報を記憶するための要素である。記憶部２２のストレージ機能は，例えばＨＤＤ及びＳＤＤといった不揮発性メモリによって実現できる。また，記憶部２２は，制御演算部２１による演算処理の途中経過などを書き込む又は読み出すためのメモリとしての機能を有していてもよい。記憶部２２のメモリ機能は，ＲＡＭやＤＲＡＭといった揮発性メモリにより実現できる。

　また，管理装置２０の記憶部２２には，表示装置４０に表示させる対象の映像データが記憶されている。対象の映像データは，静止画データであってもよいし動画データであってもよい。映像として表示する対象は特に限定されないが，一例として，動物や，植物，昆虫，水生生物，自動車，船舶，航空機，アニメ・映画・漫画・物語のキャラクタなどが挙げられる。また，記憶部２２には，対象の映像データが複数種類記憶される。例えば，本願で説明したシステムの一例では，動物の映像が表示装置４０によって表示されるものであるが，ゾウ（識別Ｎｏ．００１）や，ウサギ（識別Ｎｏ．００２），イヌ（識別Ｎｏ．００３），キツネ（識別Ｎｏ．００４），サル（識別Ｎｏ．００５），ネコ（識別Ｎｏ．００６）などの各種の動物が，その識別ＩＤとともに記憶部２２によって構築されたデータベースに記憶されている。管理制御部２１の表示装置制御部２１ｂは，対象出現情報に従って，対象の映像データを記憶部２２から読み出して，所定の表示時間の間，所定の表示装置４０に対象の映像データを表示させる。

　管理装置２０の通信部２３は，管理装置２０とサーバ装置３０との間で，インターネットを介した情報の授受を行うための要素である。通信部２３は，管理制御部２１の制御に従って，各種の情報をサーバ装置３０から受信することもできるし，サーバ装置３０へと送信することもできる。本実施形態では，管理装置２０は，管理制御部２１で生成した対象出現情報を，通信部２３から，サーバ装置３０を通じて，端末装置１０に向けて送信する。これにより，管理装置２０と端末装置１０とで，どの表示装置が，どのタイミングで，どの種類の対象の映像を表示するかという情報（対象出現情報）を共有することができる。

　管理装置２０の入力部２４は，管理者から管理装置２０に対する情報の入力を受け付けるための要素である。入力部２４を介して入力された情報は，管理制御部２１へと伝達される。入力部２４は，公知の情報通信端末に利用されている種々の入力装置を採用することができる。入力部１７の例は，タッチパネル，ボタン，カーソル，マイクロフォン，キーボード，及びマウスであるが，これらに限定されない。管理者は，入力部２４を介して情報を入力することで，任意の対象出現情報を生成できる。

　管理装置２０の出力部２５は，管理者に向けて各種の情報を出力するための要素である。管理制御部２１で演算処理された情報は，出力部２５によって出力される。出力部２５は，公知のパーソナルコンピュータに利用されている種々の外部出力装置を採用することができる。出力部２５の例は，ディスプレイやスピーカであるが，これらに限定されない。なお，ディスプレイは，タッチパネルディスプレイであってもよい。

　図２に示されるように，サーバ装置４０は，サーバ制御部３１，記憶部３２，及び通信部３３を有する。本実施形態において，サーバ装置４０は，主に，管理装置２０から受信した対象出現情報を，端末装置１０に提供するという情報の中継機能を担う。

　サーバ制御部３１は，サーバ装置３０の全体制御を行う。サーバ制御部３１としては，ＣＰＵ又はＧＰＵといったプロセッサを利用することができる。

　サーバ装置３０の記憶部３２は，サーバ制御部３１での演算処理等に用いられる情報を記憶するための要素である。記憶部３２のストレージ機能は，例えばＨＤＤ及びＳＤＤといった不揮発性メモリによって実現できる。また，記憶部３２のメモリ機能は，ＲＡＭやＤＲＡＭといった揮発性メモリにより実現できる。

　サーバ装置３０の通信部３３は，サーバ装置３０と端末装置１０との間，及びサーバ装置３０と管理装置２０との間で，インターネットを介した情報の授受を行うための要素である。前述のように，サーバ装置３０は，通信部３３により，管理装置２０から対象出現情報を受信して，これを端末装置１０に送信する。管理装置２０から受信した対象出現情報は，サーバ装置３０の記憶部３２に記憶される。また，管理装置２０によって対象出現情報が修正された場合には，サーバ装置３０の記憶部３２に記憶されている対象出現情報も更新される。

　表示装置４０は，管理装置２０からの制御に従って，対象の映像を表示する。表示装置４０としては，スクリーンや壁に映像を投影するプロジェクタを採用することもできるし，映像を表示可能な液晶ディスプレイや有機ＥＬディスプレイを採用することもできる。また，表示装置４０は，３次元のホログラム映像を表示するものであってもよい。その他，表示装置４０としては公知のものを適宜採用できる。表示装置４０は，各エリアに少なくとも１台配置される。一つのエリアに複数の表示装置４０を配置することも可能であるが，基本的に，同じエリアに配置された複数の表示装置４０は，同じ種類の対象の映像を表示するように制御される。

　報知装置５０は，端末装置１０に対して位置情報を報知するための要素である。報知装置の例は，所定周波数の超音波を発生させてエリアの位置情報を伝達する超音波発生装置や，可視光又は不可視光に情報を乗せてエリアの位置情報を伝達する発光装置，或いはビーコンを利用した近距離無線通信（いわゆるＢＬＥ）によってエリアの位置情報を伝達する無線基地局などである。報知装置５０は，各エリアに少なくとも一台配置される。各エリア内の報知装置５０から発せられる情報は，それぞれのエリアで異なっている。例えば，報知装置５０が超音波発生装置である場合には，各エリアで放出される超音波の周波数が異なる。このため，端末装置１０は報知装置５０から発せられる情報を解析することで，自身の現在位置がどのエリアに属しているのかを特定できる。一つのエリアに複数の報知装置５０を配置することも可能であるが，基本的に，同じエリアに配置された複数の報知装置５０は，同じ位置情報を端末装置１０に伝達するものである。

　続いて，図４を参照して，端末装置１０が行う処理の一例を説明する。ここでは，主に，端末装置１０が，あるエリア内で撮影を行ったときに，その撮影画像に写っている可能性が高い対象の映像の種類を特定する処理について説明する。

　まず事前の準備として，端末装置１０を持った利用者が展示会や店舗などの施設に入る前に，端末装置１０は，管理装置２０で生成された対象出現情報をサーバ装置３０から受信（ダウンロード）する（ステップＳ１）。端末装置１０は，サーバ装置３０から受け取った対象出現情報を，記憶部１２に記憶する。前述したとおり，対象出現情報には，対象の映像を表示させる表示装置（場所）に関する情報，表示装置に表示させる対象の種類に関する情報，及び対象の映像を表示装置に表示させる表示時間に関する情報が含まれる。また，対象出現情報には，あるエリアに関する情報とそこに属する表示装置に関する情報が関連付けて規定されており，さらに，あるエリアに関する情報とそのエリアを特定するために報知装置５０から出力される位置情報（超音波の周波数など）が関連付けて規定されている。従って，端末装置１０は，対象出現情報を得ることで，各エリアに配置されている表示装置４０，各エリアで報知装置５０から報知されている位置情報，各表示装置４０が表示する対象の映像の種類，及び，各表示装置が対象の映像を表示する時間を把握できる。これにより，施設内に電波の届かない場所がある場合や，端末装置１０が仮にオフライン状態となっている場合であっても，端末装置１０は，撮影画像に含まれる対象の種類を特定できる。

　次に，端末装置１０が表示装置４０及び報知装置５０が配置されたエリアに入ると，報知装置５０から報知されている位置情報を検出する（ステップＳ２）。例えば，エリア毎に報知装置５０から放出されている超音波の周波数が異なるため，端末装置１０は位置情報特定部１５でこの超音波の周波数を解析することで，現在自身が位置しているエリアを特定できる。なお，エリアが近接している場合，端末装置１０の位置情報特定部１５は２種以上の周波数を同時に検知することがあり得る。その場合，位置情報特定部１５は，２種の周波数の強度を比較し，より強い強度の周波数に関連付けられたエリアを，現在自身が位置しているエリアであると特定すればよい。

　次に，端末装置１０の利用者は，エリア内で，表示装置４０によって表示された対象の映像を見つけると，その対象の映像をカメラ（撮影部１４）で撮影する（ステップＳ３）。以降，この撮影画像に写り込んでいるであろう対象の種類を特定するための処理に移行する。

　撮影がなされると，端末装置１０は，サーバ装置３０にアクセスして，対象出現情報を再度受信する（ステップＳ４）。ただし，このステップＳ４は，必須ではなく，端末装置１０がオフライン状態にある場合には省略することができる。また，このステップＳ４は，最新の対象出現情報を受信するために行うものであるため，ステップＳ１で受信した対象出現情報が変更されていない場合には，省略することができる。他方で，ステップＳ４を必須とするのであれば，ステップＳ１を省略することも可能である。

　次に，端末装置１０は，対象の映像の撮影を行った撮影場所を特定する（ステップＳ５）。前述したステップＳ２において，端末装置１０は，報知装置５０からの報知された位置情報を検出しているため，そのまま同じエリア内で撮影を行ったのであれば，その報知装置５０から得られた位置情報に基づいて，そのエリアを撮影場所（撮影エリア）として特定する。

　次に，端末装置１０は，撮影場所と同じエリア内に配置されている表示装置４０を特定する（ステップＳ６）。対象出現情報には，どのエリアにどの表示装置４０が配置されているかが規定されているため，この対象出現情報を参照することで，端末装置１０は自身の撮影場所と同じエリア内の表示装置４０を特定できる。

　次に，端末装置１０は，撮影を行った時刻を特定する（ステップＳ７）。端末装置１０では，計時部１６が時刻を計測しているため，この計時部１６から撮影時刻を取得する。

　次に，端末装置１０の端末制御部１１の対象撮影成否判断部１１ａは，対象出現情報を参照して，ステップＳ７で取得した撮影時刻が，撮影時に自身と同じエリアに属していた表示装置４０による対象の映像の表示時間内であるか否かを判定する（ステップＳ８）。そして，対象撮影成否判断部１１ａは，ステップＳ７で取得した撮影時刻が，撮影時に自身と同じエリアに属していた表示装置４０による対象の映像の表示時間内であると判定した場合に，端末装置１０がその表示装置４０によって表示されている特定種類の対象の撮影に成功したものと判断する（ステップＳ９）。例えば，図３に示した例では，ＡＭ１０：０５～１０：２０の間はエリアＡの表示装置４０ａがゾウ（識別Ｎｏ．００１）の映像を表示することが，対象出現情報に規定されている。このため，エリアＡの表示装置４０ａは，この対象出現情報に従って，ＡＭ１０：０５～１０：２０の間にゾウの映像を表示することとなる。従って，端末装置１０による撮影場所がエリアＡ内であり，かつ，端末装置１０による撮影時刻がＡＭ１０：０５～１０：２０の間であれば，端末装置１０の撮影場所と撮影時刻がゾウの映像の表示場所と表示時間と一致しているため，端末装置１０の撮影画像には，エリアＡの表示装置４０ａによって表示されたゾウの映像が写り込んでいる可能性が高いといえる。そこで，端末装置１０の対象撮影成否判断部１１ａは，撮影画像の撮影場所と撮影時刻がゾウの映像の表示場所と表示時間と一致している場合に，ゾウの映像の撮影に成功したものと判断する。他方で，ステップＳ８でＮＯと判定した場合には，対象撮影成否判断部１１ａは，表示装置４０によって表示されている対象の撮影に失敗したものと判断する（ステップＳ１０）。

　次に，対象撮影成否判断部１１ａは，撮影に成功した対象の種類を特定する（ステップＳ１１）。端末装置１０による撮影時刻が表示装置４０の表示時間内であった場合，対象出現情報を参照することにより，その表示装置４０によって表示されていた対象の種類を一意に特定できる。これにより，撮影画像内に写り込んだ対象の種類を特定する。前述した例では，端末装置１０の撮影画像には，ゾウの映像が写り込んでいるものと判断する。

　続いて，端末装置１０の端末制御部１１は，ステップＳ３で撮影した撮影画像を，ステップＳ１１で特定した対象の種類と関連付けて，記憶部１２に保存する（ステップＳ１２）。具体的には，記憶部１２には，撮影画像を保存するための記憶空間が設けられており，撮影画像は，記憶部１２に図鑑形式で保存されることが好ましい。例えば，図５には，撮影画像を保存するための図鑑の一例が示されている。図５に示されるように，図鑑用の記憶空間には，対象（動物）の撮影画像を，対象の種類に分けて記録できるようになっている。例えば，識別Ｎｏ．００１用の記憶領域には，ゾウ用の撮影画像が記録できるようになっており，識別Ｎｏ．００２用の記憶領域には，ウサギ用の撮影画像が記録できるようになっている。このため，ステップＳ１０～Ｓ１２において，ゾウの映像の撮影に成功したと判断した場合には，その撮影画像を，識別Ｎｏ．００１用の記憶領域（ゾウ用の記憶領域）に保存する。このように，撮影画像を図鑑形式で保存できるようにすれば，展示会場や店舗内を散策して，各エリアで色々な種類の対象の映像を撮影し，その撮影画像をコレクションしていくという楽しみ方を，端末装置１０の利用者に対して提供することができる。

　以上のように，本発明のシステムでは，端末装置１０の撮影画像を解析しなくても，その撮影画像に含まれる対象の種類を特定し，撮影画像を図鑑形式で保存しておくことが可能となる。また，撮影画像に含まれる対象の種類を特定する際に，端末装置１０はサーバ装置３０と通信する必要がないため，迅速にその種類を特定することが可能となる。

　以上，本願明細書では，本発明の内容を表現するために，図面を参照しながら本発明の実施形態の説明を行った。ただし，本発明は，上記実施形態に限定されるものではなく，本願明細書に記載された事項に基づいて当業者が自明な変更形態や改良形態を包含するものである。

　例えば，本願明細書で説明した好ましい実施形態では，端末装置１０に対象撮影成否判断部１１ａと設け，管理装置２０に対象出現情報生成部２１ａを設けることとした。ただし，これらの対象撮影成否判断部１１ａと対象出現情報生成部２１ａの機能は，サーバ装置３０のサーバ制御部３１が担うものであってもよい。この場合には，サーバ装置３０のサーバ制御部３１が，管理装置２０の代わりに，対象出現情報を生成する。また，端末装置１０で撮影が行われた場合には，サーバ装置３０が，その撮影画像に特定種類の対象が写り込んでいるか否かを判断する。例えば，サーバ装置３０は，自身で生成した対象出現情報を管理装置２０に送信し，この対象出現情報に基づいて管理装置２０に各エリアの表示装置４０の制御を行わせる。また，端末装置１０で撮影が行われた後に，端末装置１０は，端末装置１０が報知装置５０から取得した位置情報と撮影時刻に関する情報を，サーバ装置３０に送信する。サーバ装置３０は，端末装置１０からこれらの情報を受け取ると，自身で生成した対象出現情報を参照して，端末装置１０による撮影場所がある表示装置４０と同じエリアに属し，かつ，当該端末装置１０による撮影時刻が当該表示装置４０による特定種類の対象の映像の表示時間と一致しているか否かを判定する。そして，一致していると判定した場合に，サーバ装置３０は，当該端末装置１０が当該特定種類の対象の映像の撮影に成功したと判断し，その判断結果に関する情報を，端末装置１０に提供する。これにより，サーバ装置３０は，撮影画像を解析しなくても，その撮影画像に写り込んでいる可能性の高い対象の種類を特定できる。また，このようにすれば，端末装置１０は，サーバ装置３０の判断結果に基づいて，自身の撮影画像に写り込んでいる可能性の高い対象の種類を特定することができる。従って，端末装置１０は，撮影画像を対象の種類と関連付けて図鑑形式で保存することが可能となる。

　本発明は，ディジタル図鑑にキャラクタの画像などをコレクションすることができるシステムに関する。従って，本発明は，エンターテイメント産業などにおいて好適に利用できる。

１０…端末装置　　　　　　　　１１…端末制御部
１１ａ…対象撮影成否判断部　　１２…記憶部
１３…通信部　　　　　　　　　１４…撮影部
１５…位置情報特定部　　　　　１６…計時部
１７…入力部　　　　　　　　　１８…出力部
２０…管理装置　　　　　　　　２１…管理制御部
２１ａ…対象出現情報生成部　　２１ｂ…表示装置制御部
２１ｃ…報知装置制御部　　　　２２…記憶部
２３…通信部　　　　　　　　　２４…入力部
２５…出力部　　　　　　　　　３０…サーバ装置
３１…サーバ制御部　　　　　　３２…記憶部
３３…通信部　　　　　　　　　１００…コレクションシステム

Claims (8)

1. 　撮影部を有する端末装置と，対象の映像を表示する複数の表示装置と，前記表示装置を制御する管理装置と，を備えるシステムであって，
   　前記管理装置は，
   　　対象の映像を表示させる表示装置，当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する対象出現情報に基づいて，特定の表示装置に，特定の表示時間の間，特定種類の対象の映像を表示させる表示装置制御部を有し，
   　前記端末装置は，
   　　前記撮影部によって撮影した撮影場所を特定する位置情報特定部と，
   　　前記撮影部によって撮影した撮影時刻を特定する計時部と，を有し，
   　前記システムは，
   　　前記対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する
   　システム。
2. 　前記表示装置が設置されたエリアには，当該エリアの位置情報を前記端末装置に報知するための報知装置が設置されており，
   　前記端末装置の前記位置情報特定部は，前記報知装置から前記位置情報を取得することで，前記撮影場所を特定する
   　請求項１に記載のシステム。
3. 　前記端末装置は，
   　　前記対象出現情報を記憶する記憶部と，
   　　前記対象出現情報に基づいて，自己の撮影場所がある表示装置と同じエリアに属し，かつ，自己の撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，自身によって当該特定種類の対象の映像が撮影されたと判断する対象撮影成否判断部と，を有する
   　請求項１又は請求項２に記載のシステム。
4. 　前記管理装置は，
   　　前記対象出現情報を生成する対象出現情報生成部と，
   　　前記対象出現情報を前記端末装置に向けて送信する通信部と，を有する
   　請求項１から請求項３のいずれかに記載のシステム。
5. 　前記システムは，前記端末装置及び前記管理装置にインターネットを介して接続されたサーバ装置をさらに備え，
   　前記サーバ装置は，前記管理装置によって生成された前記対象出現情報を受け取り，前記端末装置に対して送信する通信部を有する
   　請求項４に記載のシステム。
6. 　前記システムは，前記端末装置及び前記管理装置にインターネットを介して接続されたサーバ装置をさらに備え，
   　前記サーバ装置は，
   　　前記対象出現情報を生成する対象出現情報生成部と，
   　　前記対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する対象撮影成否判断部と，を有する
   　請求項１に記載のシステム。
7. 　携帯型情報通信端末を，請求項１に記載のシステムにおける前記端末装置として機能させるためのプログラム。
8. 　対象の映像を表示させる表示装置，当該表示装置に表示させる対象の種類，及び当該種類の対象の映像の表示時間を特定する対象出現情報に基づいて，特定の表示装置に，特定の表示時間の間，特定種類の対象の映像を表示させる工程と，
   　前記対象出現情報に基づいて，ある端末装置による撮影場所がある表示装置と同じエリアに属し，かつ，当該端末装置による撮影時刻が当該表示装置による特定種類の対象の映像の表示時間と一致しているか否かを判定し，一致していると判定した場合に，当該端末装置によって当該特定種類の対象の映像が撮影されたと判断する工程と，を含む
   　方法。

Images