JP5150067B2 - 監視システム、監視装置及び監視方法 - Google Patents

Description

本発明は、人物を撮影画像により監視する監視システム、監視装置及び監視方法に関する。

近年、インターネットの普及により、ネットワークを介した遠隔監視システムが低コストで実現可能になった。一方、犯罪は増加の一途を辿っており、特に児童を狙った凶悪な犯罪が大きな社会問題となっている。

このような中で、自治体や企業などが児童の安全を守るために多くの監視システムが開発されている。監視システムの中には、特に児童の通学を見守るために、通学路を中心とした街頭に監視カメラを設置し、また児童には個人を特定できる無線ＩＣタグを所持させ、児童が監視カメラに近寄ると、監視カメラが画像を取得し、Ｗｅｂサーバに保存するシステムが検討されている。

このような監視システムでは、保護者が自宅のパソコンなどから上記Ｗｅｂサーバにアクセスし、自ら児童の画像を取得するので、児童の安全を見守ることができる。しかし、上記監視システムでは、対象となる児童以外の人物も画像に含まれることが考えられ、その人物のプライバシーを侵害するおそれがあった。

これに対し、児童が持つ無線ＩＣタグから位置情報を取得し、その位置情報を基にカメラのパン・チルト・ズーム動作を行って対象の児童だけが写った画像を撮影し、保護者はその画像を閲覧する監視システムが提案されている（特許文献１参照）。この従来例の監視システムでは、他の児童が画像に写ることを回避することが可能であり、プライバシーの保護が確保される。

このように、街頭に設置したカメラがパン・チルト・ズーム動作を行って対象となる児童のみの画像を取得し、保護者が閲覧するような監視システムでは、保護者による児童の通学の監視とプライバシーの保護が両立可能であると考えられる。

特開２００２−２６９２０９号公報

しかしながら、上記従来例の監視システムでは、無線ＩＣタグから位置情報を取得し、その位置情報を基にカメラのパン・チルト・ズーム動作を行う場合、以下に掲げるような問題点がある。

上記従来例の監視システムにおいて、実際には、無線ＩＣタグの情報から児童の位置情報を正確に把握することは困難であり、必ずしも対象の児童だけを撮影できるとは限らなかった。また、無線ＩＣタグを持った多数の児童が一斉にカメラの撮影範囲に入った場合、１台のカメラで順番に児童をズームして撮影する必要があり、撮影して監視用画像を得る機会を逃してしまうという問題点があった。また、パン・チルト・ズーム動作可能なカメラは高コストであるため、多くの地点にカメラを設置してシステムを導入することが困難であった。

本発明は、上記事情に鑑みてなされたもので、対象となる人物の正確な位置情報を取得したり対象となる人物だけにカメラの撮影範囲を合わせたりする必要がなく、対象以外の人物のプライバシーを保護することが可能な監視システム、監視装置及び監視方法を提供することを目的とする。また、本発明は、対象となる多数の人物が一斉にカメラの撮影範囲に入った場合でも、機会を逃すことなく監視用画像を得ることが可能な監視システム、監視装置及び監視方法を提供することを目的とする。

本発明の監視システムは、人物を撮影画像により監視する監視システムであって、対象人物が所持する発信源からの信号を受信し、前記受信した信号に含まれる識別情報を取得する信号受信部と、前記信号の受信に応じて、所定の範囲の画像を撮影する撮影部と、前記撮影された画像中の特定領域を検出する領域検出部と、前記検出された特定領域の中から、前記識別情報に対応する対象特定領域を識別する領域識別部と、前記識別した対象特定領域を除く、他の特定領域をマスキングしてマスク画像を生成するマスキング部と、前記マスク画像を前記識別情報に関連付けて保持する画像データ保持部と、前記保持されたマスク画像を送信する画像送信部とを備えるものである。
これにより、対象となる人物の正確な位置情報を取得したり、対象となる人物だけにカメラの撮影範囲を合わせたりする手間をかけることなく、偶然写っている対象以外の人物のプライバシーを保護できる。また、対象となる多数の人物が一斉にカメラの撮影範囲に入った場合でも、機会を逃すことなく撮影して監視用画像を得ることができる。

また、本発明は、上記の監視システムであって、前記識別情報と対応付けるための認証情報を送信する認証情報送信部と、前記送信されたマスク画像を受信する画像受信部と、前記受信したマスク画像を表示する表示部とを備え、前記画像送信部は、前記認証情報に対応する識別情報を特定し、この識別情報に関連するマスク画像を前記認証情報の送信元に送信するものとする。
これにより、監視者が閲覧用端末等において上記監視システムで生成されたマスク画像を閲覧することが可能となり、マスク画像に写っている対象となる人物だけを見ることができる。

また、本発明は、上記の監視システムであって、前記領域検出部は、前記特定領域として、前記画像中の顔領域を検出し、前記領域識別部は、前記識別情報に対応する対象人物の顔領域を対象特定領域として識別するものとする。
これにより、対象となる人物を正確に特定することができる。

また、本発明は、上記の監視システムであって、顔特徴量が登録されたデータベースを備え、前記領域識別部は、前記識別情報を用いて、前記データベースに登録された対象人物の顔特徴量を取得し、前記取得した顔特徴量と前記検出された顔領域の顔特徴量とを比較し、この比較結果から前記識別情報に対応する対象人物の顔領域を識別するものとする。
これにより、予めデータベースに対象となる人物の顔特徴量を登録しておくことで、自動的に顔領域を検出することができる。

また、本発明は、上記の監視システムであって、前記マスキング部は、前記識別情報に対応する対象人物の顔領域以外の顔領域をマスキングするものとする。
これにより、対象人物以外の人物のプライバシーを侵害され易い顔部分を隠すことができ、プライバシーの保護を図れる。

また、本発明は、上記の監視システムであって、前記マスキング部は、前記識別情報に対応する対象人物の顔領域以外の全ての領域をマスキングするものとする。
これにより、対象人物以外の人物に関するプライバシー保護を著しく高めることができる。また、対象人物以外の顔領域の検出が正確にできない場合でもプライバシーを維持することが可能である。

また、本発明は、上記の監視システムであって、前記マスキング部は、前記領域識別部が前記識別情報に対応する特定領域を識別できない場合、前記マスク画像の生成を行わないものとする。
これにより、不必要な画像を生成する処理を抑止でき、処理の効率化を図ることができる。また、例えば顔領域検出及び識別の精度の信頼度が低い場合に画像を生成しないことで、誤検出及び誤識別によって不正確なマスキングが施された画像を配信してプライバシーが侵害されてしまうことを防止することができる。

また、本発明は、上記の監視システムであって、前記領域検出部は、前記特定領域として、前記画像中の移動物体の領域を検出するものとする。
これにより、特定領域として移動物体の領域を検出することで、顔領域の検出に比べ、その処理の負荷を軽減できる。

また、本発明は、上記の監視システムであって、前記領域識別部は、前記識別情報に関連付けられた特徴データを用いて、前記識別情報に対応する移動物体の領域を対象人物の領域に相当する対象特定領域として識別するものとする。
これにより、対象となる人物に相当する移動物体の領域を容易に識別できる。

また、本発明は、上記の監視システムであって、前記マスキング部は、前記識別情報に対応する対象人物の領域以外の移動物体の領域をマスキングするものとする。
これにより、対象人物の領域以外の移動物体の領域全体をマスキングすることで、対象人物以外の人物に関するプライバシー保護を高めることができる。

また、本発明は、上記の監視システムであって、前記マスキング部によるマスキング方法は選択可能であり、前記マスキング部は、選択されたマスキング方法に従って、前記対象特定領域以外の領域のマスキングを行うものとする。
これにより、プライバシー保護がなされた状態で監視者にとって所望のマスク画像を得ることができる。

本発明の監視方法は、人物を撮影画像により監視する監視方法であって、対象人物が所持する発信源からの信号を受信し、前記受信した信号に含まれる識別情報を取得する信号受信ステップと、前記信号の受信に応じて、撮影部により所定の範囲の画像を撮影する撮影ステップと、前記撮影された画像中の特定領域を検出する領域検出ステップと、前記検出された特定領域の中から、前記識別情報に対応する対象特定領域を識別する領域識別ステップと、前記識別した対象特定領域を除く、他の特定領域をマスキングしてマスク画像を生成するマスキングステップと、前記マスク画像を前記識別情報に関連付けて保持する画像データ保持ステップと、前記保持されたマスク画像を送信する画像送信ステップとを有するものである。

本発明の監視装置は、人物を撮影画像により監視する監視装置であって、撮影された画像の画像データ及び前記画像に含まれる人物の識別情報を受信するデータ受信部と、前記撮影された画像中の特定領域を検出する領域検出部と、前記検出された特定領域の中から、前記識別情報に対応する対象特定領域を識別する領域識別部と、前記識別した対象特定領域を除く、他の特定領域をマスキングしてマスク画像を生成するマスキング部と、前記マスク画像を前記識別情報に関連付けて保持する画像データ保持部と、前記保持されたマスク画像を送信する画像送信部とを備えるものである。

本発明によれば、対象となる人物の正確な位置情報を取得したり対象となる人物だけにカメラの撮影範囲を合わせたりする必要がなく、対象以外の人物のプライバシーを保護することが可能な監視システム、監視装置及び監視方法を提供できる。また、対象となる多数の人物が一斉にカメラの撮影範囲に入った場合でも、機会を逃すことなく監視用画像を得ることが可能な監視システム、監視装置及び監視方法を提供できる。

本実施形態では、監視システムの一例として、通学中の児童を保護者が見守るための監視システムに適用した構成例を示す。この監視システムは、通学路に設置されたカメラで撮影された画像をネットワークを経由して伝送し、保護者が端末で画像表示して閲覧する遠隔監視システムとして構成される。

（第１の実施形態）
図１は本発明の第１の実施形態に係る監視システムの構成を示す図である。監視システムは、撮影装置１０１、データセンタ１０５、閲覧用端末１１１がインターネットや公衆回線等のネットワーク１０４を介して相互にデータ通信可能に接続された構成を有する。なお、図１には、監視装置は１台、閲覧用端末１１１は２台だけが描かれているが、実際にはそれぞれ任意の台数が接続可能である。

撮影装置１０１は、カメラ１０２、ＩＣタグ信号受信装置１０３を有して構成される。カメラ１０２は、撮影部の一例に相当するもので、ＩＣタグ信号受信装置１０３の近傍に設置された固定カメラであり、予め設定された撮影範囲を撮影する。本実施形態では、児童の通学路における任意の箇所が撮影範囲に設定されている。また、本実施形態のカメラは、パン・チルト・ズーム機能を有しないものであるが、有するものであってもよい。

ＩＣタグ信号受信装置１０３は、信号受信部の一例に相当するもので、対象人物となる児童が所持する名札等に内蔵された発信源の一例に相当する無線ＩＣタグ１２５と通信を行う。このＩＣタグ信号受信装置１０３は、児童が接近するに従って無線ＩＣタグ１２５から出力される信号（ＩＣタグ信号）を受信すると、カメラ１０２に撮影開始信号を出力するとともに、識別情報としてＩＣタグ信号に含まれる個人識別情報等の情報を取得する。ここで、無線ＩＣタグには、自ら信号を能動的に発信するアクティブタグと、受信装置からの信号を受けてから発信するパッシブタグとが存在するが、無線ＩＣタグの方式は特に限定されない。

撮影装置１０１で撮影された画像による画像データ、及びＩＣタグ信号受信装置１０３で取得された個人識別情報は、ネットワーク１０４を介してデータセンタ１０５に送信される。

データセンタ１０５は、画像データ管理装置１０６、顔領域検出装置１０７、顔識別装置１０８、マスキング装置１０９、顔特徴量データベース１１０（ＤＢ）を有して構成される。顔特徴量ＤＢ１１０には、この監視システムにおける監視対象の人物（本実施形態では、児童）の顔特徴量が予め登録・蓄積されている。

顔領域検出装置１０７は、領域検出部の一例に相当するもので、受信した画像中の特定領域として顔領域を検出する。顔領域の検出方法として、例えば、取り込んだ画像の中から目に似ていると判断される領域を抽出し、顔であるか否かを判定する多重照合顔検出法などを用いることができる。顔識別装置１０８は、領域識別部の一例に相当するもので、個人識別情報を元に顔特徴量ＤＢ１１０を参照し、無線ＩＣタグを所持していた監視対象の児童の顔特徴量を取得する。さらに、顔領域検出装置１０７によって検出された全ての顔領域の中から、その児童の顔特徴量に適合した特徴量をもつ顔領域を対象特定領域として識別する。

マスキング装置１０９は、マスキング部の一例に相当するもので、顔領域検出装置１０７によって検出された顔領域のうち、顔識別装置１０８によって識別された児童の顔領域（対象特定領域）以外の顔領域をマスキングし、監視対象外の人物が特定できないようなマスク画像を生成する。さらに、マスキング装置１０９は、生成した画像を画像データ管理装置１０６に送信する。画像データ管理装置１０６は、画像データ保持部及び画像送信部の機能を有するもので、マスキング装置１０９によってマスキング処理が施された画像データと個人識別情報とを関連付けて保持し、外部から閲覧できるように公開する。従って、画像データ管理装置１０６には、複数の地点で撮影された画像データ（マスク画像も含む）が多数保存されている。

なお、画像データ管理装置１０６、顔領域検出装置１０７、顔識別装置１０８及びマスキング装置１０９の各機能は、データセンタ１０５に設けられるコンピュータにおいて記録媒体に格納されたプログラムをプロセッサが実行することによって実現される。

閲覧用端末１１１は、画像データ管理装置１０６に蓄積された画像データ等を閲覧するためのものであり、児童の保護者の自宅に設置された汎用のパーソナルコンピュータ（ＰＣ）や携帯電話装置、携帯情報端末などにより構成される。この閲覧用端末１１１は、ネットワーク１０４を介してデータを送受信する図示しない通信部を有し、認証情報送信部及び画像受信部の機能を実現する。また、閲覧用端末１１１はマスク画像となった撮影画像等を表示する表示部などを備える。

上記構成を有する監視システムの動作を示す。図２は撮影装置１０１における監視処理手順を示すフローチャートである。この処理は、撮影装置１０１内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することによって繰り返し行われる。

まず、ＩＣタグ信号受信装置１０３において無線ＩＣタグ信号を受信したか否かを判別する（ステップＳ１）。無線ＩＣタグ信号を受信した場合、無線ＩＣタグ信号に含まれる個人識別情報を取得する（ステップＳ２）。無線ＩＣ信号の受信に同期してＩＣタグ信号受信装置１０３から撮影開始信号を出力し、カメラ１０２で撮影する（ステップＳ３）。撮影された画像による画像データ及び取得した個人識別情報をネットワーク１０４を介してデータセンタ１０５に送信する（ステップＳ４）。この後、本処理を終了する。一方、ステップＳ１で無線ＩＣタグ信号を受信しなかった場合、そのまま本処理を終了する。

具体的に、無線ＩＣタグを所持した児童がＩＣタグ信号受信装置１０３に近づくと、ＩＣタグ信号受信装置１０３は無線ＩＣタグからの無線ＩＣタグ信号を受信し、カメラ１０２に撮影開始信号を送信する。カメラ１０２は、ＩＣタグ信号受信装置１０３からの撮影開始信号を受信すると、ＩＣタグ信号受信装置１０３の近傍に設定された撮影範囲を撮影して画像データを生成する。

このように、無線ＩＣタグを所持した児童が近づくと自動的に撮影が行われ、画像が生成される。図３は撮影された画像及び画像処理が施された画像を示す図である。図３（Ａ）は撮影画像を示す。撮影画像２０１では、撮影対象となる児童２０１ａの他、多数の人物が撮影されている。

撮影装置１０１は、前述したように、カメラ１０２により撮影された画像を取得すると、その画像データ及びその関連情報をネットワーク１０４経由でデータセンタ１０５に送信する。関連情報には、無線ＩＣタグ信号から取得した個人識別情報が含まれる。この個人識別情報及び画像データは、後述するように、互いに関連付けられ、データセンタ１０５内の画像データ管理装置１０６に保持される。この時点では、画像はネットワーク経由で公開されていないので、閲覧用端末１１１から閲覧することができない。つまり、不特定多数の人物が映っている可能性のある画像を保護者が閲覧することはできない。

図４はデータセンタ１０５における画像データ及びその関連情報を保存する処理手順を示すフローチャートである。この処理は、データセンタ１０５を構成する各装置内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することにより行われる。 まず、撮影装置１０１から画像データ及び個人識別情報を受信したか否かを判別する（ステップＳ１１）。画像データ及び個人識別情報を受信している場合、画像データを個人識別情報に関連付け、閲覧不可能に保存する（ステップＳ１２）。閲覧不可能に保存する方法として、例えば、公開されていない記憶領域に保存することが挙げられる。保存された画像データを読み出し、画像中の顔領域を全て検出する（ステップＳ１３）。

図３（Ｂ）には、図３（Ａ）の撮影画像２０１に対し、顔領域が検出された画像２０２が示されている。画像２０２中、検出された全ての顔領域２０２ａ〜２０２ｄは破線で四角い枠に囲まれるように描かれている。

そして、ステップＳ１１で受信した個人識別情報を元に顔特徴量ＤＢ１１０を参照し、登録されている、ＩＣタグを所持した児童の顔特徴量を取得する（ステップＳ１４）。この取得した顔特徴量を用いて顔認識を行い、画像２０２中の全ての顔領域から顔特徴量が合致する顔領域を検出する（ステップＳ１５）。顔認識の結果、合致した顔領域を除くその他の顔領域に対してマスキング処理を行い、画像中にその顔領域が表示されないようにする（ステップＳ１６）。

図３（Ｃ）には、図３（Ｂ）の画像２０２に対し、マスキング処理が施された画像２０３が示されている。画像２０３中、マスキングされた顔領域２０３ｂ、２０３ｃ、２０３ｄは四角い枠にベタ塗りで描かれている。

次に、マスキング処理が施された画像データを個人識別情報に関連付け、閲覧可能に画像データ管理装置１０６に保存する（ステップＳ１７）。閲覧可能に保存する方法として、例えば、画像データ管理装置１０６内の公開用の記憶領域に保存することが挙げられる。この後、本処理を終了する。一方、ステップＳ１１で画像データ及び個人識別情報を受信していない場合、そのまま本処理を終了する。これにより、マスキングされた画像（マスク画像）は外部から閲覧可能になる。

児童の保護者がマスク画像を閲覧する場合、閲覧用ソフトウェア（ブラウザアプリケーション）が導入されたパソコン等の閲覧用端末１１１を用い、データセンタ１０５内の画像データ管理装置１０６に対してアクセスを行う。

図５は閲覧用端末１１１及びデータセンタ１０５におけるマスク画像を閲覧する際の処理手順を示すフローチャートである。図５（Ａ）は閲覧用端末１１１における閲覧処理手順を示すフローチャートである。この処理は、閲覧用端末１１１内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することにより行われる。図５（Ｂ）はデータセンタ１０５内の画像データ管理装置１０６における閲覧処理手順を示すフローチャートである。この処理は、画像データ管理装置１０６内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することにより行われる。

閲覧用端末１１１側では、保護者によりユーザＩＤ及びパスワードが入力されるまで待つ（ステップＳ２１）。ユーザＩＤ及びパスワードが入力されると、これらの個人識別情報を画像データ管理装置１０６に送信する（ステップＳ２２）。そして、画像データ管理装置１０６から閲覧が許可されたか否かを判別する（ステップＳ２３）。なお、閲覧が許可される場合、画像データ管理装置１０６に保持された時系列の画像データを表す選択画面のリストが画像データ管理装置１０６から閲覧用端末１１１に送信される。

図６は携帯用端末１１１に表示される選択画面のリストを示す図である。この選択画面のリストには、対象となる児童が撮影された各地点の画像の送信を要求する選択ボタン２８１が設けられている。保護者は所望の選択ボタン２８１を選択することで、選択画面を要求可能である。そして、閲覧が許可されると、保護者によって指定された選択画面の要求をデータセンタ１０５に送信する（ステップＳ２４）。この選択画面の要求では、どの地点のカメラで撮影された画像を表す画面にするかを要求することができる。

画像データ管理装置１０６から要求に応じた画像データを受信するまで待つ（ステップＳ２５）。画像データを受信すると、その画像を画面に表示する（ステップＳ２６）。これにより、保護者は対象となる児童だけが写ったマスク画像を閲覧できる。

この後、保護者によりログアウトが入力されたか否かを判別する（ステップＳ２７）。ログアウトが入力されていない場合、ステップＳ２４の処理に戻る。一方、ログアウトが入力された場合、そのまま本処理を終了する。一方、ステップＳ２３で閲覧が許可されない場合、そのまま本処理を終了する。

画像データ管理装置１０６側では、閲覧用端末１１１から認証情報としてユーザＩＤ及びパスワードを受信したか否かを判別する（ステップＳ３１）。ユーザＩＤ及びパスワードを受信した場合、その認証を行う（ステップＳ３２）。認証の結果、確認されたか否かを判別する（ステップＳ３３）。認証が確認された場合、閲覧許可を送信する（ステップＳ３４）。認証情報としては、ユーザＩＤ及びパスワードの他、閲覧用端末の個体情報やアドレス情報、無線ＩＣタグやＩＣカード等のＩＤ情報などを用いることもできる。

そして、閲覧用端末１１１から選択画面の要求を受信するまで待つ（ステップＳ３５）。選択画面の要求を受信すると、要求に見合った画面の画像データを閲覧用端末１１１に送信する（ステップＳ３６）。そして、ログアウトが行われたか否かを判別し（ステップＳ３７）、ログアウトが行われると、本処理を終了する。一方、ログアウトが行われない場合、ステップＳ３５の処理に戻る。また一方、ステップＳ３３で認証が確認できなかった場合、あるいはステップＳ３１でユーザＩＤ及びパスワードを受信できなかった場合、そのまま本処理を終了する。

このように、画像データ管理装置１０６は、ユーザＩＤ及びパスワードの入力を要求する。この要求に応じて、保護者はこれらの情報を入力する。正しく認証されると、画像データ管理装置１０６は、その保護者とのセッション情報（ログインからログアウトまでの情報）を管理し、その保護者に対応する児童の個人識別情報を常に保持し、その個人識別情報に関連付けられた画像のみを閲覧可能にする。一方、保護者は、自分が閲覧可能な画像の中から見たいものを選択し、閲覧用端末１１１の画面上で確認することができる。これにより、保護者に対し、登録した児童以外の顔画像がマスキングされたマスク画像しか閲覧できないようにする。

第１の実施形態の監視システムによれば、多数の児童が登録された監視システムであっても、互いのプライバシーの保護を実現することができる。また、監視システムに登録されていない一般の人物もカメラの画像に映るおそれがあるが、それらの写ってしまった対象以外の人物の顔画像もマスキングされる。従って、街頭など不特定多数の人物が行き来するような場所であっても、本システムを導入するにあたって、周囲の人々の心理的抵抗が少なくなり、導入が容易になる。また、カメラにパン・チルト・ズームといった機能も不要であり、コスト面でも有利である。

また、顔を識別することで、対象となる人物を正確に特定することができ、プライバシーを侵害され易い顔部分を隠すことができる。

また、同一画像に登録された人物が複数写っている場合でも、１枚の画像中のマスキング領域を変えることによって複数の人物に容易に対応することができる。つまり、複数の無線ＩＣタグ信号が競合する場合、それぞれの個人識別情報を取得し、１枚の撮影画像から各個人識別情報毎に異なるマスク画像を生成するようにする。そして、それぞれの保護者から閲覧要求があった際、その個人識別情報に対応するマスク画像を送信する。なお、複数の無線ＩＣタグが競合する場合であっても、個々のＩＣタグ信号を受信する度に、撮影画像を生成してもよいことは勿論である。

また、上記実施形態では、監視対象以外の人物の顔領域だけをマスキングしたが、撮影画像中、個人識別情報に対応する顔領域以外の全ての領域をマスキングしてもよく、プライバシーを高めることができる。

（第２の実施形態）
図７は本発明の第２の実施形態に係る監視システムの構成を示す図である。前記第１の実施形態の監視システムでは、撮影画像から顔認識を行ってその領域をマスキングしていたが、第２の実施形態の監視システムでは、移動物体を検出してその領域をマスキングする例を示す。

第２の実施形態の監視システムは、複数の見守りノード３１０及び見守りセンタ３３０がＶＰＮ（Virtual Private Network）３４０を介して相互にデータ通信可能に接続された構成を有する。見守りセンタ３３０には、ネットワーク３６０を介して利用者の携帯用端末３７０が接続されている。

見守りノード３１０は、カメラ３１１、電子タグリーダ３１２、動き検出部３１３、コントローラ３１４を有して構成される。

カメラ３１１は、街頭等の監視対象の場所に設置された固定カメラであり、予め設定された領域（撮影範囲）を撮影して画像データを生成する。電子タグリーダ３１２は、児童が胸元に付けている名札に内蔵する無線ＩＣタグからの無線ＩＣタグ信号を読み取る。この無線ＩＣタグ信号には、前記第１の実施形態と同様、個人識別情報が含まれている。

動き検出部３１３は、領域検出部の一例に相当するもので、時間的に異なる２フレームの画像の差分を画素単位に求め、所定値以上の差分のあった領域に移動物体があると推定するフレーム間差分方式により、画像中の移動物体の領域を検出する。

コントローラ３１４は、電子タグリーダ３１２からの無線ＩＣタグ信号を検出すると、撮影開始信号を出力する。また、動き検出部３１０からの画像データ、メタデータ及び電子タグリーダ３１２からの個人識別情報をＶＰＮ３４０を介して見守りセンタ３３０に送信する。メタデータには、移動物体の数及びその座標が含まれる。ＶＰＮ３４０は見守りノード３１０と見守りセンタ３３０を繋ぐ仮想的な専用回線である。

見守りセンタ３３０は、ルータ３３１、ハブ（ＨＵＢ）３３２、Ｗｅｂサーバ３３３、メールサーバ３３４、履歴データサーバ３３５、画像検索サーバ３３６、データベース（ＤＢ）３３７を有して構成される。この見守りセンタ３３０は、見守りノード３１０からの画像データ、メタデータ及び個人識別情報を受信し、個人識別情報に対応する移動物体を識別する移動物体識別機能（領域識別部の一例に相当する）、個人識別情報に対応する移動物体以外の移動物体の領域をマスキングするマスキング機能（マスキング部の一例に相当する）、データベース３３７に保持されたマスク画像を送信するマスク画像送信機能（画像送信部の一例に相当する）を有する。データベース３３７は、画像データ保持部の一例に相当するもので、撮影画像やマスク画像の画像データの他、個人識別情報としての特徴データが登録されている。特徴データとしては、例えば、顔や身体特徴、特定色、特定形状物、特定パターン柄などが挙げられる。

携帯用端末３７０は、パーソナルコンピュータ（パソコン）３７１あるいは携帯電話装置３７２である。携帯電話装置３７２は携帯電話事業者３８０を通じてネットワーク３６０に接続可能である。

上記構成を有する監視システムの動作を示す。図８は見守りノード３１０における動作処理手順を示すフローチャートである。この処理は、見守りノード３１０内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することにより行われる。

まず、電子タグリーダ３１２において無線ＩＣタグ信号を受信したか否かを判別する（ステップＳ５１）。無線ＩＣタグ信号を受信した場合、無線ＩＣタグ信号に含まれる個人識別情報を取得する（ステップＳ５２）。そして、カメラ３１１によって設定された撮影範囲の画像を撮影する（ステップＳ５３）。この撮影された画像を用い、フレーム間差分方式により画像中の移動物体を検出する（ステップＳ５４）。

図９は移動物体が検出された撮影画像の例を示す図である。この画像には、ＩＣタグ４０１が内蔵された名札を所持する児童の他、２名の児童が移動物体として検出されている。各移動物体は、破線の枠ａ、ｂ、ｃで描かれている。移動物体が検出されると、さらに、検出された移動物体の数及びその座標をメタデータとして取得する（ステップＳ５５）。これらの情報（個人識別情報、移動物体の数及び座標）を画像データとともにＶＰＮ３４０経由で見守りセンタ３３０に送信する（ステップＳ５６）。この後、本処理を終了する。一方、ステップＳ５１で無線ＩＣタグ信号を受信しなかった場合、そのまま本処理を終了する。

図１０は見守りセンタ３３０における画像データ及びその関連情報を保存する処理手順を示すフローチャートである。この処理は、見守りセンタ３３０内に設けられる記憶媒体に格納されたプログラムをプロセッサが実行することにより行われる。

まず、見守りノード３１０から移動物体が検出された画像データ、メタデータ及び個人識別情報を受信したか否かを判別する（ステップＳ６１）。画像データ、メタデータ及び個人識別情報を受信した場合、画像データを個人識別情報に関連付け、閲覧不可能に保存する（ステップＳ６２）。閲覧不可能に保存する方法として、公開されていない記憶領域に保存することが挙げられる。

メタデータに含まれる移動物体の数及び移動物体の座標を基に、無線ＩＣタグ４０１を所持した児童による移動物体を除く、他の移動物体の領域にマスキング処理を行う（ステップＳ６３）。このマスキング処理では、データベース３３７に登録されている、個人識別情報に関連付けられた児童の特徴データと、撮影画像中の移動物体のデータとを比較し、この比較結果を基に個人識別情報に対応する移動物体を特定し、特定された移動物体以外の移動物体の領域をマスキングすることが行われる。個人情報に対応する特徴データとしては、前述したように、顔や身体特徴、特定色、特定形状物、特定パターン柄などが挙げられる。

図１１はマスキング処理が施された画像を示す図である。図中、破線の枠ａで囲まれた移動物体の領域は、個人識別情報により特定された対象人物に相当する領域であり、この領域だけがそのまま描かれている。その他の移動物体の領域である、破線の枠ｂ、ｃで囲まれた領域は、マスキングされてベタ塗りで描かれており、人物などは特定されない。

そして、マスキング処理が施された画像データを個人識別情報に関連付け、閲覧可能に保存する（ステップＳ６４）。閲覧可能に保存する方法としては、公開用の記憶領域に保存することが挙げられる。この後、本処理を終了する。一方、ステップＳ６１で画像データ、メタデータ及び個人識別情報を受信していない場合、そのまま本処理を終了する。これにより、閲覧用端末３７０からマスク画像が閲覧可能となる。

なお、保護者が携帯用端末３７０から見守りセンタ３３０にアクセスして画像を閲覧する動作は、前記第１の実施形態と同様であるので、ここでは説明を省略する。

第２の実施形態の監視システムによれば、撮影画像に対して移動物体の領域を検出するので、マスキングの対象領域を検出する際、顔領域の検出に比べ、その処理の負荷を軽減できる。また、対象となる移動物体の領域を容易に識別でき、移動物体の領域全体をマスキングすることで、プライバシーを高めることができる。

なお、本発明は上記の実施形態において示されたものに限定されるものではなく、明細書の記載、並びに周知の技術に基づいて、当業者が変更、応用することも本発明の予定するところであり、保護を求める範囲に含まれる。

例えば、上記実施形態では、マスキングする際、ベタ塗りしていたが、モザイク、ぼかし、特定画像への差し替えなど、多種類の方法でマスキングしてもよい。また、マスキング方法を利用者が携帯用端末から選択できるようにしてもよく、所望のマスク画像を得ることができる。

また、撮影画像において、顔を認証する代わりに、服装等の認証を行って人物を特定してもよい。

また、撮影画像において、顔画像を認証できなかった場合、画像のマスキングを行わず、画像を非表示とするようにしてもよい。これにより、不必要な画像を生成しなくて済む。この場合、ＩＣタグの記載情報や時刻情報等を開示するようにしてもよい。

また、移動物体を検出する際に、フレーム間差分方式により移動物体を検出していたが、特に検出方式は限定されず、例えば、テンプレートマッチング方式により移動物体を検出するようにしてもよい。

また、複数の無線ＩＣタグが競合する場合、同じ画像からマスキング領域を変更した画像を生成し、各ユーザに開示するようにしてもよいし、あるいは個々の無線ＩＣタグからのＩＣタグ信号を受信する度に、撮影画像を生成するようにしてもよい。

また、監視対象の人物の検出及び認証を行うための装置として、無線ＩＣタグ及びＩＣタグ信号受信装置などを用いたが、このような電波信号を送受信する装置の組合せに限らず、光信号を送受信する装置の組合せなどを用いてもよい。

また、上記実施形態では、通学中の児童を保護者が見守るための監視システムを示したが、本発明の監視システムは、この用途だけに限定されるものではなく、一般の監視システムにおけるプライバシーの保護にも適用可能である。

本発明は、対象となる人物の正確な位置情報を取得したり対象となる人物だけにカメラの撮影範囲を合わせたりする必要がなく、対象以外の人物のプライバシーを保護することができる効果、対象となる多数の人物が一斉にカメラの撮影範囲に入った場合でも、機会を逃すことなく監視用画像を得ることができる効果を有し、人物を撮影画像により監視する監視システム、監視装置及び監視方法等に有用である。

本発明の第１の実施形態に係る監視システムの構成を示す図 第１の実施形態の監視装置における監視処理手順を示すフローチャート 第１の実施形態における撮影された画像及び画像処理が施された画像を示す図 第１の実施形態のデータセンタにおける画像データ及びその関連情報を保存する処理手順を示すフローチャート 第１の実施形態の閲覧用端末及びデータセンタにおけるマスク画像を閲覧する際の処理手順を示すフローチャート 第１の実施形態における携帯用端末に表示される選択画面のリストを示す図 本発明の第２の実施形態に係る監視システムの構成を示す図 第２の実施形態の見守りノードにおける動作処理手順を示すフローチャート 第２の実施形態における移動物体が検出された撮影画像の例を示す図 第２の実施形態の見守りセンタにおける画像データ及びその関連情報を保存する処理手順を示すフローチャート 第２の実施形態におけるマスキング処理が施された画像を示す図

符号の説明

１０１ 撮影装置
１０２、３１１ カメラ
１０３ ＩＣタグ信号受信装置
１０４、３６０ ネットワーク
１０５ データセンタ
１０６ 画像データ管理装置
１０７ 顔領域検出装置
１０８ 顔識別装置
１０９ マスキング装置
１１１ 閲覧用端末
１２５、４０１ 無線ＩＣタグ
３１０ 見守りノード
３１２ 電子タグリーダ
３１３ 動き検出部
３１４ コントローラ
３３０ 見守りセンタ
３３３ Ｗｅｂサーバ
３３４ メールサーバ
３３５ 履歴データサーバ
３３６ 画像検索サーバ
３３７ データベース
３７０ 携帯用端末

Claims (9)

1. 人物を撮影画像により監視する監視システムであって、
   対象人物が所持する発信源からの信号を受信し、前記受信した信号に含まれる識別情報を取得する信号受信部と、
   前記信号の受信に応じて、所定の範囲の画像を撮影する撮影部と、
   前記撮影された画像中の顔領域を検出する顔領域検出部と、
   前記識別情報に適合する人物の顔特徴量を保持する顔特徴量保持部と、
   前記顔領域の中から、前記顔特徴量保持部に保持された、前記適合する人物の顔特徴量を有する対象特定領域を識別する領域識別部と、
   前記対象特定領域を除く、前記顔領域の他の領域をマスキングしてマスク画像を生成するマスキング部と、
   を備える監視システム。
2. 前記マスク画像を前記識別情報に関連付けて保持する画像データ保持部と、
   前記保持されたマスク画像を送信する画像送信部と、
   をさらに備える請求項１記載の監視システム。
3. 請求項２に記載の監視システムであって、
   前記識別情報と対応付けるための認証情報を送信する認証情報送信部と、
   前記送信されたマスク画像を受信する画像受信部と、
   前記受信したマスク画像を表示する表示部とを備え、
   前記画像送信部は、前記認証情報に対応する識別情報を特定し、この識別情報に関連するマスク画像を前記認証情報の送信元に送信する監視システム。
4. 請求項１記載の監視システムであって、
   前記顔特徴量保持部は、
   顔特徴量が登録されたデータベースであって、
   前記領域識別部は、前記識別情報を用いて、前記データベースに登録された対象人物の顔特徴量を取得し、前記取得した顔特徴量と前記検出された顔領域の顔特徴量とを比較し、この比較結果から前記識別情報に対応する対象人物の顔領域を識別する監視システム。
5. 請求項１乃至４のいずれか一項に記載の監視システムであって、
   前記マスキング部は、前記識別情報に対応する対象人物の顔領域以外の全ての領域をマスキングする監視システム。
6. 請求項１または２に記載の監視システムであって、
   前記マスキング部は、前記領域識別部が前記識別情報に対応する顔領域を識別できない場合、前記マスク画像の生成を行わない監視システム。
7. 請求項１記載の監視システムであって、
   前記マスキング部によるマスキング方法は選択可能であり、
   前記マスキング部は、選択されたマスキング方法に従って、前記対象特定領域以外の領域のマスキングを行う監視システム。
8. 人物を撮影画像により監視する監視方法であって、
   対象人物が所持する発信源からの信号を受信し、前記受信した信号に含まれる識別情報を取得する信号受信ステップと、
   前記信号の受信に応じて、撮影部により所定の範囲の画像を撮影する撮影ステップと、
   前記撮影された画像中の顔領域を検出する顔領域検出ステップと、
   前記識別情報に適合する人物の顔特徴量を保持する顔特徴量保持ステップと、
   前記顔領域の中から、前記顔特徴量保持ステップにて保持された、前記適合する人物の顔特徴量を有する対象特定領域を識別する領域識別ステップと、
   前記対象特定領域を除く、前記顔領域の他の領域をマスキングしてマスク画像を生成するマスキングステップと、
   を有する監視方法。
9. 人物を撮影画像により監視する監視装置であって、
   撮影された画像の画像データ及び前記画像に含まれる人物の識別情報を受信するデータ受信部と、
   前記撮影された画像中の顔領域を検出する顔領域検出部と、
   前記識別情報に適合する人物の顔特徴量を保持する顔特徴量保持部と、
   前記顔領域の中から、前記顔特徴量保持部に保持された、前記適合する人物の顔特徴量を有する対象特定領域を識別する領域識別部と、
   前記対象特定領域を除く、前記顔領域の他の領域をマスキングしてマスク画像を生成するマスキング部と、
   を備える監視装置。

Images