JP7767259B2 - 通行管理プログラム、通行管理方法、および通行管理装置 - Google Patents

Description

本発明の実施形態は、通行管理プログラム、通行管理方法、および通行管理装置に関する。

通行領域を通行するユーザを認証するシステムが知られている。例えば、入場者の撮影画像に含まれる顔の位置と顔以外の位置との位置関係が異常である場合、認証不可と判定するシステムが開示されている。また、正規通行者の通行検出後に更に検出した通行について不正通行発生と判断するシステムが開示されている。また、ユーザの識別情報の記録された認証媒体から読み取った識別情報と予め記憶した識別情報とが不一致である場合、認証不可と判定する技術が知られている。

しかしながら、従来技術では、通行許可対象のユーザと通行許可対象外のユーザとの双方が検証対象の撮影画像に同時に写り込んでいる場合や、通行許可対象外のユーザが通行許可対象のユーザの認証媒体を携帯していた場合、不正検出が困難となる場合があった。すなわち、従来技術では、通行に関するセキュリティが低下する場合があった。

国際公開第２０２０／１５２９１７号公報 特開２００４－２６５２３２号公報

本発明が解決しようとする課題は、通行に関するセキュリティの向上を図ることができる、通行管理プログラム、通行管理方法、および通行管理装置を提供することである。

実施形態の通行管理プログラムは、コンピュータに実行させるための通行管理プログラムであって、通行領域に設置されユーザの識別情報を認証媒体から読取る読取部によって読取られた前記識別情報を取得する識別情報取得ステップと、前記通行領域の撮影画像を取得する撮影画像取得ステップと、前記撮影画像に含まれる１または複数の顔画像領域の内、前記認証媒体を携帯するユーザの前記顔画像領域を通行者顔画像として特定する特定ステップと、前記通行者顔画像と前記識別情報に対応する予め記憶された正解顔画像とが一致する場合、前記認証媒体を携帯するユーザを通行許可対象として認証し、前記通行者顔画像と前記正解顔画像とが不一致である場合、前記認証媒体を携帯するユーザを通行許可対象外として認証する認証ステップと、を含む。前記特定ステップは、前記撮影画像から、前記撮影画像に写り込んだユーザの身体における前記認証媒体の携帯部位を特定する携帯部位特定ステップと、前記撮影画像に含まれる１または複数の前記顔画像領域の内、特定した前記携帯部位を身体の一部として有するユーザの前記顔画像領域を、前記通行者顔画像として特定する通行者顔画像特定ステップと、を含む。

通行管理システムの模式図。 通行管理装置の機能ブロック図。 ユーザ管理情報のデータ構成の模式図。 撮影画像の模式図。 情報処理の流れのフローチャート。 撮影画像の模式図。 撮影画像の模式図。 ハードウェア構成図。

以下に添付図面を参照して、本実施形態の通行管理プログラム、通行管理方法、および通行管理装置を詳細に説明する。

図１は、本実施形態の通行管理システム１の一例の模式図である。

通行管理システム１は、通行管理装置１０と、読取部２０と、撮影部２２と、を備える。通行管理装置１０、読取部２０、および撮影部２２は、通信可能に接続されている。

通行管理装置１０は、通行領域Ｓの通過を試みるユーザＵの通行を管理するための情報処理装置である。

通行領域Ｓとは、通行管理装置１０によるユーザＵの通行管理対象の領域である。通行領域Ｓは、例えば、所定領域への入退室時に用いられる通行口、ある領域と他の領域との境界を含む領域、などである。所定領域とは、入退室を管理する対象となる領域である。所定領域は、例えば、特定の建物内の領域、電車などの交通機関を利用可能な領域、特定の屋外の領域、等であるがこれらに限定されない。

通行領域Ｓには、例えば、通行口筐体２４が設けられている。通行口筐体２４は、通行領域Ｓに設置された筐体である。通行口筐体２４には、読取部２０と、通行口開閉駆動部２６と、ドア部材２８と、が設けられている。

読取部２０は、認証媒体３０からユーザＵの識別情報を読み取る読取装置である。読取部２０は、通行領域Ｓに設置されている。本実施形態では、読取部２０は、通行領域Ｓに設置された通行口筐体２４に設けられている形態を一例として説明する。読取部２０は、認証媒体３０が接触または非接触により近接することで、認証媒体３０から識別情報を読み取り、通行管理装置１０へ送信する装置であればよい。近接とは、認証媒体３０と読取部２０とが通信可能な距離範囲内に位置することを意味する。

読取部２０は、例えば、バーコードを読み取り識別情報を送信するバーコードリーダ、磁気情報を読み取ることで識別情報を送信する磁気カードリーダー、撮影画像から撮影画像に含まれる識別情報を読み取り送信する機器、メモリカードなどの記憶媒体から識別情報を読み取り送信する機器、などである。バーコードは、例えば、１次元バーコード、二次元バーコードなどである。

認証媒体３０は、ユーザＵによって携帯可能な媒体である。また、認証媒体３０は、ユーザＵの識別情報を読取部２０に対して読み取り可能に提供可能な媒体である。ユーザＵの識別情報は、ユーザを一意に識別可能な情報であればよい。例えば、ユーザＵの識別情報は、社員番号などのユーザＵの管理番号、ユーザＵに対して予め付与された旅券番号などの番号、などであるが、これらに限定されない。

例えば、認証媒体３０は、ユーザＵの識別情報を表すバーコードを表示画面に表示可能な携帯端末である。この場合、認証媒体３０は、例えば、表示部を備えるスマートフォン、タブレット端末、等である。また、例えば、認証媒体３０は、ユーザＵの識別情報を表す文字やバーコードなどが印字などにより記録された紙や樹脂などの媒体である。この場合、認証媒体３０は、例えば、旅券などの交通チケット、社員証、等である。また、例えば、認証媒体３０は、ユーザＵの識別情報を記憶した記憶媒体を有し、読取部２０に接触又は近接することで記憶媒体に記憶された識別情報を読取部２０が読み取り可能な媒体である。この場合、認証媒体３０は、例えば、通信機能および記憶媒体を備える機器である。

本実施形態では、認証媒体３０が、識別情報を表す文字またはバーコードの記録された紙媒体、または識別情報を表す文字またはバーコードを表示可能な携帯端末である形態を想定して説明する。また、本実施形態では、読取部２０は、認証媒体３０における識別情報を表す文字またはバーコードが読取部２０に接触または近接されることで、該認証媒体３０から識別情報を読み取り、通行管理装置１０へ送信する形態を想定して説明する。

撮影部２２は、通行領域Ｓを撮影し撮影画像データを通行管理装置１０へ送信する装置である。以下では、撮影画像データを、単に撮影画像と称して説明する。撮影部２２は、通行領域Ｓに含まれる読取部２０を含み、読取部２０の近傍にユーザＵが存在するときの該ユーザＵの顔および顔以外の身体の部位を含む領域を撮影可能となるように、撮影画角および撮影方向が予め調整されている。本実施形態では、撮影部２２は、通行領域Ｓを時系列に沿って順次撮影し、撮影した撮影画像を順次通行管理装置１０へ送信する形態を一例として説明する。また、撮影部２２は、撮影画像に撮影時刻を付与し、撮影時刻を付与された撮影画像を通行管理装置１０へ送信する。

通行口開閉駆動部２６は、ドア部材２８を駆動する駆動機構である。通行口開閉駆動部２６と通行管理装置１０とは通信可能に接続されている。通行口開閉駆動部２６は通行管理装置１０の制御に応じてドア部材２８を駆動する。通行口開閉駆動部２６は、ドア部材２８を駆動することで、通行領域ＳのユーザＵの通過を許可または制限するようにドア部材２８の状態を切り替える。例えば、ドア部材２８は、開閉可能に設けられている。通行口開閉駆動部２６がドア部材２８を開状態に切り替えることで、ユーザＵは通行領域Ｓを例えば矢印Ｘ方向に通過可能となる。通行口開閉駆動部２６がドア部材２８を閉状態に切り替えることで、ユーザＵによる通行領域Ｓの通過が制限される。

上述したように、認証媒体３０は、ユーザＵによって携帯可能な媒体であり、ユーザＵの識別情報を読取部２０に対して読み取り可能に提供可能な媒体である。通行領域Ｓを通過するユーザＵは、認証媒体３０を携帯して通行領域Ｓへ侵入し、認証媒体３０を読取部２０へ接触または近接させることで、通行領域Ｓを例えば矢印Ｘ方向に通過することを試みる。通行領域Ｓの通過を試みるユーザＵの通行は、通行管理装置１０によって管理される（詳細後述）。

図２は、本実施形態の通行管理装置１０の一例の機能ブロック図である。図２には、説明のために撮影部２２、読取部２０、および通行口開閉駆動部２６を併せて示す。

通行管理装置１０は、記憶部１２と、ＵＩ（ユーザ・インターフェース）部１４と、通信部１６と、制御部１８と、を備える。記憶部１２と、ＵＩ部１４と、通信部１６と、制御部１８とは、バス１７などを介して通信可能に接続されている。

記憶部１２は、各種のデータを記憶する。本実施形態では、記憶部１２は、ユーザ管理情報１２Ａを予め記憶する。

図３は、ユーザ管理情報１２Ａのデータ構成の一例の模式図である。

ユーザ管理情報１２Ａは、通行許可対象のユーザＵに関する情報を管理するためのデータベースである。ユーザ管理情報１２Ａのデータ形式は、データベースに限定されない。ユーザ管理情報１２Ａは、ユーザＵの識別情報と、正解顔画像と、を対応付けたデータベースである。正解顔画像とは、対応する識別情報によって識別されるユーザＵの顔画像である。顔画像は、例えば、ユーザＵの撮影画像から顔画像領域を抽出したデータ等である。ユーザ管理情報１２Ａには、例えば、制御部１８による事前の登録処理などによって識別情報と、該識別情報によって識別されるユーザＵの正解顔画像と、が対応付けて登録される。

図２に戻り説明を続ける。

ＵＩ部１４は、各種の情報を表示する表示機能と、ユーザによる操作入力を受付ける入力機能と、を有する。表示機能は、例えば、ディスプレイ、投影装置、などである。入力機能は、例えば、マウスおよびタッチパッドなどのポインティングデバイス、キーボード、などである。表示機能と入力機能とを一体的に構成したタッチパネルとしてもよい。

通信部１６は、通行管理装置１０の外部の情報処理装置等と通信するための通信インターフェースである。本実施形態では、通信部１６は、通行領域Ｓの通行口筐体２４に設けられた撮影部２２、読取部２０、および通行口開閉駆動部２６と、ネットワーク等を介して無線または有線により通信する。

なお、本実施形態では、通行管理装置１０は、ユーザＵが一人ずつ通過可能な通行領域Ｓの単位ごとに、該単位の通行領域Ｓに設けられた読取部２０、撮影部２２、および通行口開閉駆動部２６を管理する形態を一例として説明する。このため、複数の通行領域Ｓが設けられている場合、通行管理装置１０は、複数の通行領域Ｓの各々ごとに、該通行領域Ｓに設けられた読取部２０、撮影部２２、および通行口開閉駆動部２６を管理する。本実施形態では、１つの通行領域Ｓに、１つの読取部２０、撮影部２２、および通行口開閉駆動部２６が設けられ、通行管理装置１０は、これらの読取部２０、撮影部２２、および通行口開閉駆動部２６を管理する形態を一例として説明する。

記憶部１２およびＵＩ部１４の少なくとも一方は、通行管理装置１０の外部に設けられていてもよい。この場合、記憶部１２およびＵＩ部１４の少なくとも一方は、ネットワークおよび通信部１６を介して通行管理装置１０と通信可能であればよい。

また、記憶部１２、ＵＩ部１４、および制御部１８に含まれる後述する１または複数の機能部、の少なくとも１つを、ネットワーク等を介して通行管理装置１０に通信可能に接続された外部の情報処理装置に搭載した構成としてもよい。

制御部１８は、通行管理装置１０において情報処理を実行する。制御部１８は、撮影画像解析部１８Ａと、識別情報取得部１８Ｂと、撮影画像取得部１８Ｃと、特定部１８Ｄと、認証部１８Ｇと、通行制御部１８Ｈと、出力制御部１８Ｉと、を備える。特定部１８Ｄは、携帯部位特定部１８Ｅと、通行者顔画像特定部１８Ｆと、を有する。

撮影画像解析部１８Ａ、識別情報取得部１８Ｂ、撮影画像取得部１８Ｃ、特定部１８Ｄ、携帯部位特定部１８Ｅ、通行者顔画像特定部１８Ｆ、認証部１８Ｇ、通行制御部１８Ｈ、および出力制御部１８Ｉは、例えば、１または複数のプロセッサにより実現される。例えば上記各部は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などのプロセッサにプログラムを実行させること、すなわちソフトウェアにより実現してもよい。上記各部は、専用のＩＣや回路などのプロセッサ、すなわちハードウェアにより実現してもよい。上記各部は、ソフトウェアおよびハードウェアを併用して実現してもよい。複数のプロセッサを用いる場合、各プロセッサは、各部のうち１つを実現してもよいし、各部のうち２以上を実現してもよい。

撮影画像解析部１８Ａは、撮影部２２から撮影画像を順次受け付ける。上述したように、撮影部２２は、通行領域Ｓを撮影し、撮影時刻を付与した撮影画像を通行管理装置１０へ順次送信する。撮影画像解析部１８Ａは、通信部１６を介して撮影部２２から、撮影時刻の付与された撮影画像を順次受け付ける。撮影時刻は、該撮影時刻の付与された撮影画像４０の撮影された時刻である。

撮影画像解析部１８Ａは、新たな撮影画像を受付けるとごとに撮影画像を解析し、解析結果を生成する。

図４は、撮影画像４０Ａの一例の模式図である。撮影画像４０Ａは、撮影部２２によって撮影された通行領域Ｓの撮影画像４０の一例である。図４には、図１に示すように、通行領域Ｓの撮影部２２による撮影範囲内に、ユーザＵｘおよびユーザＵｙの２人のユーザＵが存在する状態で撮影された撮影画像４０を一例として示す。ユーザＵｘおよびユーザＵｙは、ユーザＵの一例である。図４に戻り説明を続ける。

撮影画像解析部１８Ａは、撮影画像４０Ａに写り込んだユーザＵの顔画像領域Ｆと、ユーザＵの骨格情報Ｂと、を解析結果として解析する。

顔画像領域Ｆとは、撮影画像４０に含まれるユーザＵの顔を表す顔領域である。撮影画像解析部１８Ａは、撮影画像４０から顔画像領域Ｆを特定する公知の画像処理技術により、撮影画像４０に含まれるユーザＵの顔画像領域Ｆを解析すればよい。顔画像領域Ｆを特定する公知の画像処理技術としては、例えば、“Ｈｅｎｒｙ Ａ． Ｒｏｗｌｅｙ， Ｓｈｕｍｅｅｔ Ｂａｌｕｊａ， ａｎｄ Ｔａｋｅｏ Ｋａｎａｄｅ：Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ－Ｂａｓｅｄ Ｆａｃｅ Ｄｅｔｅｃｔｉｏｎ，ＩＥＥＥ Ｔｒａｎｓａｃｔｉｏｎｓ ｏｎ Ｐａｔｔｅｒｎ Ａｎａｌｙｓｉｓ ａｎｄ Ｍａｃｈｉｎｅ Ｉｎｔｅｌｌｉｇｅｎｃｅ Ｖｏｌ．２０， １， Ｊａｎ． １９９８， ｐｐ． ２３－－３８．”等が挙げられるが、この技術に限定されない。

図４に示す撮影画像４０Ａの場合、撮影画像解析部１８Ａは、撮影画像４０ＡからユーザＵｙの顔画像領域ＦａおよびユーザＵｘの顔画像領域Ｆｂを特定する。顔画像領域Ｆａおよび顔画像領域Ｆｂは、顔画像領域Ｆの一例である。

骨格情報Ｂとは、撮影画像４０に含まれるユーザＵの骨格を表す情報である。骨格情報は、ユーザＵを構成する複数の骨格の各々の撮影画像４０における位置および骨格の形状等を表す情報である。骨格情報Ｂによって、撮影画像４０に写り込んだユーザＵの身体の各部位の撮影画像４０における位置が特定可能となる。

撮影画像解析部１８Ａは、撮影画像４０から骨格情報Ｂを解析する公知の画像処理技術により、骨格情報Ｂを解析すればよい。骨格情報Ｂを解析する公知の画像処理技術としては、例えば、“Ｚ． Ｃａｏ， Ｇ． Ｈｉｄａｌｇｏ Ｍａｒｔｉｎｅｚ， Ｔ． Ｓｉｍｏｎ， Ｓ． Ｗｅｉ， ａｎｄ Ｙ． Ａ． Ｓｈｅｉｋｈ：ＯｐｅｎＰｏｓｅ： Ｒｅａｌｔｉｍｅ Ｍｕｌｔｉ－Ｐｅｒｓｏｎ ２Ｄ Ｐｏｓｅ Ｅｓｔｉｍａｔｉｏｎ ｕｓｉｎｇ Ｐａｒｔ Ａｆｆｉｎｉｔｙ Ｆｉｅｌｄｓ，ＩＥＥＥ Ｔｒａｎｓａｃｔｉｏｎｓ ｏｎ Ｐａｔｔｅｒｎ Ａｎａｌｙｓｉｓ ａｎｄ Ｍａｃｈｉｎｅ Ｉｎｔｅｌｌｉｇｅｎｃｅ，Ｖｏｌ．４３， １， Ｊａｎ． ２０２１， １７２－－１８６．“等が挙げられるが、この技術に限定されない。

図４に示す撮影画像４０Ａの場合、撮影画像解析部１８Ａは、撮影画像４０Ａから、ユーザＵｙの骨格情報ＢａおよびユーザＵｘの骨格情報Ｂｂを特定する。骨格情報Ｂａおよび骨格情報Ｂｂは、骨格情報Ｂの一例である。

図２に戻り説明を続ける。

撮影画像解析部１８Ａは、新たな撮影画像４０を撮影部２２から受付けるとごとに撮影画像４０を解析し、撮影画像４０と解析結果と撮影時刻とを対応付けて記憶部１２へ順次記憶する。なお、撮影画像解析部１８Ａは、予め定めた枚数またはデータ量となるまで撮影画像４０を記憶部１２へ記憶してよい。そして、撮影画像解析部１８Ａは、該枚数または該データ量を超える新たな撮影画像４０を記憶部１２へ記憶する際に、撮影時刻の古い撮影画像４０から順に記憶部１２から削除し、新たに受付けた撮影画像４０と解析結果と撮影時刻とを対応付けて記憶部１２へ記憶してよい。また、撮影画像解析部１８Ａは、現在から過去に向かって所定期間の撮影画像４０が記憶部１２へ記憶されるように、記憶部１２へ記憶する撮影画像４０を記憶制御してもよい。

識別情報取得部１８Ｂは、通行領域Ｓに設置された読取部２０によって認証媒体３０から読み取られた識別情報を取得する。例えば、認証媒体３０を携帯したユーザＵが認証媒体３０を読取部２０へ接触又は近接させることで、読取部２０は該認証媒体３０から識別情報を読み取る。読取部２０は、認証媒体３０から識別情報を読み取るごとに、読み取った識別情報および読取時刻を対応付けて通行管理装置１０へ送信する。識別情報取得部１８Ｂは、通信部１６を介して読取部２０から識別情報および該識別情報に対応する読取時刻を取得する。

撮影画像取得部１８Ｃは、通行領域Ｓの撮影画像４０を取得する。撮影画像取得部１８Ｃは、撮影画像解析部１８Ａによって解析された撮影画像４０を記憶部１２から読み取ることで、通行領域Ｓの撮影画像４０を取得する。

詳細には、撮影画像取得部１８Ｃは、少なくとも識別情報の読取部２０による読取時の撮影画像４０を取得する。

撮影画像取得部１８Ｃは、識別情報取得部１８Ｂが取得した識別情報に対応する読取時刻と同一の撮影時刻に対応付けられた撮影画像４０を記憶部１２から読み取ることで、少なくとも識別情報の読取部２０による読取時の撮影画像４０を取得する。

また、撮影画像取得部１８Ｃは、識別情報取得部１８Ｂが取得した識別情報に対応する読取時刻から所定時間内の撮影時刻に対応付けられた撮影画像４０を記憶部１２から読み取ることで、少なくとも識別情報の読取部２０による読取時の撮影画像４０を取得してもよい。所定時間は、識別情報の読取時刻と撮影画像４０の撮影時刻とが一致すると判別可能な期間であればよい。本実施形態では、撮影画像取得部１８Ｃは、上記条件を満たす撮影画像４０および該撮影画像４０に対応する解析結果を記憶部１２から読み取ることで、撮影画像４０および解析結果を取得する。

特定部１８Ｄは、撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、認証媒体３０を携帯するユーザＵの顔画像領域Ｆを通行者顔画像として特定する。

特定部１８Ｄは、撮影画像取得部１８Ｃで取得した撮影画像４０を用いて、通行者顔画像の特定処理を実行する。上述したように、撮影画像取得部１８Ｃは、少なくとも識別情報の読取部２０による読取時の撮影画像４０を取得する。そして、特定部１８Ｄは、撮影画像取得部１８Ｃで取得した撮影画像４０を用いて通行者顔画像の特定処理を実行する。このため、特定部１８Ｄは、撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、読取部２０による認証媒体３０からの識別情報の読取時に該認証媒体３０を携帯するユーザＵの顔画像領域Ｆを、通行者顔画像として特定する。

通行者顔画像とは、通行領域Ｓを通行するユーザＵの顔画像である。すなわち、特定部１８Ｄは、読取部２０による認証媒体３０からの識別情報の読取時に該認証媒体３０を携帯していたユーザＵの顔画像領域Ｆを、通行領域Ｓを通行するユーザＵの通行者顔画像として特定する。

図１を用いて説明する。例えば、図１に示すように、撮影部２２の通行領域Ｓの撮影範囲内に、ユーザＵｘおよびユーザＵｙの２人のユーザＵが存在する場面を想定する。また、ユーザＵｙが認証媒体３０を携帯した状態で、通行領域Ｓの通行を試みている場面を想定する。

この場合、読取部２０による認証媒体３０からの識別情報の読取時に撮影された撮影画像４０には、ユーザＵｙによる認証媒体３０を携帯した手などの携帯部位が写り込んだ状態となる。

図２に戻り説明を続ける。そこで、特定部１８Ｄは、撮影画像取得部１８Ｃによって取得された少なくとも識別情報の読取部２０による読取時の撮影画像４０を用いて、該撮影画像４０に含まれる通行者顔画像を特定する。

特定部１８Ｄの処理について詳細に説明する。

特定部１８Ｄは、携帯部位特定部１８Ｅと、通行者顔画像特定部１８Ｆと、を有する。

携帯部位特定部１８Ｅは、撮影画像４０から、撮影画像４０に写り込んだユーザＵの身体における認証媒体３０の携帯部位を特定する。通行者顔画像特定部１８Ｆは、撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、携帯部位特定部１８Ｅで特定した携帯部位を身体の一部として有するユーザＵの顔画像領域Ｆを、通行者顔画像として特定する。

図４を用いて説明する。例えば、携帯部位特定部１８Ｅは、撮影画像４０Ａに含まれる認証媒体３０の領域を特定する。撮影画像４０Ａに含まれる認証媒体３０の領域の特定には、パターンマッチングなどの公知の画像処理技術を用いればよい。そして、特定部１８Ｄは、撮影画像４０Ａにおける、特定した認証媒体３０の領域に重複または隣接するユーザＵの身体の部位を、ユーザＵによる認証媒体３０の携帯部位Ｐとして特定する。携帯部位Ｐとは、ユーザＵの身体を構成する手足などの複数の部位の内、認証媒体３０を携帯している部位である。

詳細には、携帯部位特定部１８Ｅは、撮影画像取得部１８Ｃで取得した撮影画像４０Ａに対応する解析結果を用いて、該撮影画像４０Ａに写り込んだ携帯部位Ｐを特定する。上述したように、撮影画像解析部１８Ａによる撮影画像４０Ａの解析結果には、骨格情報Ｂが含まれる。また、上述したように、骨格情報Ｂによって、撮影画像４０Ａに写り込んだユーザＵの身体の各部位の撮影画像４０Ａにおける位置が特定可能となる。

このため、特定部１８Ｄは、撮影画像４０における骨格情報Ｂによって特定されるユーザＵの身体の各部位の内、特定した認証媒体３０の領域に重複または隣接して写り込んでいる部位を携帯部位Ｐとして特定する。ユーザＵが認証媒体３０を手で把持した状態で該認証媒体３０を読取部２０へ接触または近接させることで読取部２０が該認証媒体３０から識別情報を読み取った場合を想定する。この場合、特定部１８Ｄは、ユーザＵの手を携帯部位Ｐとして特定する。

なお、ユーザＵが認証媒体３０を携帯する部位は、手に限定されない。例えば、ユーザＵは、腕、衣服のポケットなどに認証媒体３０を携帯した状態で、該認証媒体３０から識別情報を読取部２０に読取らせてもよい。この場合、特定部１８Ｄは、ユーザの腕またはポケットの存在する胸部などの身体の部位を、携帯部位Ｐとして特定する。図４に示す撮影画像４０Ａの場合、特定部１８Ｄは、ユーザＵｙの手を携帯部位Ｐとして特定する。

通行者顔画像特定部１８Ｆは、撮影画像４０Ａに含まれる１または複数の顔画像領域Ｆ（顔画像領域Ｆａ、顔画像領域Ｆｂ）の内、携帯部位特定部１８Ｅで特定した携帯部位Ｐを身体の一部として有するユーザＵの顔画像領域Ｆを、通行者顔画像ＦＰとして特定する。

通行者顔画像特定部１８Ｆは、撮影画像４０に含まれるユーザＵの骨格情報Ｂに基づく携帯部位Ｐと、撮影画像４０に含まれる骨格情報Ｂに基づく１または複数の顔画像領域Ｆの各々の顔位置Ｑと、の位置関係を用いて、携帯部位Ｐを身体の一部として有するユーザＵの顔画像領域Ｆを通行者顔画像ＦＰとして特定する。

図４に示す撮影画像４０Ａの場合、通行者顔画像特定部１８Ｆは、撮影画像４０Ａに対応する解析結果に含まれる複数の顔画像領域Ｆとして、顔画像領域Ｆａおよび顔画像領域Ｆｂを特定する。また、通行者顔画像特定部１８Ｆは、撮影画像４０Ａにおける顔画像領域Ｆａの顔位置Ｑａおよび顔画像領域Ｆｂの顔位置Ｑｂをそれぞれ特定する。顔位置Ｑａおよび顔位置Ｑｂは、撮影画像４０における顔画像領域Ｆの顔位置Ｑの一例である。

また、通行者顔画像特定部１８Ｆは、撮影画像４０Ａに対応する解析結果に含まれる骨格情報Ｂとして、骨格情報Ｂａおよび骨格情報Ｂｂを特定する。

次に、通行者顔画像特定部１８Ｆは、撮影画像４０Ａにおける携帯部位特定部１８Ｅで特定した携帯部位Ｐの位置と、骨格情報Ｂａおよび骨格情報Ｂｂと、顔画像領域Ｆａの顔位置Ｑａおよび顔画像領域Ｆｂの顔位置Ｑｂと、を用いて、該携帯部位Ｐを備えるユーザＵと同一のユーザＵの顔画像領域Ｆａを、通行者顔画像ＦＰとして特定する。

詳細には、通行者顔画像特定部１８Ｆは、骨格情報Ｂを用いて、ユーザＵの身体の部位の１つである携帯部位Ｐに対して、人体の位置関係として適切であり且つ該携帯部位Ｐを有するユーザＵと同一人物と判定されるユーザＵの頭部の位置に存在する顔位置Ｑの顔画像領域Ｆを、通行者顔画像ＦＰとして特定する。携帯部位Ｐと同一人物のユーザＵの頭部の位置を判定するための判定基準は、携帯部位Ｐの種類に応じて予め記憶部１２に記憶しておけばよい。そして、通行者顔画像特定部１８Ｆは、携帯部位Ｐの種類および対応する判定基準を用いて、該携帯部位Ｐを備えるユーザＵと同一のユーザＵの顔画像領域Ｆを特定する。

図４に示す撮影画像４０Ａの場合、通行者顔画像特定部１８Ｆは、携帯部位Ｐを備えるユーザＵｙと同一のユーザＵの顔画像領域Ｆとして、該携帯部位Ｐに対して１人の人体の位置関係として適切であり且つ携帯部位Ｐと同一ユーザＵの頭部の位置に相当する顔位置Ｑａに配置された顔画像領域Ｆａを特定する。そして、通行者顔画像特定部１８Ｆは、特定した顔画像領域Ｆａを通行者顔画像ＦＰとして特定する。

これらの処理により、特定部１８Ｄは、撮影画像４０Ａに含まれる顔画像領域Ｆａおよび顔画像領域Ｆｂの内、識別情報の読取部２０による読取時に認証媒体３０を携帯するユーザＵｙの顔画像領域Ｆａを、通行者顔画像ＦＰとして特定する。すなわち、撮影画像４０Ａの場合、通行者顔画像特定部１８Ｆは、認証媒体３０を携帯した携帯部位Ｐである手を身体の一部として有するユーザＵｙの顔画像領域Ｆａを、通行者顔画像ＦＰとして特定する。

図２に戻り説明を続ける。

なお、撮影画像取得部１８Ｃは、識別情報の読取部２０による読取時のユーザＵの携帯部位Ｐを特定部１８Ｄで推定可能な撮影画像４０を、記憶部１２から取得すればよい。このため、撮影画像取得部１８Ｃで取得する撮影画像４０は、識別情報の読取部２０による読取時の１の撮影画像４０に限定されない。

例えば、撮影画像取得部１８Ｃは、通行領域Ｓを時系列に沿って撮影した複数の撮影画像４０を記憶部１２から取得してよい。詳細には、撮影画像取得部１８Ｃは、識別情報取得部１８Ｂが取得した識別情報に対応する読取時刻と同一の撮影時刻から過去の時刻に向かって時系列に連続する複数の撮影画像４０、該読取時刻と同一の撮影時刻から未来の時刻に向かって時系列に連続する複数の撮影画像４０、該読取時刻から過去および未来の双方の時刻に向かって時系列に連続する複数の撮影画像４０、の何れかの複数の撮影画像４０を記憶部１２から取得してよい。このとき、撮影画像取得部１８Ｃは、複数の撮影画像４０の各々に対応する解析結果も併せて記憶部１２から読み取る。

この場合、特定部１８Ｄの携帯部位特定部１８Ｅは、撮影画像取得部１８Ｃで取得した複数の撮影画像４０に基づいて、読取部２０による識別情報の読取時の認証媒体３０の携帯部位Ｐを推測することによって、携帯部位Ｐを特定すればよい。

例えば、携帯部位特定部１８Ｅは、時系列に連続する複数の撮影画像４０の各々における携帯部位Ｐを特定することで、時系列に沿った携帯部位Ｐの動きを追跡する。この追跡処理には、公知の画像処理技術などを用いればよい。そして、携帯部位特定部１８Ｅは、携帯部位Ｐの動きの追跡結果を用いて、識別情報の読取時刻の携帯部位Ｐの位置を推測することで、該携帯部位Ｐの位置を特定すればよい。

この場合、携帯部位特定部１８Ｅは、読取部２０による識別情報の読取時刻の撮影画像４０から携帯部位Ｐの位置を特定することが困難な場合であっても、上記追跡処理により、識別情報の読取時刻の携帯部位Ｐの位置を推定することができる。

次に、認証部１８Ｇについて説明する。

認証部１８Ｇは、特定部１８Ｄによって特定された通行者顔画像ＦＰと、識別情報取得部１８Ｂで取得した識別情報に対応する正解顔画像と、が一致するか否かを判断する。

認証部１８Ｇは、識別情報取得部１８Ｂで取得した識別情報に対応する正解顔画像をユーザ管理情報１２Ａから読み取る。そして、認証部１８Ｇは、読み取った正解顔画像と、特定部１８Ｄによって特定された通行者顔画像ＦＰと、が一致するか否かを判断する。認証部１８Ｇは、正解顔画像の特徴量と、通行者顔画像ＦＰの特徴量と、が同一または類似する場合、正解顔画像と通行者顔画像ＦＰとが一致すると判断する。画像から特徴量を導出する方法には、公知の画像処理技術を用いればよい。類似の判断には、通行者顔画像ＦＰと正解顔画像とが同一人物の顔の画像であると判断可能な特徴量の差の閾値を予め定めればよい。そして、認証部１８Ｇは、特徴量の差が該閾値未満である場合、正解顔画像と通行者顔画像ＦＰとが一致すると判断すればよい。

認証部１８Ｇは、正解顔画像と通行者顔画像ＦＰとが一致すると判断した場合、認証媒体３０を携帯するユーザＵを通行許可対象として認証する。認証媒体３０を携帯するユーザＵとは、識別情報取得部１８Ｂが取得した識別情報の読取元の認証媒体３０を携帯するユーザＵである。言い換えると、認証媒体３０を携帯するユーザＵとは、読取部２０による識別情報の読取時に該認証媒体３０を携帯していたユーザＵである。

一方、認証部１８Ｇは、正解顔画像と通行者顔画像ＦＰとが不一致であると判断した場合、認証媒体３０を携帯するユーザＵを通行許可対象外として認証する。すなわち、認証部１８Ｇは、正解顔画像と通行者顔画像ＦＰとが不一致である場合、読取部２０による識別情報の読取時に該認証媒体３０を携帯していたユーザＵを、通行許可対象外として認証する。

なお、識別情報取得部１８Ｂが取得した識別情報がユーザ管理情報１２Ａに登録されていない場合がある。このため、認証部１８Ｇは、識別情報取得部１８Ｂが取得した識別情報がユーザ管理情報１２Ａに登録されていない場合、該識別情報によって識別されるユーザＵを、通行許可対象外として認証すればよい。

また、通行者顔画像特定部１８Ｆが通行者顔画像ＦＰを特定できない場合がある。例えば、ユーザＵが自身の顔を隠して通行領域Ｓに侵入した場合などである。この場合、認証媒体３０の携帯部位Ｐを身体の一部として有するユーザＵの顔画像領域Ｆが撮影画像４０に写り込まない状態となる。このため、通行者顔画像特定部１８Ｆが通行者顔画像ＦＰを特定できない場合がある。この場合、認証部１８Ｇは、識別情報取得部１８Ｂが取得した識別情報によって識別されるユーザＵを、通行許可対象外として認証すればよい。

通行制御部１８Ｈは、認証部１８Ｇによる認証結果に応じて、通行領域ＳのユーザＵの通過を許可または制限するように、通行領域Ｓに設けられた通行口開閉駆動部２６を制御する。

図１を用いて説明する。認証部１８Ｇによる認証結果が通行許可対象であることを示す場合、通行制御部１８Ｈは、ドア部材２８を開状態に切り替えるように通行口開閉駆動部２６を制御する。通行制御部１８Ｈによる通行口開閉駆動部２６の制御によって、通行口開閉駆動部２６は、ドア部材２８－の状態を開状態に切り替える。通行口開閉駆動部２６がドア部材２８を開状態に切り替えることで、通行領域Ｓの通過を試みるユーザＵは通行領域Ｓを通過可能となる。

認証部１８Ｇによる認証結果が通行許可対象外であることを示す場合、通行制御部１８Ｈは、ドア部材２８を閉状態に切り替えるように通行口開閉駆動部２６を制御する。通行制御部１８Ｈによる通行口開閉駆動部２６の制御によって、通行口開閉駆動部２６は、ドア部材２８の状態を閉状態に切り替える。通行口開閉駆動部２６がドア部材２８を閉状態に切り替えることで、通行領域Ｓの通過を試みるユーザＵは通行領域Ｓの通過を制限される。

図２に戻り説明を続ける。

出力制御部１８Ｉは、認証部１８Ｇによる認証結果を出力する。例えば、出力制御部１８Ｉは、認証部１８Ｇによる認証結果をＵＩ部１４に表示する。出力制御部１８Ｉは、認証部１８Ｇによる認証結果を、通信部１６を介して外部の情報処理装置に送信してもよい。また、出力制御部１８Ｉは、認証部１８Ｇによる認証結果を、通行口筐体２４に設けられた出力機構に出力してもよい。出力機構は、例えば、画像を表示するディスプレイ、音を出力するスピーカ、光を発するライト、等であるが、これらに限定されない。

次に、本実施形態の通行管理装置１０が実行する情報処理の流れの一例を説明する。

図５は、本実施形態の通行管理装置１０が実行する情報処理の流れの一例を示すフローチャートである。

撮影画像解析部１８Ａは、撮影部２２から撮影画像４０を受け付ける（ステップＳ１００）。撮影画像解析部１８Ａは、ステップ１００で受付けた撮影画像４０を解析する（ステップＳ１０２）。撮影画像解析部１８Ａは、ステップＳ１０２で解析した解析結果と、解析に用いた撮影画像４０と、撮影画像４０の撮影時刻と、を対応付けて記憶部１２へ記憶する（ステップＳ１０４）。撮影画像４０の解析結果には、顔画像領域Ｆおよび骨格情報Ｂが含まれる。

撮影画像解析部１８Ａが撮影画像４０を解析することで、特定部１８Ｄが撮影画像４０を解析し解析結果を導出した上で特定処理を実行する場合に比べて、認証媒体３０からの識別情報の読み取りから認証結果が出力されるまでの処理時間の短縮を図ることができる。

識別情報取得部１８Ｂは、読取部２０から識別情報を取得したか否かを判断する（ステップＳ１０６）。ステップＳ１０６で否定判断すると（ステップＳ１０６：Ｎｏ）、ステップＳ１００へ戻る。ステップＳ１０６で肯定判断すると（ステップＳ１０６：Ｙｅｓ）、ステップＳ１０８へ進む。

ステップＳ１０８では、認証部１８Ｇが、ステップＳ１０６で取得した識別情報がユーザ管理情報１２Ａに登録済であるか否かを判断する（ステップＳ１０８）。認証部１８Ｇが未登録であると判断した場合（ステップＳ１０８：Ｎｏ）、後述するステップＳ１２８へ進む。認証部１８Ｇが登録済であると判断した場合（ステップＳ１０８：Ｙｅｓ）、ステップＳ１１０へ進む。

ステップＳ１１０では、撮影画像取得部１８Ｃが通行領域Ｓの撮影画像４０を取得する（ステップＳ１１０）。例えば、撮影画像取得部１８Ｃは、撮影画像解析部１８Ａが解析した撮影画像４０の内、ステップＳ１０６で取得した識別情報の読取時刻に一致する撮影時刻の撮影画像４０を取得する。

携帯部位特定部１８Ｅは、ステップＳ１１０で取得した撮影画像４０から、該撮影画像４０に写り込んだユーザＵの身体における認証媒体３０の携帯部位Ｐを特定する（ステップＳ１１２）。

通行者顔画像特定部１８Ｆは、ステップＳ１１０で取得した撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、ステップＳ１１２で特定した携帯部位Ｐを身体の一部として有するユーザＵの顔画像領域Ｆを、通行者顔画像ＦＰとして特定する（ステップＳ１１４）。

認証部１８Ｇは、ステップＳ１１４で認証部１８Ｇが通行者顔画像ＦＰを特定出来たか否かを判断する（ステップＳ１１６）。認証部１８Ｇは特定出来なかったと判断した場合（ステップＳ１１６：Ｎｏ）、ステップＳ１２８へ進む。認証部１８Ｇは特定出来たと判断した場合（ステップＳ１１６：Ｙｅｓ）、ステップＳ１１８へ進む。

ステップＳ１１８では、認証部１８Ｇは、ステップＳ１１４で特定した通行者顔画像ＦＰと、ステップＳ１０６で取得した識別情報に対応する正解顔画像と、が一致するか否かを判断する（ステップＳ１２０）。認証部１８Ｇが一致すると判断した場合（ステップＳ１２０：Ｙｅｓ）、ステップＳ１２２へ進む。

ステップＳ１２２では、ステップＳ１０６で取得した識別情報の記録された認証媒体３０を携帯するユーザＵを、通行許可対象として認証する（ステップＳ１２２）。

次に、通行制御部１８Ｈは、通行領域ＳのユーザＵの通過を許可するように、通行領域Ｓに設けられた通行口開閉駆動部２６を制御する（ステップＳ１２４）。出力制御部１８Ｉは、通行許可対象を表す認証結果を出力する（ステップＳ１２６）。そして、本ルーチンを終了する。

一方、ステップＳ１２０で認証部１８Ｇが不一致であると判断した場合（ステップＳ１２０：Ｎｏ）、ステップＳ１２８へ進む。

ステップＳ１２８では、認証部１８Ｇは、通行領域ＳのユーザＵを通行許可対象外として認証する（ステップＳ１２８）。ステップＳ１２８の処理により、認証部１８Ｇは、ステップＳ１０６で取得した識別情報の記録された認証媒体３０を該識別情報の読取部２０による読取時に携帯していたユーザＵを、通行許可対象外として認証する。

次に、通行制御部１８Ｈは、通行領域ＳのユーザＵの通過を制限するように、通行領域Ｓに設けられた通行口開閉駆動部２６を制御する（ステップＳ１３０）。出力制御部１８Ｉは、通行許可対象外を表す認証結果を出力する（ステップＳ１３２）。そして、本ルーチンを終了する。

以上説明したように、本実施形態の通行管理装置１０は、識別情報取得部１８Ｂと、撮影画像取得部１８Ｃと、特定部１８Ｄと、認証部１８Ｇと、を備える。撮影画像解析部１８Ａは、通行領域Ｓに設置されユーザＵの識別情報を認証媒体３０から読取る読取部２０によって読取られた識別情報を取得する。撮影画像取得部１８Ｃは、通行領域Ｓの撮影画像４０を取得する。特定部１８Ｄは、撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、認証媒体３０を携帯するユーザＵの顔画像領域Ｆを通行者顔画像ＦＰとして特定する。認証部１８Ｇは、通行者顔画像ＦＰと、識別情報に対応する予め記憶された正解顔画像と、が一致する場合、認証媒体３０を携帯するユーザＵを通行許可対象として認証し、不一致である場合、認証媒体３０を携帯するユーザＵを通行許可対象外として認証する。

ここで、従来技術として、入場者の撮影画像に含まれる顔の位置と顔以外の位置との位置関係が異常である場合認証不可と判定することで、正規ユーザの顔写真を用いた不正入場を抑制する技術が開示されている。しかしながらこの従来技術では、顔を隠したユーザと共に、顔を隠していないユーザが１つの撮影画像４０に写り込んでいる場合、認証不可と判定することができなかった。また、この従来技術では、ユーザの顔が撮影画像４０に写り込んでいる状態で、該ユーザが他のユーザの識別情報の記録された認証媒体３０を用いて通行する場合、認証不可と判定することはできなかった。

また、従来技術として、正規通行者の通行検出後に更に検出した通行について不正通行発生と判断することで、正規通行者と共に非正規通行者が通行する事を抑制する従来技術が開示されている。しかしながら、この従来技術では、正規通行者と非正規通行者が同時に通行領域Ｓの通過を試みる場合などには、不正を判定することは困難であった。

このように、従来技術では、通行許可対象のユーザＵと通行許可対象外のユーザＵとの双方が検証対象の撮影画像４０に同時に写り込んでいる場合や、通行許可対象外のユーザＵが通行許可対象のユーザＵの認証媒体３０を携帯していた場合等の状況では、不正検出が困難となる場合があった。すなわち、従来技術では、通行に関するセキュリティが低下する場合があった。

一方、本実施形態の通行管理装置１０では、特定部１８Ｄが、撮影画像４０に含まれる１または複数の顔画像領域Ｆの内、認証媒体３０を携帯するユーザＵの顔画像領域Ｆを通行者顔画像ＦＰとして特定する。そして、認証部１８Ｇは、通行者顔画像ＦＰと、該認証媒体３０から読取った識別情報に対応する予め記憶された正解顔画像と、が不一致である場合、認証媒体３０を携帯するユーザＵを通行許可対象外として認証する。

このように、本実施形態の通行管理装置１０は、識別情報の記録された認証媒体３０を携帯するユーザＵの顔画像領域Ｆを通行者顔画像ＦＰとして特定し、該通行者顔画像ＦＰと識別情報に対応する正解顔画像とを比較することで、通行許可対象であるか通行許可対象外であるかを認証する。

このため、本実施形態の通行管理装置１０は、通行許可対象のユーザＵと通行許可対象外のユーザＵとの双方が検証対象の撮影画像４０に同時に写り込んでいる場合や、通行許可対象外のユーザＵが通行許可対象のユーザＵの認証媒体３０を携帯している場合であっても、高精度に通行許可対象であるか通行許可対象外であるかを認証することできる。

従って、本実施形態の通行管理装置１０は、通行に関するセキュリティの向上を図ることができる。

本実施形態の通行管理装置１０の効果について、図１、図４、図６～図７を用いて、具体例を挙げて説明する。

例えば、図１に示すように、撮影部２２の通行領域Ｓの撮影範囲内に、ユーザＵｘおよびユーザＵｙの２人のユーザＵが存在する場面を想定する。また、ユーザＵｘの識別情報および正解顔画像が対応付けてユーザ管理情報１２Ａに登録済であるが、ユーザＵｙの識別情報および正解顔画像の少なくとも一方がユーザ管理情報１２Ａに登録されていない場面を想定する。また、ユーザＵｙが、自身の識別情報ではなくユーザＵｘの識別情報（図１中、「ＵｘＩＤ」参照）の記録された認証媒体３０を携帯した状態で、通行領域Ｓの通行を試みている場面を想定する。また、ユーザＵｙとユーザＵｘとが協力し、認証媒体３０の読取部２０による読取時に、ユーザＵｙとユーザＵｘとが撮影部２２の撮影範囲内に存在するように互いの位置を調整していた場面を想定する。

図４、図６～図７は、上記想定において撮影された撮影画像４０の一例の説明図である。

まず、図４を用いて説明する。図４に示す撮影画像４０Ａは、ユーザＵｘの識別情報「ＵｘＩＤ」の記録された認証媒体３０を携帯したユーザＵｙと、認証媒体３０を携帯していないユーザＵｘと、の二人のユーザＵが斜め横方向に並んだ状態で写り込んだ撮影画像４０の一例の説明図である。

この場合、識別情報取得部１８Ｂは、ユーザＵｘの識別情報「ＵｘＩＤ」を、認証媒体３０を読取る読取部２０から取得する。また、撮影画像取得部１８Ｃは、該識別情報「ＵｘＩＤ」の読取時の撮影画像４０として撮影画像４０Ａを取得する。撮影画像４０Ａは、撮影画像解析部１８Ａによって、ユーザＵｙの顔画像領域Ｆａ、ユーザＵｙの骨格情報Ｂａ、ユーザＵｘの顔画像領域Ｆｂ、ユーザＵｘの骨格情報Ｂｂ、の各々が解析されている。

特定部１８Ｄは撮影画像４０Ａを用いて上述した特定処理を実行することで、該識別情報「ＵｘＩＤ」の読取時に認証媒体３０を携帯するユーザＵｙの顔画像領域Ｆａを通行者顔画像ＦＰとして特定する。そして、認証部１８Ｇは、識別情報「ＵｘＩＤ」に対応する正解顔画像と、特定した通行者顔画像ＦＰとが一致するか否かを判断する。ここで、認証媒体３０から読取った識別情報はユーザＵｘの識別情報「ＵｘＩＤ」である。一方、該認証媒体３０を携帯するユーザＵはユーザＵｙであり、特定部１８Ｄによって特定された通行者顔画像ＦＰは、ユーザＵｙの顔画像領域Ｆａである。このため、識別情報「ＵｘＩＤ」に対応する正解顔画像と、特定した通行者顔画像ＦＰとは不一致となる。よって、この場合、認証部１８Ｇは、該認証媒体３０を携帯するユーザＵｙを、通行許可対象外として認証する。

このため、本実施形態の通行管理装置１０は、通行許可対象のユーザＵｘと通行許可対象外のユーザＵとの双方が検証対象の撮影画像４０に同時に写り込み、通行許可対象外のユーザＵｙが通行許可対象のユーザＵｘの識別情報の記録された認証媒体３０を携帯している場合、通行許可対象外であると認証することができる。すなわち、通行管理装置１０は、ユーザＵｙがユーザＵｘになりすまして通行領域Ｓを不正に通過することを抑制することができる。

図６は、撮影画像４０Ｂの一例の模式図である。撮影画像４０Ｂは、撮影画像４０の一例である。

図６に示す撮影画像４０Ｂは、ユーザＵｘの識別情報「ＵｘＩＤ」の記録された認証媒体３０を携帯し、顔を被覆部材Ｃで隠した状態のユーザＵｙと、認証媒体３０を携帯していないユーザＵｘと、の二人のユーザＵが写り込んだ撮影画像４０の一例の説明図である。

この場合、識別情報取得部１８Ｂは、ユーザＵｘの識別情報「ＵｘＩＤ」を、認証媒体３０を読取る読取部２０から取得する。また、撮影画像取得部１８Ｃは、該識別情報「ＵｘＩＤ」の読取時の撮影画像４０として撮影画像４０Ｂを取得する。撮影画像４０Ｂは、撮影画像解析部１８Ａによって、ユーザＵｙの骨格情報Ｂａ、ユーザＵｘの顔画像領域Ｆｂ、ユーザＵｘの骨格情報Ｂｂ、の各々が解析されている。ユーザＵｙの顔は被覆部材Ｃによって隠されているため、ユーザＵｙの顔画像領域Ｆは解析結果に含まれない。

特定部１８Ｄは撮影画像４０Ｂを用いて上述した特定処理を実行するが、識別情報「ＵｘＩＤ」の読取時に該識別情報の記録されている認証媒体３０を携帯するユーザＵｙの顔画像領域Ｆを特定することができない。ユーザＵｙの顔は被覆部材Ｃによって隠されているためである。このため、認証部１８Ｇは、該認証媒体３０を携帯するユーザＵｙを、通行許可対象外として認証する。

このため、本実施形態の通行管理装置１０は、通行許可対象のユーザＵｘと通行許可対象外のユーザＵとの双方が検証対象の撮影画像４０に同時に写り込み、通行許可対象外のユーザＵｙが被覆部材Ｃなどによって隠されている場合、該ユーザＵｙを通行許可対象外であると認証することができる。

図７は、撮影画像４０Ｃの一例の模式図である。撮影画像４０Ｃは、撮影画像４０の一例である。

図７に示す撮影画像４０Ｃは、ユーザＵｘの識別情報「ＵｘＩＤ」の記録された認証媒体３０を携帯したユーザＵｙと、認証媒体３０を携帯していないユーザＵｘと、の二人のユーザＵが通行領域Ｓへの侵入方向（図１中、矢印Ｘ方向参照）に沿って並んだ状態で写り込んだ撮影画像４０の一例の説明図である。

この場合、識別情報取得部１８Ｂは、ユーザＵｘの識別情報「ＵｘＩＤ」を、認証媒体３０を読取る読取部２０から取得する。また、撮影画像取得部１８Ｃは、該識別情報「ＵｘＩＤ」の読取時の撮影画像４０として撮影画像４０Ｃを取得する。撮影画像４０Ｃは、撮影画像解析部１８Ａによって、ユーザＵｙの顔画像領域Ｆａ、ユーザＵｙの骨格情報Ｂａ、およびユーザＵｘの顔画像領域Ｆｂの各々が解析されている。ユーザＵｘの骨格情報Ｂｂについては、ユーザＵｙによって隠され解析されており解析結果に含まれない。

特定部１８Ｄは撮影画像４０Ｃを用いて上述した特定処理を実行することで、該識別情報「ＵｘＩＤ」の読取時に認証媒体３０を携帯するユーザＵｙの顔画像領域Ｆａを通行者顔画像ＦＰとして特定する。すなわち、特定部１８Ｄは、解析結果を用いることで、認証媒体３０を携帯するユーザＵの顔画像領域Ｆとして、ユーザＵｙの背後に重なって写り込んでいるユーザＵｘではなく、認証媒体３０を携帯しているユーザＵｙの顔画像領域Ｆａを、通行者顔画像ＦＰとして特定する。

そして、認証部１８Ｇは、識別情報「ＵｘＩＤ」に対応する正解顔画像と、特定した通行者顔画像ＦＰとが一致するか否かを判断する。ここで、認証媒体３０から読取った識別情報はユーザＵｘの識別情報「ＵｘＩＤ」である。一方、該認証媒体３０を携帯するユーザＵはユーザＵｙであり、特定部１８Ｄによって特定された通行者顔画像ＦＰは、ユーザＵｙの顔画像領域Ｆａである。このため、識別情報「ＵｘＩＤ」に対応する正解顔画像と、特定した通行者顔画像ＦＰとは不一致となる。よって、この場合、認証部１８Ｇは、該認証媒体３０を携帯するユーザＵｙを、通行許可対象外として認証する。

なお、認証部１８Ｇは、撮影画像４０Ｃに含まれる顔画像領域Ｆの数と、該撮影画像４０Ｃの解析結果に含まれる骨格情報Ｂによって表される骨格情報Ｂの検出数と、が不一致である場合、撮影画像４０Ｃに写り込んだユーザＵを通行許可対象外として認証してもよい。

このため、本実施形態の通行管理装置１０は、通行許可対象のユーザＵｘと通行許可対象外のユーザＵとの双方が検証対象の撮影画像４０に同時に写り込み、通行許可対象外のユーザＵｙが通行許可対象のユーザＵｘの識別情報の記録された認証媒体３０を携帯している場合、通行許可対象外であると認証することができる。

このため、本実施形態の通行管理装置１０は、通行に関するセキュリティの向上を図ることができる。

次に、上記実施形態の通行管理装置１０のハードウェア構成の一例を説明する。

図８は、上記実施形態の通行管理装置１０の一例のハードウェア構成図である。

上記実施形態の通行管理装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９０Ｄなどの制御装置と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９０ＥやＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９０ＦやＨＤＤ（ハードディスクドライブ）９０Ｇなどの記憶装置と、各種機器とのインターフェースであるＩ／Ｆ部９０Ｂと、各種情報を出力する出力部９０Ａと、ユーザによる操作を受付ける入力部９０Ｃと、各部を接続するバス９０Ｈとを備えており、通常のコンピュータを利用したハードウェア構成となっている。この場合、図２の制御部１８は、ＣＰＵ９０Ｄなどの制御装置に対応している。

上記実施形態の通行管理装置１０では、ＣＰＵ９０Ｄが、ＲＯＭ９０Ｅから通行管理プログラムをＲＡＭ９０Ｆ上に読み出して実行することにより、上記各部がコンピュータ上で実現される。

なお、上記実施形態の通行管理装置１０で実行される上記各処理を実行するための通行管理プログラムは、ＨＤＤ９０Ｇに記憶されていてもよい。また、上記実施形態の通行管理装置１０で実行される上記各処理を実行するための通行管理プログラムは、ＲＯＭ９０Ｅに予め組み込まれて提供されていてもよい。

また、上記実施形態の通行管理装置１０で実行される上記処理を実行するための通行管理プログラムは、インストール可能な形式または実行可能な形式のファイルでＣＤ－ＲＯＭ、ＣＤ－Ｒ、メモリカード、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、フレキシブルディスク（ＦＤ）等のコンピュータで読み取り可能な記憶媒体に記憶されてコンピュータプログラムプロダクトとして提供されるようにしてもよい。また、上記実施形態の通行管理装置１０で実行される上記処理を実行するための通行管理プログラムを、インターネットなどのネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上記実施形態の通行管理装置１０で実行される上記処理を実行するための通行管理プログラムを、インターネットなどのネットワーク経由で提供または配布するようにしてもよい。

なお、上記では、通行管理装置１０、ＵＩ部１４、および通信部１６から通行管理装置１０が構成されている例を一例として示したが、制御部１８をもって本発明に係る通行管理装置を構成してもよい。

また、上記では、本発明の実施形態を説明したが、上記実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１０ 通行管理装置
１８Ｂ 識別情報取得部
１８Ｃ 撮影画像取得部
１８Ｄ 特定部
１８Ｅ 携帯部位特定部
１８Ｆ 通行者顔画像特定部
１８Ｇ 認証部
１８Ｈ 通行制御部
１８Ｉ 出力制御部

Claims (10)

1. コンピュータに実行させるための通行管理プログラムであって、
   通行領域に設置されユーザの識別情報を認証媒体から読取る読取部によって読取られた前記識別情報を取得する識別情報取得ステップと、
   前記通行領域の撮影画像を取得する撮影画像取得ステップと、
   前記撮影画像に含まれる１または複数の顔画像領域の内、前記認証媒体を携帯するユーザの前記顔画像領域を通行者顔画像として特定する特定ステップと、
   前記通行者顔画像と前記識別情報に対応する予め記憶された正解顔画像とが一致する場合、前記認証媒体を携帯するユーザを通行許可対象として認証し、前記通行者顔画像と前記正解顔画像とが不一致である場合、前記認証媒体を携帯するユーザを通行許可対象外として認証する認証ステップと、
   を含み、
   前記特定ステップは、
   前記撮影画像から、前記撮影画像に写り込んだユーザの身体における前記認証媒体の携帯部位を特定する携帯部位特定ステップと、
   前記撮影画像に含まれる１または複数の前記顔画像領域の内、特定した前記携帯部位を身体の一部として有するユーザの前記顔画像領域を、前記通行者顔画像として特定する通行者顔画像特定ステップと、
   を含む、
   通行管理プログラム。
2. 前記特定ステップは、
   前記撮影画像に含まれる１または複数の顔画像領域の内、前記読取部による前記認証媒体からの前記識別情報の読取時に該認証媒体を携帯するユーザの前記顔画像領域を前記通行者顔画像として特定する、
   請求項１に記載の通行管理プログラム。
3. 前記通行者顔画像特定ステップは、
   前記撮影画像に含まれるユーザの骨格情報に基づく前記携帯部位と、前記撮影画像に含まれる前記骨格情報に基づく１または複数の前記顔画像領域の各々の顔画像位置と、の位置関係を用いて、前記携帯部位を身体の一部として有するユーザの前記顔画像領域を前記通行者顔画像として特定する、
   請求項１に記載の通行管理プログラム。
4. 前記携帯部位は、ユーザの手である、
   請求項１に記載の通行管理プログラム。
5. 前記撮影画像取得ステップは、
   少なくとも前記識別情報の前記読取部による読取時の前記撮影画像を取得する、
   請求項１に記載の通行管理プログラム。
6. 前記撮影画像取得ステップは、
   前記通行領域を時系列に沿って撮影した複数の前記撮影画像を取得し、
   前記携帯部位特定ステップは、
   複数の前記撮影画像に基づいて、前記読取部による前記識別情報の読取時の前記認証媒体の前記携帯部位を推測することによって前記携帯部位を特定する、
   請求項１に記載の通行管理プログラム。
7. 前記認証ステップによる認証結果を出力する出力制御ステップ、
   を含む請求項１に記載の通行管理プログラム。
8. 前記認証ステップによる認証結果に応じて前記通行領域のユーザの通過を許可または制限するように、前記通行領域に設けられた通行口開閉駆動部を制御する通行制御ステップ、
   を含む請求項１に記載の通行管理プログラム。
9. 制御部によって実行される通行管理方法であって、
   通行領域に設置されユーザの識別情報を認証媒体から読取る読取部によって読取られた前記識別情報を取得する識別情報取得ステップと、
   前記通行領域の撮影画像を取得する撮影画像取得ステップと、
   前記撮影画像に含まれる１または複数の顔画像領域の内、前記認証媒体を携帯するユーザの前記顔画像領域を通行者顔画像として特定する特定ステップと、
   前記通行者顔画像と前記識別情報に対応する予め記憶された正解顔画像とが一致する場合、前記認証媒体を携帯するユーザを通行許可対象として認証し、前記通行者顔画像と前記正解顔画像とが不一致である場合、前記認証媒体を携帯するユーザを通行許可対象外として認証する認証ステップと、
   を含み、
   前記特定ステップは、
   前記撮影画像から、前記撮影画像に写り込んだユーザの身体における前記認証媒体の携帯部位を特定する携帯部位特定ステップと、
   前記撮影画像に含まれる１または複数の前記顔画像領域の内、特定した前記携帯部位を身体の一部として有するユーザの前記顔画像領域を、前記通行者顔画像として特定する通行者顔画像特定ステップと、
   を含む、
   通行管理方法。
10. 通行領域に設置されユーザの識別情報を認証媒体から読取る読取部によって読取られた前記識別情報を取得する識別情報取得部と、
    前記通行領域の撮影画像を取得する撮影画像取得部と、
    前記撮影画像に含まれる１または複数の顔画像領域の内、前記認証媒体を携帯するユーザの前記顔画像領域を通行者顔画像として特定する特定部と、
    前記通行者顔画像と前記識別情報に対応する予め記憶された正解顔画像とが一致する場合、前記認証媒体を携帯するユーザを通行許可対象として認証し、前記通行者顔画像と前記正解顔画像とが不一致である場合、前記認証媒体を携帯するユーザを通行許可対象外として認証する認証部と、
    を備え、
    前記特定部は、
    前記撮影画像から、前記撮影画像に写り込んだユーザの身体における前記認証媒体の携帯部位を特定する携帯部位特定部と、
    前記撮影画像に含まれる１または複数の前記顔画像領域の内、特定した前記携帯部位を身体の一部として有するユーザの前記顔画像領域を、前記通行者顔画像として特定する通行者顔画像特定部と、
    を有する、
    通行管理装置。