JP5613025B2 - 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 - Google Patents
視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 Download PDFInfo
- Publication number
- JP5613025B2 JP5613025B2 JP2010255269A JP2010255269A JP5613025B2 JP 5613025 B2 JP5613025 B2 JP 5613025B2 JP 2010255269 A JP2010255269 A JP 2010255269A JP 2010255269 A JP2010255269 A JP 2010255269A JP 5613025 B2 JP5613025 B2 JP 5613025B2
- Authority
- JP
- Japan
- Prior art keywords
- electrooculogram
- line
- sight
- drift
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/25—Bioelectric electrodes therefor
- A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
- A61B5/297—Bioelectric electrodes therefor specially adapted for particular uses for electrooculography [EOG]: for electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient; User input means
- A61B5/742—Details of notification to user or communication with user or patient; User input means using visual displays
- A61B5/7445—Display arrangements, e.g. multiple display units
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Ophthalmology & Optometry (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Eye Examination Apparatus (AREA)
- Eyeglasses (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- Position Input By Displaying (AREA)
Description
まず、眼球を電池とみなしたモデル(非特許文献1)を用いた視線検出方法(特許文献1、非特許文献2)がある。従来、視線とEOGの関係が線形近似されていたが、視線角が大きいほど非線形になるため、視線検出精度が低かった。そこで、非特許文献1では、EOGの非線形モデルとして、眼球を角膜がプラス、網膜がマイナスを成す電池とみなし、眼球運動を、電池が回転するものとみなすモデル(電池モデル)を提案している。電極から、角膜中心点、網膜中心点までの距離をそれぞれr、r’とし、眼球内部で網膜から角膜に向かって流れる電流をI、眼球周辺の導電率をσとするとき、電極に発生する電位vは、以下の(式1)により計算される。
その他の従来方式として、カルマンフィルタを用いた方式がある(非特許文献3および4)。1対の電極から計測されるEOG(t)を、視線方向を表す2次元ベクトルx(t)、視線方向からEOGへの変換行列Z、DCオフセットとドリフトを含めたノイズ成分e(t)を用いて、以下の(式2A)および(式2B)の通りモデル化する。
本発明の実施の形態1に係る視線検出装置について、図2〜図17を用いて説明する。
時刻tにおける観測電圧v(t)を、視線位置θ(t)、視線を眼電位に変換する眼電位変換関数eog()、ノイズe(t)(=ドリフトβ(t)+正規分布ノイズn(t))を用いて、以下の(式4)ようにモデル化する。ここで、正規分布ノイズn(t)は、高周波ノイズ、視線推定誤差、ドリフト推定誤差などを含む。
まず、眼電位変換関数eog()のキャリブレーション方法について、図2〜図7を用いて説明する。本発明における電気生理学に基づいた眼電位モデルについて説明し、そのモデルパラメータの推定法を示し、キャリブレーションされた眼電位変換関数を示す。
図2は、本発明の実施の形態1における眼電位モデルの模式図(目の位置での頭部断面図)である。眼電位モデルは、頭部内の骨、筋肉および細胞などの素子の影響を、不均一な誘電率空間1005により表し、右眼角膜電荷1001、右眼網膜電荷1002、左眼角膜電荷1003および左眼網膜電荷1004により、電極1000に生じる観測電位の理論値(眼電位理論値)を算出するモデルである。
次に、前記眼電位モデルの未知パラメータ(モデルパラメータ)である、眼球半径a、両眼間隔b、電極座標(xe、ye、ze)、所定係数α1、α2、α3、α4のキャリブレーションについて説明する。なお、以下では、眼球半径aおよび両眼間隔bは、人間の平均値であるa=12mmおよびb=65mmとし、モデル推定部は、電極座標(xe、ye、ze)、所定係数α1、α2、α3、α4のみを推定する。
まず、モデル推定部は、キャリブレーション用データ(学習データ)を取得する。図4を用いて、キャリブレーションデータ取得方法について説明する。
ユーザは、両眼の中心3001を、モニタ3000の中心位置3002に合わせ着席し、モニタ3000との間に設置した基準指標3003(z軸上)を注視する。基準指標3003は、ユーザの親指を目の前に立てて代用するなど、なんでもよいが、動かないものが好ましい。
(1) モニタ3000上に較正指標3004(視線位置θ)が提示されたら、ユーザは較正指標3004をサッケード運動(跳躍眼球運動)により注視する。このとき、モデル推定部は、サッケード運動による観測電圧変化量Δv(ユーザが基準指標3003を注視している時と較正指標3004を注視している時の電極における観測電圧の変化量)を検出し、キャリブレーションデータペア(θ、Δv)を記録する。サッケード運動による観測電圧変化量Δvについては後述する。
次に、モデル推定部は、取得したキャリブレーションデータに基づいて、モデルパラメータ推定を行う。つまり、モデル推定部は、各電極i(i=1,…,N)に対するM個のキャリブレーションデータ(θj,Δvi,j)(j=1,…,M)に対応する眼電位理論値
モデル推定部は、以上により推定されたモデルパラメータ(電極座標および所定係数)を用いて、3次元視線位置θに対する眼電位変換関数を次式により求める。
次に、本実施の形態におけるドリフト推定方法および視線検出方法を、図7〜図10を用いて説明する。
上記基本構成において、残差には高周波ノイズが含まれる場合があり、これを観測電圧へフィードバックすると補正エラーが起こる場合がある。そのため、ローパスフィルタにより、残差から高周波ノイズを除去するのが好ましい。この処理は、ローパスフィルタ22により行われる。
次に、まばたきの影響を考慮したサッケード検出方法を説明する。
次に、実施の形態2に係る視線検出装置について説明する。
次に、図20及び図21を参照して、本発明の実施の形態3に係るウェアラブルカメラ1600を説明する。このウェアラブルカメラ1600は、例えば、ユーザの側頭部に装着され、ユーザの視線方向の映像を撮像する装置である。具体的には、ウェアラブルカメラ1600は、撮像部1601と、撮像制御部1602と、視線検出装置1603とを備える。
次に、図22および図23を参照して、本発明の実施の形態4に係るヘッドマウントディスプレイ1700を説明する。このヘッドマウントディスプレイ1700は、例えば、めがね形状を有しており、ユーザの眼前に画像を表示し、表示された画像上に示されているマウスをユーザの視線方向に移動させる装置である。具体的には、ヘッドマウントディスプレイ1700は、表示部1701と、表示制御部1702と、視線検出装置1703とを備える。
次に、図25および図26を参照して、本発明の実施の形態5に係る電子めがね1800を説明する。この電子めがね1800は、ユーザの視線位置に合わせてレンズの焦点を変化させることができるめがねである。具体的には、電子めがね1800は、レンズ1801と、焦点制御部1802と、視線検出装置1803とを備える。
次に、図27を参照して、本発明の実施の形態6に係る眼科診断装置1500を説明する。この眼科診断装置1500は、例えば、ユーザの眼の周辺に電極を貼付し、眼電位を計測することによって網膜常存電位の異常を診断する装置である。具体的には、眼科診断装置1500は、眼電位計測装置1510と、診断部1520とを備える。眼電位計測装置1510は、ユーザの眼の周囲に貼付されて眼電位を測定し、眼電位原信号を出力する眼電位測定部1511と、眼電位原信号にノイズ低減処理を施すノイズ低減部1512とを備える。
上記実施の形態において、各ブロックは、LSIなどの半導体装置により個別に1チップ化されてもよいし、一部または全部を含むように1チップ化されてもよい。なお、ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。
10 視線検出部
11 減算器
12 θ探索部
20 ドリフト推定部
21 積分器
81 視線存在空間
203 減算部
500 サッケード検出部
501 遅延信号生成部
701 眼電位レンジを越える成分
702 眼電図に直交する成分
1001 右眼角膜電荷
1002 右眼網膜電荷
1003 左眼角膜電荷
1004 左眼網膜電荷
1005 不均一誘電率空間
3000 モニタ
3001 両眼中心位置
3002 モニタ中心位置
3003 基準指標
3004 較正指標
3005 ユーザ
4001 めがね
4002、4005、4006 電極
4003 鼻パッド位置
4004 めがねフレーム・耳接触位置
Claims (22)
- 眼電位からユーザの視線方向を検出する視線検出装置であって、
複数の電極により観測される生体に発生する眼電位である複数の観測電圧のそれぞれのうち、眼電位部分空間外の成分に基づいて、前記観測電圧の組に含まれるドリフトノイズを推定するドリフト推定部と、
前記複数の観測電圧から前記ドリフト推定部が推定した前記ドリフトノイズを除去した信号に基づいて、前記ユーザの視線方向を検出する視線検出部と
を備え、
前記眼電位部分空間は、
前記複数の電極の数と同じ数の次元によって表される電圧値の空間である眼電位空間のうちの部分的な空間であって、前記ユーザの取り得る視線位置のそれぞれに対して前記複数の電極において観測される眼電位の組を、前記眼電位空間にプロットすることにより得られる空間である
視線検出装置。 - 前記眼電位部分空間は、所定の範囲内における前記ユーザの視線方向を示す視線ベクトル空間内の点を、所定の眼電位変換関数により写像することにより得られる
請求項1記載の視線検出装置。 - 前記所定の範囲の境界線は、曲線である
請求項2記載の視線検出装置。 - 前記所定の範囲の境界線は、前記ユーザの水平視線方向に対して上下非対称な曲線である
請求項3記載の視線検出装置。 - 前記所定の範囲は、前記ユーザが眼球を円周状に回転運動させた場合の前記ユーザの視線方向の範囲である
請求項2〜4のいずれか1項記載の視線検出装置。 - さらに、視線方向ごとに前記複数の電極の各々により観測される観測電圧から前記眼電位変換関数を算出する関数算出部を備え、
前記関数算出部は、前記回転運動を2回行ったときの同一箇所における2回の観測電圧の差に基づいてドリフトノイズを推定し、前記2回の観測電圧のうち少なくともいずれか一方の観測電圧から推定した前記ドリフトノイズを除去した電圧から前記眼電位変換関数を算出する
請求項5記載の視線検出装置。 - 前記眼電位変換関数は、非線形関数である
請求項2〜6のいずれか1項記載の視線検出装置。 - 前記非線形関数は、右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから前記任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離とから、前記任意の3次元空間位置に発生する眼電位理論値を算出するための関数である
請求項7記載の視線検出装置。 - 前眼非線形関数は、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離のそれぞれに対して個別に設定可能である所定係数を含む
請求項8記載の視線検出装置。 - 前記関数算出部は、視線方向ごとに前記複数の電極により観測される前記複数の観測電圧の各々を用いて、観測電圧が観測されていない視線方向の眼電位を補間することにより、非線形関数である前記眼電位変換関数を算出する
請求項6記載の視線検出装置。 - 前記ドリフト推定部は、
さらに、前記残差にローパスフィルタ処理を施し、
前記ローパスフィルタ処理を施した後の残差から前記ドリフト推定値を推定する
請求項11記載の視線検出装置。 - 前記ドリフト推定部は、前記視線推定値が前記所定の範囲の境界を超えた場合には、前記ローパスフィルタ処理のカットオフ周波数を上げる
請求項12記載の視線検出装置。 - さらに、前記観測電圧から、眼球の急速な運動であるサッケード運動の発生を検出するサッケード検出部を備え、
前記ドリフト推定部は、前記サッケード検出部によりサッケード運動の発生が検出された場合に、前記ローパスフィルタ処理のカットオフ周波数を下げる
請求項12または13記載の視線検出装置。 - 前記サッケード検出部は、
前記各観測電圧を所定の時間遅延させて遅延信号を出力する遅延信号生成部と、
前記各観測電圧から前記遅延信号を減算して得られる出力信号を生成する減算部とを有し、
前記出力信号のうちの予め定めた閾値を上回る信号をサッケード運動を示すサッケード信号と判定し、
前記所定の遅延時間は、ユーザの1回の固視時間より短い
請求項14記載の視線検出装置。 - 眼電位からユーザの視線方向を検出する視線検出方法であって、
複数の電極により観測される生体に発生する眼電位である複数の観測電圧のそれぞれのうち、眼電位部分空間外の成分に基づいて、前記観測電圧の組に含まれるドリフトノイズを推定するドリフト推定ステップと、
前記観測電圧から前記ドリフト推定ステップにおいて推定された前記ドリフトノイズを除去した信号に基づいて、前記ユーザの視線方向を検出する視線検出ステップと
を含み、
前記眼電位部分空間は、
前記複数の電極の数と同じ数の次元によって表される電圧値の空間である眼電位空間のうちの部分的な空間であって、前記ユーザの取り得る視線位置のそれぞれに対して前記複数の電極において観測される眼電位の組を、前記眼電位空間にプロットすることにより得られる空間である
視線検出方法。 - ユーザの眼電位を計測する眼電位計測装置であって、
複数の電極により観測される生体に発生する眼電位である複数の観測電圧のそれぞれのうち、眼電位部分空間外の成分に基づいて、前記観測電圧の組に含まれるドリフトノイズを推定するドリフト推定部と、
前記観測電圧から前記ドリフト推定部が推定した前記ドリフトノイズを減算する減算器と
を備え、
前記眼電位部分空間は、
前記複数の電極の数と同じ数の次元によって表される電圧値の空間である眼電位空間のうちの部分的な空間であって、前記ユーザの取り得る視線位置のそれぞれに対して前記複数の電極において観測される眼電位の組を、前記眼電位空間にプロットすることにより得られる空間である
眼電位計測装置。 - ユーザの視線方向の映像を撮像するウェアラブルカメラであって、
撮像部と、
請求項1〜15のいずれか1項に記載の視線検出装置と、
前記視線検出装置によって検出された視線方向を前記撮像部に撮像させる撮像制御部と
を備えるウェアラブルカメラ。 - ユーザの視線方向にマウスを移動させるヘッドマウントディスプレイであって、
画像およびマウスを表示する表示部と、
請求項1〜15のいずれか1項に記載の視線検出装置と、
前記視線検出装置によって検出された視線方向に表示部に表示されているマウスを移動させる表示制御部と
を備えるヘッドマウントディスプレイ。 - ユーザの視線位置に合わせてレンズの焦点を変化させる電子めがねであって、
焦点を変化させることができるレンズと、
請求項1〜15のいずれか1項に記載の視線検出装置と、
前記視線検出装置によって検出された視線位置に合わせて前記レンズの焦点を変化させる焦点制御部と
を備える電子めがね。 - ユーザの網膜状態を診断する眼科診断装置であって、
請求項1〜15のいずれか1項に記載の視線検出装置と、
観測電圧からドリフト推定部が推定したドリフトノイズを除去した信号に基づいて、ユーザの網膜異常を検出する診断部とを備える
眼科診断装置。 - 眼電位からユーザの視線方向を検出するプログラムであって、
複数の電極により観測される生体に発生する眼電位である複数の観測電圧のそれぞれのうち、眼電位部分空間外の成分に基づいて、前記観測電圧の組に含まれるドリフトノイズを推定するドリフト推定ステップと、
前記観測電圧から前記ドリフト推定ステップにおいて推定された前記ドリフトノイズを除去した信号に基づいて、前記ユーザの視線方向を検出する視線検出ステップと
をコンピュータに実行させ、
前記眼電位部分空間は、
前記複数の電極の数と同じ数の次元によって表される電圧値の空間である眼電位空間のうちの部分的な空間であって、前記ユーザの取り得る視線位置のそれぞれに対して前記複数の電極において観測される眼電位の組を、前記眼電位空間にプロットすることにより得られる空間である
プログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010255269A JP5613025B2 (ja) | 2009-11-18 | 2010-11-15 | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009262680 | 2009-11-18 | ||
| JP2009262680 | 2009-11-18 | ||
| JP2010255269A JP5613025B2 (ja) | 2009-11-18 | 2010-11-15 | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2011125692A JP2011125692A (ja) | 2011-06-30 |
| JP5613025B2 true JP5613025B2 (ja) | 2014-10-22 |
Family
ID=44258303
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2010255269A Active JP5613025B2 (ja) | 2009-11-18 | 2010-11-15 | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US8434868B2 (ja) |
| JP (1) | JP5613025B2 (ja) |
Families Citing this family (73)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120105740A1 (en) | 2000-06-02 | 2012-05-03 | Oakley, Inc. | Eyewear with detachable adjustable electronics module |
| US8482488B2 (en) | 2004-12-22 | 2013-07-09 | Oakley, Inc. | Data input management system for wearable electronically enabled interface |
| US7013009B2 (en) | 2001-06-21 | 2006-03-14 | Oakley, Inc. | Eyeglasses with wireless communication features |
| US7740353B2 (en) | 2006-12-14 | 2010-06-22 | Oakley, Inc. | Wearable high resolution audio visual interface |
| JP5490664B2 (ja) * | 2009-11-18 | 2014-05-14 | パナソニック株式会社 | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね |
| FR2958528B1 (fr) * | 2010-04-09 | 2015-12-18 | E Ye Brain | Systeme optique de suivi de mouvements oculaires et dispositif support associe |
| US8888287B2 (en) | 2010-12-13 | 2014-11-18 | Microsoft Corporation | Human-computer interface system having a 3D gaze tracker |
| US20120259638A1 (en) * | 2011-04-08 | 2012-10-11 | Sony Computer Entertainment Inc. | Apparatus and method for determining relevance of input speech |
| EP2551636A1 (de) * | 2011-07-25 | 2013-01-30 | Leica Geosystems AG | Berührungslos bedienbare Vermessungsvorrichtung und Steuerverfahren für eine solche |
| US9256285B2 (en) * | 2011-08-19 | 2016-02-09 | Thompson Licensing Sa | Method for gaze-controlled text size control, and methods for gaze-based measuring of a text reading speed and of a number of visual saccades per text line |
| US8929589B2 (en) * | 2011-11-07 | 2015-01-06 | Eyefluence, Inc. | Systems and methods for high-resolution gaze tracking |
| US8941561B1 (en) * | 2012-01-06 | 2015-01-27 | Google Inc. | Image capture |
| US9024844B2 (en) | 2012-01-25 | 2015-05-05 | Microsoft Technology Licensing, Llc | Recognition of image on external display |
| US20130194389A1 (en) * | 2012-01-31 | 2013-08-01 | Ben Vaught | Head-mounted display device to measure attentiveness |
| CN204331191U (zh) | 2012-02-17 | 2015-05-13 | 奥克利有限公司 | 眼镜和双重附接构件 |
| TWI466655B (zh) * | 2012-03-16 | 2015-01-01 | 國立交通大學 | 可偵測眼動訊號之影像控制系統 |
| JP5942586B2 (ja) * | 2012-05-18 | 2016-06-29 | 富士通株式会社 | タブレット端末および操作受付プログラム |
| JP5661067B2 (ja) | 2012-05-29 | 2015-01-28 | 株式会社ジェイアイエヌ | アイウエア |
| US9888842B2 (en) | 2012-05-31 | 2018-02-13 | Nokia Technologies Oy | Medical diagnostic gaze tracker |
| CN103777861A (zh) * | 2012-10-23 | 2014-05-07 | 韩国电子通信研究院 | 终端和用于在终端中控制触摸操作的方法 |
| EP2929413B1 (en) * | 2012-12-06 | 2020-06-03 | Google LLC | Eye tracking wearable devices and methods for use |
| WO2014111924A1 (en) * | 2013-01-15 | 2014-07-24 | Poow Innovation Ltd. | Dynamic icons |
| WO2014115387A1 (ja) * | 2013-01-28 | 2014-07-31 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
| EP2973533A4 (en) | 2013-03-15 | 2016-11-30 | Oakley Inc | ELECTRONIC DECORATION FOR GLASSES |
| US10341611B2 (en) | 2013-04-30 | 2019-07-02 | Inuitive Ltd. | System and method for video conferencing |
| JP6181974B2 (ja) * | 2013-05-23 | 2017-08-16 | 株式会社Nttドコモ | 視線計測装置及び視線計測方法 |
| WO2014201213A1 (en) | 2013-06-12 | 2014-12-18 | Oakley, Inc. | Modular heads-up display system |
| US10025378B2 (en) * | 2013-06-25 | 2018-07-17 | Microsoft Technology Licensing, Llc | Selecting user interface elements via position signal |
| US9936916B2 (en) * | 2013-10-09 | 2018-04-10 | Nedim T. SAHIN | Systems, environment and methods for identification and analysis of recurring transitory physiological states and events using a portable data collection device |
| JP6929644B2 (ja) * | 2013-12-31 | 2021-09-01 | グーグル エルエルシーGoogle LLC | 注視によるメディア選択及び編集のためのシステム並びに方法 |
| US20150193658A1 (en) * | 2014-01-09 | 2015-07-09 | Quentin Simon Charles Miller | Enhanced Photo And Video Taking Using Gaze Tracking |
| US9298994B2 (en) * | 2014-01-09 | 2016-03-29 | Harman International Industries, Inc. | Detecting visual inattention based on eye convergence |
| KR20150101915A (ko) * | 2014-02-27 | 2015-09-04 | 삼성전자주식회사 | 3차원 gui 화면의 표시 방법 및 이를 수행하기 위한 디바이스 |
| JP6266417B2 (ja) * | 2014-04-14 | 2018-01-24 | 株式会社ジンズ | 情報処理装置、情報処理システム、及びプログラム |
| US20150302422A1 (en) * | 2014-04-16 | 2015-10-22 | 2020 Ip Llc | Systems and methods for multi-user behavioral research |
| WO2015172124A1 (en) * | 2014-05-09 | 2015-11-12 | Eyefluence, Inc. | Systems and methods for using eye signals with secure mobile communications |
| EP3143575A2 (en) * | 2014-05-15 | 2017-03-22 | Essilor International (Compagnie Générale D'Optique) | A monitoring system for monitoring head mounted device wearer |
| US9727136B2 (en) | 2014-05-19 | 2017-08-08 | Microsoft Technology Licensing, Llc | Gaze detection calibration |
| SG11201701018PA (en) | 2014-08-10 | 2017-03-30 | Autonomix Medical Inc | Ans assessment systems, kits, and methods |
| US9547365B2 (en) * | 2014-09-15 | 2017-01-17 | Google Inc. | Managing information display |
| WO2016075782A1 (ja) * | 2014-11-12 | 2016-05-19 | 富士通株式会社 | ウェアラブルデバイス、表示制御方法、及び表示制御プログラム |
| WO2016121883A1 (ja) | 2015-01-29 | 2016-08-04 | 京セラ株式会社 | 電子機器 |
| WO2016174659A1 (en) | 2015-04-27 | 2016-11-03 | Snapaid Ltd. | Estimating and using relative head pose and camera field-of-view |
| JP6334484B2 (ja) * | 2015-09-01 | 2018-05-30 | 株式会社東芝 | メガネ型ウェアラブル装置及びその制御方法及び情報管理サーバー |
| US10565723B2 (en) | 2016-02-02 | 2020-02-18 | Samsung Electronics Co., Ltd. | Systems and methods for drift correction |
| JP6746997B2 (ja) * | 2016-03-23 | 2020-08-26 | 富士通株式会社 | 眼電位測定装置及び電子装置 |
| US10579162B2 (en) | 2016-03-24 | 2020-03-03 | Samsung Electronics Co., Ltd. | Systems and methods to correct a vehicle induced change of direction |
| US10943359B2 (en) | 2016-08-04 | 2021-03-09 | Dolby Laboratories Licensing Corporation | Single depth tracked accommodation-vergence solutions |
| KR20180055660A (ko) | 2016-11-16 | 2018-05-25 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
| WO2018093181A1 (ko) * | 2016-11-16 | 2018-05-24 | 삼성전자 주식회사 | 전자 장치 및 그 제어 방법 |
| US10757328B2 (en) | 2016-12-23 | 2020-08-25 | Microsoft Technology Licensing, Llc | Eye tracking using video information and electrooculography information |
| EP3417775B1 (en) | 2017-06-22 | 2020-08-19 | Oticon A/s | A system for capturing electrooculography signals |
| US11347052B2 (en) | 2017-10-23 | 2022-05-31 | Sony Corporation | Display control apparatus, head mounted display, and display control method |
| JP6774975B2 (ja) | 2018-03-19 | 2020-10-28 | 株式会社東芝 | 眼球回転検出装置、電子機器及びシステム |
| US11684305B2 (en) | 2018-06-02 | 2023-06-27 | Seyedhesam Sadeghian-Motahar | Electrode array configuration on a flexible substrate for electro-oculogram recording |
| CN109326096B (zh) * | 2018-09-14 | 2020-12-15 | 住友富士电梯有限公司 | 一种电梯安全语音提示系统及其控制方法 |
| WO2020061546A1 (en) | 2018-09-21 | 2020-03-26 | MacuLogix, Inc. | Methods, apparatus, and systems for ophthalmic testing and measurement |
| WO2020074566A1 (en) * | 2018-10-09 | 2020-04-16 | Essilor International | A method for adapting ophthalmic equipment according to a wearer's visual exploration strategy |
| CN110123318B (zh) * | 2019-04-18 | 2021-03-30 | 华南理工大学 | 一种基于眼电信号监测眼球位置坐标的方法 |
| US10860095B2 (en) | 2019-05-02 | 2020-12-08 | Cognixion | Dynamic eye-tracking camera alignment utilizing eye-tracking maps |
| US11786694B2 (en) | 2019-05-24 | 2023-10-17 | NeuroLight, Inc. | Device, method, and app for facilitating sleep |
| CN112578903B (zh) * | 2019-09-30 | 2024-09-27 | 托比股份公司 | 眼动追踪方法和眼动追踪器 |
| US11614797B2 (en) | 2019-11-05 | 2023-03-28 | Micron Technology, Inc. | Rendering enhancement based in part on eye tracking |
| JP7703544B2 (ja) * | 2020-01-22 | 2025-07-07 | ドルビー ラボラトリーズ ライセンシング コーポレイション | 眼電図測定とアイトラッキング |
| JP6957695B1 (ja) * | 2020-07-30 | 2021-11-02 | 株式会社ジンズホールディングス | プログラム、情報処理方法、及び情報処理装置 |
| JP7644466B2 (ja) * | 2020-08-25 | 2025-03-12 | 学校法人立命館 | 検出装置及び検出方法 |
| JP7706957B2 (ja) * | 2021-06-30 | 2025-07-14 | キヤノン株式会社 | 検出装置およびその制御方法 |
| EP4374242A1 (en) | 2021-07-21 | 2024-05-29 | Dolby Laboratories Licensing Corporation | Screen interaction using eog coordinates |
| US11874958B2 (en) * | 2021-09-24 | 2024-01-16 | Apple Inc. | Eye detection methods and devices |
| CN115793234A (zh) * | 2022-11-04 | 2023-03-14 | 东南大学 | 一种仿生软体镜头眼控运动变焦成像系统及方法 |
| JP2024163623A (ja) * | 2023-05-12 | 2024-11-22 | キヤノン株式会社 | 表示装置、制御方法、プログラム |
| WO2025087535A1 (en) * | 2023-10-26 | 2025-05-01 | Telefonaktiebolaget Lm Ericsson (Publ) | Eye-tracking of objects in an xr environment |
| CN120315983B (zh) * | 2025-06-17 | 2025-08-15 | 甬江实验室 | 智能设备的眼动追踪延时及准确度性能测试方法、系统 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4950069A (en) * | 1988-11-04 | 1990-08-21 | University Of Virginia | Eye movement detector with improved calibration and speed |
| JPH02164335A (ja) * | 1988-12-16 | 1990-06-25 | Konan Camera Kenkyusho:Kk | 眼球運動解析装置 |
| JPH1185384A (ja) * | 1997-09-03 | 1999-03-30 | Rikagaku Kenkyusho | 角膜網膜電位を用いた視力入力方法及び装置 |
| US20050047629A1 (en) * | 2003-08-25 | 2005-03-03 | International Business Machines Corporation | System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking |
| EP1799105B1 (en) * | 2004-09-03 | 2008-10-29 | Canadian Space Agency | System and method for mental workload measurement based on rapid eye movement |
| JP4802329B2 (ja) | 2006-02-27 | 2011-10-26 | 国立大学法人電気通信大学 | 眼球位置計測方法及び眼球位置計測装置 |
| JP5072553B2 (ja) * | 2007-11-29 | 2012-11-14 | 浜松ホトニクス株式会社 | 眼球運動計測装置 |
| US8318485B2 (en) * | 2008-02-25 | 2012-11-27 | Natalie Gavrilova | Stem cell therapy for the treatment of diabetic retinopathy and diabetic optic neuropathy |
| WO2009107371A1 (ja) * | 2008-02-28 | 2009-09-03 | パナソニック株式会社 | 視線検出装置及び視線検出方法 |
-
2010
- 2010-11-15 JP JP2010255269A patent/JP5613025B2/ja active Active
- 2010-11-17 US US12/948,145 patent/US8434868B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US20110170067A1 (en) | 2011-07-14 |
| US8434868B2 (en) | 2013-05-07 |
| JP2011125692A (ja) | 2011-06-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5613025B2 (ja) | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 | |
| JP5490664B2 (ja) | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね | |
| US8333475B2 (en) | Electro-oculography measuring device, ophthalmological diagnosis device, eye-gaze tracking device, wearable camera, head-mounted display, electronic eyeglasses, electro-oculography measuring method, and recording medium | |
| US8419654B2 (en) | Eye gaze tracking apparatus, imaging apparatus, eye gaze tracking method, program, and integrated circuit | |
| Eggert | Eye movement recordings: methods | |
| Aziz et al. | An assessment of the eye tracking signal quality captured in the HoloLens 2 | |
| US8430510B2 (en) | Noise reduction device, electro-oculography measuring device, ophthalmological diagnosis device, eye-gaze tracking device, wearable camera, head-mounted display, electronic eyeglasses, noise reduction method, and recording medium | |
| van Der Geest et al. | Recording eye movements with video-oculography and scleral search coils: a direct comparison of two methods | |
| US20190204913A1 (en) | Eye-tracking calibration | |
| JP2014124308A (ja) | 眼電位生成装置、眼電位生成方法およびビューワー | |
| Stuart et al. | Quantifying saccades while walking: validity of a novel velocity-based algorithm for mobile eye tracking | |
| Kumar et al. | SmartEye: Developing a novel eye tracking system for quantitative assessment of oculomotor abnormalities | |
| JP2018196730A (ja) | 眼の位置を監視するための方法およびシステム | |
| US20190320891A1 (en) | System, Device and Method for Eye Activity Monitoring | |
| Barbara et al. | Eog-based gaze angle estimation using a battery model of the eye | |
| Terracciano et al. | Pattern-reversal visual evoked potential on smart glasses | |
| Abdulin et al. | Study of Additional Eye-Related Features for Future Eye-Tracking Techniques | |
| Iijima et al. | Image analysis of quick phase eye movements in nystagmus with high-speed video system | |
| JP2012139272A (ja) | 顔表面の運動機能の測定装置及び測定方法並びに測定用補助具 | |
| Manabe et al. | Automatic drift calibration for EOG-based gaze input interface | |
| US20230210463A1 (en) | Monitoring cardiac activity using an in-ear device | |
| JP4802329B2 (ja) | 眼球位置計測方法及び眼球位置計測装置 | |
| KR101297330B1 (ko) | 기준전압 피드백 기반 안구전도 신호를 이용한 안구 운동 측정 방법 | |
| Zheng et al. | Distribution of Globe Excursions Within the Orbits Monitored by Eye Tracking Glasses in Ambulatory Subjects Engaged in Their Normal Daily Activities | |
| Krupiński et al. | Real–Time Low-Latency Estimation of the Blinking and EOG Signals |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130319 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140124 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140327 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140902 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140905 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5613025 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |