JP7305332B2 - レンズ制御装置、及びその制御方法 - Google Patents
レンズ制御装置、及びその制御方法 Download PDFInfo
- Publication number
- JP7305332B2 JP7305332B2 JP2018207518A JP2018207518A JP7305332B2 JP 7305332 B2 JP7305332 B2 JP 7305332B2 JP 2018207518 A JP2018207518 A JP 2018207518A JP 2018207518 A JP2018207518 A JP 2018207518A JP 7305332 B2 JP7305332 B2 JP 7305332B2
- Authority
- JP
- Japan
- Prior art keywords
- image plane
- subject
- plane position
- prediction
- lens
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
- G02B7/28—Systems for automatic generation of focusing signals
- G02B7/36—Systems for automatic generation of focusing signals using image sharpness techniques, e.g. image processing techniques for generating autofocus signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/671—Focus control based on electronic image sensor signals in combination with active ranging signals, e.g. using light or sound signals emitted toward objects
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Automatic Focus Adjustment (AREA)
- Focusing (AREA)
Description
以下、本発明を適用した実施例を説明する。本実施例では一例として、本発明をデジタル一眼レフカメラに適用した例を説明する。
図1は、デジタル一眼レフカメラの構成を示すブロック図である。
ここで、カルマンフィルタ演算について説明する。時刻kにおける時系列データy(k)が、次の式で与えられるものとする。なお、時系列データを観測値とも称する。なお、以下の説明において時刻k-1、時刻k、時刻k+1はいずれも時系列データが得られる時刻に相当する。
y(k)=XT(k)A(k)+ω(k)
A(k+1)=L(k)A(k)+m(k)ν(k)
A’(k)=L(k-1)A(k-1)
P’(k)=L(k-1)P(k-1)LT(k-1)+
σν 2(k-1)m(k-1)mT(k-1)
A(k)=A’(k)+g(k)(y(k)-XT(k)A’(k))
P(k)=(I-g(k)XT(k))P’(k)
本実施例におけるカルマンフィルタ演算を説明する。y(k)は時刻kの像面位置の検出結果である。そして、本実施例のカルマンフィルタ演算では、状態ベクトルA(k)から、被写体の状態に関する情報として、時刻kにおける像面位置と像面移動速度とが推定される。また、状態ベクトルA(k)に基づいて、状態ベクトルA(k+1)が求められることで、被写体の状態に関する情報として、時刻k+1における像面位置と像面移動速度とが推定される。
ここで図8を用いて、特許文献1にも開示されている一括最小二乗法に基づく像面位置の予測についてより詳しく説明する。
y(t)=C(t)TT(t)
C(k)=[Z(k)TZ(k)]-1Z(k)TY(k)
次に、本発明の実施例1に関する撮影処理の動作例を図2のフローチャートに基づいて説明する。
次にステップS402の焦点調節処理の動作の一例を図3のフローチャートに基づき説明する。
以上説明したように、実施例1ではカルマンフィルタ演算を用いて算出された被写体の像面位置に基づいてフォーカスレンズの駆動を制御する。これにより、カルマンフィルタ演算を用いない場合と比較して、処理負荷を抑えつつ、動く被写体に対して適切にピントを合わせることができる。
実施例1では、カルマンフィルタ演算による同定度合いが閾値以上である場合にカルマンフィルタ演算を用いる例を説明した。
本実施例での焦点調節処理の動作を図4のフローチャートに基づき説明する。
以上説明したように、実施例2では、被写体の動きに応じてカルマンフィルタ演算を採用し、像面位置を求める。より具体的には、被写体の移動速度に対応する像面移動速度に応じてカルマンフィルタ演算を採用するか否かを切り替える。処理負荷を抑えつつ、動く被写体に対して適切にピントを合わせることができる。
実施例1では、カルマンフィルタ演算による同定度合いが閾値以上である場合にカルマンフィルタ演算を用いる例を説明した。また、実施例2では、実施例1に対して更に被写体の動きを考慮してカルマンフィルタ演算を用いる例を説明した。
本実施例での焦点調節処理の動作を図5のフローチャートに基づき説明する。
以上説明したように、実施例3では、焦点検出結果のばらつきに応じて、カルマンフィルタ演算を用いる。より具体的には、焦点検出結果のばらつきが閾値以上である場合に、カルマンフィルタ演算を用いる。これにより、処理負荷を抑えつつ、動く被写体に対して適切にピントを合わせることができる。
カルマンフィルタ演算を用いる場合に、行列L、列ベクトルmを固定とすると、被写体の動きによっては、被写体の像面位置がモデル式から乖離する場合がある。具体的には、被写体が近づくことで、撮影距離が短くなり、かつ、被写体の像面移動速度が速くなると、そうでない場合に比較して、状態推定ベクトルAの変化量を大きくしないと、被写体の像面位置がモデル式から乖離しやすくなる。状態推定ベクトルAの変化量は、行列L、列ベクトルmおよび分散σν 2によって変えることができる。そこで、実施例4では、各種条件に応じて、カルマンフィルタ演算に用いる設定パラメータを変更することで、より精度良くカルマンフィルタ演算を行う例を説明する。
次に、本発明の実施例4の焦点調節処理の動作例を図6のフローチャートに基づいて説明する。
以上で説明した実施形態により、各種条件に応じて行列L、列ベクトルmを変化させることで、被写体の像面位置がモデル式から乖離し得る条件下であっても、カルマンフィルタを用いて将来の像面位置を求めることができる。
上述の実施例ではカルマンフィルタ演算を用いたが、逐次同定法の別種である逐次最小二乗法(RLS法)を用いてもよい。この場合、σ2 ω(k)=1となる。つまり、逐次最小二乗法は、本実施例のカルマンフィルタ演算と比較して、設定されたパラメータが少ない特殊例である。従って計算量の観点ではカルマンフィルタと同一の効果が得られる。
Claims (8)
- 焦点検出結果を取得する焦点検出手段と、
前記焦点検出結果に基づいて被写体の像面位置に対応する情報を逐次最小二乗法に基づいて推定する推定手段と、
前記推定手段により推定された被写体の像面位置に対応する情報に基づいて、被写体の将来の像面位置に対応する情報を予測する第1の予測手段と、
一括最小二乗法に基づいて被写体の将来の像面位置に対応する情報の予測を行う第2の予測手段と、
前記第1の予測手段又は前記第2の予測手段によって予測された前記被写体の将来の像面位置に対応する情報に基づいてフォーカスレンズの駆動を制御する駆動制御手段と、を有し、
前記駆動制御手段は、被写体までの撮影距離が第1の距離未満である場合には、前記第2の予測手段によって予測された将来の被写体の像面位置に対応する情報に基づいてフォーカスレンズを駆動することを特徴とするレンズ制御装置。 - 被写体までの撮影距離を算出する距離算出手段を備え、
前記駆動制御手段は、前記距離算出手段によって算出された被写体までの撮影距離が第1の距離以上である場合には、前記第1の予測手段によって予測された将来の被写体の像面位置に対応する情報に基づいてフォーカスレンズを駆動することを特徴とする請求項1に記載のレンズ制御装置。 - 一括最小二乗法に基づいて被写体の将来の像面位置に対応する情報の予測を行う第2の予測手段と、
像面位置の移動速度に対応する速度である像面移動速度を算出する速度算出手段を有し、
前記駆動制御手段は、前記速度算出手段によって算出された像面移動速度が第1の速度以上である場合には、前記第2の予測手段によって予測された将来の被写体の像面位置に対応する情報に基づいてフォーカスレンズを駆動することを特徴とする請求項1に記載のレンズ制御装置。 - 前記駆動制御手段は、前記速度算出手段によって算出された像面移動速度が第1の速度未満である場合には、前記第1の予測手段によって予測された将来の被写体の像面位置に対応する情報に基づいてフォーカスレンズを駆動することを特徴とする請求項3に記載のレンズ制御装置。
- 前記逐次最小二乗法におけるパラメータを設定する設定手段を有し、
前記設定手段は、被写体の動きに応じて前記パラメータを設定することを特徴とする請求項1乃至請求項4のいずれか1項に記載のレンズ制御装置。 - 前記設定手段は、像面移動速度、被写体までの撮影距離の少なくとも1つに基づいて前記パラメータを設定することを特徴とする請求項5に記載のレンズ制御装置。
- 前記逐次最小二乗法は、カルマンフィルタであることを特徴とする請求項1乃至請求項6のいずれか1項に記載のレンズ制御装置。
- レンズ制御装置の制御方法であって、
焦点検出結果を取得する焦点検出ステップと
前記焦点検出結果に基づいて被写体の像面位置に対応する情報を逐次最小二乗法に基づいて推定する推定ステップと、
前記推定ステップで推定された被写体の像面位置に対応する情報に基づいて、被写体の将来の像面位置に対応する情報を予測する第1の予測、又は一括最小二乗法に基づいて被写体の将来の像面位置に対応する情報の予測を行う第2の予測によって、被写体の将来の像面位置に対応する情報を予測する予測ステップと、
前記第1の予測又は前記第2の予測によって予測された前記被写体の将来の像面位置に対応する情報に基づいてフォーカスレンズの駆動を制御する駆動制御ステップと、を有し、
前記駆動制御ステップでは、被写体までの撮影距離が第1の距離未満である場合には、前記第2の予測によって予測された将来の被写体の像面位置に対応する情報に基づいてフォーカスレンズを駆動することを特徴とするレンズ制御装置の制御方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US16/186,959 US10834309B2 (en) | 2017-11-16 | 2018-11-12 | Lens control apparatus and control method for tracking moving object |
| KR1020180141220A KR102402325B1 (ko) | 2017-11-16 | 2018-11-16 | 렌즈 제어장치, 및 움직이는 피사체를 추적하기 위한 제어 방법 |
| CN201811367008.6A CN110022432B (zh) | 2017-11-16 | 2018-11-16 | 用于追踪移动被摄体的镜头控制设备和控制方法 |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017221285 | 2017-11-16 | ||
| JP2017221285 | 2017-11-16 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019091031A JP2019091031A (ja) | 2019-06-13 |
| JP7305332B2 true JP7305332B2 (ja) | 2023-07-10 |
Family
ID=66836321
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018207518A Active JP7305332B2 (ja) | 2017-11-16 | 2018-11-02 | レンズ制御装置、及びその制御方法 |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP7305332B2 (ja) |
| CN (1) | CN110022432B (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001021794A (ja) | 1999-07-12 | 2001-01-26 | Canon Inc | 自動焦点調節装置および光学機器 |
| US20040004670A1 (en) | 2002-03-14 | 2004-01-08 | Canon Kabushiki Kaisha | Image pickup apparatus having auto-focus control and image pickup method |
| JP2009089365A (ja) | 2007-09-20 | 2009-04-23 | Delphi Technologies Inc | 物体追跡の方法 |
| JP2016140030A (ja) | 2015-01-29 | 2016-08-04 | 株式会社リコー | 画像処理装置、撮像装置、及び画像処理プログラム |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0814861A (ja) * | 1994-07-01 | 1996-01-19 | Canon Inc | 3次元形状の計測方法及び装置 |
| JP3635687B2 (ja) * | 1994-09-07 | 2005-04-06 | 株式会社ニコン | 自動合焦装置 |
| EP2688305B1 (en) * | 2011-03-18 | 2017-08-09 | FUJIFILM Corporation | Lens control device and lens control method |
| JP5616934B2 (ja) * | 2012-09-14 | 2014-10-29 | オリンパスイメージング株式会社 | 焦点調節装置、カメラシステム及び焦点調節方法 |
| JP6664177B2 (ja) * | 2015-09-28 | 2020-03-13 | キヤノン株式会社 | 焦点検出装置、予測方法、プログラム及び記憶媒体 |
| JP2017126035A (ja) * | 2016-01-15 | 2017-07-20 | キヤノン株式会社 | 撮像装置、制御方法、プログラム及び記憶媒体 |
-
2018
- 2018-11-02 JP JP2018207518A patent/JP7305332B2/ja active Active
- 2018-11-16 CN CN201811367008.6A patent/CN110022432B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001021794A (ja) | 1999-07-12 | 2001-01-26 | Canon Inc | 自動焦点調節装置および光学機器 |
| US20040004670A1 (en) | 2002-03-14 | 2004-01-08 | Canon Kabushiki Kaisha | Image pickup apparatus having auto-focus control and image pickup method |
| JP2009089365A (ja) | 2007-09-20 | 2009-04-23 | Delphi Technologies Inc | 物体追跡の方法 |
| JP2016140030A (ja) | 2015-01-29 | 2016-08-04 | 株式会社リコー | 画像処理装置、撮像装置、及び画像処理プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110022432B (zh) | 2021-03-26 |
| JP2019091031A (ja) | 2019-06-13 |
| CN110022432A (zh) | 2019-07-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106470317B (zh) | 摄像设备及其控制方法 | |
| JP6749791B2 (ja) | 撮像装置及び自動焦点調節方法 | |
| JP7086571B2 (ja) | 撮像装置、レンズ装置およびこれらの制御方法 | |
| JP7210185B2 (ja) | 撮像装置及びその制御方法 | |
| US20100315528A1 (en) | Digital photographing apparatus, method of controlling the same, and computer readable storage medium having recorded thereon program for executing the method | |
| KR102402325B1 (ko) | 렌즈 제어장치, 및 움직이는 피사체를 추적하기 위한 제어 방법 | |
| JP2006093860A (ja) | 2眼撮像系を搭載したカメラ | |
| JP5020800B2 (ja) | 撮像装置及びその制御方法 | |
| CN110519504A (zh) | 电子设备、电子设备的控制装置、存储介质以及控制方法 | |
| JP4500140B2 (ja) | 2眼撮像系を搭載したカメラ | |
| JP5947489B2 (ja) | 焦点調節装置および焦点調節方法 | |
| JP7305332B2 (ja) | レンズ制御装置、及びその制御方法 | |
| JP2018197845A (ja) | フォーカス制御装置および撮像装置 | |
| JP2020091415A (ja) | レンズ制御装置、及びその制御方法 | |
| JP2015111226A (ja) | 被写体追跡装置及びその制御方法、撮像装置、プログラム、並びに記憶媒体 | |
| JP2010145495A (ja) | カメラシステム | |
| JP7379083B2 (ja) | 制御装置、撮像装置、制御方法、および、プログラム | |
| JP2019120734A (ja) | 撮像装置、レンズ装置およびこれらの制御方法 | |
| JP7431555B2 (ja) | 撮像装置及びその制御方法 | |
| CN115484373A (zh) | 自动聚焦系统及自动聚焦方法 | |
| JP7254555B2 (ja) | 撮像装置および撮像装置の制御方法 | |
| JP7426841B2 (ja) | 像ブレ補正装置及びその制御方法、プログラム、記憶媒体 | |
| JP2017224908A (ja) | 撮像装置 | |
| JP2006093858A (ja) | 2眼撮像系を搭載したカメラ | |
| JP2007033997A (ja) | 焦点検出装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211101 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220721 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220726 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220920 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221018 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230110 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230201 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230530 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230628 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7305332 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |