[go: up one dir, main page]

JP7019337B2 - 像ブレ補正装置、レンズ装置およびそれらの制御方法 - Google Patents

像ブレ補正装置、レンズ装置およびそれらの制御方法 Download PDF

Info

Publication number
JP7019337B2
JP7019337B2 JP2017149668A JP2017149668A JP7019337B2 JP 7019337 B2 JP7019337 B2 JP 7019337B2 JP 2017149668 A JP2017149668 A JP 2017149668A JP 2017149668 A JP2017149668 A JP 2017149668A JP 7019337 B2 JP7019337 B2 JP 7019337B2
Authority
JP
Japan
Prior art keywords
image
optical system
focus detection
image pickup
vignetting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017149668A
Other languages
English (en)
Other versions
JP2019028358A (ja
Inventor
潤一 斎藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2017149668A priority Critical patent/JP7019337B2/ja
Priority to US16/031,393 priority patent/US10516827B2/en
Publication of JP2019028358A publication Critical patent/JP2019028358A/ja
Application granted granted Critical
Publication of JP7019337B2 publication Critical patent/JP7019337B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/685Vibration or motion blur correction performed by mechanical compensation
    • H04N23/687Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/64Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
    • G02B27/646Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10FINORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
    • H10F39/00Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
    • H10F39/10Integrated devices
    • H10F39/12Image sensors
    • H10F39/18Complementary metal-oxide-semiconductor [CMOS] image sensors; Photodiode array image sensors
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10FINORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
    • H10F39/00Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
    • H10F39/80Constructional details of image sensors
    • H10F39/806Optical elements or arrangements associated with the image sensors
    • HELECTRICITY
    • H10SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10FINORGANIC SEMICONDUCTOR DEVICES SENSITIVE TO INFRARED RADIATION, LIGHT, ELECTROMAGNETIC RADIATION OF SHORTER WAVELENGTH OR CORPUSCULAR RADIATION
    • H10F39/00Integrated devices, or assemblies of multiple devices, comprising at least one element covered by group H10F30/00, e.g. radiation detectors comprising photodiode arrays
    • H10F39/80Constructional details of image sensors
    • H10F39/806Optical elements or arrangements associated with the image sensors
    • H10F39/8063Microlenses

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Focusing (AREA)
  • Adjustment Of Camera Lenses (AREA)

Description

本発明は、像ブレ補正装置、レンズ装置およびそれらの制御方法に関する。
特許文献1は、焦点検出を行うための焦点検出用画素が撮像面に配置された撮像素子を有し、撮影光学系の射出瞳の異なる領域から得られる2つの撮像信号の位相差に基づいて焦点検出を行う撮像装置を開示している。また、特許文献2は、撮像素子や撮影光学系の一部を割り付け制御によって駆動して像ブレ補正を行うカメラを開示している。
特開2016-57474号公報 特許第4567313号公報
特許文献2が開示するカメラが有する像ブレ補正機能を適用し、撮影者が焦点を合わせたい被写体を撮影画面内の焦点検出枠内にとどめることで、撮影者のフレーミングを的確にアシストすることが考えられる。しかし、このカメラのように、像ブレ補正手段としての撮像素子や撮影光学系の一部を駆動することは、実質的に撮影光学系の光軸と撮像素子中心の位置関係を変更することに相当する。したがって、像ブレ補正手段を駆動すると、焦点検出枠の像高が変更されたのと等価に、撮像光学系を通過する光束に生じるケラレの状態が変化する。その結果、位相差を算出するために用いる2つの撮像信号の光量バランスが変化して、焦点検出の精度が低下し、撮影者のフレーミングを的確にアシストできたとしても、焦点の合っていない画像を撮影してしまう。本発明は、像ブレ補正手段を適切に制御することで、焦点検出の際のケラレの影響を抑えることができる撮像装置の提供を目的とする。
本発明の一実施形態の像ブレ補正装置は、撮像光学系の異なる瞳部分領域をそれぞれ通過する光束の光電変換によって得られる複数の像信号の位相差に基づ焦点検出が行われる期間において、前記撮像光学系の焦点距離に応じて、前記撮像光学系を通過する光束に生じるケラレ量が所定値以下となる位置を、像ブレを補正する像ブレ補正手段の駆動振幅の中心位置として設定する設定手段と、前記設定手段により取得された前記駆動振幅の中心位置に基づいて前記像ブレ補正手段の駆動制御を行う制御手段と、を有する。
本発明の撮像装置によれば、像ブレ補正手段を適切に制御することで、焦点検出の際のケラレの影響を抑えることができる。
本実施形態の撮像装置の構成例を示す図である。 撮像素子の画素配列の一例である。 撮像素子の画素の構成例を説明する図である。 撮像素子の画素構造と瞳分割との対応関係を説明する図である。 撮像素子と瞳分割との対応関係を説明する図である。 デフォーカス量と像ずれ量の関係を説明する図である。 焦点検出処理の例を説明するフローチャートである。 撮像素子の周辺像高における瞳部分領域と撮像光学系の射出瞳の関係を説明する図である。 フィルタ処理の通過帯域例を説明する図である。 射出瞳面上での瞳分離の状態の例を示す図である。 射出瞳面上での瞳分離の状態の例を示す図である。 射出瞳面上での瞳分離の状態の例を示す図である。 射出瞳面上での瞳分離の状態の例を示す図である。 レンズシフト式像ブレ補正手段とセンサシフト式像ブレ補正手段の駆動振幅中心の設定処理を説明する図である。 PlxとPsxとを説明する図である。
図1は、本実施形態の撮像装置の構成例を示す図である。
撮像装置1000は、レンズ交換式のデジタルカメラである。撮像装置1000は、取り付けられた交換レンズ11内に、撮影光学系101が配設され、撮影光束のための光路が形成される。この光路を透過した光束が、カメラ本体12に配設された撮像素子102へと到達し、撮像素子102に光軸垂直平面内に配列された画素内のフォトダイオードによって光電変換される。光電変換により得られる信号に対して、画像処理手段がガンマ処理、ノイズ処理等を行って、画像データを生成したうえで、不揮発メモリに書き込むことで、1枚の撮影処理が終了となる。
撮像装置1000は、撮影者の指示によって焦点検出を行い、所望の被写体が合焦状態の画像を撮影できるようにする。撮像素子102に配設される画素が焦点検出用画素を兼ねており、焦点検出用画素の出力を元に、焦点検出手段103が被写体の焦点状態を検出する。具体的には、焦点検出手段103は、撮像光学系の異なる瞳部分領域をそれぞれ通過する光束の光電変換によって得られる複数の像信号の位相差に基づいて、焦点検出を行う。焦点検出手段103は、焦点状態の検出結果に基づいて、焦点調節光学系108が光軸方向に駆動すべき駆動量を算出する。そして、不図示の焦点調節制御手段によって、焦点調節光学系108が光軸方向に駆動量だけ駆動される。焦点検出の詳細については後述する。
また、撮像装置1000は、撮影者が手持ち撮影をする際に発生してしまう、手振れなどの不要な振動を抑制する像ブレ補正手段を複数有する。第1の像ブレ補正手段は、交換レンズ11内に配設された撮影光学系101の一部である像ブレ補正光学系109を有するレンズシフト式像ブレ補正手段104である。像ブレ補正光学系109は、絞りよりも像面側に配設された凹レンズである。像ブレ補正制御手段107が、レンズシフト式像ブレ補正手段104を制御して、像ブレ補正光学系109を光軸垂直平面内にシフト駆動することで、像ブレを補正する。
本実施形態では、レンズシフトにより像ブレ補正を実行しているが、像ブレ補正の方法は、レンズシフトに限定されない。撮影光学系101全体を揺動させて像ブレ補正を実行してもよいし、撮影光学系101の一部である可変プリズムのプリズム角度変化によって像ブレ補正を実行してもよい。
第2の像ブレ補正手段は、撮像素子102を光軸垂直面内に移動自在に保持し、撮像素子102を駆動することで像ブレ補正を行うセンサシフト式像ブレ補正手段105である。本実施例では、2つの像ブレ補正手段を用いることで、像ブレ補正可能な領域が拡大され、撮影される画像の安定化が図られる。保持枠110は、撮影光学系101の最終群を保持する鏡筒のメカ構造である。撮像素子の光軸から離れた、高像高領域などでは、保持枠110などのメカ構造によって撮影光束が遮られる、所謂「ケラレ」が生じ、焦点検出に影響を与える。したがって、撮像装置1000は、焦点検出の際には、記憶手段106に記憶されているケラレに関する情報を用いて、像ブレ補正手段を制御する。ケラレについては、後述する。
(撮像面位相差焦点検出系)
次に、撮像装置1000が実行する焦点検出について、図2から図9を用いて説明する。
図2は、撮像装置1000の撮像素子102の画素配列を4列×4行の範囲で、焦点検出画素配列を8列×4行の範囲で示す図である。
図2に示す2列×2行の画素群200は、左上の位置にR(赤)の分光感度を有する画素200Rが左上に配置される。また、G(緑)の分光感度を有する画素200Gが右上と左下に配置される。また、B(青)の分光感度を有する画素200Bが右下に配置される。さらに、各画素は、2列×1行に配列された第1焦点検出画素201と第2焦点検出画素202を有する。
図2に示す4列×4行の画素(8列×4行の焦点検出画素)を面上に多数配置することで、撮像画像(焦点検出信号)の取得が可能となる。本実施形態では、画素の周期Pが4μm、画素数Nが横5575列×縦3725行=約2075万画素、焦点検出画素の列方向周期PAFが2μm、焦点検出画素数NAFが横11150列×縦3725行=約4150万画素の撮像素子として説明を行う。
図3は、撮像素子の画素の構成例を説明する図である。
図3(A)は、図2に示す撮像素子102の画素200Gの一方について、撮像素子102の受光面側(+z側)から見た状態を示す。図3(B)は、図3(A)のa-a断面を-y側から見た状態を示す。なお、図3(B)に記載の「光軸」は、マイクロレンズ305の光軸を示す。
図3に示すように、画素200Gでは、各画素の受光側に入射光を集光するためのマイクロレンズ305が形成され、x方向にNH分割(2分割)、y方向にNV分割(1分割)された光電変換部301と光電変換部302が形成される。光電変換部301と光電変換部302が、それぞれ、第1焦点検出画素201と第2焦点検出画素202に対応する。光電変換部301と光電変換部302は、p型層とn型層の間にイントリンシック層を挟んだpin構造フォトダイオードとしても良いし、必要に応じて、イントリンシック層を省略し、pn接合フォトダイオードとしても良い。
各画素には、マイクロレンズ305と、光電変換部301および光電変換部302との間に、カラーフィルタ306が形成される。また、必要に応じて、画素毎にカラーフィルタの分光透過率を変えても良いし、カラーフィルタを省略しても良い。
画素200Gに入射した光は、マイクロレンズ305により集光され、カラーフィルタ306で分光されたのち、光電変換部301と光電変換部302で受光される。光電変換部301と光電変換部302では、受光量に応じて電子とホールが対生成し、空乏層で分離された後、負電荷の電子はn型層(不図示)に蓄積され、一方、ホールは定電圧源(不図示)に接続されたp型層を通じて撮像素子外部へ排出される。光電変換部301と光電変換部302のn型層(不図示)に蓄積された電子は、転送ゲートを介して、静電容量部(FD)に転送され、電圧信号に変換される。
図4は、撮像素子の画素構造と瞳分割との対応関係を説明する図である。
図4には、図3(A)に示す画素構造のa-a断面を+y側から見た断面と、撮影光学系101の射出瞳面とが示される。射出瞳面の座標軸と対応を取るために、断面図のx軸とy軸を図3に対して反転させている。
第1焦点検出画素201の第1瞳部分領域501は、重心が-x方向に偏心している光電変換部301の受光面とマイクロレンズ305とによって、概ね共役関係になっており、第1焦点検出画素201で受光可能な瞳領域を表している。第1焦点検出画素201の第1瞳部分領域501は、瞳面上で+X側に重心が偏心している。
第2焦点検出画素202の第2瞳部分領域502は、重心が+x方向に偏心している光電変換部302の受光面とマイクロレンズ305とによって、概ね共役関係になっており、第2焦点検出画素202で受光可能な瞳領域を表している。第2焦点検出画素202の第2瞳部分領域502は、瞳面上で-X側に重心が偏心している。射出瞳400は、撮影光学系101の絞り開口によって形成され、射出瞳400の領域の内側の光束が、撮像素子102上に到達することとなる。また、瞳領域500は、光電変換部301と光電変換部302(第1焦点検出画素201と第2焦点検出画素202)を全て合わせた画素200G全体で受光可能な瞳領域である。
図5は、撮像素子と瞳分割との対応関係を説明する図である。
第1瞳部分領域501と第2瞳部分領域502という異なる瞳部分領域を通過した光束は、撮像素子102の各画素に、それぞれ異なる角度で入射し、2×1分割された第1焦点検出画素201と第2焦点検出画素202で受光される。本実施形態では、瞳領域は水平方向に2つに瞳分割されている。なお、必要に応じて、垂直方向に瞳分割を行っても良い。
撮像素子102は、撮影光学系101の第1瞳部分領域を通過する光束を受光する第1焦点検出画素201と、第1瞳部分領域と異なる撮影光学系101の第2瞳部分領域を通過する光束を受光する第2焦点検出画素202とが複数配列されている。また、撮像素子102は、撮影光学系101の第1瞳部分領域と第2瞳部分領域を合わせた瞳領域を通過する光束を受光する撮像画素が複数配列されている。本実施形態では、それぞれの撮像画素が第1焦点検出画素と第2焦点検出画素から構成されている。撮像装置1000は、撮像素子102の各画素の第1焦点検出画素201の受光信号を集めて第1焦点信号を生成する。また、撮像装置1000は、各画素の第2焦点検出画素202の受光信号を集めて第2焦点信号を生成する。そして、撮像装置1000は、第1焦点信号と第2焦点信号とに基づいて焦点検出を行う。また、撮像装置1000は、撮像素子102の画素毎に、第1焦点検出画素201と第2焦点検出画素202の信号を加算することで、有効画素数Nの解像度の撮像信号を生成する。
図6は、第1焦点検出信号と第2焦点検出信号のデフォーカス量と第1焦点検出信号と第2焦点検出信号間の像ずれ量の関係を説明する図である。
撮像面800に撮像装置1000の撮像素子102(不図示)が配置され、図4、図5と同様に、撮影光学系101の射出瞳が、第1瞳部分領域501と第2瞳部分領域502に2分割される。
デフォーカス量dは、被写体の結像位置から撮像面までの距離を大きさ|d|とし、被写体の結像位置が撮像面より被写体側にある前ピン状態を負符号(d<0)として定義される。また、デフォーカス量dは、被写体の結像位置が撮像面より被写体の反対側にある後ピン状態を正符号(d>0)として定義される。
被写体の結像位置が撮像面(合焦位置)にある合焦状態では、d=0である。図6において、被写体801は、合焦状態(d=0)である。被写体802は、前ピン状態(d<0)である。前ピン状態(d<0)と後ピン状態(d>0)とが、デフォーカス状態(|d|>0)である。
前ピン状態(d<0)では、被写体802からの光束のうち、第1瞳部分領域501(第2瞳部分領域502)を通過した光束は、一度、集光した後、光束の重心位置G1(G2)を中心として幅Γ1(Γ2)に広がり、撮像面800でボケた像となる。ボケた像は、撮像素子102に配列された各画素を構成する第1焦点検出画素201(第2焦点検出画素202)により受光され、第1焦点検出信号(第2焦点検出信号)が生成される。したがって、第1焦点検出信号(第2焦点検出信号)は、撮像面800上の重心位置G1(G2)に、被写体802が幅Γ1(Γ2)にボケた被写体像として記録される。被写体像のボケ幅Γ1(Γ2)は、デフォーカス量dの大きさ|d|が増加するのに伴い、概ね、比例して増加していく。同様に、第1焦点検出信号と第2焦点検出信号間の被写体像の像ずれ量p(=光束の重心位置の差G1-G2)の大きさ|p|も、デフォーカス量dの大きさ|d|が増加するのに伴い、概ね、比例して増加していく。後ピン状態(d>0)でも、第1焦点検出信号と第2焦点検出信号間の被写体像の像ずれ方向が前ピン状態と反対となるが、同様である。したがって、第1焦点検出信号と第2焦点検出信号、もしくは1焦点検出信号と第2焦点検出信号を加算した撮像信号のデフォーカス量の大きさが増加するのに伴い、第1焦点検出信号と第2焦点検出信号間の像ずれ量の大きさが増加する。
本実施形態の撮像装置は、第1焦点検出信号と第2焦点検出信号のデフォーカス量と像ずれ量の関係性を用いて、位相差方式の焦点検出を行う。具体的には、焦点検出手段103は、第1焦点検出信号と第2焦点検出信号を相対的にシフトさせて信号の一致度を表す相関量を計算し、相関が良くなるシフト量から像ずれ量を検出する。焦点検出手段103は、撮像信号のデフォーカス量の大きさが増加するのに伴い、第1焦点検出信号と第2焦点検出信号間の像ずれ量の大きさが増加する関係性から、像ずれ量を検出デフォーカス量に変換して焦点検出を行う。
図7は、焦点検出処理の例を説明するフローチャートである。
S110において、焦点検出手段103が、第1焦点検出信号と第2焦点検出信号のそれぞれについて、信号データ量を抑制するために列方向に3画素加算処理を行う。また、焦点検出手段103は、RGB信号を輝度Y信号にするためにベイヤ(RGB)加算処理を行う。また、焦点検出手段103は、3行ごとに1行の読み出しを行う、垂直間引き処理を実施する。本実施形態では、水平加算および垂直間引き処理は、撮像素子102から読み出した後に実施するが、撮像素子102内で予め水平加算、垂直間引きの処理がなされてもよい。
S120において、焦点検出手段103が、撮像素子102の有効画素領域の中から焦点調節を行う対象となる焦点検出領域を設定する。焦点検出手段103は、焦点検出領域の第1焦点検出画素の受光信号から第1焦点検出信号を生成し、焦点検出領域の第2焦点検出画素の受光信号から第2焦点検出信号を生成する。
次に、S130において、焦点検出手段103が、第1焦点検出信号と第2焦点検出信号のそれぞれに対してシェーディング補正処理を行う。以下に、第1焦点検出信号と第2焦点検出信号の瞳ずれによるシェーディングについて説明する。
図8は、撮像素子の周辺像高における瞳部分領域と撮像光学系の射出瞳の関係を説明する図である。
図8では、撮像素子102の周辺像高における第1焦点検出画素201の第1瞳部分領域501、第2焦点検出画素202の第2瞳部分領域502、および撮影光学系101の射出瞳400の関係を例にとって説明する。図8(A)は、撮影光学系101の射出瞳距離Dlと撮像素子102の設定瞳距離Dsが同じ状態を示す。この状態の場合は、第1瞳部分領域501と第2瞳部分領域502により、撮影光学系101の射出瞳400が、概ね、均等に瞳分割される。図8(B)は、撮影光学系101の射出瞳距離Dlが撮像素子102の設定瞳距離Dsより短い状態を示す。この状態の場合、撮像素子102の周辺像高では、射出瞳400と撮像素子102の入射瞳の瞳ずれを生じ、射出瞳400が不均一に瞳分割されてしまう。図8(C)は、撮影光学系101の射出瞳距離Dlが撮像素子102の設定瞳距離Dsより長い状態を示す。この状態の場合、撮像素子102の周辺像高では、射出瞳400と撮像素子102の入射瞳の瞳ずれを生じ、射出瞳400が不均一に瞳分割されてしまう。周辺像高で瞳分割が不均一になるのに伴い、第1焦点検出信号と第2焦点検出信号の強度も不均一になり、第1焦点検出信号と第2焦点検出信号のいずれか一方の強度が大きくなり、他方の強度が小さくなるシェーディングが生じる。
図7の説明に戻る。S130において、焦点検出手段103が、第1焦点検出信号の第1シェーディング補正係数と第2焦点検出信号の第2シェーディング補正係数を生成する。焦点検出手段103は、焦点検出領域の像高、撮影光学系101のF値(絞り値)、射出瞳距離、射出瞳光束のケラレ状態に応じて、第1シェーディング補正係数および第2シェーディング補正係数を生成する。焦点検出手段103は、第1シェーディング補正係数を第1焦点検出信号に乗算し、第2シェーディング補正係数を第2焦点検出信号に乗算して、第1焦点検出信号と第2焦点検出信号のシェーディング補正処理を行う。
位相差方式の焦点検出では、第1焦点検出信号と第2焦点検出信号の相関を基に、検出デフォーカス量の検出を行う。瞳ずれによるシェーディングが生じると第1焦点検出信号と第2焦点検出信号の相関が低下する場合がある。したがって、位相差方式の焦点検出では、第1焦点検出信号と第2焦点検出信号の相関(信号の一致度)を改善し、焦点検出性能を良好とするために、シェーディング補正処理(光学補正処理)を行うことが望ましい。図8中では不図示であるが、射出瞳400を構成する開口以外にも、各光学系を保持するメカ部材や、交換レンズ11の最後群から撮像素子102までのカメラ本体内のメカ部材が存在する。絞り値や像高などによっては、これらのメカ部材によって、撮像光学系を通過する光束が遮られることがあり、一般にこれを光束の「ケラレ」と称する。
第1焦点検出信号と第2焦点検出信号のシェーディングは、ケラレによっても発生し、ケラレが既知である条件においては、ケラレについても加味したシェーディング補正を行うことで、焦点検出精度の低下を防ぐことができる。撮像装置1000は、シェーディング補正係数SHDが、焦点検出領域の像高と、撮影光学系101のF値(絞り値)、射出瞳距離およびケラレ状態に対応したテーブルとして記憶手段106に格納している。シェーディング補正係数SHDは、撮影光学系の射出瞳の互いに異なる領域から得られる複数の像信号の強度比に相当する。射出瞳距離は、交換レンズ毎(ズームレンズであればズームステート毎)に異なる値であるため、それぞれに応じたテーブルが設けられている。また、ケラレ状態は、像ブレ補正光学系109の位置によって変化するので、像ブレ補正光学系109のストローク量毎にシェーディング補正係数SHDを持たせることで表現されている。撮像装置1000においては、レンズシフト式像ブレ補正手段104のストローク量毎に異なるシェーディング補正係数SHDのテーブルを持つことで、ケラレ情報を保有している。センサシフト式像ブレ補正手段105が駆動する撮像素子102の位置については、単純な焦点検出領域の像高変化ととらえることができる。したがって、撮像装置1000は、撮像素子102の位置毎のシェーディング補正係数テーブルは保持していない。撮像装置1000は、例えば、レンズシフト式像ブレ補正手段104とセンサシフト式像ブレ補正手段105の駆動で取りうる相対位置関係を、前述の像ブレ補正光学系109のストローク量として保持する。S140において、焦点検出手段103が、第1焦点検出信号と第2焦点検出信号に対してフィルタ処理を行う。
図9は、フィルタ処理の通過帯域例を説明する図である。
図9の実線が、フィルタ処理の通過帯域を示す。本実施形態では、位相差方式の焦点検出により、大デフォーカス状態での焦点検出を行うので、フィルタ処理の通過帯域は低周波帯域を含むように構成される。大デフォーカス状態から小デフォーカス状態まで焦点調節を行う際に、デフォーカス状態に応じて、焦点検出時のフィルタ処理の通過帯域を、図9の1点鎖線のように、より高周波帯域に調整しても良い。
次に、図7のステップS150において、焦点検出手段103が、フィルタ処理後の第1焦点検出信号と第2焦点検出信号を相対的に瞳分割方向にシフトさせるシフト処理を行い、信号の一致度を表す相関量を算出する。フィルタ処理後のk番目の第1焦点検出信号をA(k)、第2焦点検出信号をB(k)、焦点検出領域に対応する番号kの範囲をWとする。シフト処理によるシフト量をs1、シフト量s1のシフト範囲をΓ1として、相関量CORは、式(1)により算出される。
Figure 0007019337000001
焦点検出手段103は、シフト量s1の第1シフト処理により、k番目の第1焦点検出信号A(k)とk-s1番目の第2焦点検出信号B(k-s1)を対応させ減算し、シフト減算信号を生成する。焦点検出手段103は、生成されたシフト減算信号の絶対値を計算し、焦点検出領域に対応する範囲W内で番号kの和を取り、相関量(第1評価値)COR(s1)を算出する。必要に応じて、各行毎に算出された相関量(第1評価値)を、シフト量毎に、複数行に渡って加算しても良い。
S160において、焦点検出手段103が、相関量から、サブピクセル演算により、相関量が最小値となる実数値のシフト量を算出して像ずれ量p1とする。焦点検出手段103は、像ずれ量p1に、焦点検出領域の像高と、撮影光学系101のF値、射出瞳距離およびケラレ情報に応じた換算係数Kをかけて、検出デフォーカス量(Def)を検出する。すなわち、換算係数Kによって、複数の像信号の位相差がデフォーカス量へと換算される。換算係数Kは、撮像装置1000が有する記憶手段106に格納されたテーブルデータとして存在する。換算係数Kのテーブルは、シェーディング補正係数SHDのテーブルと同様に、交換レンズ毎の射出瞳距離に応じたテーブルとして設けられている。また、ケラレ状態についても同様に、換算係数Kが、像ブレ補正光学系109のストローク量毎に記述される。撮像装置1000においては、像ブレ補正光学系109のストローク量毎に異なる換算係数Kのテーブルを持つことで、ケラレ情報を保有している。焦点検出手段103は、検出された検出デフォーカス量に対し、フォーカス敏感度を掛けることで、焦点調節光学系108の駆動量を決定する。
図7を参照して説明した処理は、静止画撮影モードであれば、不図示のシャッターボタンの半押し動作(SW1)による指示から、合焦確認のための焦点検出が完了するまで、毎フレーム実施される。また、この処理は、動画撮影モードであれば、毎フレーム実施される。焦点検出領域の像高については、過去の複数のフレームでの、追尾(焦点検出枠の自動選択)の履歴や、二つの像ブレ補正手段の駆動位置の履歴から予測し決定される。詳細は後述するが、本実施形態では、焦点検出領域を示す焦点検出枠の位置に応じて、像ブレ補正手段が、ケラレ影響が所定以下となる位置を駆動中心として駆動制御を行う。
本実施形態では、シェーディング補正係数SHDおよび変換係数Kをテーブルの形で記憶手段106に格納しているが、ケラレ情報を瞳面上の2次元的な枠形状として保有し、このケラレ情報を元に係数計算をカメラ内で行って求めてもよい。上記の2次元的な枠形状は、ケラレの状態に応じた撮像光学系の射出瞳面上の光束形状に相当する。また、本実施形態では、記憶手段106の場所について特段の記載をしていないが、記憶手段106をカメラ本体12側に持たせてもよいし、交換レンズ11とカメラ本体12とに分割して持たせてもよい。
(レンズシフト補正と瞳分割)
撮像装置1000の像ブレ補正手段である、レンズシフト式像ブレ補正手段104およびセンサシフト式像ブレ補正手段105の駆動と焦点検出の関係について、図10乃至図13を用いて説明する。
図10乃至図13は、中央像高または周辺像高の焦点検出領域の画素群が観察する射出瞳面上での瞳分割の状態の例を示す図である。
図10(A)、図10(C)および図11(A)は、中央像高の焦点検出領域の画素群が観察する射出瞳面上での瞳分割の状態を示す。また、図10(B)、図10(D)および図11(B)は、周辺像高(+X方向)の焦点検出領域の画素群が観察する射出瞳面上での瞳分割の状態を示す。図10および図11では、撮影光学系101の射出瞳距離Dlと撮像素子102の設定瞳距離Dsとがほぼ等価な系を表している。
図10(A)を参照して、レンズシフト式像ブレ補正手段104が有する像ブレ補正光学系109が駆動範囲中央に位置する際の、中央像高での瞳分割について説明する。図10(A)上段の瞳面中央に示された円形形状は、撮影光学系101の絞りの開口により形成される射出瞳400である。中央像高では、撮像素子102の設定瞳距離とほぼ等距離にある撮影光学系101の射出瞳面の光束を略均等に左右分割することがわかる。射出瞳400と撮像素子102の表面の間に配置された太線は、撮影光学系101の最終群の保持枠110を表しており、中央像高においては、保持枠110によるケラレは発生していない。
図10(B)に示すように、周辺像高においても、撮像素子102の設定瞳距離が、撮影光学系101の射出瞳距離とほぼ等価であり、最終群の保持枠110がなければ、撮影光学系101の射出瞳面の光束を略均等に左右分割可能である。しかし、実際には最終群の保持枠110によって光束の片側がケラレを生じ、瞳分割は左右不均等なものとなってしまう。このようなケラレを生じる場合には、撮像装置1000は、焦点検出信号のそれぞれに対してケラレ状態を類推可能なケラレ情報を元にシェーディング補正を施し、より正確な焦点検出演算を実行する。
図10(C)、図10(D)、図11(A)、図11(B)は、レンズシフト式像ブレ補正手段104の像ブレ補正光学系109がX方向に駆動した際の、射出瞳面上での瞳分割の状態を示す。本実施形態では、撮像素子102を構成する第1 焦点検出画素201と第2焦点検出画素202とが、X軸方向に配設されている。したがって、レンズシフト式像ブレ補正手段104が有する像ブレ補正光学系109がX方向に駆動することが焦点検出のための瞳分割に与える影響度が大きい。
撮影光学系101については、レンズシフト式像ブレ補正手段104は、絞りよりも像面側に配設された1枚の凹レンズ(像ブレ補正光学系109)をXY平面内にシフトすることで像ブレ補正を行っている。すなわち、像ブレ補正光学系109が+X方向に駆動すると、撮像素子102が、瞳面上で-X方向にシフトした射出瞳400を観察することとなる。したがって、図10(C)および図10(D)は、像ブレ補正光学系109が+X方向に駆動した場合の瞳分割の状態を示す。また、図11(A)および図11(B)は、像ブレ補正光学系109が-X方向に駆動した場合の瞳分割の状態を示す。
図10(C)および図10(D)を参照して、レンズシフト式像ブレ補正手段104が有する像ブレ補正光学系109が+X方向に変位した際の中央像高での瞳分割の例について説明する。前述の通り、像ブレ補正光学系109が+X方向に変位すると、射出瞳400が-X方向に移動する。厳密にはコサイン四乗則に則り楕円形状になるが、この例では、説明の簡単化のため、円形のまま表現している。
図10(C)では、射出瞳400が-X方向に移動するものの、太線で示した撮影光学系101の最終群の保持枠110によるケラレは生じていない。しかし、絞り開口形状が-X方向に移動したために、瞳分割は左右不均等となり、中央像高でありながら、ケラレによるシェーディングが発生する。図10(D)では、図10(C)と同様に、射出瞳400が-X方向に移動するとともに、撮影光学系101の最終群の保持枠110によるケラレが発生する。この場合、図10(B)と異なり、ケラレ量は増大するものの、瞳分割は、図10(C)よりも左右均等に近い形となる。
図11(A)および図11(B)を参照して、レンズシフト式像ブレ補正手段104が有する像ブレ補正光学系109が-X方向に変位した際の中央像高および周辺像高(+X方向)での瞳分割の状態について説明する。図10(C)および図10(D)とは逆に、レンズシフト式像ブレ補正手段104の像ブレ補正光学系109が-X方向に変位すると、射出瞳400が+X方向に移動する。説明の簡単化のため、射出瞳400は円形としている。図11(A)では、射出瞳400が+X方向に移動するものの、太線で示した撮影光学系101の最終群の保持枠110によるケラレは生じていない。しかし、射出瞳400が+X方向に移動したために、瞳分割は左右不均等となり、中央像高でありながら、ケラレによるシェーディングが発生する。
図11(B)では、撮影光学系101の最終群の保持枠110によるケラレが発生し、射出瞳400が+X方向に移動する。この場合、図10(B)と異なり、ケラレ量が減少するものの、瞳分割の不均等性は増し、焦点検出信号のうち-X側の成分比率が著しく低下する。図10(C)乃至図11(B)に対応する条件下で、図10(A)および図10(B)の条件と同様なシェーディング補正や換算係数Kを用いたデフォーカス演算を行ってしまうと、正確な焦点検出が不能となり、合焦状態に到達できない。例えば、周辺像高(+X方向)の様子を示す図10(D)と図11(B)を見た場合、保持枠110によって発生するケラレ量は、図11(B)のほうが少ない。一方、図10(D)の状態では、ケラレによる瞳分割のバランスは等分割に近くなるものの、透過光量が少なく、焦点検出に用いる信号のS/Nが低下してしまう。すなわち、このような+X方向の像高に焦点検出枠が設定された場合には、図11(B)のように、像ブレ補正光学系109が-X方向に変位した位置に置かれるほうが、保持枠110によるケラレ影響を受けにくいことが分かる。像ブレ補正制御手段107は、シェーディング補正係数SHDおよび換算係数Kのテーブルから、焦点検出枠の設定像高と保持枠によるケラレを生じ始める像ブレ補正光学系109の位置とを特定し、像ブレ補正光学系109の駆動振幅中心を設定する。像ブレ補正制御手段107が行う駆動振幅中心の設定の詳細については後述する。
(センサシフトと瞳分割)
図12(A)、図12(C)および図13(A)は、中央像高の焦点検出領域の画素群が観察する射出瞳面上での瞳分割の状態を示す。また、図12(B)、図12(D)および図13(B)は、周辺像高(+X方向)の焦点検出領域の画素群が観察する射出瞳面上での瞳分割の状態を示す。図12および図13では、撮影光学系101の射出瞳距離Dlと撮像素子102の設定瞳距離Dsとがほぼ等価な系を表している。
図12(A)を用いて、センサシフト式像ブレ補正手段105が駆動範囲中央に位置する際の中央像高での瞳分割について説明する。図12(A)上段の射出瞳面中央に示された円形形状は、撮影光学系101の絞りの開口により形成される射出瞳400である。中央像高では、撮像素子102の設定瞳距離とほぼ等距離にある撮影光学系101の射出瞳面の光束を略均等に左右分割する。射出瞳面と撮像素子102の表面の間に配置された太線は、撮影光学系101の最終群の保持枠110を表している。中央像高においては、保持枠110によるケラレは発生していない。
図12(B)に示す周辺像高においても、撮像素子102の設定瞳距離が、撮影光学系101の射出瞳距離とほぼ等価であり、最終群の保持枠110がなければ、撮影光学系101の射出瞳面の光束を略均等に左右分割可能である。しかし、実際には最終群の保持枠110によって、光束の片側がケラレを生じ、瞳分割は左右不均等なものとなってしまう。撮像装置1000は、ケラレを生じる場合には、焦点検出信号のそれぞれに対してケラレ状態を類推可能なケラレ情報を元にシェーディング補正を施し、より正確な焦点検出演算を実行する。
図12(C)、図12(D)、図13(A)および図13(B)は、センサシフト式像ブレ補正手段105がX方向に駆動した際の、射出瞳面上での瞳分割の状態を示す。センサシフト式像ブレ補正手段105は、撮像素子102をXY平面内に駆動可能である。本実施形態では、撮像素子102を構成する第1焦点検出画素201と第2焦点検出画素202とは、X軸方向に配設されている。したがって、センサシフト式像ブレ補正手段105が有する撮像素子102がX方向に駆動することが、焦点検出のための瞳分割に与える影響度が大きい。撮像素子102が、+X方向に駆動されると、撮像素子102は、瞳面上で+X方向にシフトした射出瞳400を観察することとなる。したがって、図12(C)および図12(D)は、撮像素子102が-X方向に駆動した場合の瞳分割を示す。図13(A)および図13(B)は、撮像素子102が+X方向に駆動した場合の瞳分割を示す。
図12(C)および図12(D)を参照して、センサシフト式像ブレ補正手段105が-X方向に変位した際の中央像高での瞳分割の例について説明する。撮像素子102が-X方向に変位すると、瞳面上では射出瞳400も-X方向に移動する。これは、撮像素子102が-X方向に変位することで、撮像素子102の中心を通る撮像面に垂直な軸(中央画素から伸びた上下方向矢印に相当)が撮影光学系101の光軸からずれるからである。したがって、射出瞳面上では、図12(C)、図12(D)の上段に示すように、第1部分瞳領域501および第2部分瞳領域502全体が、射出瞳面内を(図では左方に)移動した形で表現されている。射出瞳400は、厳密にはコサイン四乗則に則り楕円形状になるが、この例では、説明の簡単化のため、円形のまま表現している。
図11(C)では、射出瞳400が-X方向に移動するものの、太線で示した撮影光学系101の最終群の保持枠110によるケラレは生じていない。しかし、射出瞳400が-X方向に移動したために、瞳分割は左右不均等となり、中央像高でありながら、ケラレによるシェーディングが発生する。図12(D)では、図12(C)と同様に、射出瞳400が-X方向に移動するとともに、撮影光学系101の最終群の保持枠110によるケラレが発生する。この場合、相対的に撮影光学系101の光軸が、図11(d)で着目する撮像素子102の周辺像高位置に近づくために、ケラレ量は図12(B)よりも小さくなり、瞳分割は図12(C)に近い形となる。
図13(A)および図13(B)を参照して、センサシフト式像ブレ補正手段105が有する撮像素子102が+X方向に変位した際の中央像高および周辺像高(+X方向)での瞳分割の例について説明する。撮像素子102が+X方向に変位すると、瞳面上では射出瞳400も+X方向に移動する。これは、撮像素子102が+X方向に変位することで、撮像素子102の中心を通る撮像面に垂直な軸(中央画素から伸びた上下方向矢印に相当)が撮影光学系101の光軸からずれるためである。したがって、射出瞳面上では、図13(A)、図13(B)の上段に示すように、第1部分瞳領域501および第2部分瞳領域502全体が、射出瞳面内を(図では右方に)移動した形で表現されている。この例でも、説明の簡単化のため、射出瞳400は円形としている。
図13(A)では、射出瞳400が+X方向に移動するものの、太線で示した撮影光学系101の最終群の保持枠110によるケラレは生じていない。しかしながら、射出瞳400が+X方向に移動したために、瞳分割は左右不均等となり、中央像高でありながら、ケラレによるシェーディングが発生する。図13(B)では、相対的に撮影光学系101の光軸が、図13(A)で着目する撮像素子102の周辺像高位置から遠ざかる。したっがって、撮影光学系101の最終群の保持枠110によるケラレが大きく発生するとともに、射出瞳400が+X方向に移動する。この場合、図12(B)と異なり、ケラレ量が減少するものの、瞳分割の不均等性は増し、焦点検出信号のうち-X側の成分比率がほぼゼロとなる。図12(C)乃至図13(B)のような条件下で、図12(A)および図12(B)の条件と同様にシェーディング補正や換算係数Kを用いたデフォーカス演算を行ってしまうと、正確な焦点検出が不能となり、合焦状態に到達できない。例えば、周辺像高(+X方向)の様子を示す図12(B)および図12(D)を見た場合、保持枠110によって発生するケラレ量は、図12(D)のほうが少ない。一方、図12(B)の状態では、保持枠110によるケラレ量が図12(D)よりも多くなる。すなわち、このような+X方向の像高に焦点検出枠が設定された場合には、図12(D)のように、像撮像素子102が-X方向に変位した位置に置かれるほうが、保持枠110によるケラレ影響を受けにくい。像ブレ補正制御手段107は、シェーディング補正係数SHDおよび換算係数Kのテーブルに基づいて、焦点検出枠の設定像高と保持枠110によるケラレを生じ始める像ブレ補正光学系109の位置とを特定して、像撮像素子102の駆動振幅中心を設定する。像ブレ補正制御手段107が行う駆動振幅中心の設定の詳細については後述する。
図10乃至図13では、撮影光学系101の射出瞳距離Dlと、撮像素子102の設定瞳距離Dsがほぼ等価である系を例にとって説明した。撮像装置1000はレンズ交換式であるので、実際にはDl>DsまたはDl<Dsという組み合わせも発生する。この場合、ケラレの状況は図10乃至図13とは異なるものとなってしまう。したがって、例えば、記憶手段106に、撮影光学系101の射出瞳距離Dlの情報も網羅するケラレ情報を保持するようにし、駆動振幅中心の設定において、最適な焦点検出が実現可能な条件を選定するようにする。
(駆動振幅中心の設定処理)
図14は、像ブレ補正制御手段による、レンズシフト式像ブレ補正手段とセンサシフト式像ブレ補正手段の駆動振幅中心の設定処理を説明するフローチャートである。
図14が示す処理は、撮像装置1000がライブビュー状態であって、静止画撮影のためにレリーズボタンの半押し(測光/焦点検出開始指示:SW1)がなされて以降実施される。図14では、静止画連写を例にとって説明する。静止画連写においては、撮影される全ての画像が合焦状態であることが必要であり、撮影されるコマ間に焦点検出が毎回実行される。本実施形態において、像ブレ補正制御手段107は、焦点検出が行われる期間において、ケラレ量が所定値以下となる位置を、駆動振幅の中心位置として設定して、像ブレ補正手段の駆動制御を行う。
S101において、像ブレ補正制御手段107が、現在設定されている焦点検出枠の位置Paf0を参照し、焦点検出枠の位置Pafとして記憶する。焦点検出枠の位置Pafは、撮影者によって設定されているものであってもよい。また、Pafは、いわゆる焦点検出枠追尾動作によって、ライブビュー画像などから主被写体(例えば顔など)を判定し、設定されているものであってもよい。
次に、S102において、像ブレ補正制御手段107が、レンズシフト式像ブレ補正手段104が有する像ブレ補正光学系109の駆動振幅中心Plxと、センサシフト式像ブレ補正手段105が有する撮像素子102の駆動振幅中心Psxを設定する。Plxは、像ブレ補正光学系109のストローク中心からの距離で定義される。また、Psxは、撮像素子102のストローク中心からの距離で定義される。
図15は、PlxとPsxとを説明する図である。
図15(A)は、図12(D)と同様の状態を示す。図15(A)に示す例では、周辺像高(+X方向)の画素が焦点検出枠の中心位置Pafである。つまり、Pafを中心として、太線で示した範囲が焦点検出枠の幅である。図15(A)に示す例では、撮像素子102および像ブレ補正光学系109のストローク端111および112が規定されている。図15(A)に示す例では、ストローク端は、機械的な端としているが、ストローク端が、駆動制御上の仮想的な端(電気端)であってもよい。図15(A)に対応する条件では、Pafに位置する画素は保持枠110によるケラレが生じないことが分かる。しかし、撮像素子102が+X方向に駆動した場合、保持枠110によるケラレが開始・進展する。このときの条件は図12(B)と同一条件であるので、撮像素子102が、図15(A)中の白抜き矢印に相当する距離だけ駆動している。撮像装置1000では、図14のS102が初回である場合にはこの条件にはならず、Ps=0であるが、一般的なN回目のS102の処理が行われる場合には、Ps=0ではない。
図15(B)は、像ブレ補正光学系109と撮像素子102の位置PlおよびPsが、駆動振幅中心PlxおよびPsxに到達した状態を示す。本実施形態では、像ブレ補正制御手段107は、撮像素子102の現在位置PsをPsxとして駆動させず、像ブレ補正光学系109の位置PlをPlxまで図15(B)中の白抜き矢印に相当する距離だけ駆動させる。図15(B)の状態となることで、ケラレ影響が所定の大きさ以下になる。具体的には、瞳分割が略等分割となり、かつ保持枠110によるケラレの量が所定量以下となる。
図14のS102において、像ブレ補正制御手段107は、例えば、図15(B)に示すように、ケラレの量が所定量以下の状態となるように、駆動振幅中心PlxおよびPsxを設定する。この例では、像ブレ補正制御手段107は、撮影光学系101の焦点距離に応じてPlxおよびPsxを設定する。例えば、焦点距離が短い条件においては、撮像素子102を駆動するストローク量が小さくても十分な像ブレ補正が可能である。すなわち、撮像素子102による像ブレ補正のほうが、像ブレ補正の敏感度が高い。一方、焦点距離が長い条件においては、像ブレ補正光学系109による像ブレ補正のほうが、像ブレ補正の敏感度が高い。したがって、像ブレ補正制御手段107は、像ブレ補正の敏感度に応じて、PlxおよびPsxの設定を行う。より具体的には、像ブレ補正制御手段107は、像ブレ補正の敏感度が低い系の振幅中心移動を優先して駆動するよう設定する。像ブレ補正制御手段107は、像ブレ補正の敏感度が高い系は、駆動振幅中心を維持し、像ブレ補正の敏感度が低い系は、保持枠110によるケラレ影響が所定の大きさ以下になる位置まで移動させる。これにより、大きな画角変動を抑制可能である。なお、ケラレ影響を所定の大きさ以下にする位置は、レンズシフト式像ブレ補正手段104とセンサシフト式像ブレ補正手段105がそれぞれ持つメカ的、電気的なストロークによって決定される。より具体的には、駆動可能な電気的ストロークにて像ブレ補正駆動を行っても、大きなケラレ変化が生じない駆動振幅中心PlxおよびPsxを採用する。大きなケラレ変化の度合いについては、撮像装置1000が、焦点検出を優先するか否かに関するユーザの選択に応じて決定してもよいし、焦点検出枠位置の設定状況に応じて変更・決定してもよい。
次に、S103において、像ブレ補正制御手段107が、S102で設定された新たな駆動振幅中心であるPlxおよびPsxに向けた駆動を開始する。すなわち、像ブレ補正制御手段107は、図15(A)に示す状態から図15(B)に示す状態への駆動を開始する。
しかし、像ブレ補正光学系109が-X方向に駆動開始することによって、画角の変動を伴ってしまう。焦点検出枠の位置Pafが撮影者によって設定されている場合、撮影者が意図する被写体は、焦点検出枠の位置Pafに存在することが多い。この場合、急激な画角の変動は、撮影者の意図に反する動きとなってしまい、主被写体を画角外に追いやってしまうこともある。したがって、像ブレ補正制御手段107は、駆動振幅中心PlxおよびPsxへの駆動を、画角変動が所定の大きさ以下となるような駆動速度で徐々に実行する。これにより、急激な画角変動が発生しないようにすることができる。駆動振幅中心PlxおよびPsxへの駆動の際も、通常の像ブレ補正のための駆動は重畳して実行され、基本的な像ブレ補正動作に大きな影響を与えない。焦点検出枠の位置Pafが撮像装置1000によって自動的に設定され、時々刻々Pafが移動するような場合には、像ブレ補正制御手段107は、以下の駆動を実行してもよい。像ブレ補正制御手段107は、例えば、急激な画角変動を許容しつつ、焦点検出枠の位置Pafが適切にこの変動分だけ移動し、ピント追従を継続するような駆動を実行する。
S104において、像ブレ補正制御手段107が、焦点検出枠の位置Pafが、撮影者の指示や、焦点検出枠追尾動作によって移動しているか否かを判定する。Pafが移動していると判定された場合は、処理がS105に進む。Pafが移動していないと判定された場合は、処理がS106に進む。
S105において、像ブレ補正制御手段107が、S104で移動していると判定された焦点検出枠の位置Pafに基づいて、前述したS102での処理と同様に、駆動振幅中心PlxおよびPsxを再設定する。そして、処理がS103に戻る。S106において、像ブレ補正制御手段107が、レリーズボタンの全押し動作(撮像開始指示:SW2)が検出されたかを判定する。SW2が検出された場合は、処理がS107に進む。SW2が検出されない場合は、処理がS106に戻る。
S107において、像ブレ補正制御手段107が、撮像のための露光期間中における像ブレ補正を実行する。すなわち、像ブレ補正制御手段107は、撮影開始操作がされたことに応じて、振れ検出信号に基づく像ブレ補正手段の駆動制御を行う。これにより、レンズシフト式像ブレ補正手段104とセンサシフト式像ブレ補正手段105とが互いに協調して撮像のための像ブレ補正(以下、「協調像ブレ補正」と記述)が行われる。一般に、露光期間中の協調像ブレ補正は、SW2検出までに実施されている像ブレ補正と異なり、検出される像ブレに対して、補正残りがほぼなくなるような駆動を実行するものである。本実施形態においては、S103において、焦点検出枠の位置Pafに応じて、駆動振幅中心PlxおよびPsxへの移動が開始されるが、S107での協調像ブレ補正の開始とともに、駆動振幅中心への移動は停止される。一方、焦点検出中(SW1からSW2検出までの間)に実行される像ブレ補正は、像ブレ補正手段のストローク量を使い切らないように、ある程度のストローク制限を行ってもよい。露光期間が完了すると、処理がS108に進む。
S108において、像ブレ補正制御手段107が、SW2が継続しているか否かを判定する。この判定処理では、連写の意図を確認するための処理である。SW2が継続している場合は、処理がS104に戻って、次のフレームのための焦点検出動作および焦点検出動作を優先する像ブレ補正動作が実行される。SW2が継続していない場合には、本フローは終了となり、一連の像ブレ補正駆動動作が完了する。
図7を参照して説明した焦点検出処理は、図14の処理フローのスタート時点から、S106でSW2が検出されるまで継続される。この間、S103で開始された、駆動振幅中心PlxおよびPsxへの移動に伴い、参照すべきシェーディング補正係数SHDおよび変換係数Kも変化する。焦点検出手段103は、駆動振幅中心PlxおよびPsxへの移動に対じて適切なシェーディング補正係数SHDおよび変換係数Kをテーブルから参照する。
本実施形態では、図14の処理フローがSW1から開始するものとしたが、これには限定されず、例えば、電源投入時に得られる焦点検出枠の位置Pafに基づいて、即座にPlxおよびPsxに移動するものであってもよい。この場合、ライブビュー画面表示までの時間にこの動作を完了すれば、駆動振幅中心の移動による画角変化によって撮影者が困惑することなく撮影を開始することが可能となる。なお、PlxおよびPsxへの移動動作は、動画撮影モードにおいても適用可能である。動画撮影における像ブレ補正駆動は、静止画撮影よりもストローク量が必要となるので、S103で開始される駆動振幅中心の移動は、より遅い速度で実行することが望ましい。また、本実施形態では、異なる2つの像ブレ補正手段を有する撮像装置を採用したが、これには限定されず、1つの像ブレ補正手段の駆動振幅中心を、保持枠によるケラレが小さく、像ブレ補正に必要なストロークが得られる位置に設定するものであってもよい。
本実施形態の撮像装置によれば、ケラレ情報を元に、焦点検出信号のケラレ影響が所定以下となるような、像ブレ補正の駆動振幅中心制御がなされるので、焦点検出へのケラレ影響が抑制可能となる。
(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
103 焦点検出手段
107 像ブレ補正制御手段

Claims (13)

  1. 撮像光学系の異なる瞳部分領域をそれぞれ通過する光束の光電変換によって得られる複数の像信号の位相差に基づく焦点検出が行われる期間において、前記撮像光学系の焦点距離に応じて、前記撮像光学系を通過する光束に生じるケラレ量が所定値以下となる位置を、像ブレを補正する像ブレ補正手段の駆動振幅の中心位置として設定する設定手段と、
    前記設定手段により取得された前記駆動振幅の中心位置に基づいて、前記像ブレ補正手段の駆動制御を行う制御手段と、を有する
    ことを特徴とする像ブレ補正装置。
  2. 前記像ブレ補正手段が駆動する位置に応じた、前記撮像光学系を通過する光束に生じるケラレに関する情報を記憶する記憶手段を有し、
    前記設定手段は、前記ケラレに関する情報に基づいて、前記ケラレ量が所定値以下となる位置を、前記駆動振幅の中心位置として設定する
    ことを特徴とする請求項1に記載の像ブレ補正装置。
  3. 前記ケラレに関する情報は、前記複数の像信号の強度比の情報を有する
    ことを特徴とする請求項2に記載の像ブレ補正装置。
  4. 前記ケラレに関する情報は、前記複数の像信号の位相差をデフォーカス量へと換算する換算係数の情報を有する
    ことを特徴とする請求項2または請求項3に記載の像ブレ補正装置。
  5. 前記ケラレに関する情報は、前記ケラレの状態に応じた前記撮像光学系の射出瞳面上の光束形状の情報を有する
    ことを特徴とする請求項2に記載の像ブレ補正装置。
  6. 前記制御手段は、画角変動が所定の大きさ以下となる駆動速度で、前記像ブレ補正手段を前記設定された駆動振幅の中心位置に駆動させる
    ことを特徴とする請求項1乃至5のいずれか1項に記載の像ブレ補正装置。
  7. 前記設定手段は、前記撮像光学系からの光束を光電変換して前記複数の像信号を出力する撮像素子を備える撮像装置の電源投入時に、前記駆動振幅の中心位置を設定する
    ことを特徴とする請求項1乃至6のいずれか1項に記載の像ブレ補正装置。
  8. 前記制御手段は、
    撮影開始操作がされたことに応じて、振れ検出信号に基づく前記像ブレ補正手段の駆動制御を行い、
    前記設定手段は、前記焦点検出が行われる焦点検出領域の中心位置が変更された場合に、前記駆動振幅の中心位置を再設定する
    ことを特徴とする請求項1乃至7のいずれか1項に記載の像ブレ補正装置。
  9. 前記像ブレ補正手段は、前記撮像光学系が有するレンズ、または前記光束を光電変換して前記複数の像信号を出力する撮像素子である
    ことを特徴とする請求項1乃至8のいずれか1項に記載の像ブレ補正装置。
  10. 前記焦点検出を行う焦点検出手段を備えることを特徴とする請求項1乃至9のいずれか1項に記載の像ブレ補正装置。
  11. 像ブレ補正光学系を含む撮像光学系と、
    前記撮像光学系の焦点距離に応じて、前記撮像光学系を通過する光束に生じるケラレ量が所定値以下となる位置を前記像ブレ補正光学系の駆動振幅の中心位置として設定する撮像装置から、前記駆動振幅の中心位置を取得し、前記撮像装置が焦点検出を行う期間において、前記撮像装置から取得した前記駆動振幅の中心に基づいて前記像ブレ補正光学系の駆動制御を行う駆動制御手段と、を有することを特徴とするレンズ装置。
  12. 像ブレを補正する像ブレ補正手段を有する像ブレ補正装置の制御方法であって、
    撮像光学系の異なる瞳部分領域をそれぞれ通過する光束の光電変換によって得られる複数の像信号の位相差に基づく焦点検出が行われる期間において、前記撮像光学系の焦点距離に応じて、前記撮像光学系を通過する光束に生じるケラレ量が所定値以下となる位置を、駆動振幅の中心位置として設定する工程と、
    設定された前記駆動振幅の中心位置に基づいて、前記像ブレ補正手段の駆動制御を行う工程と、を有する
    ことを特徴とする像ブレ補正装置の制御方法。
  13. 像ブレ補正光学系を含む撮像光学系を備えるレンズ装置の制御方法であって、
    前記撮像光学系の焦点距離に応じて、前記撮像光学系を通過する光束に生じるケラレ量が所定値以下となる位置を、前記像ブレ補正光学系の駆動振幅の中心位置として設定する撮像装置から、前記駆動振幅の中心位置を取得する工程と、
    前記撮像装置が焦点検出を行う期間において、前記撮像装置から取得した前記駆動振幅の中心に基づいて前記像ブレ補正光学系の駆動制御を行う工程と、を有する
    ことを特徴とするレンズ装置の制御方法。
JP2017149668A 2017-08-02 2017-08-02 像ブレ補正装置、レンズ装置およびそれらの制御方法 Active JP7019337B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017149668A JP7019337B2 (ja) 2017-08-02 2017-08-02 像ブレ補正装置、レンズ装置およびそれらの制御方法
US16/031,393 US10516827B2 (en) 2017-08-02 2018-07-10 Imaging apparatus, control method, and non-transitory storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017149668A JP7019337B2 (ja) 2017-08-02 2017-08-02 像ブレ補正装置、レンズ装置およびそれらの制御方法

Publications (2)

Publication Number Publication Date
JP2019028358A JP2019028358A (ja) 2019-02-21
JP7019337B2 true JP7019337B2 (ja) 2022-02-15

Family

ID=65230023

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017149668A Active JP7019337B2 (ja) 2017-08-02 2017-08-02 像ブレ補正装置、レンズ装置およびそれらの制御方法

Country Status (2)

Country Link
US (1) US10516827B2 (ja)
JP (1) JP7019337B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7336754B2 (ja) * 2019-03-05 2023-09-01 パナソニックIpマネジメント株式会社 撮像装置
JP7352891B2 (ja) * 2019-03-05 2023-09-29 パナソニックIpマネジメント株式会社 撮像装置
JP7551315B2 (ja) 2020-03-19 2024-09-17 キヤノン株式会社 撮像装置、撮像装置の制御方法、およびプログラム

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004056581A (ja) 2002-07-22 2004-02-19 Minolta Co Ltd 撮像装置およびセンタリング情報取得方法
JP2004191629A (ja) 2002-12-11 2004-07-08 Canon Inc 焦点検出装置
JP2007140064A (ja) 2005-11-17 2007-06-07 Canon Inc 像振れ補正機能付き光学機器
US20070196084A1 (en) 2006-02-17 2007-08-23 Nobuhiro Shibata Image capturing apparatus
WO2010055809A1 (ja) 2008-11-12 2010-05-20 コニカミノルタオプト株式会社 撮像装置の調整方法および撮像装置
US20110007133A1 (en) 2009-07-09 2011-01-13 Imanishi Kazutaka Digital camera and method for controlling the same
US20110013027A1 (en) 2009-07-15 2011-01-20 Canon Kabushiki Kaisha Shake correction apparatus, image pickup apparatus, and method for controlling shake correction apparatus
JP2012226213A (ja) 2011-04-21 2012-11-15 Canon Inc 撮像装置及びその制御方法
JP2014109760A (ja) 2012-12-04 2014-06-12 Canon Inc 撮像装置及びその制御方法、レンズ装置
JP2014142497A (ja) 2013-01-24 2014-08-07 Canon Inc 撮像装置及びその制御方法
JP2015072357A (ja) 2013-10-02 2015-04-16 オリンパス株式会社 焦点調節装置
JP2016090649A (ja) 2014-10-30 2016-05-23 オリンパス株式会社 焦点調節装置、カメラシステム、および焦点調節方法
JP2016090549A (ja) 2014-11-11 2016-05-23 倉敷紡績株式会社 三次元計測装置
JP2016090975A (ja) 2014-11-11 2016-05-23 キヤノン株式会社 距離検出装置、撮像装置、距離検出方法、およびプログラム
JP2017040704A (ja) 2015-08-18 2017-02-23 キヤノン株式会社 撮像装置および撮影システム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4567313B2 (ja) 2003-10-21 2010-10-20 オリンパス株式会社 カメラ
JP5606208B2 (ja) * 2010-08-03 2014-10-15 キヤノン株式会社 焦点検出装置および撮像装置
JP5676962B2 (ja) * 2010-08-03 2015-02-25 キヤノン株式会社 焦点検出装置および撮像装置
JP5676988B2 (ja) * 2010-09-14 2015-02-25 キヤノン株式会社 焦点調節装置
JP5901246B2 (ja) * 2010-12-13 2016-04-06 キヤノン株式会社 撮像装置
JP5947602B2 (ja) * 2012-04-11 2016-07-06 キヤノン株式会社 撮像装置
JP5914192B2 (ja) * 2012-06-11 2016-05-11 キヤノン株式会社 撮像装置及びその制御方法
JP6555863B2 (ja) * 2013-12-25 2019-08-07 キヤノン株式会社 撮像装置及び撮像装置の制御方法
KR20160028196A (ko) * 2014-09-03 2016-03-11 에스케이하이닉스 주식회사 위상차 검출 픽셀을 구비한 이미지 센서
JP2016057474A (ja) 2014-09-10 2016-04-21 キヤノン株式会社 撮像装置および焦点調節方法
JP6324879B2 (ja) * 2014-11-18 2018-05-16 富士フイルム株式会社 撮像装置及びその制御方法
JP2017158018A (ja) * 2016-03-01 2017-09-07 キヤノン株式会社 画像処理装置およびその制御方法、撮像装置
JP6971685B2 (ja) * 2017-08-02 2021-11-24 キヤノン株式会社 撮像装置およびその制御方法
JP7007871B2 (ja) * 2017-11-17 2022-02-10 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体

Patent Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004056581A (ja) 2002-07-22 2004-02-19 Minolta Co Ltd 撮像装置およびセンタリング情報取得方法
JP2004191629A (ja) 2002-12-11 2004-07-08 Canon Inc 焦点検出装置
JP2007140064A (ja) 2005-11-17 2007-06-07 Canon Inc 像振れ補正機能付き光学機器
US20070196084A1 (en) 2006-02-17 2007-08-23 Nobuhiro Shibata Image capturing apparatus
JP2007219289A (ja) 2006-02-17 2007-08-30 Canon Inc 撮像装置
WO2010055809A1 (ja) 2008-11-12 2010-05-20 コニカミノルタオプト株式会社 撮像装置の調整方法および撮像装置
US20110216227A1 (en) 2008-11-12 2011-09-08 Konica Minolta Opto, Inc. Method for adjusting image pickup device and image pickup device
JP2011017929A (ja) 2009-07-09 2011-01-27 Fujifilm Corp 複眼カメラ及びその制御方法
US20110007133A1 (en) 2009-07-09 2011-01-13 Imanishi Kazutaka Digital camera and method for controlling the same
US20110013027A1 (en) 2009-07-15 2011-01-20 Canon Kabushiki Kaisha Shake correction apparatus, image pickup apparatus, and method for controlling shake correction apparatus
JP2011022355A (ja) 2009-07-15 2011-02-03 Canon Inc 振れ補正装置、撮像装置、及び振れ補正装置の制御方法
JP2012226213A (ja) 2011-04-21 2012-11-15 Canon Inc 撮像装置及びその制御方法
JP2014109760A (ja) 2012-12-04 2014-06-12 Canon Inc 撮像装置及びその制御方法、レンズ装置
JP2014142497A (ja) 2013-01-24 2014-08-07 Canon Inc 撮像装置及びその制御方法
JP2015072357A (ja) 2013-10-02 2015-04-16 オリンパス株式会社 焦点調節装置
JP2016090649A (ja) 2014-10-30 2016-05-23 オリンパス株式会社 焦点調節装置、カメラシステム、および焦点調節方法
JP2016090549A (ja) 2014-11-11 2016-05-23 倉敷紡績株式会社 三次元計測装置
JP2016090975A (ja) 2014-11-11 2016-05-23 キヤノン株式会社 距離検出装置、撮像装置、距離検出方法、およびプログラム
JP2017040704A (ja) 2015-08-18 2017-02-23 キヤノン株式会社 撮像装置および撮影システム

Also Published As

Publication number Publication date
US20190045128A1 (en) 2019-02-07
JP2019028358A (ja) 2019-02-21
US10516827B2 (en) 2019-12-24

Similar Documents

Publication Publication Date Title
JP6362060B2 (ja) 撮像装置及びその制御方法ならびにプログラム
JP6971685B2 (ja) 撮像装置およびその制御方法
JP6249825B2 (ja) 撮像装置、その制御方法、および制御プログラム
JP6239857B2 (ja) 撮像装置およびその制御方法
JP7007871B2 (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
US9674421B2 (en) Focus detection apparatus, image capturing apparatus, and focus detection method
JP6381266B2 (ja) 撮像装置、制御装置、制御方法、プログラム、および、記憶媒体
CN107960120A (zh) 图像处理设备、摄像设备、图像处理方法、程序和存储介质
JP7019337B2 (ja) 像ブレ補正装置、レンズ装置およびそれらの制御方法
JP2017032646A (ja) 撮像装置及びその制御方法
JP2015194736A (ja) 撮像装置およびその制御方法
JP2015210285A (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP7309383B2 (ja) 撮像装置
JP7422466B2 (ja) 像振れ補正制御装置、撮像装置およびその制御方法
JP2017219782A (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体
JP2015145970A (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
JP6467289B2 (ja) 撮像装置およびその制御方法
JP7071165B2 (ja) 表示制御装置及び方法、及び撮像装置
JP6845912B2 (ja) 撮像装置及びその制御方法
JP7592391B2 (ja) 撮像装置
JP6671868B2 (ja) 制御装置、撮像装置、制御方法、プログラム、および、記憶媒体
JP7005209B2 (ja) 撮像装置、及びその制御方法
JP2018165826A (ja) 撮像装置及びレンズ装置
JP2024084476A (ja) 焦点/フリッカー検出装置、撮像装置および焦点/フリッカー検出方法
WO2016181620A1 (ja) 画像処理装置、撮像装置、画像処理方法、プログラム、および、記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200709

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211005

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211203

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220202

R151 Written notification of patent or utility model registration

Ref document number: 7019337

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151