[go: up one dir, main page]

JP3461275B2 - 光電変換装置及びこれを用いたカメラ - Google Patents

光電変換装置及びこれを用いたカメラ

Info

Publication number
JP3461275B2
JP3461275B2 JP35763497A JP35763497A JP3461275B2 JP 3461275 B2 JP3461275 B2 JP 3461275B2 JP 35763497 A JP35763497 A JP 35763497A JP 35763497 A JP35763497 A JP 35763497A JP 3461275 B2 JP3461275 B2 JP 3461275B2
Authority
JP
Japan
Prior art keywords
photoelectric conversion
conversion device
pixel
optical system
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP35763497A
Other languages
English (en)
Other versions
JPH11191867A (ja
Inventor
秀和 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP35763497A priority Critical patent/JP3461275B2/ja
Priority to TW087120970A priority patent/TW434913B/zh
Priority to US09/215,170 priority patent/US6704051B1/en
Priority to DE69835578T priority patent/DE69835578T2/de
Priority to EP98310688A priority patent/EP0926527B1/en
Priority to KR1019980058679A priority patent/KR100322701B1/ko
Priority to CNB981263313A priority patent/CN1317887C/zh
Publication of JPH11191867A publication Critical patent/JPH11191867A/ja
Application granted granted Critical
Publication of JP3461275B2 publication Critical patent/JP3461275B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/702SSIS architectures characterised by non-identical, non-equidistant or non-planar pixel layout

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Focusing (AREA)
  • Automatic Focus Adjustment (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、レンズ等の光学系
を通ってきた光を光電変換する光電変換装置とこれを用
いた例えば光学系を含めた固体撮像装置及びオートフォ
ーカスカメラに関するものである。
【0002】
【従来の技術】従来、光電変換素子を2次元状に配列さ
せた光電変換装置は図5に示す様な構成になっている。
同図において、1は光電変換素子である画素、2は出力
線、3は遮光膜、4は開口領域、5は走査回路、6は信
号転送回路である。画素1はm×nに2次元に決まった
ピッチで配置されている。又、開口部4は、画素1に対
応して同じ形状、同じ位置、同じ開口面積となってい
る。走査回路5は2次元状に配置された画素1を水平方
向と垂直方向にそれぞれ走査し、信号転送回路6に出力
する。
【0003】従来の光電変換装置は2次元的に光電変換
された信号を、信号転送回路6から時系列的に出力し、
NTSCやHDTV等の規格に合わせた信号処理を行
い、外部へ出力させている。その後、外部の信号処理回
路で信号処理を行ってTVやモニタ上に再生させる事が
できる。この場合、光電変換装置上に結像された画像
は、1対1でTVモニタ上に再生できるので、撮像レン
ズに収差がなければ、正確な画像再生が可能である。
【0004】
【発明が解決しようとする課題】しかしながら、上記従
来例では、光学系で収差が発生する場合、例えば、カメ
ラのオートフォーカス(AF)センサに用いる場合、以
下の様な欠点があった。
【0005】AFの光線は、撮影対象物の放つ光像を入
力し、対物レンズで集束して複数の反射ミラーで光束方
向を変化して光電変換装置に入力して、対物レンズのフ
ォーカスを合わせる構成としている。その際、各反射ミ
ラーで反射されて集光されるが、各ミラー、対物レンズ
の収差により、ゆがんで集光される。例えば、撮影対象
物が長方形のパターンの場合には、AFセンサである光
電変換装置上では湾曲されて集光される。このため、従
来は信号転送回路の後段の画像信号処理回路や信号処理
ソフトを用いて補正していたが十分ではなかった。
【0006】従って、従来のセンサでこの映像を再生す
ると、長方形で再生されるべき映像が、湾曲形状で再生
されてしまい、後段の信号処理で不具合が生じ、正確な
AF動作が困難となっていた。
【0007】本出願に係る第1の発明の目的は、固体撮
像装置の光学系で発生する収差を、光電変換装置上で補
正することを目的とする。
【0008】又、第2の発明の目的として、光学系で発
生する光量の不均一性、例えばレンズの周辺光量低下な
どを光電変換装置上で補正することを目的とする。
【0009】
【課題を解決するための手段】上記目的を達成するた
め、本発明に係る光電変換装置は、各画素の開口領域を
ずらして配置した画素列を有し、前記画素列を複数配列
して形成した光電変換装置において、互いに隣接する前
記画素列は、前記画素列同士を前記画素列方向に1画素
の幅より小さい幅ずつずらして配列し、前記画素列は、
各画素内の遮光層の位置を変えることで前記開口領域を
ずらして配置し、前記複数の画素列は、同じ画素レイア
ウトを有することを特徴とする。
【0010】また本発明に係る光電変換装置において、
前記各画素列の開口領域を下広がりとなるようにずらし
形成することを特徴とする。また本発明に係る光電変
換装置において、前記光電変換装置を駆動する走査回路
と、前記光電変換装置からの信号を外部へ出力する信号
転送回路を有することを特徴とする。また本発明に係る
光電変換装置において、前記光電変換装置に光を導く光
学系を有し、前記光学系の収差の補正を行なわれるよう
に前記開口領域の位置が決められていることを特徴とす
る。さらに本発明に係るカメラは、本発明に係る光電変
換装置をオートフォーカス用センサに用いたことを特徴
とする。
【0011】[作用] 上記構成において、光電変換装置の各開口部は実際の光
学系の収差に合わせて配列されるため、光学系による画
像の収差はここで補正される。例えば図2に示す光学系
において、図4の様な開口部を湾曲的に配列した光電変
換装置を用いれば、再生画像は元の画像を正確に再現で
きる様になる。又、この開口部の開口率を光学系の光量
に対応して形成することにより同一光量照射時におい
て、同一の出力レベルを得ることが可能となる。
【0012】
【発明の実施の形態】本発明の一実施形態について、図
面を参照しつつ詳細に説明する。図1は本発明の特徴を
最も良く表す光電変換装置の平面図であり、同図におい
て、1は光電変換素子である画素で、2は出力線である
AL配線、3は遮光膜であるAL2配線、4は光が入射
される領域である開口領域、5は光電変換素子を駆動す
る走査回路、6は画素1からの信号を、外部へ出力する
ための信号転送回路である。光電変換素子である画素1
はm×nの2次元に配列され、2次元の撮像が可能とな
っている。
【0013】図2は本発明を用いる一眼レフカメラの簡
単な光学系を示している。同図において、7は画像を集
光するためのレンズ、8はファインダー15へ光を反射
させるためのクイックリターンミラー、9はAF(オー
トフォーカス)系へ光を反射させるサブミラー、10は
光電変換装置である本発明のAF用センサ、11はメガ
ネレンズ、12はAFセンサ10へ光を導くミラー、1
3はフォーカルプレーンシャッター、14は光線の主軸
を示している。
【0014】本実施形態において、実際にAFセンサ1
0上で結像される形状は、図3に示す様に被写体である
四辺形の実像に対応して、湾曲されている。従って、こ
の補正を行うため、開口位置を図1に示した様に湾曲に
配置したことを特徴としている。
【0015】図1において、Y方向に凹型の収差の補正
のため、Y方向の画素列を隣接する画素列に対して、
0.5〜1.0画素ずつずらして配置する。また、X方
向の下広がりの収差の補正のため、遮光領域3を下広が
りにする様に形成している。従って開口領域は図4に示
した様にX方向、Y方向の光学系の収差の補正を含んだ
位置に配列されるため、光電変換装置上で光学系収差の
補正が可能となる。又、本実施形態において、各画素1
の開口率を実際の光学系に合わせて周辺部へかけて大き
くさせてあるため、出力のシェーディングも低減でき
る。
【0016】本実施形態において、光学系の結像位置の
収差、光量不均一性を光電変換装置上で補正できる2次
元光電変換装置が実現できた。それにより、AF精度の
向上、信号処理回路の簡略化、光学系の低コスト化が可
能となった。
【0017】本実施形態において、画素の形状を長方形
としているが、正方形であっても又他の形状であっても
同様の効果が得られる。又、光電変換素子は、CMOS
型センサ、CCD,BASIS,CMD,SITなど、
どのタイプのセンサにも応用できるのは当然である。
【0018】さらに、本実施形態による応用例をAFの
センサに用いる例を示したが、要は光学系の歪をセンサ
の各画素の配置で補正することであるので、ビデオカメ
ラやデジタルカメラ等のレンズを用いてセンサで被写体
の画像を読み取るものであれば、適宜に適用できるもの
である。
【0019】上記実施形態においては、主に光電変換装
置の光電変換素子の配置や遮光層の形態について説明し
たが、本光電変換装置の製造方法においては、特に各画
素の形成において、レンズやミラーを含めた光学系の球
面収差、非点収差、像面湾曲収差、コマ、歪曲収差等の
各収差歪を補正するように、且つ被写体の形状そのもの
を直接ディスプレイに表現できるように、開口領域と遮
光層の形態を正確にマスク形成しフォトリソグラフィー
を用いる半導体製造技術によって、容易に形成できる。
【0020】
【発明の効果】以上説明したように、本発明によれば、
光学系の収差の補正を光電変換装置上で行うことが可能
となるため、光学系の簡単化、信号処理回路やソフトウ
ェアの簡単化、画像再生精度の向上が実現できる。
【0021】従って、従来よりも低コスト、高精度の画
像処理が可能となる固体撮像装置が実現できる。
【図面の簡単な説明】
【図1】本発明の第1実施形態の概略図である。
【図2】本発明に用いるオートフォーカスのための光学
系を示す概略図である。
【図3】本発明による解決手段を促す結像例を示す概念
図である。
【図4】本発明による概念的構成図である。
【図5】従来例による光電変換装置の概念的平面図であ
る。
【符号の説明】
1 光電変換素子 2 出力線 3 遮光層 4 開口領域 5 走査回路 6 信号転送回路 7 結像レンズ 8 クイックリターンミラー 9 サブミラー 10 光電変換装置 11 メガネレンズ 12 ミラー 13 シャッター 14 主光軸 15 ファインダー
───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7,DB名) H04N 5/335 G02B 7/11 G03B 3/00 - 3/12

Claims (5)

    (57)【特許請求の範囲】
  1. 【請求項1】 各画素の開口領域をずらして配置した画
    素列を有し、前記画素列を複数配列して形成した光電変
    換装置において、互いに隣接する前記画素列は、前記画
    素列同士を前記画素列方向に1画素の幅より小さい幅ず
    ずらして配列し、前記画素列は、各画素内の遮光層の
    位置を変えることで前記開口領域をずらして配置し、前
    記複数の画素列は、同じ画素レイアウトを有することを
    特徴とする光電変換装置。
  2. 【請求項2】 請求項1に記載の光電変換装置におい
    て、前記各画素列の前記開口領域の位置を下広がりとな
    るようにずらして形成することを特徴とする光電変換装
    置。
  3. 【請求項3】 請求項1に記載の光電変換装置におい
    て、前記光電変換装置を駆動する走査回路と、前記光電
    変換装置からの信号を外部へ出力する信号転送回路を有
    することを特徴とする光電変換装置。
  4. 【請求項4】 請求項1に記載の光電変換装置におい
    て、前記光電変換装置に光を導く光学系を有し、前記光
    学系の収差の補正を行なわれるように前記開口領域の位
    置が決められていることを特徴とする光電変換装置。
  5. 【請求項5】 請求項1に記載の光電変換装置をオート
    フォーカス用センサに用いたことを特徴とするカメラ。
JP35763497A 1997-12-25 1997-12-25 光電変換装置及びこれを用いたカメラ Expired - Fee Related JP3461275B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP35763497A JP3461275B2 (ja) 1997-12-25 1997-12-25 光電変換装置及びこれを用いたカメラ
TW087120970A TW434913B (en) 1997-12-25 1998-12-16 Photoelectric conversion device, and image pickup device and autofocus camera using the same
US09/215,170 US6704051B1 (en) 1997-12-25 1998-12-18 Photoelectric conversion device correcting aberration of optical system, and solid state image pick-up apparatus and device and camera using photoelectric conversion device
EP98310688A EP0926527B1 (en) 1997-12-25 1998-12-23 Photoelectric conversion device, and image pickup device and autofocus camera using the same
DE69835578T DE69835578T2 (de) 1997-12-25 1998-12-23 Photoelektrische Umwandlungsvorrichtung, Bildaufnahmevorrichtung und Verwendung in einer Autofocus-Kamera
KR1019980058679A KR100322701B1 (ko) 1997-12-25 1998-12-24 광전변환장치및촬상장치와이를사용한오토포커스카메라
CNB981263313A CN1317887C (zh) 1997-12-25 1998-12-25 光电转换装置和使用该装置的摄象设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP35763497A JP3461275B2 (ja) 1997-12-25 1997-12-25 光電変換装置及びこれを用いたカメラ

Publications (2)

Publication Number Publication Date
JPH11191867A JPH11191867A (ja) 1999-07-13
JP3461275B2 true JP3461275B2 (ja) 2003-10-27

Family

ID=18455126

Family Applications (1)

Application Number Title Priority Date Filing Date
JP35763497A Expired - Fee Related JP3461275B2 (ja) 1997-12-25 1997-12-25 光電変換装置及びこれを用いたカメラ

Country Status (7)

Country Link
US (1) US6704051B1 (ja)
EP (1) EP0926527B1 (ja)
JP (1) JP3461275B2 (ja)
KR (1) KR100322701B1 (ja)
CN (1) CN1317887C (ja)
DE (1) DE69835578T2 (ja)
TW (1) TW434913B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7508431B2 (en) 2004-06-17 2009-03-24 Hoya Corporation Solid state imaging device

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6995800B2 (en) * 2000-01-27 2006-02-07 Canon Kabushiki Kaisha Image pickup apparatus utilizing a plurality of converging lenses
EP2290952A3 (en) * 2000-07-27 2011-08-17 Canon Kabushiki Kaisha Image sensing apparatus
US20030141433A1 (en) * 2002-01-31 2003-07-31 Gordon Gary B. Solid state image sensor array for correcting curvilinear distortion of a camera lens system and method for fabricating the image sensor array
JP3754961B2 (ja) * 2002-02-22 2006-03-15 キヤノン株式会社 固体撮像装置およびカメラ
JP2005300844A (ja) 2004-04-09 2005-10-27 Canon Inc オートフォーカス用固体撮像装置とそれを用いたオートフォーカスカメラ
JP2006064956A (ja) * 2004-08-26 2006-03-09 Canon Inc オートフォーカス用固体撮像装置とそれを用いたオートフォーカスカメラ
US20060169870A1 (en) * 2005-02-01 2006-08-03 Silsby Christopher D Image sensor with embedded optical element
US8527510B2 (en) 2005-05-23 2013-09-03 Monster Worldwide, Inc. Intelligent job matching system and method
JP4886248B2 (ja) * 2005-08-31 2012-02-29 キヤノン株式会社 焦点検出用固体撮像装置及び、同装置を用いたカメラシステム
US8195657B1 (en) 2006-01-09 2012-06-05 Monster Worldwide, Inc. Apparatuses, systems and methods for data entry correlation
US8600931B1 (en) 2006-03-31 2013-12-03 Monster Worldwide, Inc. Apparatuses, methods and systems for automated online data submission
US12314907B2 (en) 2006-03-31 2025-05-27 Monster Worldwide, Inc. Apparatuses, methods and systems for automated online data submission
JP4827632B2 (ja) 2006-06-30 2011-11-30 キヤノン株式会社 焦点検出装置、その駆動方法、及びカメラシステム
DE102007045525A1 (de) * 2007-09-24 2009-04-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Bildsensor
US8244551B1 (en) 2008-04-21 2012-08-14 Monster Worldwide, Inc. Apparatuses, methods and systems for advancement path candidate cloning
JP5178581B2 (ja) 2009-02-27 2013-04-10 キヤノン株式会社 光電変換装置及びその駆動方法
JP2010278295A (ja) * 2009-05-29 2010-12-09 Nec Toshiba Space Systems Ltd 撮像装置及び撮像素子の配置方法
DE102010019805A1 (de) * 2010-05-06 2011-11-10 Z/I Imaging Ltd. Kamera, insbesondere zur Aufnahme von Luftbildern aus Flugzeugen
KR20150121564A (ko) * 2014-04-21 2015-10-29 삼성전자주식회사 촬상 소자 및 촬영 장치
US20170330153A1 (en) 2014-05-13 2017-11-16 Monster Worldwide, Inc. Search Extraction Matching, Draw Attention-Fit Modality, Application Morphing, and Informed Apply Apparatuses, Methods and Systems
KR20160045385A (ko) 2014-10-17 2016-04-27 엘지이노텍 주식회사 렌즈 구동 장치 및 이를 포함하는 카메라 모듈
CN105245765A (zh) * 2015-07-20 2016-01-13 联想(北京)有限公司 图像传感阵列及其排布方法、图像采集部件、电子设备
US10491799B2 (en) 2016-06-17 2019-11-26 Canon Kabushiki Kaisha Focus detection apparatus, focus control apparatus, image capturing apparatus, focus detection method, and storage medium
CN112526801B (zh) * 2019-09-03 2022-01-25 宏达国际电子股份有限公司 双镜头成像模块及其提取方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4204230A (en) * 1978-10-25 1980-05-20 Xerox Corporation High resolution input scanner using a two dimensional detector array
JPS5829274A (ja) 1981-08-14 1983-02-21 Olympus Optical Co Ltd 撮像装置
US4642677A (en) * 1983-07-21 1987-02-10 Victor Company Of Japan, Ltd. Color TV camera with plural solid state imaging devices mutually horizontally displaced and associated filters of vertically-oriented color stripes
JPH0194776A (ja) 1987-10-07 1989-04-13 Matsushita Electric Ind Co Ltd 撮像装置
JPH01119178A (ja) 1987-10-30 1989-05-11 Nikon Corp 撮像装置
JPH0496472A (ja) * 1990-08-10 1992-03-27 Konica Corp カラー画像読取り装置
US6201574B1 (en) * 1991-05-13 2001-03-13 Interactive Pictures Corporation Motionless camera orientation system distortion correcting sensing element
KR930004798A (ko) * 1991-08-06 1993-03-23 이헌조 카메라의 오토 포커스 장치
JPH06151797A (ja) * 1992-11-11 1994-05-31 Sony Corp 固体撮像素子
JPH06252375A (ja) 1993-03-01 1994-09-09 Hitachi Ltd 固体撮像装置
KR950002410A (ko) * 1993-06-30 1995-01-04 김광호 고체 촬상 장치
JPH0750401A (ja) 1993-08-06 1995-02-21 Sony Corp 固体撮像素子及びその製造方法
JP3260929B2 (ja) 1993-10-15 2002-02-25 オリンパス光学工業株式会社 映像処理装置
US5489940A (en) * 1994-12-08 1996-02-06 Motorola, Inc. Electronic imaging system and sensor for correcting the distortion in a wide-angle lens
EP0786815A1 (en) 1996-01-26 1997-07-30 Hewlett-Packard Company Photosensor array with compensation for optical aberrations and illumination nonuniformity
US6377305B2 (en) * 1997-10-13 2002-04-23 Canon Kabushiki Kaisha Image sensing apparatus

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7508431B2 (en) 2004-06-17 2009-03-24 Hoya Corporation Solid state imaging device

Also Published As

Publication number Publication date
KR100322701B1 (ko) 2002-06-20
CN1317887C (zh) 2007-05-23
TW434913B (en) 2001-05-16
US6704051B1 (en) 2004-03-09
EP0926527B1 (en) 2006-08-16
DE69835578T2 (de) 2006-12-21
JPH11191867A (ja) 1999-07-13
KR19990063470A (ko) 1999-07-26
EP0926527A2 (en) 1999-06-30
DE69835578D1 (de) 2006-09-28
EP0926527A3 (en) 2000-09-20
CN1225540A (zh) 1999-08-11

Similar Documents

Publication Publication Date Title
JP3461275B2 (ja) 光電変換装置及びこれを用いたカメラ
US6933978B1 (en) Focus detecting device with photoelectric conversion portion having microlens and with light blocking portion having first and second openings
US7652713B2 (en) Image pickup apparatus
RU2490715C1 (ru) Устройство захвата изображения
JP3774597B2 (ja) 撮像装置
JP5552214B2 (ja) 焦点検出装置
JP5895355B2 (ja) 撮像装置
JP5256711B2 (ja) 撮像素子および撮像装置
CN103444184B (zh) 彩色摄像元件及摄像装置
JP4983271B2 (ja) 撮像装置
WO2013027488A1 (ja) 撮像装置
JP5211590B2 (ja) 撮像素子および焦点検出装置
CN103843318A (zh) 摄像设备及其控制方法
JP4858179B2 (ja) 焦点検出装置および撮像装置
US6618093B1 (en) Distortion-free imaging device having curved photosensor
JP2001210812A (ja) 固体撮像装置及びそれを備えた固体撮像システム
JP2003241075A (ja) カメラシステム、カメラおよび撮影レンズ装置
US20190268543A1 (en) Image sensor and focus adjustment device
US8049796B2 (en) Method of correcting sensitivity and imaging apparatus
JP2019168663A (ja) 焦点検出装置及び撮像装置
JP2002303785A (ja) 焦点検出装置及び撮像装置
JP2003008997A (ja) 撮像素子及び撮像素子を用いたデジタルスチルカメラ
JP2004191630A (ja) 撮像装置
US12464235B2 (en) Light receiving element, imaging device, and correction processing method
JP2018046563A (ja) 撮像素子

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070815

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080815

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080815

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090815

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090815

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100815

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110815

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120815

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120815

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130815

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees