JP4388121B2 - 3次元画像ボリューム内のポリープの検出方法 - Google Patents
3次元画像ボリューム内のポリープの検出方法 Download PDFInfo
- Publication number
- JP4388121B2 JP4388121B2 JP2007536744A JP2007536744A JP4388121B2 JP 4388121 B2 JP4388121 B2 JP 4388121B2 JP 2007536744 A JP2007536744 A JP 2007536744A JP 2007536744 A JP2007536744 A JP 2007536744A JP 4388121 B2 JP4388121 B2 JP 4388121B2
- Authority
- JP
- Japan
- Prior art keywords
- classifier
- subvolume
- probability
- image volume
- polyp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
- G06F18/2148—Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the process organisation or structure, e.g. boosting cascade
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/446—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering using Haar-like filters, e.g. using integral image techniques
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/754—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries involving a deformation of the sample pattern or of the reference pattern; Elastic matching
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/76—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries based on eigen-space representations, e.g. from pose or different illumination conditions; Shape manifolds
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/774—Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
- G06V10/7747—Organisation of the process, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
- G06T2207/30032—Colon polyp
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/032—Recognition of patterns in medical or anatomical images of protuberances, polyps nodules, etc.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
本出願は、参照により全体に組み込まれる2004年10月12日に出願された米国仮出願第60/617,879号の利益を主張する。
本発明は、解剖学的構造の3次元(3D)画像ボリューム内の目標対象の検出方法に関する。画像ボリューム内の1組の候補位置が獲得される。候補位置毎に、少なくとも2つの異なるスケールのサブボリュームが取出される。各サブボリュームは複数のボクセルを含む。各サブボリューム毎に、各サブボリュームは少なくとも2つの異なる方位に回転される。各サブボリュームに形状分類器が適用される。サブボリューム内のボクセルが形状分類器を通過するならば、勾配方向がボクセルに対し計算される。ボクセルの勾配方向が予め定められた方位のうちの一つであるならば、ボクセルに確率分類器が適用される。確率分類器によって計算された確率測度がサブボリュームの信頼性測度として使用される。信頼性測度が予め定められた閾値を上回るならば、サブボリュームが目標対象を含むと決定される。
本発明は、3次元ボリューム内の肺結節検出のための学習に基づくアプローチを使用することにより、3次元(3D)結腸画像ボリューム内のポリープの検出方法に関する。一般的な生成モデルがポリープのような対象の基礎的発生プロセスを捕捉するために定められる。積分ボリューム及び3次元ハールフィルタが特徴の高速計算のために設計される。確率的ブースティングツリー(PBT)のカスケードが分類器を学習するために採用される。本発明は、50,000個の候補特徴のプールから数千個の特徴を自動的に選択することができる。本発明はデータの事前セグメンテーションを必要とせず、このことが洗浄されていない結腸のような浄化されていないデータ内のポリープを検出する際に特に役立つ。
2 X線ビーム
3 検査対象
4 放射線検出器
7 ガントリ
8 システム軸線
10 データ収集システム
12 信号プロセッサ
20 コンピュータ支援検出システム
Claims (22)
- 解剖学的構造の3次元画像ボリューム内の目標対象の検出方法において、
画像ボリューム内で1組の候補位置を獲得するステップと、
候補位置毎に、複数のボクセルを含む少なくとも2つの異なるスケールのサブボリュームを取出すステップと、
サブボリューム毎に、少なくとも2つの異なる方位に各サブボリュームを回転させるステップと、
各サブボリュームに形状分類器を適用するステップと、
サブボリューム内のボクセルが形状分類器を通過するならば、ボクセルの勾配方向を計算するステップと、
ボクセルの勾配方向が予め定められた方位のうちの一つであるならば、ボクセルに確率分類器を適用するステップと、
確率分類器によって計算された確率測度をサブボリュームの信頼性測度として使用するステップと、
信頼性測度が予め定められた閾値を上回るならば、サブボリュームが目標対象を含むと決定するステップと、
を備えることを特徴とする3次元画像ボリューム内の目標対象の検出方法。 - 確率分類器がアダブースト(AdaBoost)分類器であることを特徴とする請求項1に記載の方法。
- 確率分類器が確率的ブースティングツリー(PBT)分類器であることを特徴とする請求項1に記載の方法。
- 確率分類器をボクセルに適用するステップが、複数のフィルタをサブボリュームに適用するステップをさらに備えることを特徴とする請求項1に記載の方法。
- 複数のフィルタがハールフィルタであることを特徴とする請求項1に記載の方法。
- フィルタが3次元ハールフィルタであることを特徴とする請求項5に記載の方法。
- ハールフィルタがサイズおよびアスペクト比の異なるテンプレートの複数の組み合わせに対応することを特徴とする請求項5に記載の方法。
- ハールフィルタがオフラインで計算されることを特徴とする請求項5に記載の方法。
- 3次元画像ボリュームがコンピュータ断層撮影(CT)画像ボリュームであることを特徴とする請求項1に記載の方法。
- 解剖学的構造が結腸であることを特徴とする請求項1に記載の方法。
- 解剖学的構造が肺であることを特徴とする請求項1に記載の方法。
- 解剖学的構造がリンパ節であることを特徴とする請求項1に記載の方法。
- 目標対象がポリープであることを特徴とする請求項1に記載の方法。
- 解剖学的構造の3次元画像ボリューム内で識別された候補位置がポリープに対応するかどうかの決定方法において、
各候補位置の3次元画像ボリュームからサブボリュームを取出すステップと、
複数のスケールで複数のボクセルを含む各サブボリュームをスケーリングするステップと、
候補位置毎に1組のサブボリュームを生じる少なくとも2つの異なる方位にスケーリングされた各サブボリュームを回転させるステップと、
各サブボリュームに形状分類器を適用するステップと、
サブボリューム内のボクセルが形状分類器を通過するならば、ボクセルの勾配方向を計算するステップと、
ボクセルの勾配方向が予め定められた方位のうちの一つであるならば、ボクセルに確率分類器を適用するステップと、
確率分類器によって計算された確率測度をサブボリュームの信頼性測度として使用するステップと、
信頼性測度が予め定められた閾値を上回るならば、サブボリュームがポリープを含むと決定するステップと、
を備えることを特徴とする3次元画像ボリューム内で識別された候補位置がポリープに対応するかどうかの決定方法。 - 確率分類器が確率的ブースティングツリー(PBT)分類器であることを特徴とする請求項14に記載の方法。
- 確率分類器をボクセルに適用するステップが、複数のハールフィルタをサブボリュームに適用するステップをさらに備えることを特徴とする請求項14に記載の方法。
- ハールフィルタがサイズおよびアスペクト比の異なるテンプレートの複数の組み合わせに対応することを特徴とする請求項16に記載の方法。
- ハールフィルタがオフラインで計算されることを特徴とする請求項16に記載の方法。
- 3次元画像ボリュームがコンピュータ断層撮影(CT)画像ボリュームであることを特徴とする請求項14に記載の方法。
- 解剖学的構造が結腸であることを特徴とする請求項14に記載の方法。
- 解剖学的構造が肺であることを特徴とする請求項14に記載の方法。
- 解剖学的構造がリンパ節であることを特徴とする請求項14に記載の方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US61787904P | 2004-10-12 | 2004-10-12 | |
| US11/244,798 US7558413B2 (en) | 2004-10-12 | 2005-10-06 | Method for detecting polyps in a three dimensional image volume |
| PCT/US2005/036123 WO2006044242A2 (en) | 2004-10-12 | 2005-10-07 | Method for detecting polyps in a three dimensional image volume |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008515595A JP2008515595A (ja) | 2008-05-15 |
| JP4388121B2 true JP4388121B2 (ja) | 2009-12-24 |
Family
ID=36010996
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007536744A Expired - Fee Related JP4388121B2 (ja) | 2004-10-12 | 2005-10-07 | 3次元画像ボリューム内のポリープの検出方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7558413B2 (ja) |
| EP (1) | EP1800249A2 (ja) |
| JP (1) | JP4388121B2 (ja) |
| CN (1) | CN101116089B (ja) |
| AU (1) | AU2005296007B2 (ja) |
| CA (1) | CA2583886C (ja) |
| WO (1) | WO2006044242A2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9589344B2 (en) | 2012-12-28 | 2017-03-07 | Hitachi, Ltd. | Volume data analysis system and method therefor |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7590271B2 (en) * | 2004-10-28 | 2009-09-15 | Siemens Medical Solutions Usa, Inc. | System and method for automatic detection and localization of 3D bumps in medical images |
| WO2007044504A1 (en) * | 2005-10-05 | 2007-04-19 | Siemens Medical Solutions Usa, Inc. | Automatic cad algorithm selection |
| US7903857B2 (en) * | 2006-04-17 | 2011-03-08 | Siemens Medical Solutions Usa, Inc. | Robust click-point linking with geometric configuration context: interactive localized registration approach |
| US8055047B2 (en) * | 2006-08-14 | 2011-11-08 | The Board Of Trustees Of The Leland Stanford Junior University | Polyp detection using smoothed shape operators |
| US20080071711A1 (en) * | 2006-09-20 | 2008-03-20 | Siemens Corporate Research, Inc. | Method and System for Object Detection Using Probabilistic Boosting Cascade Tree |
| US7983463B2 (en) * | 2006-11-22 | 2011-07-19 | General Electric Company | Methods and apparatus for suppressing tagging material in prepless CT colonography |
| US8160395B2 (en) * | 2006-11-22 | 2012-04-17 | General Electric Company | Method and apparatus for synchronizing corresponding landmarks among a plurality of images |
| US8244015B2 (en) * | 2006-11-22 | 2012-08-14 | General Electric Company | Methods and apparatus for detecting aneurysm in vasculatures |
| US8023710B2 (en) * | 2007-02-12 | 2011-09-20 | The United States Of America As Represented By The Secretary Of The Department Of Health And Human Services | Virtual colonoscopy via wavelets |
| US8396531B2 (en) * | 2007-03-27 | 2013-03-12 | Siemens Medical Solutions Usa, Inc. | System and method for quasi-real-time ventricular measurements from M-mode echocardiogram |
| US8396533B2 (en) * | 2007-08-21 | 2013-03-12 | Siemens Aktiengesellschaft | Method and system for catheter detection and tracking in a fluoroscopic image sequence |
| US8073215B2 (en) | 2007-09-18 | 2011-12-06 | Siemens Medical Solutions Usa, Inc. | Automated detection of planes from three-dimensional echocardiographic data |
| US8184888B2 (en) * | 2007-09-19 | 2012-05-22 | Siemens Medical Solutions Usa, Inc. | Method and system for polyp segmentation for 3D computed tomography colonography |
| US8116548B2 (en) * | 2008-06-04 | 2012-02-14 | Siemens Aktiengesellschaft | Method and system for detecting 3D anatomical structures using constrained marginal space learning |
| CN102934127B (zh) * | 2010-04-28 | 2016-11-16 | 基文影像公司 | 用于显示体内图像部分的系统和方法 |
| DE102011002927A1 (de) * | 2011-01-20 | 2012-07-26 | Friedrich-Alexander-Universität Erlangen-Nürnberg | Verfahren und Recheneinheit zur "Probalistic Boosting-Tree"-basierten Läsionssegmentierung in medizinischen Bilddatensätzen |
| US10055843B2 (en) * | 2015-03-31 | 2018-08-21 | Mayo Foundation For Medical Education And Research | System and methods for automatic polyp detection using convulutional neural networks |
| JP2017185007A (ja) * | 2016-04-05 | 2017-10-12 | 株式会社島津製作所 | 放射線撮影装置、放射線画像の対象物検出プログラムおよび放射線画像における対象物検出方法 |
| EP3267394A1 (en) * | 2016-07-04 | 2018-01-10 | Centre National De La Recherche Scientifique | Method and apparatus for real-time detection of polyps in optical colonoscopy |
| CN106529188B (zh) * | 2016-11-25 | 2019-04-19 | 苏州国科康成医疗科技有限公司 | 应用于手术导航的图像处理方法 |
| JP7595292B2 (ja) * | 2020-08-31 | 2024-12-06 | グローリー株式会社 | 教師データ生成装置、教師データ生成方法、学習済みモデルの製造方法、およびプログラム |
| EP4002266A1 (en) * | 2020-11-19 | 2022-05-25 | Koninklijke Philips N.V. | Suppression of tagged elements in medical images |
| CN113837989B (zh) * | 2021-05-25 | 2023-03-24 | 苏州慧维智能医疗科技有限公司 | 一种基于无锚框的大肠内窥镜息肉检测与病理分类方法 |
| WO2025240968A1 (en) * | 2024-05-17 | 2025-11-20 | The General Hospital Corporation | Systems and methods for automated detection of colon polyps using depth-in-color encoding and machine learning |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5220640A (en) * | 1990-09-20 | 1993-06-15 | Motorola, Inc. | Neural net architecture for rate-varying inputs |
| US6546379B1 (en) * | 1999-10-26 | 2003-04-08 | International Business Machines Corporation | Cascade boosting of predictive models |
| US7099510B2 (en) * | 2000-11-29 | 2006-08-29 | Hewlett-Packard Development Company, L.P. | Method and system for object detection in digital images |
| US7020316B2 (en) * | 2001-12-05 | 2006-03-28 | Siemens Corporate Research, Inc. | Vessel-feeding pulmonary nodule detection by volume projection analysis |
| US7424141B2 (en) * | 2003-08-29 | 2008-09-09 | Agilent Technologies, Inc. | System and method for performing auto-focused tomosynthesis |
-
2005
- 2005-10-06 US US11/244,798 patent/US7558413B2/en not_active Expired - Fee Related
- 2005-10-07 CA CA2583886A patent/CA2583886C/en not_active Expired - Fee Related
- 2005-10-07 JP JP2007536744A patent/JP4388121B2/ja not_active Expired - Fee Related
- 2005-10-07 WO PCT/US2005/036123 patent/WO2006044242A2/en not_active Ceased
- 2005-10-07 EP EP05807680A patent/EP1800249A2/en not_active Withdrawn
- 2005-10-07 CN CN2005800423081A patent/CN101116089B/zh not_active Expired - Fee Related
- 2005-10-07 AU AU2005296007A patent/AU2005296007B2/en not_active Ceased
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9589344B2 (en) | 2012-12-28 | 2017-03-07 | Hitachi, Ltd. | Volume data analysis system and method therefor |
Also Published As
| Publication number | Publication date |
|---|---|
| AU2005296007B2 (en) | 2009-08-13 |
| WO2006044242A2 (en) | 2006-04-27 |
| CN101116089A (zh) | 2008-01-30 |
| US7558413B2 (en) | 2009-07-07 |
| JP2008515595A (ja) | 2008-05-15 |
| CN101116089B (zh) | 2013-03-27 |
| CA2583886C (en) | 2013-04-02 |
| WO2006044242A3 (en) | 2006-05-26 |
| AU2005296007A1 (en) | 2006-04-27 |
| US20060079761A1 (en) | 2006-04-13 |
| CA2583886A1 (en) | 2006-04-27 |
| EP1800249A2 (en) | 2007-06-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4388121B2 (ja) | 3次元画像ボリューム内のポリープの検出方法 | |
| US8023710B2 (en) | Virtual colonoscopy via wavelets | |
| CN101061510B (zh) | 检测和识别医学图像数据内所关心部位和/或体积的方法和系统 | |
| JP5864542B2 (ja) | 画像の異常を検出するための画像データの処理方法、システムおよびプログラム | |
| US7515743B2 (en) | System and method for filtering a medical image | |
| US7583831B2 (en) | System and method for using learned discriminative models to segment three dimensional colon image data | |
| US20080002870A1 (en) | Automatic detection and monitoring of nodules and shaped targets in image data | |
| JP2009502230A (ja) | 医用画像における傷病部位の検知 | |
| JP2004536367A (ja) | コンピュータ利用画像分析 | |
| Gopinath et al. | Enhanced lung cancer classification and prediction based on hybrid neural network approach | |
| Dawoud | Lung segmentation in chest radiographs by fusing shape information in iterative thresholding | |
| Gupta et al. | Detection and staging of lung cancer from CT scan images by deep learning | |
| Lee et al. | A straightforward approach to computer-aided polyp detection using a polyp-specific volumetric feature in CT colonography | |
| Qian et al. | Knowledge-based automatic detection of multitype lung nodules from multidetector CT studies | |
| Taher et al. | MASK-RCNN on the diagnoses of lung cancer in Kurdistan Region of Iraq | |
| Wang et al. | Combining statistical and geometric features for colonic polyp detection in CTC based on multiple kernel learning | |
| Bhotika et al. | Part-based local shape models for colon polyp detection | |
| Tan et al. | Detection of breast cancer in automated 3D breast ultrasound | |
| Sharma et al. | A Swift and Accurate Approach to Breast Cancer Recognition Using CNN and Decision Tree Method | |
| Shaffie et al. | Computer-Assisted Image Processing System for Early Assessment of Lung Nodule Malignancy. Cancers 2022, 14, 1117 | |
| Zhou | Computer aided diagnosis of lung ground glass opacity nodules and large lung cancers in CT | |
| Naeppi et al. | Computer-aided detection of polyps and masses for CT colonography | |
| Yao | Computer-Aided Detection of Colonic Polyps in CT Colonography |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090901 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091001 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4388121 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121009 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121009 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121009 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131009 Year of fee payment: 4 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |