JP6687530B2 - 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 - Google Patents
基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 Download PDFInfo
- Publication number
- JP6687530B2 JP6687530B2 JP2016557620A JP2016557620A JP6687530B2 JP 6687530 B2 JP6687530 B2 JP 6687530B2 JP 2016557620 A JP2016557620 A JP 2016557620A JP 2016557620 A JP2016557620 A JP 2016557620A JP 6687530 B2 JP6687530 B2 JP 6687530B2
- Authority
- JP
- Japan
- Prior art keywords
- operating table
- markers
- manipulator assembly
- base
- manipulator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 78
- 239000003550 marker Substances 0.000 claims description 52
- 238000001356 surgical procedure Methods 0.000 claims description 25
- 230000004807 localization Effects 0.000 claims description 14
- 239000000758 substrate Substances 0.000 claims description 7
- 230000000712 assembly Effects 0.000 claims description 2
- 238000000429 assembly Methods 0.000 claims description 2
- 230000033001 locomotion Effects 0.000 description 44
- 238000010586 diagram Methods 0.000 description 18
- 230000007246 mechanism Effects 0.000 description 18
- 210000001503 joint Anatomy 0.000 description 15
- 210000003857 wrist joint Anatomy 0.000 description 13
- 230000003287 optical effect Effects 0.000 description 12
- 210000000323 shoulder joint Anatomy 0.000 description 9
- 230000008901 benefit Effects 0.000 description 8
- 230000008878 coupling Effects 0.000 description 6
- 238000010168 coupling process Methods 0.000 description 6
- 238000005859 coupling reaction Methods 0.000 description 6
- 230000005484 gravity Effects 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000013519 translation Methods 0.000 description 5
- 230000014616 translation Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000004397 blinking Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000002405 diagnostic procedure Methods 0.000 description 3
- 238000002324 minimally invasive surgery Methods 0.000 description 3
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000012636 effector Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 230000029058 respiratory gaseous exchange Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000002847 Surgical Wound Diseases 0.000 description 1
- 210000003815 abdominal wall Anatomy 0.000 description 1
- 239000006096 absorbing agent Substances 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 210000003484 anatomy Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000004049 embossing Methods 0.000 description 1
- 238000005530 etching Methods 0.000 description 1
- 238000002357 laparoscopic surgery Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012978 minimally invasive surgical procedure Methods 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 231100000435 percutaneous penetration Toxicity 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000004445 quantitative analysis Methods 0.000 description 1
- 238000002432 robotic surgery Methods 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000001954 sterilising effect Effects 0.000 description 1
- 238000004659 sterilization and disinfection Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/30—Surgical robots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/30—Surgical robots
- A61B34/35—Surgical robots for telesurgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/30—Surgical robots
- A61B34/37—Leader-follower robots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/70—Manipulators specially adapted for use in surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/90—Identification means for patients or instruments, e.g. tags
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/90—Identification means for patients or instruments, e.g. tags
- A61B90/94—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text
- A61B90/96—Identification means for patients or instruments, e.g. tags coded with symbols, e.g. text using barcodes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/90—Identification means for patients or instruments, e.g. tags
- A61B90/98—Identification means for patients or instruments, e.g. tags using electromagnetic means, e.g. transponders
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G13/00—Operating tables; Auxiliary appliances therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G13/00—Operating tables; Auxiliary appliances therefor
- A61G13/02—Adjustable operating tables; Controls therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G13/00—Operating tables; Auxiliary appliances therefor
- A61G13/02—Adjustable operating tables; Controls therefor
- A61G13/04—Adjustable operating tables; Controls therefor tiltable around transverse or longitudinal axis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G13/00—Operating tables; Auxiliary appliances therefor
- A61G13/10—Parts, details or accessories
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2051—Electromagnetic tracking systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2055—Optical tracking systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2055—Optical tracking systems
- A61B2034/2057—Details of tracking cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2068—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
- A61B2090/3937—Visible markers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
- A61B2090/3983—Reference marker arrangements for use with image guided surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2205/00—General identification or selection means
- A61G2205/10—Bar codes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G2205/00—General identification or selection means
- A61G2205/60—General identification or selection means using magnetic or electronic identifications, e.g. chips, RFID, electronic tags
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61G—TRANSPORT, PERSONAL CONVEYANCES, OR ACCOMMODATION SPECIALLY ADAPTED FOR PATIENTS OR DISABLED PERSONS; OPERATING TABLES OR CHAIRS; CHAIRS FOR DENTISTRY; FUNERAL DEVICES
- A61G7/00—Beds specially adapted for nursing; Devices for lifting patients or disabled persons
- A61G7/002—Beds specially adapted for nursing; Devices for lifting patients or disabled persons having adjustable mattress frame
- A61G7/018—Control or drive mechanisms
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Robotics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Pathology (AREA)
- Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Manipulator (AREA)
- Accommodation For Nursing Or Treatment Tables (AREA)
- Prostheses (AREA)
Description
・センサと対象物の前面との間の距離が5cm〜100cmの範囲である場合にセンサモジュールは姿勢推定を実行する。なお、センサモジュールは、対象物がセンサの視野の中心に又は中心から外れた箇所のいずれかであるときに動作するように構成してもよいことに留意すべきである。
ここで、Hは、マーカーの物理的な半分の高さであり、fは、画素の焦点距離である(f=(分解能/2)/tan(視野/2))。hとdとの間の関係が非線形であることは明らかである。(比較として、オーバーヘッドカメラが、画像解像度の直線状の関係と最大化利用(maximized utilization)を提供する。)深さ分解能は、hに対するdの導関数によって計算することができる。
・3D姿勢推定を行い、3D姿勢を2D姿勢に投影すること。
Claims (18)
- テーブルの姿勢を推定する方法であって、当該方法は、
前記テーブルに隣接するマニピュレータアセンブリに関連したカメラを用いて、前記テーブルのベース上の1つ又は複数のマーカーを読み取るステップであって、前記テーブルは、支持面と1つ又は複数の関節とを含み、前記支持面は、前記1つ又は複数の関節を使用して前記ベースに対して移動可能である、読み取るステップと、
前記1つ又は複数のマーカーの読み取りに基づいて、共通面上での前記マニピュレータアセンブリに対する前記テーブルの位置を特定するステップと、を含み、
前記共通面は、前記テーブル及び前記マニピュレータアセンブリが配置された接地面である、
方法。 - 前記1つ又は複数のマーカーは、前記テーブル上の固定位置に1つ又は複数のマーカーを含み、及び、
前記1つ又は複数のマーカーは、前記テーブルに貼り付けられ、前記テーブルに対して特定の向きで選択位置に形成される、又は、
前記1つ又は複数のマーカーは、前記テーブルにエッチング、彫刻、及び/又はエンボス加工をされる、請求項1に記載の方法。 - 前記テーブルの6自由度の3D姿勢を、前記共通面上で3自由度の2D姿勢に変換するステップをさらに含む、請求項1又は2に記載の方法。
- 前記共通面上での前記マニピュレータアセンブリに対する前記テーブルの前記ベースの位置特定に基づいて、前記マニピュレータアセンブリに対する前記テーブルの3D姿勢を推定するステップをさらに含む、請求項1又は2に記載の方法。
- 前記カメラを用いて取得した可視化画像内の前記テーブルの位置を抽出するステップ、及び前記カメラのカメラビューに対する前記テーブルの表現又は表示を提供するステップ、をさらに含む、請求項1又は2に記載の方法。
- 前記マーカーの読み取りに基づいて、前記テーブルの型式、モデル、又は製造元を特定するステップをさらに含む、請求項1又は2に記載の方法。
- 前記1つ又は複数のマーカーの初期読み取り及び該初期読み取りに基づいた位置特定の後に、前記1つ又は複数のマーカーのうちの少なくとも1つを読み取るステップと、
初期の位置特定を更新及び/又は検証するために、前記1つ又は複数のマーカーの後続の読み取りに基づいて、前記共通面上での前記マニピュレータアセンブリに対する前記テーブルの位置を特定するステップと、をさらに含む、請求項1又は2に記載の方法。 - 遠隔手術システムであって、当該システムは、
マニピュレータアセンブリと、
該マニピュレータアセンブリに近接して配置された手術台であって、該手術台は、前記手術台のベースに1つ又は複数の基準マーカーを有しており、前記手術台は、支持面と1つ又は複数の関節とを含み、前記支持面は、前記1つ又は複数の関節を使用して前記ベースに対して移動可能である、手術台と、
前記手術台を前記マニピュレータアセンブリに近接して位置付けしたときに、前記手術台のベース上の前記1つ又は複数の基準マーカーを読み取るように構成されるセンサと、
前記1つ又は複数の基準マーカーの読み取りに基づいて、共通面上での前記マニピュレータアセンブリに対する前記手術台の位置を特定するように構成されるプロセッサと、を備え、
前記共通面は、前記手術台及び前記マニピュレータアセンブリが配置された接地面である、
システム。 - 前記センサは、前記マニピュレータアセンブリのカメラを含む、請求項8に記載のシステム。
- 前記1つ又は複数の基準マーカーは、バーコード、RFIDタグ、ライト、又はこれらの任意の組合せを含む、又は、
前記1つ又は複数の基準マーカーは、前記手術台の選択部分に固定して取り付けられ及び/又は形成される、又は、
前記1つ又は複数の基準マーカーは、前記手術台に対して特定の向きに選択部分及び選択位置に固定して取り付けられ及び/又は形成される、又は、
前記1つ又は複数の基準マーカーは、前記手術台のベースの周りに及び/又は前記手術台の手術台上面の縁部又は側部に沿って延びる1つ又は複数の2Dバーコードを含む、請求項8に記載のシステム。 - 前記プロセッサは、
前記マニピュレータアセンブリに関連したカメラを用いて、前記手術台の前記ベース上の前記1つ又は複数の基準マーカーを読み取るようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - 前記手術台は、6つの自由度に沿って位置付け可能であり、前記プロセッサは、
前記手術台の6自由度の3D姿勢を、前記共通面上で3自由度の2D姿勢に変換する、ようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - 前記プロセッサは、
前記共通面上での前記マニピュレータアセンブリに対する前記手術台の前記ベースの位置特定に基づいて、前記マニピュレータアセンブリに対する前記手術台の3D姿勢を推定する、ようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - 前記プロセッサは、
前記センサを用いて取得した可視化画像内の前記手術台の位置を抽出し、
前記センサのカメラビューに対する前記手術台の表現又は表示を提供する、ようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - 前記プロセッサは、
前記基準マーカーの読み取りに基づいて、前記手術台の型式、モデル、又は製造元を特定する、ようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - 前記プロセッサは、
前記手術台と前記マニピュレータアセンブリとの間の互換性の態様をチェックする、及び/又は、前記マニピュレータアセンブリを前記手術台と一緒に使用するための使用許可を与える、ことを行うようにさらに構成される、請求項8乃至10のいずれか一項に記載のシステム。 - マニピュレータアセンブリと共に使用するための手術台あって、当該手術台は、
ベースと、
患者支持面を有する基板と、
該基板を支持する支持構造体であって、前記患者支持面を前記ベースに対して1つ又は複数の自由度に沿って位置付け可能にするように移動可能である支持構造体と、
前記ベース上に配置された1つ又は複数のマーカーであって、該1つ又は複数のマーカーは、前記1つ又は複数のマーカーを読み取ることにより、接地面上の前記マニピュレータアセンブリに対する前記手術台の姿勢を決定可能にするような選択位置及び/又は選択向きで前記手術台の前記ベース上に配置され、前記接地面には前記手術台及び前記マニピュレータアセンブリが配置される、1つ又は複数のマーカーと、を有する、
手術台。 - 前記複数の基準マーカーの選択された位置及び/又は向きは、前記複数の基準マーカーのうちの少なくとも1つの読み取りにより前記手術台の姿勢を決定可能にするように、予め決定される、請求項17に記載の手術台。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201461954559P | 2014-03-17 | 2014-03-17 | |
| US61/954,559 | 2014-03-17 | ||
| PCT/US2015/020898 WO2015142802A1 (en) | 2014-03-17 | 2015-03-17 | Methods and devices for table pose tracking using fiducial markers |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020066409A Division JP6993457B2 (ja) | 2014-03-17 | 2020-04-02 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2017512551A JP2017512551A (ja) | 2017-05-25 |
| JP2017512551A5 JP2017512551A5 (ja) | 2018-04-19 |
| JP6687530B2 true JP6687530B2 (ja) | 2020-04-22 |
Family
ID=54145198
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016557620A Active JP6687530B2 (ja) | 2014-03-17 | 2015-03-17 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
| JP2020066409A Active JP6993457B2 (ja) | 2014-03-17 | 2020-04-02 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
| JP2021199864A Active JP7639265B2 (ja) | 2014-03-17 | 2021-12-09 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020066409A Active JP6993457B2 (ja) | 2014-03-17 | 2020-04-02 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
| JP2021199864A Active JP7639265B2 (ja) | 2014-03-17 | 2021-12-09 | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 |
Country Status (6)
| Country | Link |
|---|---|
| US (3) | US10258414B2 (ja) |
| EP (3) | EP3119340B1 (ja) |
| JP (3) | JP6687530B2 (ja) |
| KR (2) | KR102495625B1 (ja) |
| CN (3) | CN116211466A (ja) |
| WO (1) | WO2015142802A1 (ja) |
Families Citing this family (50)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116211466A (zh) | 2014-03-17 | 2023-06-06 | 直观外科手术操作公司 | 用于利用基准标记的台姿态跟踪的方法和装置 |
| WO2016069655A1 (en) | 2014-10-27 | 2016-05-06 | Intuitive Surgical Operations, Inc. | System and method for registering to a surgical table |
| CN107072729B (zh) | 2014-10-27 | 2020-03-20 | 直观外科手术操作公司 | 用于集成的手术台运动的系统和方法 |
| CN111839731B (zh) | 2014-10-27 | 2024-09-10 | 直观外科手术操作公司 | 用于在反应运动期间监测控制点的系统和方法 |
| EP3212148B1 (en) | 2014-10-27 | 2025-07-09 | Intuitive Surgical Operations, Inc. | System for integrated surgical table icons |
| CN110584789B (zh) | 2014-10-27 | 2022-09-20 | 直观外科手术操作公司 | 用于器械干扰补偿的系统和方法 |
| CN107072725B (zh) | 2014-10-27 | 2019-10-01 | 直观外科手术操作公司 | 用于集成手术台的系统和方法 |
| EP4477178A3 (en) | 2014-10-27 | 2025-06-04 | Intuitive Surgical Operations, Inc. | Medical device with active brake release control |
| CN108348296B (zh) | 2015-11-12 | 2021-06-11 | 柯惠Lp公司 | 机器人外科手术系统和监测施加的力的方法 |
| US11844584B2 (en) * | 2015-11-23 | 2023-12-19 | Sina Robotics and Medical Innovators Co. Ltd | Robotic system for tele-surgery |
| GB201521814D0 (en) * | 2015-12-10 | 2016-01-27 | Cambridge Medical Robotics Ltd | Arm location |
| US10235771B2 (en) * | 2016-11-11 | 2019-03-19 | Qualcomm Incorporated | Methods and systems of performing object pose estimation |
| JP6599913B2 (ja) * | 2017-02-28 | 2019-10-30 | 株式会社メディカロイド | ロボット手術台用操作装置 |
| JP2020520745A (ja) * | 2017-05-25 | 2020-07-16 | コヴィディエン リミテッド パートナーシップ | 自動誘導付きロボット外科システム |
| CN107361849B (zh) | 2017-07-31 | 2023-11-21 | 成都博恩思医学机器人有限公司 | 用于操纵执行机构的控制台 |
| KR102583530B1 (ko) | 2017-11-16 | 2023-10-05 | 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 | 원격조작을 위한 마스터/슬레이브 정합 및 제어 |
| CN112315585B (zh) * | 2017-12-27 | 2022-04-08 | 上海微创医疗机器人(集团)股份有限公司 | 手术机器人终端 |
| CN111973280B (zh) * | 2017-12-27 | 2022-02-22 | 上海微创医疗机器人(集团)股份有限公司 | 手术机器人终端 |
| SG11202010258VA (en) | 2018-04-17 | 2020-11-27 | Chengdu Borns Medical Robotics Inc | Laparoscope-holding robot system for laparoscopic surgery |
| CN113272822B (zh) | 2018-11-14 | 2025-10-31 | 直观外科手术操作公司 | 用于有效的组织分割的卷积神经网络 |
| US20200205911A1 (en) * | 2019-01-01 | 2020-07-02 | Transenterix Surgical, Inc. | Determining Relative Robot Base Positions Using Computer Vision |
| DE102019201526A1 (de) * | 2019-02-06 | 2020-08-06 | Ford Global Technologies, Llc | Verfahren und System zum Erfassen und Messen der Position eines Bauteils gegenüber einer Referenzposition sowie der Verschiebung und der Verdrehung eines sich relativ zu einem Bezugssystem bewegenden Bauteils |
| CN110478050A (zh) * | 2019-08-23 | 2019-11-22 | 北京仁馨医疗科技有限公司 | 基于ct/mri数据的三维图像与内镜影像融合方法、装置及系统 |
| FR3100970B1 (fr) * | 2019-09-24 | 2021-08-27 | Collin | Dispositif robotisé d’intervention chirurgicale à bras articulé porteur d’un instrument |
| US12268459B2 (en) * | 2019-11-26 | 2025-04-08 | Intuitive Surgical Operations, Inc. | Physical medical element affixation systems, methods, and materials |
| CN110897717B (zh) * | 2019-12-09 | 2021-06-18 | 苏州微创畅行机器人有限公司 | 导航手术系统及其注册方法与电子设备 |
| US12343096B2 (en) | 2019-12-17 | 2025-07-01 | Chengdu Borns Medical Robotics Inc. | Surgical instrument and operation robot |
| JP7128326B2 (ja) * | 2020-02-21 | 2022-08-30 | 株式会社メディカロイド | 手術システム |
| US12171500B2 (en) | 2020-06-04 | 2024-12-24 | Baxter Medical Systems Gmbh & Co. Kg | Locating system for medical devices |
| US11969218B2 (en) | 2020-07-05 | 2024-04-30 | Asensus Surgical Us, Inc. | Augmented reality surgery set-up for robotic surgical procedures |
| US11980426B2 (en) | 2020-08-03 | 2024-05-14 | Warsaw Orthopedic, Inc. | System and method for preliminary registration |
| US11663735B2 (en) * | 2020-09-09 | 2023-05-30 | Canon Medical Systems Corporation | Optical markers for calibration/alignment of medical diagnostic devices |
| CN113967071B (zh) | 2020-10-23 | 2023-09-29 | 成都博恩思医学机器人有限公司 | 手术机器人机械臂跟随手术床运动的控制方法及装置 |
| CN112353613A (zh) * | 2020-11-30 | 2021-02-12 | 鲁朝康 | 一种医疗手术观察设备 |
| CN112957218B (zh) * | 2021-01-20 | 2024-03-22 | 诺创智能医疗科技(杭州)有限公司 | 手术床控制方法、手术床控制系统、电子装置和存储介质 |
| US11169832B1 (en) | 2021-05-17 | 2021-11-09 | Hong Kong Applied Science and Technology Research Institute Company Limited | Apparatus and method for augmented reality user manual |
| WO2022253286A1 (zh) * | 2021-06-02 | 2022-12-08 | 上海微创医疗机器人(集团)股份有限公司 | 术中不动点的调整方法、可读存储介质及手术机器人系统 |
| CN115429432B (zh) * | 2021-06-02 | 2025-09-30 | 上海微创医疗机器人(集团)股份有限公司 | 可读存储介质、手术机器人系统和调整系统 |
| CN113478491B (zh) * | 2021-09-07 | 2021-11-16 | 成都博恩思医学机器人有限公司 | 一种机械臂的摆位控制方法、系统、机器人及存储介质 |
| US12193772B2 (en) | 2021-09-13 | 2025-01-14 | Asensus Surgical Us, Inc. | Determining relative robot base positions using externally positioned imagers |
| CN113995510A (zh) * | 2021-11-16 | 2022-02-01 | 武汉联影智融医疗科技有限公司 | 手术导航推车、手术辅助机器人系统及避免头部碰撞的方法 |
| CN113952033B (zh) * | 2021-12-21 | 2022-04-19 | 广东欧谱曼迪科技有限公司 | 一种双源内窥手术导航系统及方法 |
| WO2023129562A1 (en) * | 2021-12-29 | 2023-07-06 | Noah Medical Corporation | Systems and methods for pose estimation of imaging system |
| CN114564050A (zh) * | 2022-03-03 | 2022-05-31 | 瑞龙诺赋(上海)医疗科技有限公司 | 手术平台定位系统、位姿信息确定方法以及装置 |
| EP4554630A1 (en) * | 2022-07-15 | 2025-05-21 | OMNImed I, Inc. | Tracking performance of medical procedures |
| CN120981208A (zh) * | 2023-02-19 | 2025-11-18 | 卡尔史托斯股份有限公司 | 在手术工作空间中提供增强的灵活性的机器人手术操纵器 |
| US12367647B2 (en) | 2023-04-19 | 2025-07-22 | Hong Kong Applied Science and Technology Research Institute Company Limited | Apparatus and method for aligning virtual objects in augmented reality viewing environment |
| CN117122482B (zh) * | 2023-10-25 | 2023-12-26 | 南通医疗器械有限公司 | 基于压力感应的手术台自适应调节方法及系统 |
| US12462469B2 (en) * | 2023-12-08 | 2025-11-04 | See All AI Inc. | Wire-based calibration apparatus for X-ray imaging systems |
| JP2025154559A (ja) * | 2024-03-29 | 2025-10-10 | 川崎重工業株式会社 | 手術支援システム、手術支援方法および情報提供方法 |
Family Cites Families (47)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR2548016B1 (fr) * | 1983-06-30 | 1985-11-29 | Alm | Installation a degres de liberte multiples telle que table d'operation chirurgicale |
| US5279309A (en) | 1991-06-13 | 1994-01-18 | International Business Machines Corporation | Signaling device and method for monitoring positions in a surgical operation |
| US5184601A (en) | 1991-08-05 | 1993-02-09 | Putman John M | Endoscope stabilizer |
| ATE238140T1 (de) | 1992-01-21 | 2003-05-15 | Stanford Res Inst Int | Chirurgisches system |
| US6406472B1 (en) | 1993-05-14 | 2002-06-18 | Sri International, Inc. | Remote center positioner |
| DE69417229T2 (de) | 1993-05-14 | 1999-07-08 | Sri International, Menlo Park, Calif. | Chirurgiegerät |
| US5855583A (en) | 1996-02-20 | 1999-01-05 | Computer Motion, Inc. | Method and apparatus for performing minimally invasive cardiac procedures |
| US6546277B1 (en) | 1998-04-21 | 2003-04-08 | Neutar L.L.C. | Instrument guidance system for spinal and other surgery |
| DE69940850D1 (de) | 1998-08-04 | 2009-06-18 | Intuitive Surgical Inc | Gelenkvorrichtung zur Positionierung eines Manipulators für Robotik-Chirurgie |
| US6788018B1 (en) | 1999-08-03 | 2004-09-07 | Intuitive Surgical, Inc. | Ceiling and floor mounted surgical robot set-up arms |
| US7594912B2 (en) | 2004-09-30 | 2009-09-29 | Intuitive Surgical, Inc. | Offset remote center manipulator for robotic surgery |
| US8004229B2 (en) * | 2005-05-19 | 2011-08-23 | Intuitive Surgical Operations, Inc. | Software center and highly configurable robotic systems for surgery and other uses |
| US6702805B1 (en) | 1999-11-12 | 2004-03-09 | Microdexterity Systems, Inc. | Manipulator |
| WO2002062199A2 (en) | 2001-01-16 | 2002-08-15 | Microdexterity Systems, Inc. | Surgical manipulator |
| US6609794B2 (en) * | 2001-06-05 | 2003-08-26 | Adaptive Optics Associates, Inc. | Method of treating the human eye with a wavefront sensor-based ophthalmic instrument |
| US7607440B2 (en) * | 2001-06-07 | 2009-10-27 | Intuitive Surgical, Inc. | Methods and apparatus for surgical planning |
| CA2561493A1 (en) | 2004-03-31 | 2005-10-20 | Smith & Nephew, Inc. | Methods and apparatuses for providing a reference array input device |
| US20050279368A1 (en) * | 2004-06-16 | 2005-12-22 | Mccombs Daniel L | Computer assisted surgery input/output systems and processes |
| US7979157B2 (en) * | 2004-07-23 | 2011-07-12 | Mcmaster University | Multi-purpose robotic operating system and method |
| US20070055090A1 (en) * | 2004-08-12 | 2007-03-08 | Navotek Medical Ltd. | Medical Treatment System and Method |
| US7763015B2 (en) | 2005-01-24 | 2010-07-27 | Intuitive Surgical Operations, Inc. | Modular manipulator support for robotic surgery |
| US9526587B2 (en) | 2008-12-31 | 2016-12-27 | Intuitive Surgical Operations, Inc. | Fiducial marker design and detection for locating surgical instrument in images |
| WO2006131373A2 (de) * | 2005-06-09 | 2006-12-14 | Ife Industrielle Forschung Und Entwicklung Gmbh | Vorrichtung zum berührungslosen ermitteln und vermessen einer raumposition und/oder einer raumorientierung von körpern |
| US10653497B2 (en) * | 2006-02-16 | 2020-05-19 | Globus Medical, Inc. | Surgical tool systems and methods |
| EP1857070A1 (de) * | 2006-05-18 | 2007-11-21 | BrainLAB AG | Kontaktfreie medizintechnische Registrierung mit Distanzmessung |
| US7831016B2 (en) * | 2007-03-01 | 2010-11-09 | Best Medical Canada | Radiation dosimetry apparatus and method, and dosimeter for use therein |
| DE102007013324A1 (de) * | 2007-03-20 | 2008-10-09 | Siemens Ag | Verfahren zur Erfassung wenigstens eines Bestandteils einer medizintechnischen Anlage sowie zugehörige medizintechnische Anlage |
| JP4316630B2 (ja) | 2007-03-29 | 2009-08-19 | 本田技研工業株式会社 | ロボット、ロボットの制御方法およびロボットの制御プログラム |
| DE102007021185B4 (de) * | 2007-05-05 | 2012-09-20 | Ziehm Imaging Gmbh | Röntgendiagnostikeinrichtung mit einer Vielzahl kodierter Marken und ein Verfahren zur Bestimmung der Lage von Einrichtungsteilen der Röntgendiagnostikeinrichtung |
| DE102007055204B4 (de) * | 2007-11-19 | 2010-04-08 | Deutsches Zentrum für Luft- und Raumfahrt e.V. | Roboter, medizinischer Arbeitsplatz und Verfahren zum Projizieren eines Bildes auf die Oberfläche eines Objekts |
| US8400094B2 (en) * | 2007-12-21 | 2013-03-19 | Intuitive Surgical Operations, Inc. | Robotic surgical system with patient support |
| US9386983B2 (en) * | 2008-09-23 | 2016-07-12 | Ethicon Endo-Surgery, Llc | Robotically-controlled motorized surgical instrument |
| US8483800B2 (en) * | 2008-11-29 | 2013-07-09 | General Electric Company | Surgical navigation enabled imaging table environment |
| BR112012007672A8 (pt) * | 2009-10-06 | 2017-10-10 | Koninklijke Philips Electronics Nv | Mesa para paciente que compreende um sistema de posicionamento, método de uso de mesa para paciente, disposição para a aquisição de uma imagem de raios-x, elementos de programa e mídia de leitura por computador |
| FR2954903B1 (fr) | 2010-01-05 | 2012-03-02 | Edap Tms France | Procede et appareil de localisation et de visualisation d'une cible par rapport a un point focal d'un systeme de traitement |
| DE102010010192A1 (de) * | 2010-03-04 | 2011-09-08 | Siemens Aktiengesellschaft | Medizinische Untersuchungs- und/oder Behandlungsvorrichtung |
| JP2011248723A (ja) * | 2010-05-28 | 2011-12-08 | Sony Corp | 画像処理装置および方法、並びにプログラム |
| KR101598773B1 (ko) * | 2010-10-21 | 2016-03-15 | (주)미래컴퍼니 | 수술용 로봇의 움직임 제어/보상 방법 및 장치 |
| US10426554B2 (en) | 2011-04-29 | 2019-10-01 | The Johns Hopkins University | System and method for tracking and navigation |
| WO2012155050A2 (en) * | 2011-05-12 | 2012-11-15 | The Johns Hopkins University | Electromagnetic tracking system and methods of using same |
| US20130218137A1 (en) * | 2011-12-30 | 2013-08-22 | Mako Surgical Corp. | Integrated surgery system |
| WO2013192598A1 (en) * | 2012-06-21 | 2013-12-27 | Excelsius Surgical, L.L.C. | Surgical robot platform |
| CN110279427B (zh) | 2012-12-10 | 2024-01-16 | 直观外科手术操作公司 | 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免 |
| CN103464383A (zh) * | 2013-09-27 | 2013-12-25 | 沈阳工业大学 | 工业机器人分拣系统及方法 |
| CN116211466A (zh) | 2014-03-17 | 2023-06-06 | 直观外科手术操作公司 | 用于利用基准标记的台姿态跟踪的方法和装置 |
| US9968502B2 (en) * | 2015-06-30 | 2018-05-15 | Allen Medical Systems, Inc. | System and process of locating a medical imaging device |
| US11844732B2 (en) * | 2021-07-30 | 2023-12-19 | Corindus, Inc. | Support for securing a robotic system to a patient table |
-
2015
- 2015-03-17 CN CN202310401867.7A patent/CN116211466A/zh active Pending
- 2015-03-17 EP EP15765777.6A patent/EP3119340B1/en active Active
- 2015-03-17 WO PCT/US2015/020898 patent/WO2015142802A1/en not_active Ceased
- 2015-03-17 KR KR1020227010396A patent/KR102495625B1/ko active Active
- 2015-03-17 CN CN201580014410.4A patent/CN106102647B/zh active Active
- 2015-03-17 US US15/126,254 patent/US10258414B2/en active Active
- 2015-03-17 EP EP23181511.9A patent/EP4233775A3/en active Pending
- 2015-03-17 JP JP2016557620A patent/JP6687530B2/ja active Active
- 2015-03-17 EP EP19201192.2A patent/EP3610820B1/en active Active
- 2015-03-17 CN CN201910417384.XA patent/CN110236675B/zh active Active
- 2015-03-17 KR KR1020167025776A patent/KR102382248B1/ko active Active
-
2019
- 2019-03-04 US US16/292,213 patent/US11007017B2/en active Active
-
2020
- 2020-04-02 JP JP2020066409A patent/JP6993457B2/ja active Active
-
2021
- 2021-05-04 US US17/307,514 patent/US20210251701A1/en active Pending
- 2021-12-09 JP JP2021199864A patent/JP7639265B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN106102647A (zh) | 2016-11-09 |
| EP3119340A4 (en) | 2017-08-23 |
| JP6993457B2 (ja) | 2022-01-13 |
| EP3119340B1 (en) | 2019-11-13 |
| EP4233775A3 (en) | 2023-10-18 |
| US20170079722A1 (en) | 2017-03-23 |
| KR20160132860A (ko) | 2016-11-21 |
| KR20220047658A (ko) | 2022-04-18 |
| KR102495625B1 (ko) | 2023-02-06 |
| US20210251701A1 (en) | 2021-08-19 |
| EP3610820B1 (en) | 2023-08-02 |
| CN110236675A (zh) | 2019-09-17 |
| US11007017B2 (en) | 2021-05-18 |
| KR102382248B1 (ko) | 2022-04-05 |
| US20190192233A1 (en) | 2019-06-27 |
| JP2017512551A (ja) | 2017-05-25 |
| JP7639265B2 (ja) | 2025-03-05 |
| CN110236675B (zh) | 2023-05-02 |
| EP3119340A1 (en) | 2017-01-25 |
| EP4233775A2 (en) | 2023-08-30 |
| EP3610820A1 (en) | 2020-02-19 |
| JP2020163153A (ja) | 2020-10-08 |
| US10258414B2 (en) | 2019-04-16 |
| WO2015142802A1 (en) | 2015-09-24 |
| JP2022031894A (ja) | 2022-02-22 |
| CN116211466A (zh) | 2023-06-06 |
| CN106102647B (zh) | 2019-06-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7639265B2 (ja) | 基準マーカーを用いたテーブル姿勢追跡のための方法及び装置 | |
| US20250275821A1 (en) | Methods and devices for tele-surgical table registration | |
| KR102397402B1 (ko) | 툴 포즈를 유지하는 시스템 및 방법 | |
| CN112568996A (zh) | 外科手术系统 | |
| US20200205911A1 (en) | Determining Relative Robot Base Positions Using Computer Vision | |
| US20250049515A1 (en) | Surgical robot system and control method | |
| US20250134606A1 (en) | Robotic surgery system with user interfacing | |
| CN120787141A (zh) | 计算机辅助系统的部署设置的自动确定 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180306 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180306 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181218 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181214 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190307 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190716 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191016 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200310 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200402 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6687530 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |