WO2019187025A1 - 応力推定システム、応力推定装置及び内視鏡システム - Google Patents
応力推定システム、応力推定装置及び内視鏡システム Download PDFInfo
- Publication number
- WO2019187025A1 WO2019187025A1 PCT/JP2018/013671 JP2018013671W WO2019187025A1 WO 2019187025 A1 WO2019187025 A1 WO 2019187025A1 JP 2018013671 W JP2018013671 W JP 2018013671W WO 2019187025 A1 WO2019187025 A1 WO 2019187025A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- subject
- force
- stress
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
- XDTMQSROBMDMFD-UHFFFAOYSA-N C1CCCCC1 Chemical compound C1CCCCC1 XDTMQSROBMDMFD-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00006—Operational features of endoscopes characterised by electronic signal processing of control signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00097—Sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/0051—Flexible endoscopes with controlled bending of insertion part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/005—Flexible endoscopes
- A61B1/009—Flexible endoscopes with bending or curvature detection of the insertion part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; Determining position of diagnostic devices within or on the body of the patient
- A61B5/065—Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/16—Measuring arrangements characterised by the use of optical techniques for measuring the deformation in a solid, e.g. optical strain gauge
- G01B11/18—Measuring arrangements characterised by the use of optical techniques for measuring the deformation in a solid, e.g. optical strain gauge using photoelastic elements
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B7/00—Measuring arrangements characterised by the use of electric or magnetic techniques
- G01B7/003—Measuring arrangements characterised by the use of electric or magnetic techniques for measuring position, not involving coordinate determination
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D5/00—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable
- G01D5/12—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable using electric or magnetic means
- G01D5/14—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable using electric or magnetic means influencing the magnitude of a current or voltage
- G01D5/20—Mechanical means for transferring the output of a sensing member; Means for converting the output of a sensing member to another variable where the form or nature of the sensing member does not constrain the means for converting; Transducers not specially adapted for a specific variable using electric or magnetic means influencing the magnitude of a current or voltage by varying inductance, e.g. by a movable armature
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01L—MEASURING FORCE, STRESS, TORQUE, WORK, MECHANICAL POWER, MECHANICAL EFFICIENCY, OR FLUID PRESSURE
- G01L1/00—Measuring force or stress, in general
- G01L1/24—Measuring force or stress, in general by measuring variations of optical properties of material when it is stressed, e.g. by photoelastic stress analysis using infrared, visible light, ultraviolet
- G01L1/242—Measuring force or stress, in general by measuring variations of optical properties of material when it is stressed, e.g. by photoelastic stress analysis using infrared, visible light, ultraviolet the material being an optical fibre
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N3/00—Investigating strength properties of solid materials by application of mechanical stress
- G01N3/08—Investigating strength properties of solid materials by application of mechanical stress by applying steady tensile or compressive forces
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2051—Electromagnetic tracking systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2061—Tracking techniques using shape-sensors, e.g. fiber shape sensors with Bragg gratings
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
- A61B2090/064—Measuring instruments not otherwise provided for for measuring force, pressure or mechanical tension
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/06—Measuring instruments not otherwise provided for
- A61B2090/064—Measuring instruments not otherwise provided for for measuring force, pressure or mechanical tension
- A61B2090/065—Measuring instruments not otherwise provided for for measuring force, pressure or mechanical tension for measuring contact or contact pressure
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01L—MEASURING FORCE, STRESS, TORQUE, WORK, MECHANICAL POWER, MECHANICAL EFFICIENCY, OR FLUID PRESSURE
- G01L5/00—Apparatus for, or methods of, measuring force, work, mechanical power, or torque, specially adapted for specific purposes
- G01L5/16—Apparatus for, or methods of, measuring force, work, mechanical power, or torque, specially adapted for specific purposes for measuring several components of force
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
- G02B23/2476—Non-optical details, e.g. housings, mountings, supports
Definitions
- the present invention relates to a stress estimation system, a stress estimation device, and an endoscope system.
- the flexible member When a flexible member such as an endoscope insertion portion or a medical or industrial thin manipulator arm is inserted into a subject, the flexible member may contact the subject and press the subject. is there. In order to estimate the influence of the pressure on the subject, it is known to calculate information on the external force applied to the flexible member.
- Japanese National Publication No. 2009-522016 discloses that a strain gauge is provided in the insertion portion, and the force received from the subject when the insertion portion contacts the surface of the subject is measured by the strain gauge.
- Japanese Patent Application Laid-Open No. 6-154153 discloses a detection device that detects the amount of force received from an organ in a body cavity by a pressure-sensitive sensor provided at the distal end of an insertion portion of an endoscope.
- Japanese Patent Laid-Open No. 2013-094337 discloses that a plurality of bending sensors are provided in an insertion portion, and operation support information including external force information relating to external force applied to the insertion portion is calculated by a combination calculation of detection information of these bending sensors. Is disclosed.
- the stress generated on the subject when a force from the flexible member is applied is estimated. It is desirable. In the above-mentioned document, it is possible to calculate the force applied to the flexible member, but it is not possible to obtain the stress generated in the subject. Therefore, the burden on the subject cannot be accurately evaluated.
- an object of the present invention is to provide a stress estimation system, a stress estimation device, and an endoscope system that can accurately and easily estimate stress generated in a subject.
- One embodiment of the present invention has flexibility, a flexible member that is inserted into the subject and applies a force to the inner surface of the subject, and force information about the force applied to the flexible member.
- a subject for acquiring subject information including a force information acquisition unit to be acquired, a length of an outer periphery of a predetermined stress estimation region in the subject that is a target region for estimating stress, and a thickness of the subject in the stress estimation region; Based on the specimen information acquisition unit and the force information, the magnitude and direction of the force applied to the subject in the stress estimation area are calculated, and the calculated magnitude and direction of the force and the outer circumference of the stress estimation area And a stress estimation unit that calculates stress information on the outer periphery of the stress estimation region based on the length of the subject and the thickness of the subject.
- One embodiment of the present invention is such an endoscope system.
- One embodiment of the present invention includes a force information acquisition unit that acquires force information related to a force applied to a flexible member that applies a force to the inner surface of the subject, and a predetermined stress in the subject that is a target region for estimating stress.
- a subject information acquisition unit that acquires subject information including an outer circumference length of the estimation region and a thickness of the subject in the stress estimation region; and based on the force information, the subject information is added to the subject in the stress estimation region The magnitude and direction of the force is calculated, and information on the stress at the outer periphery of the stress estimation area is calculated based on the calculated magnitude and direction of the force, the outer circumference length of the stress estimation area, and the thickness of the subject.
- a stress estimation unit that acquires force information related to a force applied to a flexible member that applies a force to the inner surface of the subject, and a predetermined stress in the subject that is a target region for estimating stress.
- a stress estimation system it is possible to provide a stress estimation system, a stress estimation device, and an endoscope system that can accurately and easily estimate stress generated in a subject.
- FIG. 1 is a diagram schematically illustrating an example of a main configuration of the haptic evaluation system according to the first embodiment.
- FIG. 2 is a diagram illustrating an example of the configuration of the endoscope system.
- FIG. 3 is a diagram illustrating an example of the operation direction of the insertion portion of the endoscope.
- FIG. 4 is a diagram illustrating an example of the position sensor incorporated in the insertion portion.
- FIG. 5 is a diagram illustrating an example of a position sensor and a shape sensor incorporated in the insertion portion.
- FIG. 6 is a diagram illustrating an example of the configuration of a magnetic position sensor.
- FIG. 7 is a diagram for explaining the concept of segmentation of the insertion portion.
- FIG. 8 is a diagram illustrating an example of the curved shape of one segment.
- FIG. 9 is a diagram showing a pressing force F applied from the subject to the insertion portion and a vector d i from the center of the segment SG i to the position where the pressing force F is applied.
- FIG. 10 is a diagram illustrating an example of a state where the insertion unit pushes up the intestine and an organ.
- FIG. 11 is a diagram illustrating an example of a force generated in the subject when the insertion unit pushes the intestinal tract.
- FIG. 12A is a diagram illustrating an example of a force that works in a contact state in which the insertion unit presses the intestinal tract.
- FIG. 10 is a diagram illustrating an example of a state where the insertion unit pushes up the intestine and an organ.
- FIG. 11 is a diagram illustrating an example of a force generated in the subject when the insertion unit pushes the intestinal tract.
- FIG. 12A is a diagram illustrating an example of a force that works in a contact state in which the insertion unit presse
- FIG. 12B is a diagram illustrating an example of a cross section of the contact state in which the insertion unit is pushing the intestinal tract as viewed from above the distal end of the insertion unit.
- FIG. 12C is a diagram illustrating an example of a cross section of the contact state in which the insertion unit is pressing the intestinal tract as viewed from the axial direction of the insertion unit.
- FIG. 13A is a cross-sectional view showing an example of a region where stress is concentrated in the intestinal tract.
- FIG. 13B is a diagram corresponding to FIG. 13A showing an example of a stress distribution in a region where stress is concentrated in the intestinal tract.
- FIG. 14A is a diagram illustrating an example of a force for pulling the intestinal tract fixing portion.
- FIG. 14B is a diagram illustrating an example of a distribution of stress acting on a portion in front of the intestinal tract fixing portion in the vicinity of the anus.
- FIG. 14C is a diagram illustrating an example of a distribution of stress acting on a portion in front of the intestinal tract fixing portion in the vicinity of the anus.
- FIG. 15 is a diagram for explaining the force applied to the S-shaped curved portion by the distal end of the insertion portion.
- FIG. 16 is a diagram for explaining the force applied to the S-shaped curved portion by the distal end of the insertion portion.
- FIG. 17 is a diagram for explaining the force applied to the S-shaped curved portion by the intermediate portion of the insertion portion.
- FIG. 18A is a diagram for explaining the force applied to the S-shaped curved portion by the intermediate portion of the insertion portion.
- FIG. 18B is a diagram showing an example of a cross section of the intestinal tract.
- FIG. 19 is a diagram illustrating an example of a state in which the distal end of the insertion portion is in contact with the intestinal tract as viewed from above the endoscope.
- FIG. 20 is a diagram illustrating an example of a state in which the intermediate portion of the insertion portion is in contact with the intestinal tract from above the endoscope.
- FIG. 21 is a diagram schematically illustrating another example of the main configuration of the haptic evaluation system according to the first embodiment.
- FIG. 22 is a diagram illustrating an example of processing by the haptic evaluation system according to the first embodiment.
- FIG. 22 is a diagram illustrating an example of processing by the haptic evaluation system according to the first embodiment.
- FIG. 23 is a diagram schematically illustrating an example of a main configuration of a haptic evaluation system according to a modified example of the first embodiment.
- FIG. 24 is a diagram schematically illustrating another example of the main configuration of the force sensation evaluation system according to the modification of the first embodiment.
- FIG. 25 is a diagram schematically illustrating an example of a configuration of a work system in the force sense evaluation system according to the second embodiment.
- FIG. 26 is a diagram schematically illustrating an example of a main configuration of a haptic evaluation system according to the second embodiment.
- FIG. 27 is a diagram schematically illustrating another example of the main configuration of the haptic evaluation system according to the second embodiment.
- FIG. 28 is a diagram illustrating an example of processing by the haptic evaluation system according to the second embodiment.
- the haptic evaluation system is generally applied to an insertion device including a flexible member, for example, a medical endoscope.
- the haptic evaluation system can be applied to catheters, medical manipulators, etc. in addition to medical endoscopes such as upper gastrointestinal endoscopy, colonoscope, ultrasonic endoscope, cystoscope, and nephroscope is there.
- the flexible member When an operator inserts a flexible member into a subject and performs operations such as observation, diagnosis, treatment, and treatment, the flexible member comes into contact with the subject and applies force to the subject, for example, a tube A force or stress is generated in the sky.
- the stress is a force applied per unit area.
- various forces or stresses are generated in the subject according to the internal structure and the like.
- the haptic evaluation system estimates such force or stress generated in the subject.
- the resultant force of the force generated on the subject is balanced with the force applied to the subject from the flexible member. That is, the resultant force is a reaction force of the force applied to the subject.
- FIG. 1 is a diagram schematically illustrating an example of a main configuration of a haptic evaluation system 1 according to the first embodiment, that is, a stress estimation system.
- the haptic evaluation system 1 is a stress estimation system that can estimate the stress generated in the subject 200 by the flexible member 12 that is inserted into the subject 200 and applies a force to the inner surface of the subject 200.
- the haptic evaluation system 1 according to the first embodiment assumes that the flexible member 12 is inserted into the tube of the subject 200 and that operations such as diagnosis and treatment are performed.
- the force sensation evaluation system 1 calculates shape and arrangement information including shape information of the flexible member 12 that operates with respect to the subject 200 and arrangement information with respect to the subject 200.
- the operation on the subject 200 includes, for example, insertion into the subject 200, surface scanning, observation, repair, diagnosis, treatment, and the like.
- the haptic evaluation system 1 calculates first haptic information relating to the force applied to the flexible member 12, that is, force information, based on the shape and arrangement information.
- the haptic evaluation system 1 calculates second haptic information related to the force or stress generated in the subject 200 based on the shape and arrangement information, the first haptic information, and the subject information related to the subject 200.
- the haptic information is information including at least one of the position, direction, and magnitude of the force.
- the second haptic information is information relating to the force occurring in or on the subject 200, that is, the force or stress generated in or on the subject 200.
- the force sensation evaluation system 1 acquires, as a stress estimation system, force information related to the force applied to the flexible member 12 and estimates a predetermined stress in the subject 200 that is a target region for estimating the stress.
- Subject information including the outer circumference length of the region and the thickness of the subject 200 in the stress estimation region is acquired, and the magnitude and direction of the force applied to the subject 200 in the stress estimation region are calculated based on the force information. Then, based on the calculated magnitude and direction of the force, the length of the outer periphery of the stress estimation region, and the thickness of the subject 200, information on the stress on the outer periphery of the stress estimation region is calculated.
- the endoscope system 2 includes an endoscope 10.
- the endoscope 10 has an insertion portion 14 as a flexible member 12.
- the insertion unit 14 is inserted into the tube of the subject 200.
- the subject 200 mainly assumes a patient or a patient organ to be diagnosed or treated.
- the subject 200 may be a simulation patient model or organ model instead of the patient or organ.
- the subject 200 may be an animal such as a mammal, a reptile, or a bird.
- the subject 200 may be a device, a work, or the like having a hollow or space inside without being specialized in medical treatment.
- the lumen of the subject 200 that is the target of the force sense evaluation system 1 according to the present embodiment is mainly the digestive organ, bronchus, urinary organ, and the like.
- an organ opened by surgery or the like may be used.
- the large intestine is taken as an example of the tube empty of the subject 200.
- the large intestine is an organ whose shape, arrangement, and the like vary depending on the person, and whose shape can change particularly with the passage of time, the insertion of equipment, and the like.
- the large intestine has a movable intestine and a fixed intestine, and the rectum, descending and ascending colons are freely movable, the sigmoid colon, the transverse colon, and the cecum are fixed intestines.
- the endoscope system 2 includes an endoscope 10, an image processing device 18, that is, a video processor, a display device 20, a light source device 22, a light emission detection device 24, and an endoscope control device 26. ing.
- the endoscope 10 has the insertion portion 14 as the flexible member 12.
- the endoscope 10 images an observation target with an imaging element (not shown) built in the insertion unit 14.
- the observation object may be an affected area, a lesion area, or the like in the subject 200.
- the image processing device 18 performs image processing on an electrical signal obtained by converting light from the observation target with the imaging element of the endoscope 10.
- the display device 20 displays the observation image that has been subjected to image processing by the image processing device 18.
- the light source device 22 emits illumination light and supplies the illumination light to a light guide (not shown) of the endoscope 10.
- the light emission detection device 24 emits light for detection by a sensor 46 (to be described later), which is a fiber sensor here, which is different from the illumination light, and detects light that has passed through the sensor 46.
- the endoscope control device 26 controls the operation of the entire endoscope system 2. These devices 18, 20, 22, 24, 26 may be mounted on a rack 76.
- the endoscope 10 has an elongated tubular insertion portion 14 as the flexible member 12 and an operation portion 16 connected to the proximal end portion of the insertion portion 14.
- the insertion portion 14 includes a distal end hard portion 30, a bending portion 32, and a flexible tube portion 34 in order from the distal end to the proximal end of the insertion portion 14.
- the proximal end portion of the distal end hard portion 30 is connected to the distal end portion of the bending portion 32.
- the proximal end portion of the bending portion 32 is connected to the proximal end portion of the flexible tube portion 34.
- the distal hard portion 30 is the distal end portion of the insertion portion 14 and the distal end portion of the endoscope 10.
- the distal end hard portion 30 is hard, and includes an image pickup device, an illumination optical system, an observation optical system, and the like. Illumination light from the illuminating device 22 is applied to the observation object from the illumination optical system on the distal end surface of the distal end hard portion 30 via the light guide.
- the bending portion 32 is configured by connecting a node ring (not shown) along the longitudinal axis direction of the insertion portion 14.
- the bending unit 32 bends in a desired direction in accordance with an operation input to the bending operation unit 36 provided in the operation unit 16. For example, when a worker such as a doctor who is an operator operates the operation unit 16, the bending portion 32 is bent, and the position and orientation of the distal end hard portion 30 are changed. Thereby, the endoscope 10 captures the observation object in the observation visual field.
- the flexible tube portion 34 has a desired flexibility and is bent by an external force.
- the flexible tube portion 34 is a tubular member extending from the main body portion 38 of the operation portion 16.
- the operator inserts the insertion portion 14 into the empties of the patient's digestive organs, bronchi, urinary organs, and the like while bending the bending portion 32 or twisting the flexible tube portion 34. It is possible to continue.
- the insertion part 14 contains the front-end
- flexible member 12 is generally used to refer to the insertion portion 14.
- FIG. 3 is a diagram schematically showing an insertion / extraction direction, a bending direction, and a rotation direction as the operation direction of the insertion portion 14.
- the operation direction of the insertion portion 14 the insertion / removal direction of the insertion portion 14 inserted into the tube as shown by the bidirectional arrow A1 in FIG. 3 and the insertion portion 14 as shown by the bidirectional arrow A2 are shown.
- the operation part 16 has a main body part 38 from which the flexible tube part 34 extends and a grip part 40 connected to the base end part of the main body part 38.
- the grip portion 40 is gripped by an operator who operates the endoscope 10.
- a bending operation unit 36 is disposed on the grip unit 40.
- a universal cord 42 extends from the operation unit 16.
- the universal cord 42 includes an imaging electric cable, a light guide and the like extending from the insertion portion 14.
- the endoscope 10 is connected to various devices such as an image processing device 18, a light source device 22, a light emission detection device 24, an endoscope control device 26, and a control device 100 via a universal cord 42.
- the haptic evaluation system 1 includes a sensor 46.
- the sensor 46 in this embodiment is at least one of the position sensor 48 and the shape sensor 50.
- the position sensor 48 is a sensor that detects the position of the insertion portion 14.
- the shape sensor 50 is a sensor that detects the shape of the insertion portion 14.
- FIG. 2 shows a shape sensor 50 arranged as the sensor 46 along the longitudinal direction of the insertion portion 14.
- FIG. 4 shows a plurality of position sensors 48 arranged as being separated from each other along the longitudinal direction of the insertion portion 14 as the sensor 46.
- FIG. 5 shows a sensor 46 including a shape sensor 50 and a plurality of position sensors 48.
- the sensor 46 constitutes a shape and arrangement information detection unit 52 together with a shape and arrangement information calculation unit 102 described later of the control device 100.
- the position sensor 48 shown in FIGS. 4 and 5 is, for example, a magnetic type.
- a magnetic coil 54 is provided in the insertion portion 14.
- a magnetic antenna 70 serving as a receiver is fixedly installed in the room.
- the magnetic coil 54 receives a current as a magnetic field generation signal output from a signal generation unit (not shown) and generates a magnetic field.
- the magnetic antenna 70 detects the generated magnetic field.
- the shape and arrangement information calculation unit 102 calculates the position of the insertion unit 14 where the magnetic coil 54 is arranged. If the magnetic antenna 70 is attached to the subject 200, the relative position of the insertion portion 14 with respect to the subject 200 can be detected.
- the magnetic antenna 70 may be used as a transmitting antenna, and a receiving coil may be provided in the insertion unit 14 so that transmission and reception are reversed.
- the shape and arrangement information detection unit 52 including the magnetic position sensor 48 can also detect the orientation. By arranging a plurality of magnetic coils 54 at the same position in the longitudinal direction of the insertion section 14 and at different positions in the circumferential direction, the shape and arrangement information detection section 52 can detect not only the position but also the arrangement and orientation of the insertion section 14. It becomes.
- the position sensor 48 is not limited to a magnetic type, and may be an ultrasonic type, an optical type, a type using an acceleration sensor, or the like.
- the shape and arrangement information detection unit 52 including the position sensor 48 may be any unit that can detect the position or relative position of the insertion unit 14 with respect to the subject 200 or a place such as a room where the subject 200 is placed.
- a position sensor for detecting the relative position of the insertion portion 14 with respect to the subject 200 an insertion portion sensor for detecting the insertion amount and the rotation amount of the insertion portion 14 may be used.
- the relative position of the insertion portion 14 with respect to the subject 200 can be detected by combining the insertion portion sensor disposed at the entrance of the subject 200 and the position sensor 48.
- the position sensors 48 are arranged apart from each other along the longitudinal direction of the insertion unit 14.
- the shape of the insertion portion 14 can be detected by interpolating between the detection positions.
- the shape sensor 50 shown in FIGS. 2 and 5 is, for example, a fiber sensor configured to detect a bending shape from the curvature of a specific portion using an optical fiber.
- the fiber sensor is suitable for the shape sensor 50 because it has a small diameter and can be easily incorporated into the insertion portion 14 and is not easily influenced by other configurations.
- the shape sensor 50 which is a fiber sensor, includes, for example, an optical fiber disposed along the longitudinal direction of the insertion portion 14.
- the optical fiber is provided with a plurality of detected portions that are arranged apart from each other along the longitudinal direction. In the fiber sensor, detection light is supplied from the above-described light emission detection device 24 to the optical fiber.
- the shape and arrangement information calculation part 102 calculates the shape of the insertion part 14. Note that the shape and arrangement information calculation unit 102 may be included in the light emission detection device 24.
- the shape sensor 50 is not limited to a fiber sensor, and may be any sensor as long as it satisfies functions, sizes, and the like.
- the shape of the insertion unit 14 may be calculated from one or more camera images.
- the shape and arrangement information detection unit 52 including the sensor 46 and the shape and arrangement information calculation unit 102 has specifications such as performance and size sufficient in terms of function, a specific detection method, There are no particular restrictions on the method of incorporation.
- the control device 100 includes a shape and arrangement information calculation unit 102, a first haptic information calculation unit 104, a second haptic information calculation unit 108, a subject information estimation unit 110, and a contact state estimation unit. 112, an object influence determination unit 114, and an information output unit 116.
- Each of these units is configured by a processor including one or a plurality of integrated circuits such as a CPU.
- a software program for causing the processor to function as each unit may be prepared in a memory (not shown), and the processor may execute the program so that the function as each unit is performed.
- the control device 100 also includes a mechanical property storage unit 106 and an output information storage unit 118.
- Each of the storage units 106 and 118 is a storage such as a nonvolatile semiconductor memory.
- control device 100 The above-described units of the control device 100 are accommodated, for example, in one housing 80 shown in FIG.
- the control device 100 may be mounted on the rack 76 in the same manner as the other devices 18, 20, 22, 24, 26.
- the above-described units of the control device 100 may be included in a control device different from the control device 100.
- each unit described above may be included in the image processing device 18 or the endoscope control device 26.
- each of the above-described units may be included in a control device different from the image processing device 18 and the endoscope control device 26. That is, a hardware circuit such as a processor or FPGA that functions as each of the above-described units of the control device 100 may be included in one housing as long as the function as each unit can be implemented. May be included.
- the above-described units may be arranged in the insertion unit 14 or may be in a remote place connected by communication.
- each of the storage units 106 and 118 may be one or a plurality of storage units, or may be an external storage device separate from the control device 100 and connected by communication.
- the shape and arrangement information calculation unit 102 calculates the shape and arrangement information including the shape information of the insertion unit 14 and the arrangement information with respect to the subject 200 based on the detection result by the sensor 46.
- the shape and arrangement information calculation unit 102 performs processing for processing the obtained information into a desired format. It is desirable that the shape information includes a curvature, and the arrangement information is based on the coordinates of the inertial coordinate system.
- any expression method may be used as long as haptic information regarding the force or stress generated in the subject 200 can be finally obtained.
- the shape and arrangement information calculation unit 102 Even if the shape and arrangement information calculation unit 102 does not directly obtain the shape and arrangement information of the entire insertion unit 14 from the information obtained from the sensor 46, the shape and arrangement information calculation unit 102 inserts the position information or shape information detected by the sensor 46 Information necessary for calculation of force information related to force or stress generated in the subject 200 is appropriately calculated by interpolating the position or shape of 14. Specifically, the shape and arrangement information calculation unit 102 virtually segments the insertion unit 14 for use in the calculation of first force information and second force information described later, Find the position, orientation, amount of curvature, etc. for each segment.
- the shape and arrangement information calculated by the shape and arrangement information calculation unit 102 is output to the first haptic information calculation unit 104 and the second haptic information calculation unit 108.
- the mechanical property storage unit 106 stores mechanical property information representing the mechanical properties of the insertion unit 14.
- the mechanical property storage unit 106 stores, for example, a value related to the mechanical property of each segment obtained by segmenting the insertion unit 14.
- the mechanical property storage unit 106 stores mechanical property information representing mechanical properties at a plurality of positions in the longitudinal direction of the flexible member 12.
- the mechanical characteristic is an index indicating the mechanical characteristic of each segment of the insertion portion 14.
- Mechanical properties include, for example, the Young's modulus of each segment, the mass, the amount of torsional moment required to produce a certain amount of torsion, the amount of compressive / tensile force required for constant expansion and contraction, and bending stiffness.
- the bending rigidity is an index indicating the difficulty of bending each segment of the insertion portion 14.
- the mechanical characteristic may be replaced with another quantitative expression as long as the first haptic information can be obtained by performing the processing described later.
- a mechanical property value of the entire insertion portion 14 may be represented by a single value, or a value smaller than the number of segments may be used. Further, the mechanical property value may be an array of values or a function according to the distance from the distal end or the proximal end of the insertion portion 14 instead of the value for each segment. Further, the mechanical property value may be stored as a constant in the first haptic information calculation unit 104, for example, as a part of the program, or together with the first haptic information calculation unit 104.
- the mechanical property value can be set for each individual of the insertion section 14, the detection accuracy of the force sense can be improved.
- the latest value corresponding to a change with time of the insertion unit 14 or the like can be used in the first haptic information calculation unit 104.
- the first haptic information calculation unit 104 acquires the shape and arrangement information of the insertion unit 14 from the shape and arrangement information calculation unit 102.
- the first haptic information calculation unit 104 acquires the mechanical characteristic information of the insertion unit 14 from the mechanical characteristic storage unit 106.
- the first haptic information calculation unit 104 is a first force that is haptic information about a force applied to one or more positions in the longitudinal direction of the insertion unit 14 based on the shape and arrangement information and the mechanical characteristic information. Sense information is calculated.
- the information used for calculating the first haptic information is not limited to the shape and arrangement information of the insertion unit 14 acquired from the shape and arrangement information calculation unit 102 as the shape and arrangement information of the insertion unit 14.
- the first haptic information calculation unit 104 may calculate the first haptic information using another sensor or a calculation unit that can acquire the force applied to the insertion unit 14.
- the force information is force information including at least one of the position where the force is applied, the direction of the force, and the magnitude as described above.
- Known positions, orientations, and sizes may be excluded from the first haptic information calculated here. Also, unnecessary information, for example, information that is not presented to the operators may be excluded.
- the calculation of the first haptic information is performed based on, for example, a dynamic principle.
- An example of the calculation of the first haptic information is shown below.
- Detection Principle 1 In each segment, “the first internal force Fs estimated from the deformation state” and “the second internal force Ff estimated from the force applied from the outside” are substantially equal.
- Detection Principle 2 In each segment, “first bending moment Mb estimated from shape information” and “second bending moment Mf estimated from externally applied force” are substantially equal.
- the first force sense information may be calculated using a mechanical principle other than the static force balance, for example, a dynamic equation of motion, or the static force balance and other dynamics.
- a mechanical principle other than the static force balance for example, a dynamic equation of motion, or the static force balance and other dynamics.
- a combination of common principles may be used.
- FIG. 7 shows a state where the insertion portion 14 of the endoscope 10 is segmented.
- N N segments from the segment 1 on the distal end side of the insertion portion 14 to the segment N on the proximal side.
- N s segments from segment SG s to segment SG e are to be calculated.
- the first haptic information calculation unit 104 applies the first bending moment M b estimated from the shape information and externally applied for each segment.
- the second bending moment M f estimated from the force to be calculated is calculated. This allows the number N s of the segment of the insertion portion 14 of the conditional expression of the first bending moment M b and a second bending moment M f is substantially equal was calculated.
- the product of the number N c of information content obtaining the number N f of the force there is a variable by that is N f ⁇ N c.
- the first haptic information calculation unit 104 obtains, in other words, estimates the first bending moment M b from the mechanical characteristic information, for example, the bending stiffness value, and the shape information in each segment of the insertion unit 14. .
- the mechanical characteristic information is acquired from the mechanical characteristic storage unit 106.
- the shape information is acquired from the shape and arrangement information calculation unit 102.
- each segment is assumed to be straight when no bending moment is applied.
- the portion of the bending portion 32 can be bent by a bending operation, and the shape when there is no bending moment due to an external force may not be straight. Therefore, with respect to this portion, the state where no external force is applied is used as a reference, and the first bending moment Mb is obtained by the change from this state.
- the bending portion 32 may be excluded from the segment to be calculated.
- the curved shape of the segment SG i which is the i-th segment is shown in FIG. Here, it approximates the shape of the segment SG i in an arc.
- Equation 3 Equation 3
- Equation 3 the first bending moment Mb at the segment SG i estimated from the curved shape or shape information is obtained.
- G i may vary slightly with the magnitude of the curvature ⁇ i . For this reason, G i may be treated as a constant, or may be treated as a variable of curvature ⁇ i if strictness is to be obtained.
- the first haptic information calculation unit 104 obtains or estimates the second bending moment Mf generated in each segment of the insertion unit 14 due to an externally applied force.
- the second bending moment Mf i applied to the segment SG i by an external force is dynamically as follows.
- the zero vector is a vector having a size of zero.
- the consuming power position for the pressing force F j at the tip side of a position of the segment SG i may be calculated to force the plurality of force.
- the force is a distributed load, it can be considered that the force is concentrated at a plurality of specific points as described later.
- the first haptic information calculation unit 104 as the first haptic information, at least necessary ones of the position, direction, and magnitude of the force are obtained as the first bending moment Mbi and the second bending moment Mfi. Is calculated based on the relationship Mfi ⁇ Mbi. For example, at least one of the position where the pressing force F or F j is applied, the direction, and the size is calculated.
- the first haptic information calculation unit 104 calculates first haptic information related to the force applied to the insertion unit 14 that is the flexible member 12.
- the first haptic information is output to the second haptic information calculation unit 108.
- the subject information estimation unit 110 estimates subject information.
- the subject information includes the shape and arrangement of the subject 200, the anatomical arrangement, the tensile strength, the region or the position of the fixed part, and the like.
- the fixing portion is a portion where the subject 200 is fixed to a structure outside the subject 200.
- the subject information includes information on the subject 200 acquired in real time during insertion of the endoscope, information measured in advance with another device such as CT (Computed Tomography) on the subject 200, and the previous information on the subject 200. Measurement information when the endoscope is inserted, information used last time, and the like may be used. However, the subject information cannot always be obtained in advance or in real time. For this reason, a predetermined value is used as a general value for information such as the shape and arrangement of the subject 200, the tensile strength, and the fixed position, and physical information such as height, weight, waist circumference, age, and gender. It may be used as a predetermined value according to the feature.
- the subject information may be estimated information estimated from input information including personal data of the subject 200, general human body model information, and the like. It is also effective to update the subject information as appropriate during insertion of the endoscope into the subject 200.
- the subject information is information such as a structural arrangement of the device or structure.
- the shape and arrangement of the intestinal tract that is the tube of the subject 200, and information on the fixed position are estimated and measured, thereby acting on the intestinal tract. It is possible to estimate the direction and magnitude of the force.
- the shape and arrangement information of the intestinal tract in that portion can be obtained by obtaining the shape and arrangement information of the insertion portion 14.
- the portion of the intestinal tract ahead of the distal end of the insertion portion 14 can be estimated to some extent from the shape and arrangement information near the distal end of the insertion portion 14.
- information regarding the arrangement of the intestinal tract may be obtained as appropriate to improve the estimation accuracy. For example, if there is a previous endoscope insertion history, the shape and arrangement of the intestinal tract and the fixed position may be estimated from the insertion path based on the history. Information on the fixed part of the intestinal tract shall be given by estimation and measurement. The same applies to the thickness of the intestinal tract.
- the second haptic information calculation unit 108 acquires first haptic information related to the force applied to the insertion unit 14 from the first haptic information calculation unit 104. That is, the second haptic information calculation unit 108 acquires force information regarding the force applied to the flexible member 12 as a force information acquisition unit.
- the second haptic information calculation unit 108 acquires subject information from the subject information estimation unit 110 as a subject information acquisition unit.
- the second haptic information calculation unit 108 acquires contact state information between the insertion unit 14 and the subject 200 from the contact state estimation unit 112.
- the second haptic information calculation unit 108 calculates second haptic information related to the force or stress generated in the lumen of the subject 200 based on the acquired information. For example, the second haptic information calculation unit calculates the stress generated in the subject 200 as a stress estimation unit.
- subject information is required. This is because the force generated in the subject 200 changes depending on the shape and arrangement of the tube 200 of the subject 200, the fixed position, and the like. Further, when considering damage to the subject 200, information such as the tensile strength of the subject 200 in the tube is also important.
- the insertion portion 14 in the tube of the subject 200 applies force to the subject 200.
- One is a case where the insertion unit 14 mainly pushes the organ through the tube.
- the other is a case where the insertion portion 14 mainly pushes the intestinal tract or pulls around the pressed portion.
- FIG. 10 shows a state where the distal end 14 a of the insertion portion mainly pushes the organ 204 through the intestinal tract 202.
- the organ 204 is a diaphragm, for example.
- S-top 212 which is one of the bent portions of the sigmoid colon, there are a force F that the insertion portion distal end 14a pushes the intestinal tract 202, and forces F1 and F2 that pull the intestinal tract 202 when pressed. It is shown.
- the force for pulling the intestinal tract 202 is hardly generated. That is, the force that affects the subject 200 in such a state is the force applied to the intestinal tract 202 or the organ 204 via the same. This force may cause patient pain.
- the pressure value p is an average value, and when the corner or edge portion of the insertion portion tip 14a is pressed, a pressure larger than this value can be locally generated.
- the second haptic information calculation unit 108 acquires contact state information indicating a contact state between the intermediate unit and the subject 200 from the contact state estimation unit 112. For example, the second haptic information calculation unit 108 obtains the contact area between the intermediate part and the subject 200 with reference to the acquired contact state information, and calculates the pressure in the same manner as Equation 9.
- the insertion portion 14 of the endoscope 10 pushes the intestinal tract 202 or the periphery of the pressed portion is pulled, there are several patterns that can have a particularly large influence on the subject 200, in other words, several The place of, is considered. For example, it is as follows. i) The portion where the insertion portion 14 is pressed ii) The portion where the force or stress of the intestinal tract 202 concentrates iii) The peripheral portion of the intestinal tract fixing portion 208, 210, 216... see the forces F3 and F4 indicated by arrows in FIG. When the part i) to iii) is crushed, stretched, or pulled, the subject 200 is damaged or the patient feels pain.
- the second haptic information calculation unit 108 calculates the second haptic information related to the force or stress at these locations. Hereinafter, calculation of force and stress at these locations will be described.
- Perforation of the intestinal tract 202 can occur at the contact points listed in i) above. Further, even in other places, the intestinal tract 202 is often torn at places such as ii) above. In particular, the operator may not immediately notice the break of the part as in ii) above.
- a force F can be applied to a range of the peripheral length C that is the outer peripheral length of the portion of the intestinal tract 202 having a thickness t that contacts the intestinal tract 202.
- FIGS. 12A to 12C the stress ⁇ generated in the subject 200 when the button is pressed will be described.
- the forces F1 and F2 can be expressed using the force F and the angles ⁇ 1 and ⁇ 2.
- the forces F1 and F2 shown in FIGS. 12A to 12C act as pulling forces on the intestinal tract 202
- the forces F1 and F2 act on the peripheral length C of the portion where the insertion portion 14 contacts the intestinal tract 202.
- the forces F1 and F2 are applied to pull the intestinal tract 202 in the plane of the cross-sectional area t ⁇ C.
- FIG. 12A schematically shows the distribution of stress ⁇ acting on the intestinal tract 202 with arrows.
- the stress on the intestinal tract 202 is applied to the side close to the force F and the side close to the forces F1 and F2, and the forces applied to both sides are balanced.
- the stress ⁇ in Expression 12 is an average value when it is assumed that these stress distributions are uniformly applied to the intestinal tract 202.
- the peripheral length C of the intestinal tract 202 is equal to the length of the outer periphery of the insertion portion distal end 14a.
- the cross section of the insertion portion 14 is a circle having a radius r, the following equation holds.
- C ⁇ 2 ⁇ r Equation 13 Therefore, the stress ⁇ is calculated from Expression 12 and Expression 13.
- the force and stress generated in the subject 200 around the intestinal tract fixing portions 208, 210, and 216 described in the above iii) will be described.
- the portion where the intestinal tract 202 is fixed include the anus, the descending colon, and the ascending colon.
- the intestinal tract fixing portions 208 and 210 are located in the vicinity of the anus 206.
- the intestinal tract fixation part 216 is located in the descending colon.
- the insertion part 14 presses the intestinal tract 202 and the intestinal tract 202 is pulled, so that the intestinal tract fixing part 208 and the intestinal tract fixation in the vicinity of the SD-J (SD-Junction) 214, which is the boundary between the sigmoid colon and the descending colon.
- SD-J SD-J
- the force by which the intestinal tract 202 is pulled by the insertion portion 14 is F1.
- force F is applied to the intestinal tract portion 213, when there is slack in the intestinal tract 202, the portion 213 moves, and the intestinal tract 202 moves as indicated by the diagonally upward arrow in FIG. 11. The sagging is reduced as shown by the dotted line.
- a force F3 corresponding to this force F1 is applied to the intestinal tract fixing portion 208.
- a force Fa that is smaller than the force F1 is applied to the intestinal tract fixing portion 208 (Fa ⁇ F3). This is shown in FIG.
- the intestinal tract fixing portion 208 is pulled with a force Fa in the direction of the arrow shown in FIG. 14A, that is, approximately in the direction from the anus to the colon.
- Fa a force in the direction of the arrow shown in FIG. 14A
- FIG. 14B shows an example of the distribution of the stress ⁇ a acting on the portion in front of the intestinal tract fixing portion 208 in the vicinity of the anus 206.
- the stress applied to the intestinal tract 202 is applied to the side near the insertion portion distal end 14a and the side close to the intestinal tract fixing portion 208 around the anus 206, and the forces applied to both sides are balanced.
- the stress ⁇ a in Expression 14 is an average value when it is assumed that these stress distributions are uniformly applied to the intestinal tract 202.
- the stress ⁇ a is directed in two directions: the insertion portion distal end 14 a that contacts the intestinal tract 202 and the intestinal tract fixing portion 208 near the anus where the intestinal tract 202 is fixed to the subject 200.
- the stress acts in a direction connecting the intestinal tract fixing portion 208 and the insertion portion tip 14a close to the small portion near the anus of the intestinal tract 202. . Therefore, as shown in FIG. 14C, the direction of the stress ⁇ a is slightly different from the direction shown in FIG. 14B.
- the stress ⁇ a is used by the subject influence determination unit 114 described later to determine damage that may or may occur around the anus, for example, rupture of the intestinal tract.
- the stress maximum value calculation in the second haptic information calculation unit 108 will be described.
- the stress ⁇ acting on the periphery of the intestinal tract may be calculated as the above formula as a guideline, but it is desirable to estimate it as large as not exceeding a certain value from the viewpoint of safety. The following are three reasons for calculating the maximum stress value.
- the first reason is that there is a part where stress is concentrated. For example, the stresses in the surrounding areas C11 and C12 in FIG. 12A and the areas C13 and C14 shown in FIG. 13 are increased.
- the second reason is, for example, when stress is concentrated on a specific part of the intestinal tract 202 as in the case where the intestinal tract 202 is pushed by the insertion portion distal end 12a shown in FIG. 12A, closer to the portion where the force is applied.
- the range of the stress which receives the same force is narrowed, that is, the value of the stress ⁇ becomes larger than that shown in the expression 12 by decreasing the value of the peripheral length C.
- a part of the intestinal tract 202 for example, the side near the distal end 14a of the insertion portion and the fixed portion near the SD-J that is the entrance to the anus and descending colon of the intestinal tract 202 are in the middle.
- the stress value is larger than the value of ⁇ according to Equation 12.
- FIG. 13B shows an example of the distribution of the stresses ⁇ 1 and ⁇ 2 acting on the intestinal tract 202.
- the third reason is that the external force F or the reaction forces F1 and F2 fluctuate in time and may take a large value at a certain moment.
- FIG. 15 and FIG. 16 show a case where the intestinal tract 202 is pushed by the insertion portion distal end 14a, and a case where the intestinal tract 202 is pushed by the intermediate portion of the insertion portion 14 shown in FIG. 17 and FIG. 18A.
- the periphery of the insertion portion distal end 14 a is in contact with the intestinal tract 202, and the insertion portion distal end 14 a receives a force F ⁇ b> 5 from the inner wall of the intestinal tract 202.
- FIG. 15 and FIG. 16 show a case where the intestinal tract 202 is pushed by the insertion portion distal end 14a, and a case where the intestinal tract 202 is pushed by the intermediate portion of the insertion portion 14 shown in FIG. 17 and FIG. 18A.
- the periphery of the insertion portion distal end 14 a is in contact with the intestinal tract 202, and the insertion portion distal end 14 a receives a force F ⁇ b> 5 from the inner wall of the intestinal tract 202.
- the entire distal end surface of the insertion portion distal end 14a is in contact with the intestinal tract 202, the insertion portion distal end 14a receives a force indicated by an arrow F5 from the inner wall of the intestinal tract 202, and is further indicated by arrows F6 and F7.
- the intestinal tract 202 is pulled in the direction to be pulled. 17 and 18A, the intermediate portion of the insertion portion 14 is in contact with the intestinal tract 202 in various contact conditions, and the insertion portion 14 applies the force indicated by the arrows F8, F9, and F10 from the inner wall of the intestinal tract 202 at the contact location. is recieving.
- the intestinal tract 202 is further pulled in the direction indicated by the arrows F11 and F12.
- calculation of the stress ⁇ in these two cases will be described.
- the stress ⁇ is distributed as shown in FIG. 12A.
- the peripheral length C of the intestinal tract 202 for calculating the stress ⁇ is 2 ⁇ r when the section of the insertion portion distal end 14a is a circle having a radius r. Since the length perpendicular to the direction in which the stress acts is 2r, it can be considered that the forces F1 and F2 described with reference to FIGS. 12A to 12C act on the width of 2r.
- the stress ⁇ is expressed as follows.
- ⁇ ⁇ ⁇ F / (t ⁇ 2r ⁇
- t is the thickness of the intestinal tract 202 as in Equation 12
- ⁇ is the safety factor as in Equation 17
- ⁇ is the angle described above
- F is the force by which the insertion portion 14 pushes the intestinal tract 202. .
- FIG. 12A The forces applied to a specific area of the intestinal tract, such as the intestinal tract 202 shown in FIG. 12A, are the outward force F1 and the force F2, and a force that balances this is generated from F.
- the forces F1 and F2 are ⁇ 1 and ⁇ 2 as angles formed by the force F.
- F1 ⁇ ⁇ F /
- F2 (1- ⁇ ) F /
- F1 + F2 F /
- the respective forces may be calculated.
- damage to the subject 200 can be assumed and countermeasures can be implemented.
- the stress ⁇ acting on the portion of the peripheral length C of the intestinal tract 202 is expressed as follows, assuming that it is equally applied to the portion of the peripheral length C.
- ⁇ ⁇ ⁇ F / (t ⁇ C ⁇
- t is the thickness of the intestinal tract 202 as in Equation 12
- ⁇ is the safety factor as in Equation 17
- ⁇ is the angle described above
- F is the force by which the insertion portion 14 pushes the intestinal tract 202. .
- the perimeter C of the intestinal tract 202 for calculating the stress ⁇ can take various shapes depending on the cross-sectional shape or curved shape of the insertion portion 14 and the direction in which the intestinal tract 202 is pulled. Therefore, in order to conduct a detailed study, it is necessary to study according to individual circumstances. Here, a simple example of the shape will be considered.
- the cross-sectional shape of the insertion portion 14 is a circle having a radius r, and the length in the short direction of the peripheral length C of the intestinal tract 202 is 2r.
- the shape of the perimeter C is an ellipse.
- the length in the longitudinal direction of the peripheral length C of the intestinal tract 202 is L, and the portion of the peripheral length C is elliptical with a short axis 2r and a long axis L.
- the peripheral length C is as follows using r and L.
- the respective forces may be calculated.
- damage to the subject 200 can be assumed and countermeasures can be implemented.
- the second haptic information calculation unit 108 pushes the insertion portion distal end 14a or the intermediate portion of the insertion portion 14 as the second haptic information related to the force or stress generated in the tube 200 of the subject 200.
- the stress generated inside or on the surface of the subject 200 by being applied is calculated.
- the contact state estimation unit 112 estimates the contact state between the insertion unit 14 and the subject 200. As described above, in calculating the second haptic information, particularly in calculating the stress information, information on how the insertion portion 14 is in contact with the tube cavity of the subject 200, for example, stress is calculated. The circumference C of the intestinal tract used at the time is necessary. For example, the contact state estimation unit 112 estimates how the insertion unit 14 is in contact with the lumen of the subject 200 in order to assume / calculate the perimeter C. In other words, the contact state estimation unit 112 estimates, as the contact region estimation unit, the length of the outer periphery of the contact region that is a region where the flexible member 12 and the subject 200 are in contact with each other. Is set as a stress estimation region, that is, a target region for estimating stress.
- FIG. 19 is a diagram illustrating an example of a cross section of an example of a state in which the insertion portion distal end 14a is in contact with the intestinal tract 202 from above the endoscope.
- a force F13 pulled on the cecum side and a force F14 pulled on the anus side that act on the intestinal tract 202 are conceptually shown.
- FIG. 20 is a view showing an example of a cross section of an example of a state in which the intermediate part of the insertion part 14 is in contact with the intestinal tract 202 from above the endoscope.
- a force F15 pulled on the cecum side and a force F16 pulled on the anus side acting on the intestinal tract 202 are conceptually shown.
- the insertion portion distal end 14 a and the insertion portion 14 shown in each figure are in contact with the intestinal wall of the intestinal tract 202.
- the contact state estimation unit 112 estimates such a contact state based on the arrangement and shape of the subject 200 in the tube of the insertion unit 14. Since the final purpose is to calculate the stress applied to the second haptic information by the second haptic information calculation unit 108, the contact state estimation unit 112 includes the thickness of the tube empty at the contact portion. Estimate the contact state.
- a predetermined or patterned contact state may be used, or a predetermined value is used according to physical characteristics such as height, weight, waist circumference, age, and sex.
- the calculation may be performed each time.
- the contact state between the insertion unit 14 and the subject 200 is estimated using the arrangement and shape of the subject 200 within the tube of the insertion unit 14 similar to the one used in the subject information estimation unit 110. Can do. Since the contact state of the intermediate portion varies depending on the curved state, that is, the curvature, the value may be determined for each curvature, or may be a function with the curvature as one variable.
- the subject influence determination unit 114 acquires the second haptic information from the second haptic information calculation unit 108.
- the subject influence determination unit 114 determines the influence on the subject 200 based on the second haptic information and the determination criterion.
- Specific determination contents in the subject influence determination unit 114 include, for example, the presence or absence of damage such as pain, tearing, breakage, and perforation to the subject 200, and the extent of the damage content.
- the subject influence determination unit 114 inputs a combination of (Fa, ⁇ a) for the above-described damage or other possible damages in the intestinal canal fixing parts 208 and 210 around the anus 206, for example, separation between the intestine and the fixing part. Judge as.
- the subject influence determining unit 114 represents the damage that occurs or may occur in the vicinity of the anus 206, for example, the rupture of the intestinal tract 202, by the above formula 14.
- the stress ⁇ a is determined as an input.
- the determination criteria in the subject influence determination unit 114 is a summary of the relationship between the input and the determination result based on experience, experimental results, simulation results, and the like.
- the intestinal tract is fixed to the body around the anus, the descending colon, and the ascending colon, the values of ⁇ 1 and ⁇ 2 described with reference to FIG. .
- the arrangement of the intestinal tract depends on the body type, for example, height, waist circumference, obesity, intestinal length, etc.
- estimation and calculation based on the body type are required.
- the value of the thickness t and the degree of influence are related to age and sex, it is necessary to determine the influence on the subject in consideration of these conditions as subject information. That is, it is useful to use the subject information from the subject information estimation unit 110 even in the judgment by the subject influence judgment unit 114.
- the cross-sectional area S of Expression 8 mainly depends on the shape of the portion where the insertion portion 14 or the insertion portion distal end 14a is pressed. If the method of pressing is categorized or patterned, the cross-sectional area S can be regarded as constant for each pattern, and a force F instead of the pressure S and a subject such as damage or pain for each pressing method. The impact on can be determined.
- the subject influence determination unit 114 transmits to the information output unit 116 influence determination information related to the determination of the presence / absence, content, and extent of damage to the subject based on the determination criteria.
- the information output unit 116 outputs output information including second haptic information and influence determination information to the outside of the control device 100. Further, the information output unit 116 transmits the output information to the output information storage unit 118.
- the output information storage unit 118 stores output information from the information output unit 116.
- the output information is information that is also output to the information presentation device 140.
- the output information storage unit 118 may also record the shape and arrangement information calculated by the shape and arrangement information calculation unit 102, time, elapsed time, and the like. By such recording, it becomes possible to confirm the situation where the stress is generated and the position where the insertion portion 14 is generated when the stress is generated.
- the information presentation device 140 receives at least the second haptic information obtained from the second haptic information calculation unit 108 and the influence determination information obtained from the subject influence determination unit 114 via the information output unit 116. Get one piece of information.
- the information presentation device 140 presents at least one of the second haptic information and the influence determination information, or information appropriately processed based on these information so as to be suitable for presentation to the surgeon or the like.
- the information presentation device 140 may be at least one of a display device including a monitor screen such as a liquid crystal display, an audio device, a vibration device provided in the operation unit 16 of the endoscope 10, and an electrical stimulation device, for example. That is, the information presenting device 140 may be any of a visual presenting device, an auditory presenting device, a tactile presenting device, or a combination thereof.
- a display device is taken as an example, characters, symbols, figures, images, and the like can be considered. Two or more of these apparatuses or methods may be used at the same time, or may be used by switching according to the degree of force information and the effect determination result.
- FIG. 21 is a diagram schematically showing another example of the main configuration of the force sense evaluation system 1a according to the first embodiment.
- the haptic evaluation system 1a and the haptic evaluation system 1 in the haptic evaluation system 1a will be described.
- the haptic evaluation system 1a includes an endoscope system 2a and a control device 100a.
- the endoscope system 2a includes an endoscope 10a.
- the endoscope 10 a includes a drive mechanism 44.
- the control device 100a includes a feedback circuit 120, a feedback information storage unit 122, and a drive circuit 124 in place of the information output unit 116, the output information storage unit 118, and the information presentation device 140 of the haptic evaluation system 1.
- a part of the drive system of the insertion unit 14 is motorized / automated.
- the haptic evaluation system 1a may include the information output unit 116, the output information storage unit 118, and the information presentation device 140.
- the operation unit 16 of the endoscope 10 a may include at least a part of the drive mechanism 44.
- the drive mechanism 44 includes a drive system such as a motor.
- the drive mechanism 44 causes at least one of the curved shape and position of the insertion portion 14 to change by applying power to the insertion portion 14.
- the endoscope 10a is an electric endoscope or an automatic insertion endoscope in which at least a part of a drive system is motorized.
- the feedback circuit 120 appropriately inserts the insertion unit based on at least one of the second haptic information obtained from the second haptic information calculation unit 108 and the influence determination information obtained from the subject influence determination unit 114.
- the drive control information processed so as to be suitable for feedback to the 14 drive mechanisms 44 is provided to the drive circuit 124.
- the drive circuit 124 operates the drive mechanism 44 based on feedback information or the like.
- the feedback information storage unit 122 stores at least one of second haptic information to be fed back, influence determination information, and drive control information. These pieces of information are also output to the feedback circuit 120.
- the output information storage unit 118 may also record the shape and arrangement information calculated by the shape and arrangement information calculation unit 102, time, elapsed time, and the like. Such recording makes it possible to confirm the situation at the location where the stress is generated and the location where the insertion portion 14 is generated when the stress is generated.
- FIG. 23 is a diagram illustrating an example of a processing flow by the force sense evaluation system 1 or 1a.
- a software program for causing the processor of the control device 100 or 100a to function as all or part of the above-described units is prepared in the memory, and the processor executes the program.
- the processor may perform at least some of the functions of the above-described units.
- an example of processing by such a processor will be described.
- step S11 the force sense evaluation system 1 or 1a calculates the shape and arrangement information of the insertion portion 14 or the flexible member 12.
- step S12 the haptic evaluation system 1 or 1a calculates first haptic information related to the force applied to the insertion unit 14 based on the shape and arrangement information acquired in step S11.
- step S ⁇ b> 13 the haptic evaluation system 1 or 1 a calculates second haptic information related to the force or stress generated in the tube cavity of the subject 200.
- step S ⁇ b> 14 the force sense evaluation system 1 or 1 a determines the influence that the subject is receiving / can receive.
- step S15 the force sense evaluation system 1 outputs information.
- the haptic evaluation system 1 a feeds back information based on the second haptic information / influence determination information to the drive mechanism 44.
- step S16 the force sense evaluation system 1 or 1a determines whether or not to end the process. If it is determined not to end (step S16—No), the process returns to step S11, and the processes in and after step S11 are repeated. If it is determined to end (step S16—Yes), the process ends.
- the force information generated in the subject's tube cavity can be efficiently analyzed without directly measuring force or stress. Can be evaluated well.
- a method for detecting a force per unit area from the area can be considered.
- the force acting on the part where the sensor is in contact is known, the force generated inside the subject subject cannot be obtained, or the information necessary to obtain the pressure from the force, for example, the shape of the tubular bending mechanism Can not be obtained, even if the pressure under specific conditions can be calculated, the shape of the tubular bending mechanism changes, the pressure cannot be calculated when the position where the force is applied changes, or the accuracy can be extremely reduced There is sex.
- the second haptic information relating to the force or stress generated by the force applied to the inside or outside surface of the subject, particularly the stress information on the outer periphery of the stress estimation region It is possible to calculate without direct measurement.
- a force sensor and a stress sensor that directly measure the subject are unnecessary, and space saving is realized.
- the diameter of the insertion portion 14 that is the flexible member 12 can be reduced.
- the force sense evaluation system 1 estimates and calculates information on the force applied to the subject from the subject information, and estimates the stress applied to the inside or outside surface of the subject, thereby detecting the force and stress. Accuracy can be increased.
- the haptic evaluation system 1 it is possible to calculate the maximum value of force and stress, or the upper limit that the maximum value can take. Thereby, it becomes easy to estimate the damage which arises in the inside of a subject, or the surface outside a body.
- the force sense evaluation system 1 also includes a contact state estimation unit 112 as a contact region estimation unit that estimates a contact state between the flexible member 12 and the subject 200, for example, a contact region.
- a contact state estimation unit 112 as a contact region estimation unit that estimates a contact state between the flexible member 12 and the subject 200, for example, a contact region.
- the contact state between the flexible member and the inside or outside surface of the subject is assumed or estimated. There is a need to. By estimating the contact state from time to time, the accuracy of stress detection can be increased.
- the distal end of the flexible member is one of sites that cause damage to the inside or outside of the subject, such as causing perforation in the intestinal tract or the like.
- the insertion unit 14 is out of the insertion path or is caught in the body of the subject such as the intestinal tract or the surface outside the body, the insertion state of the tip of the flexible member, for example, shape, in-body arrangement, force information, Furthermore, the detection accuracy of force and stress can be improved by estimating the contact state based on the shape and arrangement information of the surface inside or outside the subject.
- the mechanical force value of the flexible member 12 stored in the mechanical property storage unit 106 is acquired by the first haptic information calculation unit 104.
- the force acting on the flexible member 12 can be detected by a simple method, and it is not necessary to provide a sensor to increase the diameter of the flexible member 12, so that a practical force that can be detected in real time can be obtained.
- a haptic evaluation system having a stress detection function.
- the subject information estimated by the subject information estimation unit 110 is acquired by the second haptic information calculation unit 108.
- the degree of influence on the function of the subject can be known, it is possible to determine whether the operation should be interrupted or canceled, that is, whether the operation should be returned or the operation can be continued. It is also possible to determine whether or not to perform a predetermined treatment on the subject based on the force and stress estimated to have occurred.
- the information presenting device 140 provides the operator with at least one of information on force and stress, or information indicating the degree of influence on the subject, so that the operator appropriately examined and determined the response. In the above, it is possible to continue safe operation by the operator, interrupt the problematic operation, or return from the problematic state.
- the feedback circuit 120 provides at least one of force and stress information or information indicating the degree of influence on the subject to the drive mechanism 44, and drives the force and stress to be below a certain value. Thus, it is possible to continue safe driving or operation by the driving mechanism 44, to interrupt the problematic driving or operation, or to recover from the problematic state.
- FIG. 23 is a diagram schematically illustrating an example of a main configuration of a force sense evaluation system 1b according to a modification example of the first embodiment.
- FIG. 24 is a diagram schematically illustrating an example of a main configuration of a force sense evaluation system 1c according to a modification example of the first embodiment.
- the haptic evaluation system 1b and the haptic evaluation system 1 will be described for the haptic evaluation system 1b.
- the haptic evaluation system 1c only the difference between the haptic evaluation system 1c and the haptic evaluation system 1a will be described.
- the difference between the haptic evaluation system 1b and the haptic evaluation system 1 is the presence or absence of the haptic occurrence determination unit 126.
- the haptic evaluation system 1b includes a haptic generation determination unit 126 in the control device 100b.
- the difference between the force sense evaluation system 1 c and the force sense evaluation system 1 a is the presence or absence of the force sense occurrence determination unit 126.
- the haptic evaluation system 1c includes a haptic generation determination unit 126 in the control device 100c.
- the force sense generation determination unit 126 will be described.
- the force sense generation determination unit 126 acquires the shape and arrangement information of the insertion unit 14 from the shape and arrangement information calculation unit 102. The force sense generation determination unit 126 determines whether or not a force is generated in the tube 200 of the subject 200 based on the shape and arrangement information of the insertion unit 14.
- the force sense generation determination unit 126 when the insertion unit 14 is in a stage before insertion into the subject or in a state where erroneous detection has occurred in position detection or force detection, the force sense generation determination unit 126 generates the force sense. Judge that it is not.
- the pre-insertion stage can be determined from the spatial positional relationship between the subject, particularly the anus or intestinal tract serving as the entrance of insertion, and the distal end of the insertion portion 14. Also, in position detection or force detection, since the insertion operation speed is about several centimeters per second on average, it is unlikely that a large force value will be generated suddenly. Such position detection error or force detection If it is caused by an error, it can be determined as a false detection to some extent. Similarly, when a force sensation occurs, if the value of the force sensation fluctuates greatly in a short time, there is a possibility of erroneous detection.
- the determination result by the force sense generation determination unit 126 is transmitted to the contact state estimation unit 112.
- the force sense that detects the force information related to the force or stress generated in the tube of the subject, with improved detection accuracy of the contact state or force information, based on the determination by the force generation determination unit 126.
- Evaluation systems 1b and 1c can be provided.
- the force sense evaluation system 1d includes a work manipulator 300 as an insertion device.
- the haptic evaluation system 1d includes a work system 2d.
- the work system 2 d includes a work manipulator 300 and a main body 302.
- the work manipulator 300 includes a first work arm 304, a second work arm 306, and an observation arm 308 as a plurality of flexible members.
- the arms 304, 306, and 308 are inserted into the subject 200.
- the main body 302 includes a control device 100d.
- work manipulators include medical manipulators and industrial manipulators.
- the application is not limited to these.
- the medical manipulator performs grasping, incision, excision, implanting of devices, suturing, medication, disinfection, washing, etc. with the treatment arm while observing a predetermined part with the observation arm.
- the subject is assumed to be a person, animal or plant.
- the predetermined site is mainly used for a body cavity or an incised body, but the place of use is not limited and may be used on the body surface. If an observation system is provided separately, the observation arm is not always necessary. Moreover, in order to observe several places simultaneously, to ensure a visual field ensuring, or to produce
- the observation arm and the treatment arm may be a combination of an elastic body such as an endoscope insertion portion and a bending portion, or a manipulator that can be bent by one or more joints. May be included.
- Industrial manipulators are assumed to be used mainly for inspection and maintenance of equipment, piping and structures. It is intended to be used for work that cannot be done by people or buildings / areas in terms of size and environment, or for work that cannot be done by humans.
- the subject is a device, piping, structure, area, or the like, and these are work targets.
- the haptic evaluation system 1d can be used for precise work that cannot be performed by human hands, work for performing many operations at the same time, short of human hands, or too large for human hands, Examples include work that is out of reach, work that is difficult for humans to perform, and work that is dangerous.
- the first work arm 304, the second work arm 306, and the observation arm 308 extend from the main body 302.
- the first working arm 304 and the second working arm 306 have, for example, a thin flat plate shape.
- the first working arm 304 and the second working arm 306 are rectangular in which the lengths a and b of the cross-sections are a ⁇ b.
- the length c in the longitudinal direction of the working arm 306 is a ⁇ b ⁇ c.
- the first working arm 304 and the second working arm 306 bend mainly in a direction substantially perpendicular to the side surface of the width b, that is, move so that the bending direction is limited to one direction.
- FIG. 25 since the moving direction of the first working arm 304 and the second working arm 306 is limited, it is possible to concentrate on the operation in the movable direction, and stable work and precise work can be performed. It becomes possible.
- the first work arm 304 and the second work arm 306 grip an object and perform operations such as processing and assembly.
- a work tool corresponding to the application may be appropriately attached to the tips of the arms 304 and 306.
- the work tool may not necessarily be mounted or may be replaceable.
- the observation arm 308 is an elongated arm having a circular cross section.
- the observation arm 308 includes an illumination optical system, an observation optical system, an image sensor, and the like built in the tip.
- the observation arm 308 can observe the object from various directions by changing the curved shape when the tips of the first work arm 304 and the second work arm 306 work on the object. ing.
- Shape sensors 310, 312, and 314 and four operation wires 316, 318, and 320 are incorporated in the first working arm 304, the second working arm 306, and the observation arm 308, respectively. . Since these arms 304, 306, and 308 are provided with two operation wires on the front surface and the back surface, only two operation wires are shown in FIG.
- the positions and shapes of the arms 304, 306, and 308 are detected by the shape sensors 310, 312, and 314, respectively.
- the shape sensors 310, 312, and 314 may be configured like the shape sensor 50 described in the first embodiment.
- the arms 304, 306, and 308 can be actively bent by operation wires 316, 318, and 320, respectively.
- the bending direction of the first working arm 304 is indicated by A5 and the bending operation possible range is indicated by A6, and the bending direction of the second working arm 306 is indicated by A7 and the bending possible range. Is indicated by A8. Further, the bending directions of the observation arm 308 are indicated by A9 and A10.
- a detection mechanism capable of detecting the position and shape of the arms 304, 306, 308 other than the shape sensors 310, 312, 314 may be adopted, and the arms 304, 306 other than the operation wires 316, 318, 320 may be employed.
- an operation mechanism capable of bending operation may be employed.
- first working arm 304, the second working arm 306, and the observation arm 308 have grasped bending rigidity in a predetermined range.
- the bending rigidity varies depending on the position in the longitudinal direction and the bending direction, it is assumed that the distribution of the bending rigidity in the longitudinal direction is grasped for each necessary bending direction.
- the force applied from the subject 200 to the working arms 304 and 306 and the observation arm 308 can be obtained as a reaction force of the resultant force applied to the subject 200.
- the resultant force of the force applied to the subject 200 is a bending moment expression expressed by Expression 3, and the bending rigidity and the bending amount are expressed in three dimensions, and the result of Expression 5b is substituted into Expression 7 to obtain from the bending state.
- the calculated bending moment and the bending moment generated by the external force are balanced and can be obtained by using an optimization method. However, when no force is generated in a direction perpendicular to the bending direction and the longitudinal direction, the position and shape measurement and the force calculation may be simplified as appropriate.
- the individual forces generated in the subject from the resultant force applied to the subject 200 can be obtained in the same manner as in the first embodiment by grasping the structure of the subject 200. The effect obtained by this is the same as in the first embodiment.
- FIG. 26 is a diagram schematically illustrating an example of a main configuration of a force sense evaluation system 1d according to the second embodiment.
- FIG. 27 is a diagram schematically illustrating an example of a main configuration of a force sense evaluation system 1e according to the second embodiment.
- the haptic evaluation system 1d only differences between the haptic evaluation system 1d and the haptic evaluation system 1b will be described.
- the haptic evaluation system 1e only the difference between the haptic evaluation system 1e and the haptic evaluation system 1c will be described.
- the difference between the haptic evaluation system 1d according to the second embodiment and the haptic evaluation system 1b according to the modification of the first embodiment is that the flexible member influence determination unit 128 and the flexible member information storage unit The presence or absence of 130.
- the haptic evaluation system 1d includes a flexible member influence determination unit 128 and a flexible member information storage unit 130 in the control device 100d.
- the difference between the force sense evaluation system 1e and the force sense evaluation system 1c is the presence or absence of the flexible member influence determination unit 128 and the flexible member information storage unit 130.
- the haptic evaluation system 1e includes a flexible member influence determination unit 128 and a flexible member information storage unit 130 in the control device 100e.
- the flexible member influence determination unit 128 and the flexible member information storage unit 130 will be described.
- the flexible member information storage unit 130 stores flexible member information that is information regarding the first working arm 304, the second working arm 306, and the observation arm 308, which are flexible members. .
- the flexible member information may be a value relating to the mechanical characteristics or physical or chemical characteristics of the arms 304, 306, and 308 that are the flexible members.
- the bending rigidity values of the working arm 306 and the observation arm 308 are included.
- the flexible member influence determination unit 128 compares the haptic information about the force or stress applied to the flexible member with the determination criteria based on the arms 304, 306, and 308, which are flexible members, so that the arm The influence on 304,306,308 is judged.
- Specific determination contents include the presence / absence, content, degree of maintenance, urgency, and the like of damage to the flexible member such as member breakage, deterioration of rigidity and operability, and shortening of the product life.
- the work system 2d including three arms has been described, but the number of arms may be arbitrary.
- observation may be performed through the naked eye or through a separate microscope.
- three working arms and three observation arms may be used, and the work may be performed while viewing one part from multiple directions, or the work of a plurality of parts may be performed simultaneously or sequentially.
- the subject can be separated into a plurality of pieces, and each of them can be observed and operated, or a plurality of subjects can be integrated, for example, incorporated, injected, etc. It is also possible to do.
- the working arm and the observation arm may be capable of changing functions or may have a plurality of functions simultaneously.
- the work may be performed by a person on the spot or from a remote location, or may only be instructed on the contents of the movement of the arm or the work.
- the haptic evaluation system 1d may include a control device 100d including an information output unit 116 and an output information storage unit 118, as shown in FIG.
- the force sense evaluation system 1e may include a control device 100e including a feedback circuit 120, a feedback information storage unit 122, and a drive circuit 124, as shown in FIG.
- FIG. 28 is a diagram illustrating an example of a processing flow by the force sense evaluation system 1d or 1e.
- the haptic evaluation system 1d or 1e prepares, for example, a software program in the memory for causing the processor of the control device 100d or 100e to function as all or part of the above-described units, and the processor executes the program.
- the processor may perform at least some of the functions of the above-described units.
- an example of processing by such a processor will be described.
- step S21 the force sense evaluation systems 1d and 1e calculate the shape and arrangement information of the arms 304, 306, and 308 that are flexible members.
- step S22 the haptic evaluation systems 1d and 1e calculate first haptic information related to the forces applied to the arms 304, 306, and 308 based on the shape and arrangement information acquired in step S11.
- step S ⁇ b> 23 the force sense evaluation systems 1 d and 1 e calculate second force sense information related to the force or stress generated in the tube cavity of the subject 200.
- step S24 the force sense evaluation systems 1d and 1e determine the influence that the flexible member receives / can receive and the influence that the subject receives / can receive.
- step S25 the force sense evaluation system 1d outputs information.
- the haptic evaluation system 1 e feeds back information based on the second haptic information / influence determination to the drive mechanism 44.
- step S26 the force sense evaluation systems 1d and 1e determine whether or not to end the process. If it is determined not to end (No at Step S26), the process returns to Step S21, and the processes after Step S21 are repeated. If it is determined to end (step S26-Yes), the process ends.
- the arms 304 and 306, which are flexible members, are received by the flexible member influence determining unit 128 from the usage environment such as the subject, the operator, other devices, facilities, and installation locations. , 308, the degree of influence on the function can be understood. This makes it possible to determine whether to interrupt the operation, cancel the operation, that is, return the operation or continue the operation. Further, based on the forces and stresses estimated to be generated in the arms 304, 306, and 308, it is possible to determine whether to perform a predetermined treatment such as repair to the arms 304, 306, and 308 or replacement of parts. For example, the arms 304, 306, and 308 are prevented from being damaged or destroyed by the force from the subject.
- the haptic evaluation system 1, 1a, 1b, 1c, 1d that can easily and accurately acquire the haptic information related to the force or stress generated in the subject. 1e and the force sense evaluation devices 100, 100a, 100b, 100c, 100d, and 100e can be provided.
- a force sense evaluation system and force sense evaluation device information on the curved shape of the flexible member and the force with which the flexible member pushes the subject is acquired, and the cross section of the insertion portion at the position where the force is applied.
- the force or stress applied to the subject can be detected from information such as the shape and the curved shape. That is, it is possible to estimate the force and stress applied to the subject in consideration of various forces working in the subject.
- the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the scope of the invention in the implementation stage.
- the embodiments may be appropriately combined as much as possible, and in that case, the combined effect can be obtained.
- the above embodiments include inventions at various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements.
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Pathology (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Medical Informatics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Astronomy & Astrophysics (AREA)
- Biochemistry (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Immunology (AREA)
- Human Computer Interaction (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
応力推定システム(1;1a)は、可撓性部材(12,14)を被検体(200,202)に挿入しているときに被検体に生じる応力を推定する。応力推定システムは、可撓性部材と、可撓性部材にかかる力に関する力情報を算出して、応力を推定する対象領域である被検体における所定の応力推定領域の外周の長さと応力推定領域における被検体の厚みとを含む被検体情報を取得して、力情報に基づいて、応力推定領域において被検体に加わる力の大きさ及び向きを算出して、算出した力の大きさ及び向きと、応力推定領域の外周の長さと、被検体の厚みとに基づいて、応力推定領域の外周における応力の情報を算出する。
Description
本発明は、応力推定システム、応力推定装置及び内視鏡システムに関する。
内視鏡の挿入部、医療用又は工業用の細径マニピュレータのアームなどの可撓性部材を被検体に挿入する際、可撓性部材が被検体に接触して被検体を押圧することがある。このような押圧による被検体への影響を推定するために、可撓性部材に加わる外力の情報を算出することが知られている。
例えば、日本国特表2009-522016号公報には、挿入部にひずみゲージを設け、挿入部が被検体の表面に接触した際に被検体から受ける力量を当該ひずみゲージで測定することが開示されている。日本国特開平6-154153号公報には、内視鏡の挿入部の先端に設けられた感圧センサで体腔内の臓器から受ける力量を検出する検出装置が開示されている。日本国特開2013-094337号公報には、挿入部に複数の湾曲センサを設け、これら湾曲センサの検出情報の組合せ演算により、挿入部に加わる外力に関する外力情報を含む操作支援情報を演算することが開示されている。
可撓性部材と被検体の内部又は表面とが接触したときの被検体の負担を正確に評価するためには、可撓性部材からの力が作用したときに被検体に生じる応力を推定することが望ましい。上述の文献では、可撓性部材に加わる力を算出することは可能であるが、被検体に生じる応力を求めることはできない。それ故、被検体の負担を正確に評価することができない。
そこで、本発明は、被検体に生じる応力を精度よく容易に推定することができる応力推定システム、応力推定装置及び内視鏡システムを提供することを目的とする。
本発明の一実施形態は、可撓性を有し、被検体の内部に挿入されて前記被検体の内面に力を加える可撓性部材と、前記可撓性部材にかかる力に関する力情報を取得する力情報取得部と、応力を推定する対象領域である前記被検体における所定の応力推定領域の外周の長さと前記応力推定領域における前記被検体の厚みとを含む被検体情報を取得する被検体情報取得部と、前記力情報に基づいて、前記応力推定領域において前記被検体に加わる力の大きさ及び向きを算出し、算出した前記力の大きさ及び向きと、前記応力推定領域の外周の長さと、前記被検体の厚みとに基づいて、前記応力推定領域の外周における応力の情報を算出する応力推定部と、を具備する、応力推定システムである。また、本発明の一実施形態は、このような内視鏡システムである。
本発明の一実施形態は、被検体の内面に力を加える可撓性部材にかかる力に関する力情報を取得する力情報取得部と、応力を推定する対象領域である前記被検体における所定の応力推定領域の外周の長さと前記応力推定領域における前記被検体の厚みとを含む被検体情報を取得する被検体情報取得部と、前記力情報に基づいて、前記応力推定領域において前記被検体に加わる力の大きさ及び向きを算出し、算出した前記力の大きさと向きと、前記応力推定領域の外周の長さと、前記被検体の厚みとに基づいて、前記応力推定領域の外周における応力の情報を算出する応力推定部と、を具備する、応力推定装置である。
本発明によれば、被検体に生じる応力を精度よく容易に推定することができる応力推定システム、応力推定装置及び内視鏡システムを提供することができる。
以下、本発明の各実施形態に係る力覚評価システムについて説明する。力覚評価システムは、可撓性部材を含む挿入機器、例えば医療用内視鏡、に汎用的に適用される。力覚評価システムは、上部消化管内視鏡、大腸内視鏡、超音波内視鏡、膀胱鏡、腎盂鏡等の医療用内視鏡以外にも、カテーテル、医療用マニピュレータなどにも適用可能である。
操作者が可撓性部材を被検体に挿入して観察、診断、治療、処置などの作業を行う際、可撓性部材が被検体に接触して力を加えることで、被検体、例えば管空、に力又は応力が生じる。ここで、応力とは、単位面積当たりにかかる力である。可撓性部材から被検体に力が加わったとき、被検体にはその内部の構造等に応じてさまざまな力又は応力が生じる。力覚評価システムは、被検体に生じるこのような力又は応力を推定する。なお、被検体に生じる力の合力は、可撓性部材から被検体に加えられた力とつり合う。すなわち、当該合力は、被検体に加えられた力の反力である。
<第1の実施形態>
図1は、第1の実施形態に係る力覚評価システム1、すなわち応力推定システムの主要な構成の一例を概略的に示す図である。力覚評価システム1は、被検体200の内部に挿入されて被検体200の内面に力を加える可撓性部材12によって被検体200に生じる応力を推定することができる応力推定システムである。第1の実施形態に係る力覚評価システム1は、被検体200の管空に可撓性部材12が挿入されて診断、治療などの作業が行われることを想定している。
図1は、第1の実施形態に係る力覚評価システム1、すなわち応力推定システムの主要な構成の一例を概略的に示す図である。力覚評価システム1は、被検体200の内部に挿入されて被検体200の内面に力を加える可撓性部材12によって被検体200に生じる応力を推定することができる応力推定システムである。第1の実施形態に係る力覚評価システム1は、被検体200の管空に可撓性部材12が挿入されて診断、治療などの作業が行われることを想定している。
本実施形態における力覚評価システム1は、被検体200に対して動作する可撓性部材12の形状情報及び被検体200に対する配置情報を含む形状及び配置情報を演算する。被検体200に対する動作は、例えば、被検体200への挿入、表面走査、観察、修理、診断、治療等である。力覚評価システム1は、形状及び配置情報に基づいて、可撓性部材12にかかる力に関する第1の力覚情報、すなわち力情報を算出する。力覚評価システム1は、形状及び配置情報と第1の力覚情報と被検体200に関する被検体情報とに基づいて、被検体200に生じる力又は応力に関する第2の力覚情報を算出する。ここで、力覚情報とは、力の位置、向き及び大きさの少なくとも1つを含む情報である。第2の力覚情報は、被検体200の内部又は表面で起こっている力、すなわち、被検体200の内部又は表面に生じる力又は応力に関する情報である。
特に、本実施形態における力覚評価システム1は、応力推定システムとして、可撓性部材12にかかる力に関する力情報を取得して、応力を推定する対象領域である被検体200における所定の応力推定領域の外周の長さと応力推定領域における被検体200の厚みとを含む被検体情報を取得して、前記力情報に基づいて、応力推定領域において被検体200に加わる力の大きさ及び向きを算出し、算出した力の大きさ及び向きと、応力推定領域の外周の長さと、被検体200の厚みとに基づいて、応力推定領域の外周における応力の情報を算出する。
図1に示される力覚評価システム1は、内視鏡システム2と、制御装置100とを含む。内視鏡システム2は、内視鏡10を含む。内視鏡10は、可撓性部材12として挿入部14を有している。挿入部14は、被検体200の管空内に挿入される。
(被検体と管空)
本実施形態では、被検体200は、主に、診断又は治療をされる患者又は患者の臓器を想定している。なお、被検体200は、患者又は臓器の代わりに、シミュレーション用の患者モデル又は臓器モデルでもよい。あるいは、被検体200は、哺乳類、爬虫類、鳥類等の動物でもよい。また、医療に特化せずとも、被検体200は、内部に管空又は空間を有する機器、ワーク等でもよい。
本実施形態では、被検体200は、主に、診断又は治療をされる患者又は患者の臓器を想定している。なお、被検体200は、患者又は臓器の代わりに、シミュレーション用の患者モデル又は臓器モデルでもよい。あるいは、被検体200は、哺乳類、爬虫類、鳥類等の動物でもよい。また、医療に特化せずとも、被検体200は、内部に管空又は空間を有する機器、ワーク等でもよい。
本実施形態に係る力覚評価システム1の対象である被検体200の管空は、主に、消化器、気管支、泌尿器等である。管空以外にも、手術等で開腹した臓器なども対象としてよい。以下の説明では、被検体200の管空として大腸を例に挙げる。大腸は、人によって形状、配置などが異なり、時間の経過、機器の挿入等によって形状が特に変化しうる臓器である。例えば、大腸には可動腸管と固定腸管とがあり、直腸、下行結腸及び上行結腸は自由に動きうる可動腸管、S状結腸、横行結腸及び盲腸は固定腸管である。
(内視鏡システム)
図2を参照して、内視鏡システム2について説明する。
内視鏡システム2は、内視鏡10と、画像処理装置18、すなわちビデオプロセッサと、表示装置20と、光源装置22と、光出射検出装置24と、内視鏡制御装置26とを有している。内視鏡10は、上述したように、可撓性部材12として挿入部14を有している。内視鏡10は、挿入部14に内蔵された不図示の撮像素子で観察対象物を撮像する。観察対象物は、被検体200内における患部、病変部等であってよい。画像処理装置18は、内視鏡10の撮像素子で観察対象物からの光を変換した電気信号を画像処理する。表示装置20は、画像処理装置18で画像処理された観察画像を表示する。光源装置22は、照明光を出射し、内視鏡10の不図示のライトガイドに照明光を供給する。光出射検出装置24は、照明光とは異なる、後述するセンサ46、ここではファイバセンサである形状センサ50、の検出用の光を出射し、センサ46を経由した光を検出する。内視鏡制御装置26は、内視鏡システム2全体の動作を制御する。これら装置18、20、22、24、26は、ラック76に搭載されてよい。
図2を参照して、内視鏡システム2について説明する。
内視鏡システム2は、内視鏡10と、画像処理装置18、すなわちビデオプロセッサと、表示装置20と、光源装置22と、光出射検出装置24と、内視鏡制御装置26とを有している。内視鏡10は、上述したように、可撓性部材12として挿入部14を有している。内視鏡10は、挿入部14に内蔵された不図示の撮像素子で観察対象物を撮像する。観察対象物は、被検体200内における患部、病変部等であってよい。画像処理装置18は、内視鏡10の撮像素子で観察対象物からの光を変換した電気信号を画像処理する。表示装置20は、画像処理装置18で画像処理された観察画像を表示する。光源装置22は、照明光を出射し、内視鏡10の不図示のライトガイドに照明光を供給する。光出射検出装置24は、照明光とは異なる、後述するセンサ46、ここではファイバセンサである形状センサ50、の検出用の光を出射し、センサ46を経由した光を検出する。内視鏡制御装置26は、内視鏡システム2全体の動作を制御する。これら装置18、20、22、24、26は、ラック76に搭載されてよい。
内視鏡10は、可撓性部材12としての細長い管状の挿入部14と、挿入部14の基端部と連結された操作部16とを有している。挿入部14は、挿入部14の先端から基端へと順に、先端硬質部30と、湾曲部32と、可撓管部34とを有している。先端硬質部30の基端部は、湾曲部32の先端部と連結している。湾曲部32の基端部は、可撓管部34の基端部と連結している。
先端硬質部30は、挿入部14の先端部であって、かつ内視鏡10の先端部である。先端硬質部30は、硬く、ここに撮像素子、照明光学系、観察光学系等が内蔵されている。照明装置22からの照明光が、前記ライトガイドを介して先端硬質部30の先端面の照明光学系から観察対象物に照射される。
湾曲部32は、図示しない節輪が挿入部14の長手軸方向に沿って連結されることにより構成されている。湾曲部32は、操作部16に設けられた湾曲操作部36に入力される操作に応じて、所望の方向に湾曲する。例えば操作者である医師等の作業者が操作部16を操作することにより湾曲部32が湾曲されて、先端硬質部30の位置及び向きが変えられる。これにより、内視鏡10は、観察対象物を観察視野内に捉える。
可撓管部34は、所望の可撓性を有しており、外力によって曲がる。可撓管部34は、操作部16の本体部38から延出した管状部材である。
内視鏡10では、操作者が湾曲部32を湾曲操作したり可撓管部34を捻ったりしながら、被検体である患者の消化器、気管支、泌尿器等の管空へ挿入部14を挿入していくことが可能である。
なお、挿入部14は先端硬質部30及び湾曲部32を含むが、先端硬質部30は極短い部分であること、及び、湾曲部32は湾曲可能な構成であることから、本明細書中における可撓性部材12との用語は、概ね挿入部14を指すものとして用いられる。
図3は、挿入部14の操作方向として、挿抜方向、湾曲方向及び回転方向を概略的に示す図である。挿入部14の操作方向として、図3に双方向矢印A1で示されるような、管空内に挿入された挿入部14の挿抜方向と、双方向矢印A2で示されるような、挿入部14の捻り方向、すなわち回転方向とがある。また、挿入部14の操作方向として、双方向矢印A3で示されるような、湾曲操作部36の操作による湾曲部32の上下方向と、双方向矢印A4で示されるような、湾曲操作部36の操作による湾曲部32の左右方向とがある。
操作部16は、可撓管部34が延出している本体部38と、本体部38の基端部と連結している把持部40とを有している。把持部40は、内視鏡10を操作する操作者によって把持される。把持部40には、湾曲操作部36が配置されている。また、操作部16からユニバーサルコード42が延びている。ユニバーサルコード42は、挿入部14内から延びた撮像用電気ケーブル、ライトガイド等を含む。内視鏡10は、ユニバーサルコード42を介して、画像処理装置18、光源装置22、光出射検出装置24、内視鏡制御装置26、制御装置100などの各種装置に接続されている。
(センサ)
力覚評価システム1は、センサ46を含む。本実施形態におけるセンサ46は、位置センサ48と形状センサ50の少なくとも一方である。位置センサ48は、挿入部14の位置を検出するセンサである。形状センサ50は、挿入部14の形状を検出するセンサである。例えば、図2には、センサ46として、挿入部14の長手方向に沿って配置された形状センサ50が示されている。例えば、図4には、センサ46として、挿入部14の長手方向に沿って互いに離間して配置された複数の位置センサ48が示されている。例えば、図5には、形状センサ50と複数の位置センサ48とを含むセンサ46が示されている。
力覚評価システム1は、センサ46を含む。本実施形態におけるセンサ46は、位置センサ48と形状センサ50の少なくとも一方である。位置センサ48は、挿入部14の位置を検出するセンサである。形状センサ50は、挿入部14の形状を検出するセンサである。例えば、図2には、センサ46として、挿入部14の長手方向に沿って配置された形状センサ50が示されている。例えば、図4には、センサ46として、挿入部14の長手方向に沿って互いに離間して配置された複数の位置センサ48が示されている。例えば、図5には、形状センサ50と複数の位置センサ48とを含むセンサ46が示されている。
センサ46は、制御装置100の後述する形状及び配置情報演算部102とともに、形状及び配置情報検出部52を構成している。
図4及び図5に示される位置センサ48は、例えば、磁気式である。このような位置センサ48では、図6に示されるように、挿入部14に磁気コイル54が設けられている。また、受信機となる磁気アンテナ70が室内に固定して設置されている。磁気コイル54は、不図示の信号生成部から出力される磁界発生信号としての電流を受けて磁界を発生させる。磁気アンテナ70は、発生した磁界を検出する。検出した磁界に基づいて、形状及び配置情報演算部102は、磁気コイル54が配置された挿入部14の位置を算出する。なお、磁気アンテナ70を被検体200に取り付ければ、被検体200に対する挿入部14の相対位置が検出可能である。磁気アンテナ70を送信アンテナとし、挿入部14に受信コイルを設けて、送受信を逆にしても構わない。
また、磁気式の位置センサ48を含む形状及び配置情報検出部52は、向きも検出可能である。挿入部14の長手方向に関して同じ位置で周方向に関して異なる位置に複数の磁気コイル54を配置することにより、形状及び配置情報検出部52は、位置だけでなく挿入部14の配置及び姿勢も検出可能となる。
位置センサ48は、磁気式に限定されるものではなく、超音波方式、光学式、加速度センサを用いた方式などであってよい。位置センサ48を含む形状及び配置情報検出部52は、被検体200に対する、あるいは、被検体200が置かれた室内などの場所に対する挿入部14の位置又は相対位置を検出できるものであればよい。また、被検体200に対する挿入部14の相対位置を検出するための位置センサとして挿入部14の挿入量と回転量とを検出する挿入部センサを用いてもよい。例えば、被検体200の入口に配置した挿入部センサと位置センサ48とを組み合わせることで、被検体200に対する挿入部14の相対位置が検出可能である。
例えば、図4及び図5に示されるように、複数の位置センサ48を含む形状及び配置情報検出部52において、位置センサ48が挿入部14の長手方向に沿って互いに離間して配置されている場合には、検出位置間が補間されることにより、挿入部14の形状が検出可能である。
図2及び図5に示される形状センサ50は、例えば、光ファイバを用いて特定箇所の曲率から曲げ形状を検出するように構成されたファイバセンサである。ファイバセンサは、細径で挿入部14に組み込みやすく、また、他の構成の影響を受けにくいため、形状センサ50として好適である。ファイバセンサである形状センサ50は、例えば、挿入部14の長手方向に沿って配置された光ファイバを有している。光ファイバには、長手方向に沿って互いに離間して配置された複数の被検出部が設けられている。ファイバセンサでは、上述の光出射検出装置24から光ファイバに検出用の光が供給される。供給された光が光ファイバを伝達したときの各被検出部における光の変化量に基づいて、形状及び配置情報演算部102が挿入部14の形状を算出する。なお、形状及び配置情報演算部102は、光出射検出装置24に含まれてもよい。
形状センサ50は、ファイバセンサに限定されるものではなく、機能、サイズ等を満足するものであれば、どのようなセンサであってもよい。例えば、1つ以上のカメラ画像から、挿入部14の形状を算出してもよい。
このように、センサ46と形状及び配置情報演算部102とを含む形状及び配置情報検出部52は、機能面で十分な性能、サイズ等の仕様を有するものであれば、具体的な検出方法、組込み方法等は特に限定されない。
(制御装置)
制御装置100は、上述の形状及び配置情報演算部102と、第1の力覚情報算出部104と、第2の力覚情報算出部108と、被検体情報推定部110と、接触状態推定部112と、被検体影響判断部114と、情報出力部116と、を有している。これら各部は、CPUなどの1又は複数の集積回路を含むプロセッサにより構成されている。例えば、プロセッサをこれら各部として機能させるためのソフトウェアプログラムを図示しないメモリ内に準備しておき、そのプログラムをプロセッサが実行することで、各部としての機能をプロセッサが実施してよい。制御装置100はまた、機械特性記憶部106と、出力情報記憶部118とを有している。各記憶部106、118は、不揮発性の半導体メモリ等のストレージである。
制御装置100は、上述の形状及び配置情報演算部102と、第1の力覚情報算出部104と、第2の力覚情報算出部108と、被検体情報推定部110と、接触状態推定部112と、被検体影響判断部114と、情報出力部116と、を有している。これら各部は、CPUなどの1又は複数の集積回路を含むプロセッサにより構成されている。例えば、プロセッサをこれら各部として機能させるためのソフトウェアプログラムを図示しないメモリ内に準備しておき、そのプログラムをプロセッサが実行することで、各部としての機能をプロセッサが実施してよい。制御装置100はまた、機械特性記憶部106と、出力情報記憶部118とを有している。各記憶部106、118は、不揮発性の半導体メモリ等のストレージである。
制御装置100の上述の各部は、例えば、図2に示される1つの筐体80内に収容されている。制御装置100は、他の装置18、20、22、24、26と同様にラック76に搭載されてよい。
制御装置100の上述の各部は、制御装置100とは別の制御装置に含まれてもよい。例えば、上述の各部は、画像処理装置18又は内視鏡制御装置26に含まれてよい。あるいは、上述の各部の各々が画像処理装置18及び内視鏡制御装置26とは異なる制御装置に含まれてもよい。すなわち、制御装置100の上述の各部として機能するプロセッサあるいはFPGAなどのハードウェア回路は、各部としての機能を実施可能である限り、1つの筐体に含まれてもよいし、複数の筐体に含まれてもよい。例えば、上述の各部が挿入部14内に配置されてもよいし、通信で接続された遠隔地にあってもよい。各記憶部106、118も同様に、1又は複数の記憶部であってよいし、制御装置100とは別体の外部記憶装置であって通信で接続されるものであってよい。
(形状及び配置情報演算部)
形状及び配置情報演算部102は、上述したように、センサ46による検出結果に基づいて、挿入部14の形状情報及び被検体200に対する配置情報を含む形状及び配置情報を演算する。形状及び配置情報演算部102は、センサ46から直接得られる情報が座標又は形状の形式になっていない場合、得られた情報を所望の形式に加工する処理を行う。形状情報は曲率を含むこと、また、配置情報は慣性座標系の座標に基づくものであることが望ましい。しかしながら、被検体200に生じる力又は応力に関する力覚情報を最終的に得られるものであればどのような表現方法でも構わない。
形状及び配置情報演算部102は、上述したように、センサ46による検出結果に基づいて、挿入部14の形状情報及び被検体200に対する配置情報を含む形状及び配置情報を演算する。形状及び配置情報演算部102は、センサ46から直接得られる情報が座標又は形状の形式になっていない場合、得られた情報を所望の形式に加工する処理を行う。形状情報は曲率を含むこと、また、配置情報は慣性座標系の座標に基づくものであることが望ましい。しかしながら、被検体200に生じる力又は応力に関する力覚情報を最終的に得られるものであればどのような表現方法でも構わない。
形状及び配置情報演算部102は、センサ46から得られる情報から挿入部14全体の形状及び配置情報を直接求められなくても、センサ46が検出した位置の情報又は形状の情報に対して挿入部14の位置又は形状を補間するなどして、被検体200に生じる力又は応力に関する力覚情報の算出に必要な情報を適宜算出する。具体的には、形状及び配置情報演算部102は、後述する第1の力覚情報及び第2の力覚情報の演算等に用いることを目的に、挿入部14を仮想的にセグメント分けし、セグメントごとの位置、向き、湾曲量等を求める。
形状及び配置情報演算部102で算出された形状及び配置情報は、第1の力覚情報算出部104及び第2の力覚情報算出部108に出力される。
(機械特性記憶部)
機械特性記憶部106は、挿入部14の機械特性を表す機械特性情報を記憶している。機械特性記憶部106は、例えば、挿入部14をセグメント分けした各セグメントの機械特性に関する値を記憶している。言い換えれば、機械特性記憶部106は、可撓性部材12の長手方向の複数の位置における機械特性を表す機械特性情報を記憶している。機械特性は、挿入部14の各セグメントの機械的な特性を示す指標である。機械特性として、例えば、各セグメントのヤング率、質量、一定のねじり量を生じさせるのに必要なねじりモーメントの大きさ、一定の伸縮に必要な圧縮力/引っ張り力の大きさ、曲げ剛性等が挙げられる。曲げ剛性は、挿入部14の各セグメントの曲げにくさを示す指標である。機械特性は、後述する処理を行って第1の力覚情報を得ることができれば、他の量的表現に置き換えられてもよい。
機械特性記憶部106は、挿入部14の機械特性を表す機械特性情報を記憶している。機械特性記憶部106は、例えば、挿入部14をセグメント分けした各セグメントの機械特性に関する値を記憶している。言い換えれば、機械特性記憶部106は、可撓性部材12の長手方向の複数の位置における機械特性を表す機械特性情報を記憶している。機械特性は、挿入部14の各セグメントの機械的な特性を示す指標である。機械特性として、例えば、各セグメントのヤング率、質量、一定のねじり量を生じさせるのに必要なねじりモーメントの大きさ、一定の伸縮に必要な圧縮力/引っ張り力の大きさ、曲げ剛性等が挙げられる。曲げ剛性は、挿入部14の各セグメントの曲げにくさを示す指標である。機械特性は、後述する処理を行って第1の力覚情報を得ることができれば、他の量的表現に置き換えられてもよい。
力覚の検出精度によるが、各セグメントの機械特性を厳密に記憶させておく必要は必ずしもない。挿入部14全体のある機械特性の値を1つの値で代表したり、セグメント数よりも少ない数の値を用いたりしてもよい。また、機械特性の値は、セグメントごとの値ではなく、挿入部14の先端又は基端からの距離に応じた値の配列、関数などであっても構わない。また、機械特性の値は、第1の力覚情報算出部104での定数として、例えばプログラムの一部として、又は、第1の力覚情報算出部104に一緒に記憶されてもよい。
例えば、挿入部14の個体ごとに機械特性の値を設定できると力覚の検出精度の向上が図れる。また、機械特性の値を変更可能にしておくことで、挿入部14の経時変化等に対応した最新の値を第1の力覚情報算出部104で使用することができる。
(第1の力覚情報算出部)
第1の力覚情報算出部104は、形状及び配置情報演算部102から挿入部14の形状及び配置情報を取得する。第1の力覚情報算出部104は、機械特性記憶部106から挿入部14の機械特性情報を取得する。第1の力覚情報算出部104は、形状及び配置情報と機械特性情報とに基づいて、挿入部14の長手方向の1つ以上の位置にかかる力についての力覚情報である第1の力覚情報を算出する。なお、第1の力覚情報の算出に用いる情報は、挿入部14の形状及び配置情報は、形状及び配置情報演算部102から取得される挿入部14の形状及び配置情報に限定されない。第1の力覚情報算出部104は、挿入部14にかかる力を取得することが可能な他のセンサあるいは演算部を用いて第1の力覚情報を算出してよい。
第1の力覚情報算出部104は、形状及び配置情報演算部102から挿入部14の形状及び配置情報を取得する。第1の力覚情報算出部104は、機械特性記憶部106から挿入部14の機械特性情報を取得する。第1の力覚情報算出部104は、形状及び配置情報と機械特性情報とに基づいて、挿入部14の長手方向の1つ以上の位置にかかる力についての力覚情報である第1の力覚情報を算出する。なお、第1の力覚情報の算出に用いる情報は、挿入部14の形状及び配置情報は、形状及び配置情報演算部102から取得される挿入部14の形状及び配置情報に限定されない。第1の力覚情報算出部104は、挿入部14にかかる力を取得することが可能な他のセンサあるいは演算部を用いて第1の力覚情報を算出してよい。
力覚情報は、上述したように、力のかかる位置、力の向き、大きさの少なくとも1つ以上を含む、力の情報である。位置、向き、大きさのうち既知のものは、ここで演算する第1の力覚情報から除外して構わない。また、不要な情報、例えば、操作者らへの呈示情報としない情報、も除外して構わない。
第1の力覚情報の算出は、例えば、力学的な原理に基づいて行われる。第1の力覚情報の算出の一例が以下に示される。
(検出原理1)各セグメントにおいて、「変形状態から推定される第1の内力Fs」と「外部から印加される力から推定される第2の内力Ff」とがほぼ等しい。
(検出原理2)各セグメントにおいて、「形状情報から推定される第1の曲げモーメントMb」と「外部から印加される力から推定される第2の曲げモーメントMf」とがほぼ等しい。
(検出原理1)各セグメントにおいて、「変形状態から推定される第1の内力Fs」と「外部から印加される力から推定される第2の内力Ff」とがほぼ等しい。
(検出原理2)各セグメントにおいて、「形状情報から推定される第1の曲げモーメントMb」と「外部から印加される力から推定される第2の曲げモーメントMf」とがほぼ等しい。
これらは、静的なつり合いに基づくもので、挿入部14及び被検体200の動きが緩やかであることを前提とする。内視鏡10などの挿入機器による挿入、診断、治療等では、挿入部14及び被検体200は概ね緩やかに動くから、当該前提に当てはまる。それ故、精度の高い結果が想定される。
第1の力覚情報の算出には、こうした静的な力のつり合い以外の力学的な原理、例えば、動的な運動方程式、を用いてもよいし、静的な力のつり合いと他の力学的な原理の組合せを用いてもよい。また、物理的な表現の仕方を変えた式を用いてもよい。
以下、検出原理1の具体例である、検出原理2についての第1の力覚情報の算出の概略を説明する。
図7は、内視鏡10の挿入部14をセグメント分けした様子を示している。図7では、挿入部14の先端側のセグメント1から手元側のセグメントNまでのN個のセグメントがあるものとする。これらのうち、セグメントSGsからセグメントSGeまでのNs個のセグメントが算出対象である。
静的なつり合いに基づく第1の力覚情報の算出では、第1の力覚情報算出部104は、セグメントごとに、形状情報から推定される第1の曲げモーメントMbと、外部から印加される力から推定される第2の曲げモーメントMfとを算出する。これによって、第1の曲げモーメントMbと第2の曲げモーメントMfとがほぼ等しいという条件式が計算を行った挿入部14のセグメントの数Nsだけできる。
一方、算出する第1の力覚情報では、力の数Nfと求める情報内容の数Ncの積、つまりNf×Ncだけ変数がある。
以下が成立するとき、変数の値は一意的に求めることができる。
条件式の数(Ns)=変数の数(Nf×Nc)
条件式の数(Ns)=変数の数(Nf×Nc)
また、以下が成立するとき、変数の値は一意的に求めることができず、適切と思われる変数の解の組合せを求める。通常、特定の評価式を最小、又は、最大とする最適化手法によって解の組合せを求める。
条件式の数(Ns)>変数の数(Nf×Nc)
条件式の数(Ns)>変数の数(Nf×Nc)
第1の力覚情報算出部104は、挿入部14の各セグメントにおける、機械特性情報、例えば曲げ剛性値、と、形状情報とから、第1の曲げモーメントMbを求める、言い換えれば、推定する。機械特性情報は、機械特性記憶部106から取得される。形状情報は、形状及び配置情報演算部102から取得される。
単純化のために2次元の場合における算出方法について説明する。
各セグメントは、曲げモーメントが加わらない場合、真っ直ぐであるとする。ただし、湾曲部32の部分は、湾曲操作によって湾曲可能であり、外力による曲げモーメントがない場合の形状が真っ直ぐではないことがある。したがって、この部分については、外力が加わっていない状態を基準とし、この状態からの変化によって第1の曲げモーメントMbが求められる。なお、単純化のためには、湾曲部32は演算対象のセグメントから除外してもよい。
各セグメントは、曲げモーメントが加わらない場合、真っ直ぐであるとする。ただし、湾曲部32の部分は、湾曲操作によって湾曲可能であり、外力による曲げモーメントがない場合の形状が真っ直ぐではないことがある。したがって、この部分については、外力が加わっていない状態を基準とし、この状態からの変化によって第1の曲げモーメントMbが求められる。なお、単純化のためには、湾曲部32は演算対象のセグメントから除外してもよい。
i番目のセグメントであるセグメントSGiの湾曲形状が図8に示される。ここでは、セグメントSGiの形状を円弧に近似している。
ここで、以下のように定義を行う。なお、以下で「i」はセグメントSGiに対応する添え字である。
形状から推定される曲げモーメント: Mbi
ヤング率: Ei
断面2次モーメント: Ii
セグメントSGiの方向ベクトル: ei
ここで、方向ベクトルeiは、セグメントSGi+1とセグメントSGiとの接続部での方向ベクトルであり、セグメントSGi-1側に向く。
紙面に垂直な方向ベクトル: Vi
曲率: χi(=1/ρi)
ここで、ρiは曲率半径である。
曲げ剛性: Gi(=Ei・Ii)
形状から推定される曲げモーメント: Mbi
ヤング率: Ei
断面2次モーメント: Ii
セグメントSGiの方向ベクトル: ei
ここで、方向ベクトルeiは、セグメントSGi+1とセグメントSGiとの接続部での方向ベクトルであり、セグメントSGi-1側に向く。
紙面に垂直な方向ベクトル: Vi
曲率: χi(=1/ρi)
ここで、ρiは曲率半径である。
曲げ剛性: Gi(=Ei・Ii)
このとき、任意のセグメントSGiについて、材料力学から以下の関係が成り立つ。
Mbi=Ei/ρi・Ii ・・・式1
αi=Li/ρi ・・・式2
ここで、αiは角度[rad]である。
Mbi=Ei/ρi・Ii ・・・式1
αi=Li/ρi ・・・式2
ここで、αiは角度[rad]である。
式1及び式2から、以下の関係が導かれる。
Mbi=(αi/Li)・(Ei・Ii)=χi・Gi ・・・式3
ここで、「Ei・Li=Gi」が曲げ剛性と呼ばれる。
Mbi=(αi/Li)・(Ei・Ii)=χi・Gi ・・・式3
ここで、「Ei・Li=Gi」が曲げ剛性と呼ばれる。
式3から、湾曲形状又は形状情報から推定される、セグメントSGiでの第1の曲げモーメントMbが求められる。
Giは曲率χiの大きさに伴って若干変化しうる。そのため、Giを定数とみなして扱ってもよいし、厳密さを求めるのであれば、曲率χiの変数とみなして扱ってもよい。
2次元では、挿入部14の先端に近いセグメントSGi-1側が左回りに曲がるとき、曲げモーメントMbi>0及び角度αi>0とする。
また、第1の力覚情報算出部104では、挿入部14の各セグメントに生じる、外部から印加される力による第2の曲げモーメントMfを求める又は推定する。
具体的な算出について、単純化のために挿入部14に1つの力が働く場合から説明する。図9において、外力によってセグメントSGiに印加される第2の曲げモーメントMfiは、力学的に以下のようになる。
<<2次元(XY座標)の場合>>
ここではベクトルである押圧力Fのかかる位置がセグメントSGiの位置よりも先端側にある場合には、第2の曲げモーメントMfiは、以下の通りである。なお、第2の曲げモーメントMfiはスカラーであり、左回りの曲げモーメントのとき値+とする。
Mfi=(di×F)のz成分 ・・・式4a
ここで、
「×」: 外積
di: セグメントSGiの中心から押圧力Fのかかった位置までのベクトル
である。
Mfi=|di×F|(絶対値)
としてもよい。
ここではベクトルである押圧力Fのかかる位置がセグメントSGiの位置よりも先端側にある場合には、第2の曲げモーメントMfiは、以下の通りである。なお、第2の曲げモーメントMfiはスカラーであり、左回りの曲げモーメントのとき値+とする。
Mfi=(di×F)のz成分 ・・・式4a
ここで、
「×」: 外積
di: セグメントSGiの中心から押圧力Fのかかった位置までのベクトル
である。
Mfi=|di×F|(絶対値)
としてもよい。
また、押圧力Fのかかる位置がセグメントSGiの位置よりも手元側にある場合には、第2の曲げモーメントMfiは、以下の通りである。
Mfi=0 ・・・式4b
これはスカラーである。
Mfi=0 ・・・式4b
これはスカラーである。
<<3次元の場合>>
ここではベクトルである押圧力Fのかかる位置がセグメントSGiの位置よりも先端側にある場合には、第2の曲げモーメントMfiは、以下の通りである。なお、第2の曲げモーメントMfiはベクトルである。
Mfi=di×F ・・・式4c
ここではベクトルである押圧力Fのかかる位置がセグメントSGiの位置よりも先端側にある場合には、第2の曲げモーメントMfiは、以下の通りである。なお、第2の曲げモーメントMfiはベクトルである。
Mfi=di×F ・・・式4c
また、押圧力Fのかかる位置がセグメントSGiの位置よりも手元側にある場合には、第2の曲げモーメントMfiは、以下の通りである。
Mfi=0 ・・・式4d
これは0ベクトルである。0ベクトルとは、大きさ0のベクトルのことである。
Mfi=0 ・・・式4d
これは0ベクトルである。0ベクトルとは、大きさ0のベクトルのことである。
複数の力が働く場合には、力のかかる位置がセグメントSGiの位置よりも先端側にある押圧力Fjについて、複数の力の合力を計算すればよい。力が分布荷重の場合、後述するように、特定の複数点に集中しているものとみなせばよい。
<<2次元(XY座標)の場合>>
この場合、第2の曲げモーメントMfiは、以下の通りである。
Mfi=[Σ(dij×Fj)]のz成分
ただし、セグメントSGiの位置よりも先端側にある力のみ計算する。 ・・・式5a
ここで、
Fj: 外力(ベクトル)
「×」: 外積
である。
Mfi=|Σ(dij×Fj)|(絶対値)
としてもよい。
この場合、第2の曲げモーメントMfiは、以下の通りである。
Mfi=[Σ(dij×Fj)]のz成分
ただし、セグメントSGiの位置よりも先端側にある力のみ計算する。 ・・・式5a
ここで、
Fj: 外力(ベクトル)
「×」: 外積
である。
Mfi=|Σ(dij×Fj)|(絶対値)
としてもよい。
<<3次元の場合>>
この場合、第2の曲げモーメントMfiは、以下の通りである。
Mfi=Σ(dij×Fj)
ただし、セグメントSGiの位置よりも先端側にある力のみ計算する。 ・・・式5b
この場合、第2の曲げモーメントMfiは、以下の通りである。
Mfi=Σ(dij×Fj)
ただし、セグメントSGiの位置よりも先端側にある力のみ計算する。 ・・・式5b
第1の力覚情報算出部104では、第1の力覚情報として、力の位置と向きと大きさとのうち、少なくとも必要なものを、第1の曲げモーメントMbiと第2の曲げモーメントMfiとの関係Mfi≒Mbiに基づいて算出する。例えば、押圧力F又はFjのかかる位置と、向きと、大きさとの少なくとも1つが算出される。
以上のような手法を用いて、第1の力覚情報算出部104は、可撓性部材12である挿入部14にかかる力に関する第1の力覚情報を算出する。第1の力覚情報は、第2の力覚情報算出部108に出力される。
(被検体情報推定部)
被検体情報推定部110は、被検体情報を推定する。被検体情報は、被検体200の形状及び配置、解剖学的配置、引っ張り強度、固定部の領域又は位置等を含む。ここで、固定部とは、被検体200が被検体200の外部の構造物に固定されている部分である。
被検体情報推定部110は、被検体情報を推定する。被検体情報は、被検体200の形状及び配置、解剖学的配置、引っ張り強度、固定部の領域又は位置等を含む。ここで、固定部とは、被検体200が被検体200の外部の構造物に固定されている部分である。
被検体情報は、内視鏡挿入中にリアルタイムで取得した被検体200の情報、被検体200に対してCT(Computed Tomography)等の他の機器で事前に測定した情報、その被検体200に対する前回の内視鏡挿入時の測定情報、前回使用した情報などであってよい。しかしながら、被検体情報は、必ずしも事前、又はリアルタイムに得ることはできない。そのため、被検体200の管空の形状及び配置、引っ張り強度、固定位置等の情報について、予め決められた値を一般的な値として用いたり、身長、体重、腹囲、年齢、性別等の身体的特徴に応じて予め決められた値として用いたりしてもよい。すなわち、被検体情報は、被検体200のパーソナルデータを含む入力情報から推定された推定情報、一般的な人体モデル情報などであってよい。また、被検体200への内視鏡挿入中に、被検体情報を適宜更新することも有効である。被検体200が人体及び動物以外の機器、構造物などである場合には、被検体情報は、当該機器、構造物などの構造的配置等の情報である。
例えば、可撓性部材12である挿入部14の形状及び配置から、被検体200の管空である腸管の形状及び配置、固定位置の情報を推定したり測定したりすることで、腸管に働く力の向き、大きさを推定することが可能となる。
挿入部14が挿入されている腸管の部分では、挿入部14の形状及び配置情報を得ることで、その部分における腸管の形状及び配置情報を得ることができる。また、挿入部14の先端よりも先の腸管の部分についても、挿入部14の先端付近の形状及び配置情報から、ある程度推定を行うことが可能である。その際には、腸管の配置に関する情報を適宜得て推定の精度向上につなげてよい。例えば、前回の内視鏡挿入履歴があれば、その履歴に基づく挿入経路から、腸管の形状及び配置、固定位置を推定できる可能性がある。腸管の固定部の情報は、推定、測定などにより与えるものとする。腸管の厚みに関しても同様である。
(第2の力覚情報算出部)
第2の力覚情報算出部108は、第1の力覚情報算出部104から、挿入部14にかかる力に関する第1の力覚情報を取得する。すなわち、第2の力覚情報算出部108は、力情報取得部として、可撓性部材12にかかる力に関する力情報を取得する。第2の力覚情報算出部108は、被検体情報取得部として、被検体情報推定部110から被検体情報を取得する。第2の力覚情報算出部108は、接触状態推定部112から、挿入部14と被検体200との接触状態情報を取得する。第2の力覚情報算出部108は、取得したこれらの情報に基づいて、被検体200の管空に生じる力又は応力に関する第2の力覚情報を算出する。例えば、第2の力覚情報算出部は、応力推定部として、被検体200に生じる応力を算出する。
第2の力覚情報算出部108は、第1の力覚情報算出部104から、挿入部14にかかる力に関する第1の力覚情報を取得する。すなわち、第2の力覚情報算出部108は、力情報取得部として、可撓性部材12にかかる力に関する力情報を取得する。第2の力覚情報算出部108は、被検体情報取得部として、被検体情報推定部110から被検体情報を取得する。第2の力覚情報算出部108は、接触状態推定部112から、挿入部14と被検体200との接触状態情報を取得する。第2の力覚情報算出部108は、取得したこれらの情報に基づいて、被検体200の管空に生じる力又は応力に関する第2の力覚情報を算出する。例えば、第2の力覚情報算出部は、応力推定部として、被検体200に生じる応力を算出する。
第2の力覚情報を算出するにあたっては、特に、被検体情報が必要である。被検体200の管空の形状及び配置、固定位置等に依存して、被検体200に発生する力が変わるためである。また、被検体200へのダメージを考える際には、被検体200の管空の引っ張り強度等の情報も重要となる。
被検体200の管空内にある挿入部14が被検体200に力を与える場合には2通りある。1つは、挿入部14が管空を介して、主に臓器を押す場合である。もう1つは、挿入部14が主に腸管を押したり、押し当てた部分の周囲を引っ張ったりする場合である。
図10には、挿入部先端14aが腸管202を介して主に臓器204を押している状態が示されている。臓器204は、例えば横隔膜である。図11には、S字結腸の屈曲部の1つであるS-top212付近において、挿入部先端14aが腸管202を押す力Fと、押したときに腸管202が引っ張られる力F1、F2とが示されている。
もし腸管202が弛んだ状態であれば、腸管202を引っ張る力はほとんど発生しない。つまり、そのような状態において被検体200に影響を及ぼす力は、腸管202又はこれを介して臓器204にかかる力である。この力が、患者の痛みの原因となっている可能性がある。
挿入部14が管空を介して臓器204を押す場合について、断面積Sの範囲を力Fで押すとすると、生じる圧力pは以下のように表される。
p=F/S ・・・式8
この圧力pが、挿入部14との接触箇所において腸管202、及び、腸管202を介した臓器204に発生し、被検体200へのダメージ、痛み等の由来となりうる。
p=F/S ・・・式8
この圧力pが、挿入部14との接触箇所において腸管202、及び、腸管202を介した臓器204に発生し、被検体200へのダメージ、痛み等の由来となりうる。
例えば、図10では、内視鏡10の可撓性部材12である挿入部14の半径をrとすると、接触箇所において挿入部先端14aが臓器204を押す面積SはS=πr2となる。ここで臓器204に単位面積当たりに働く圧力pは、以下のように表される。
p=F/S=F/πr2 ・・・式9
p=F/S=F/πr2 ・・・式9
なお、この圧力の値pは平均値であり、挿入部先端14aの角又はエッジの部分が押し当てられると、この値よりも大きな圧力が局所的に発生しうる。
挿入部14の中間部、言い換えれば、挿入部11の先端と基端との間の、挿入部14の長手方向の中間部における所定の長さ部分、が被検体200を押す場合には、第2の力覚情報算出部108は、当該中間部と被検体200との接触状態を示す接触状態情報を接触状態推定部112から取得する。第2の力覚情報算出部108は、例えば、取得した接触状態情報を参照して当該中間部と被検体200との接触面積を求め、式9と同様にして圧力を算出する。
内視鏡10の挿入部14が腸管202を押したり、押し当てられた部分の周辺が引っ張られたりする場合、被検体200への影響が特に大きく生じうるいくつかのパターン、言い換えれば、いくつかの箇所、が考えられる。例えば、以下の通りである。
i)挿入部14が押し当てられた部分
ii)腸管202の力又は応力が集中する部分
iii)腸管固定部208、210、216周辺部分 ・・・図11に矢印で示される力F3、F4参照
上記i)からiii)の箇所がつぶされたり、伸ばされたり、引っ張られたりすることで、被検体200にダメージが与えられたり患者が痛みを感じたりする。
i)挿入部14が押し当てられた部分
ii)腸管202の力又は応力が集中する部分
iii)腸管固定部208、210、216周辺部分 ・・・図11に矢印で示される力F3、F4参照
上記i)からiii)の箇所がつぶされたり、伸ばされたり、引っ張られたりすることで、被検体200にダメージが与えられたり患者が痛みを感じたりする。
本実施形態では、第2の力覚情報算出部108は、これら箇所における力又は応力に関する第2の力覚情報を算出する。以下、これら箇所における力及び応力の算出について説明する。
挿入部14が腸管202に押し当てられたことによる影響の1つとして、腸管202の穿孔が挙げられる。上記i)で挙げた接触箇所で腸管202の穿孔が起こりうる。また、それ以外の箇所であっても例えば上記ii)のような箇所で腸管202が破れてしまうことがしばしばある。特に、上記ii)のような箇所の破れには、操作者がすぐには気付かないことがある。
挿入部14が腸管202に押し当てられた場合に、例えば、厚さtの腸管202の、挿入部14が腸管202に接触する部分の外周の長さである周囲長Cの範囲を力Fで押す場合に、被検体200に生じる応力σについて、図12A乃至図12Cを参照して説明する。
図12Aに示されるような、挿入部14が腸管202と接触していて腸管202を押している面を考える。挿入部14が腸管202を押す力Fに対して、腸管202を肛門側に引っ張る力F1と盲腸側に引っ張る力F2とが発生する。力F1、F2は外力Fの反力であるから、これら3つの力F、F1、F2はつり合う。
単純な例を想定して、力F1の大きさと力F2の大きさとが等しく、FとF1とのなす角度がθ1、FとF2とのなす角度がθ2である場合、3つの力F、F1、F2がつり合うためには、以下の2式が成り立つ。
F1cosθ1+F2cosθ2+F=0 ・・・式10
F1sinθ1=F2sinθ2 ・・・式11
F1cosθ1+F2cosθ2+F=0 ・・・式10
F1sinθ1=F2sinθ2 ・・・式11
例えば、腸管202が腸管固定部208、210、216から引っ張られる程度の力が働く場合、被検体情報推定部110から取得した被検体200の体内の構造に基づく被検体情報から、あるいは、接触状態推定部112から取得した接触状態情報から、角度θ1、θ2の値が推定される。式10及び式11から、力F1、F2が、力F及び角度θ1、θ2を用いて表されることができる。
図12A乃至図12Cに示される力F1、F2が腸管202を引っ張る力として働くが、挿入部14が腸管202に接触する部分の周囲長Cに力F1、F2が働く。腸管202の厚みをtとして、周囲長Cに対して平均的な力が働くとすると、断面積t・Cの面で腸管202が引っ張られる力F1、F2を受ける。このとき、腸管202の周囲長Cに働く応力σは、以下のように表される。
σ=(F1+F2)/(t・C) ・・・式12
σ=(F1+F2)/(t・C) ・・・式12
図12Aには、腸管202に働く応力σの分布が矢印で概略的に示されている。腸管202に対する応力は、力Fに近い側と力F1、F2に近い側とにかかり、両方の側にかかる力がつり合う。式12の応力σは、これらの応力分布が腸管202に対して均一にかかったと想定した場合の平均的な値である。
例えば挿入部先端14aの周囲が被検体200に押し当てられているとき、腸管202の上記周囲長Cは、挿入部先端14aの外周の長さに等しい。挿入部14の断面が半径rの円形である場合には、以下の式が成り立つ。
C≒2πr ・・・式13
よって、式12及び式13から、応力σが算出される。
C≒2πr ・・・式13
よって、式12及び式13から、応力σが算出される。
以下、上記iii)で挙げた、腸管固定部208、210、216周辺で被検体200に生じる力及び応力について説明する。腸管202が固定されている部分としては、肛門、下行結腸、上行結腸などがある。図11では、腸管固定部208、210は、肛門206付近に位置している。腸管固定部216は、下行結腸に位置している。挿入部14が腸管202を押圧して腸管202が引っ張られることで腸管固定部208に、及び、S状結腸と下行結腸との境界部であるSD-J(SD-Junction)214付近の腸管固定部216に力が働く際の状況が図11に示される。
例えば、図11において、挿入部14によって腸管202が引っ張られる力がF1である。このとき、腸管の部分213に力Fがかかることで、腸管202にたるみがある場合にはその部分213は移動し、図11に斜め上向きの矢印で示されるような腸管202の動きにより腸管202のたるみが点線に示すように減少する。途中での引っかかりがなければこの力F1に相当する力F3が腸管固定部208にかかる。また、途中で抵抗があれば、力F1よりも減少した力Faが腸管固定部208にかかる(Fa<F3)。この様子を表したのが、図14である。
腸管固定部208を力Faで図14Aに示される矢印の方向、すなわちおおよそ肛門から結腸へと向かう方向に引っ張っているとする。このとき、図12Aを参照して説明したのと同様に、腸管固定部208での腸管202の厚さをta、力がかかる範囲の長さをCaとすると、腸管固定部208における応力σaは、以下のように表される。
σa=Fa/(ta・Ca) ・・・式14
σa=Fa/(ta・Ca) ・・・式14
図14Bには、肛門206付近の腸管固定部208の手前の部分に働く応力σaの分布の一例が示されている。腸管202に対する応力は、肛門206周辺で挿入部先端14aに近い側と腸管固定部208に近い側とにかかり、両方の側にかかる力がつり合う。式14の応力σaは、これらの応力分布が腸管202に対して均一にかかったと想定した場合の平均的な値である。応力σaは、腸管202に接触する挿入部先端14aと、腸管202が被検体200に固定される肛門付近の腸管固定部208との2方向を向く。
なお、肛門付近の腸管固定部208が比較的大きい範囲に及ぶとき、応力は、腸管202の肛門付近の小さな部分について、その部分に近い腸管固定部208と挿入部先端14aとを結ぶ向きに働く。そのため、図14Cに示されるように、応力σaの向きが、図14Bに示される向きとは若干異なる。
応力σaは、後述する被検体影響判断部114で、肛門周辺で起きる又は起こりうるダメージ、例えば、腸管の断裂、を判断するために用いられる。
以下、第2の力覚情報算出部108における、応力最大値算出について説明する。
腸管の周囲に働く応力σは、目安としては上式のようにして算出されてよいが、安全性の観点から、ある値を超えない、というように大きめに見積もることが望ましい。以下に、応力最大値算出をする3つの理由を挙げる。
腸管の周囲に働く応力σは、目安としては上式のようにして算出されてよいが、安全性の観点から、ある値を超えない、というように大きめに見積もることが望ましい。以下に、応力最大値算出をする3つの理由を挙げる。
第1の理由は、応力が集中する部分があることである。例えば、図12Aの囲み領域C11、C12、及び、図13に示される領域C13、C14の応力が大きくなる。
第2の理由は、例えば、図12Aに示す、挿入部先端12aで腸管202を押す場合のように、腸管202の特定の部分に応力が集中している場合、力が加えられた部分により近いところでは、同じ力を受ける応力の範囲が狭まる、すなわち、周囲長Cの値が小さくなることで、応力σの値が式12で示したものよりも大きくなるからである。
例えば、図13Aに示されるように、腸管202の一部、例えば、挿入部先端14aに近い側と腸管202の肛門及び下行結腸入口であるSD-J付近の固定部側を結んだ途中にある領域C13、C14に応力が集中する場合、応力の値は式12によるσの値よりも大きくなる。例えば、腸管202の領域C13において力F1が集中する範囲の長さをC1としたとすると、そこに働く応力σ1の平均値は、以下のように表される。
σ1=F1/(t・C1) ・・・式15
σ1=F1/(t・C1) ・・・式15
同様に、腸管202の領域C14において力F2が集中する範囲の長さをC2としたとすると、そこに働く応力σ2の平均値は、以下のように表される。
σ2=F2/(t・C2) ・・・式16
σ2=F2/(t・C2) ・・・式16
図13Bには、腸管202に働く応力σ1、σ2の分布の一例が示されている。
第3の理由は、外力F又はその反力F1、F2が時間的に変動し、ある瞬間に大きな値を取る可能性があるからである。
このような応力が増大する可能性から、管空の穿孔等の被検体200へのダメージを考えた場合、応力の最大値を見積もるためには、安全係数をかけるなどすることが有効である。この際の安全率は、実験統計的に導き出してもよいし、理論的に導いてもよいし、これらを組み合わせてもよい。この結果が下式で表される。
σ=α・(F1+F2)/(t・C) ・・・式17
ここで、α:安全率≧1である。このように、式17は、式12の右辺に安全率αを乗じたものである。
σ=α・(F1+F2)/(t・C) ・・・式17
ここで、α:安全率≧1である。このように、式17は、式12の右辺に安全率αを乗じたものである。
再三述べているように、腸管に加わる力又は応力が大きくなると、患者は痛みを感じたり、腸管にダメージを受けたりする可能性がある。例えば、宇野良治らによる論文「Colonic perforation and serosal tears associated with colonoscopy」、Lancet、1997年6月28日、第349巻、第9069号、p.1888には、3kgf/cm2以上が穿孔危険領域とされている。また、宇野良治、外5名、「大腸内視鏡における偶発症を起こさないための注意点、起きてしまったときの対処法」、消化器内視鏡、2000年、第12巻、第2号、p201~206では、内視鏡等の管状湾曲機構を挿入する際に機械的に痛み、穿孔を生じる場合としては、挿入部先端によるものと、スティック現象の頂部で起こるものと、ループ又は鋭角部によるものとの3つが挙げられている。すなわち、上記論文によると、挿入部先端あるいはそれ以外の中間部の鋭角な部分による腸管への加圧により、腸管の応力が一定以上になることで穿孔が生じる。また、山田博、「人体の強度と老化-生物強弱学による測定結果」、日本放送出版協会、1979年9月、90~117頁には、動物及び人の消化管の、部位ごとの一部を横方向に帯状に切り出した試験片を用いて、引っ張り強度、圧裂強さなどを測定、評価した結果が記載されている。応力の最大値は、このような論文等を参考にして設定されてよい。
具体的な応力の発生の例としては、大きく2つに分けられる。図15及び図16に示される、挿入部先端14aで腸管202を押す場合と、図17及び図18Aに示される、挿入部14の中間部で腸管202を押す場合とである。図15では、挿入部先端14aの周囲が腸管202と接触しており、挿入部先端14aは腸管202の内壁から力F5を受けている。図16では、挿入部先端14aの先端面全体が腸管202と接触しており、挿入部先端14aは腸管202の内壁から矢印F5で示される力を受けており、さらに、矢印F6、F7で示される方向に腸管202が引っ張られている。図17及び図18Aでは、挿入部14の中間部が腸管202とさまざまな接触具合で接触しており、挿入部14は接触箇所において腸管202の内壁から矢印F8、F9、F10で示される力を受けている。図18Aでは、さらに、矢印F11、F12で示される方向に腸管202が引っ張られている。
挿入部先端14aで腸管202を押す場合と、挿入部14の中間部で腸管202を押す場合との大きな違いは、挿入部14と腸管202との接触具合である。以下、これら2つの場合の応力σの算出について説明する。
(先端部による応力算出)
挿入部先端14aで腸管202を押す場合について説明する。被検体の内部又は表面から挿入部14にかかる力が挿入部先端14aにかかる場合には、挿入部先端14aの形状と挿入部先端14aの向く方向と力のかかる方向とのなす角度θとを含む接触状態を用いて、応力が求められる。
挿入部先端14aで腸管202を押す場合について説明する。被検体の内部又は表面から挿入部14にかかる力が挿入部先端14aにかかる場合には、挿入部先端14aの形状と挿入部先端14aの向く方向と力のかかる方向とのなす角度θとを含む接触状態を用いて、応力が求められる。
図12Aにおいてθ1=θ2とすると、応力σは、図12Aに示されるように分布する。式12と同様の設定において、応力σを計算する腸管202の周囲長Cは、挿入部先端14aの断面が半径rの円形として、2πrとなる。応力が働く方向に垂直な長さは2rとなるため、2rの幅に図12A乃至図12Cを参照して説明したような力F1、F2が働くと考えることができる。このとき、応力σは、以下のように表される。
σ=α・F/(t・2r・|cosθ|) ・・・式18
ここで、tは式12と同様に腸管202の厚みであり、αは式17と同様に安全率であり、θは上述の角度であり、Fは挿入部14が腸管202を押す力である。
σ=α・F/(t・2r・|cosθ|) ・・・式18
ここで、tは式12と同様に腸管202の厚みであり、αは式17と同様に安全率であり、θは上述の角度であり、Fは挿入部14が腸管202を押す力である。
ここで、式12と式18との関係について補足する。図12Aに示される腸管202のような腸管の特定の範囲にかかる力は、外向きの力F1と力F2とであり、さらにこれとつりあう力がFから生じている。逆に力Fを基準に考えると、力F1、F2は、力Fとなす角をθ1、θ2として、
F1=α・F/|cosθ1|
F2=(1-α)F/|cosθ2|
となる。θ1=θ2=θのとき、以下のようになる。
F1+F2=F/|cosθ|
これらを用いて、式12から式18が導ける。
F1=α・F/|cosθ1|
F2=(1-α)F/|cosθ2|
となる。θ1=θ2=θのとき、以下のようになる。
F1+F2=F/|cosθ|
これらを用いて、式12から式18が導ける。
腸管202の引っ張られる2つの力の向きと大きさが不揃いの場合には、それぞれの力が計算されてもよい。特に、2つのうち大きいほうを考慮することで被検体200へのダメージを想定し、対策等を実施することができる。
(中間部による応力算出)
挿入部14の中間部で腸管202を押す場合について説明する。挿入部14にかかる力が挿入部14の長手方向の中間部にかかる場合には、力がかかる位置周辺での挿入部14の断面形状と挿入部14の中心軸方向とかかる力の方向とのなす角度θとを含む接触状態を用いて、応力が求められる。
挿入部14の中間部で腸管202を押す場合について説明する。挿入部14にかかる力が挿入部14の長手方向の中間部にかかる場合には、力がかかる位置周辺での挿入部14の断面形状と挿入部14の中心軸方向とかかる力の方向とのなす角度θとを含む接触状態を用いて、応力が求められる。
挿入部14の中間部で腸管202を押す場合、腸管202の周囲長Cの部分に働く応力σは、周囲長さCの部分に均等にかかるものとして、以下のように表される。
σ=α・F/(t・C・|cosθ|) ・・・式19
ここで、tは式12と同様に腸管202の厚みであり、αは式17と同様に安全率であり、θは上述の角度であり、Fは挿入部14が腸管202を押す力である。
σ=α・F/(t・C・|cosθ|) ・・・式19
ここで、tは式12と同様に腸管202の厚みであり、αは式17と同様に安全率であり、θは上述の角度であり、Fは挿入部14が腸管202を押す力である。
応力σを計算する腸管202の周囲長Cは、挿入部14の断面形状や湾曲形状と腸管202が引っ張られる方向により、様々な形を取り得る。そのため、詳細な検討を行うには、個々の状況に応じた検討が必要である。ここでは、形状の一例について、単純化して検討を行うこととする。
図18Bに示されるように、挿入部14の断面形状を半径rの円形状とし、腸管202の周囲長Cの部分の短手方向の長さを2rとする。例えば、周囲長Cの形状を楕円だとする。腸管202の周囲長Cの長手方向の長さをLとし、周囲長Cの部分は短軸2r、長軸Lの楕円形状とする。このとき、周囲長Cは、rとLを用いて、以下のようになる。
挿入部先端14aによる応力算出の場合と同様に、腸管202の引っ張られる2つの力の向きと大きさが不揃いの場合には、それぞれの力が計算されてもよい。特に、2つのうち大きいほうを考慮することで被検体200へのダメージを想定し、対策等を実施することができる。
以上のようにして、第2の力覚情報算出部108は、被検体200の管空に生じる力又は応力に関する第2の力覚情報として、挿入部先端14a又は挿入部14の中間部が押し当てられたことにより被検体200の内部又は表面に生じる応力を算出する。
(接触状態推定部)
接触状態推定部112は、挿入部14と被検体200との接触状態を推定する。上述したように、第2の力覚情報の算出、特に応力情報の算出、にあたっては、挿入部14が被検体200の管空にどのように接触しているかに関する情報、例えば、応力を計算する際に用いる腸管の周囲長C、が必要である。接触状態推定部112は、例えば、周囲長Cを想定/算出するために、挿入部14が被検体200の管空にどう接触しているのか推定する。言い換えれば、接触状態推定部112は、接触領域推定部として、可撓性部材12と被検体200との接触が生じている領域である接触領域の外周の長さを推定し、さらに、接触領域を応力推定領域、すなわち、応力を推定する対象領域として設定する。
接触状態推定部112は、挿入部14と被検体200との接触状態を推定する。上述したように、第2の力覚情報の算出、特に応力情報の算出、にあたっては、挿入部14が被検体200の管空にどのように接触しているかに関する情報、例えば、応力を計算する際に用いる腸管の周囲長C、が必要である。接触状態推定部112は、例えば、周囲長Cを想定/算出するために、挿入部14が被検体200の管空にどう接触しているのか推定する。言い換えれば、接触状態推定部112は、接触領域推定部として、可撓性部材12と被検体200との接触が生じている領域である接触領域の外周の長さを推定し、さらに、接触領域を応力推定領域、すなわち、応力を推定する対象領域として設定する。
接触状態としては、図19及び図20に示すような例が挙げられる。図19は、挿入部先端14aが腸管202に接触している状態の一例を内視鏡上方から見た断面の一例を示す図である。腸管202に働く、盲腸側に引っ張られる力F13と、肛門側に引っ張られる力F14とが概念的に示されている。図20は、挿入部14の中間部が腸管202に接触している状態の一例を内視鏡上方から見た断面の一例を示す図である。腸管202に働く、盲腸側に引っ張られる力F15と、肛門側に引っ張られる力F16とが概念的に示されている。各図に示される挿入部先端14a及び挿入部14が、腸管202の腸壁に接触している。
接触状態推定部112は、このような接触状態を挿入部14の被検体200の管空内での配置及び形状に基づいて推定する。第2の力覚情報算出部108で第2の力覚情報にかかる応力を計算するのが最終的な目的であるから、接触状態推定部112は、接触部分での管空の厚みも含めて接触状態を推定する。
接触状態の推定には、予め決められた又はパターン化された接触状態を用いてもよいし、身長、体重、腹囲、年齢、性別等の身体的特徴に応じて予め決められた値を用いてもよいし、その都度計算を行ってもよい。例えば、被検体情報推定部110で用いるのと同様の、挿入部14の被検体200の管空内での配置及び形状を用いて、挿入部14と被検体200との接触状態を推定することができる。中間部の接触状態は、湾曲状態、すなわち、曲率によって異なるため、曲率ごとに値を決めておいてもよいし、曲率を1つの変数とする関数としておいてもよい。
(被検体影響判断部)
被検体影響判断部114は、第2の力覚情報算出部108から、第2の力覚情報を取得する。被検体影響判断部114は、第2の力覚情報と判断基準とに基づいて、被検体200への影響を判断する。被検体影響判断部114での具体的な判断内容として、例えば、被検体200に与える痛み、断裂、破損、穿孔などのダメージの有無、ダメージの内容の程度が挙げられる。
被検体影響判断部114は、第2の力覚情報算出部108から、第2の力覚情報を取得する。被検体影響判断部114は、第2の力覚情報と判断基準とに基づいて、被検体200への影響を判断する。被検体影響判断部114での具体的な判断内容として、例えば、被検体200に与える痛み、断裂、破損、穿孔などのダメージの有無、ダメージの内容の程度が挙げられる。
例えば、腸管固定部208を力Faでθaの方向に引っ張っているとする。このとき、例えば、腸管202が断裂する、腸管固定部208が断裂する、腸管202と腸管固定部208との間が剥離するなどのダメージのうち2つ以上のダメージが同時に発生することが考えられる。被検体影響判断部114では、肛門206周辺の腸管固定部208、210での上述のダメージ又は起こりうる他のダメージ、例えば、腸管-固定部間の剥離、を(Fa,θa)の組合せを入力として判断する。
また、単位面積当たりの応力σaからダメージを判断する場合には、被検体影響判断部114は、肛門206周辺で起こる又は起こりうるダメージ、例えば、腸管202の断裂を、上記式14で表される応力σaを入力として判断する。
被検体影響判断部114での判断基準は、経験、実験結果、シミュレーション結果等に基づき、入力と判断結果の関係をまとめたものとする。
肛門での被検体への影響の判断の仕方を説明したが、肛門以外にも同様の判断の仕方が適用できる。
腸管は、肛門周辺、下行結腸、上行結腸周辺で体に対して固定されているため、挿入部が腸管を押す部分によって、例えば図12を参照して説明したθ1、θ2の値がそれぞれ変化する。ここで、腸管の配置は体型、例えば、身長、腹囲、肥満度、腸の長さ等に依存するため、体型に基づいた推定、算出が必要となる。また、厚さtの値、影響の度合いについては、年齢、性別も関係してくるため、こうした条件も被検体情報として考慮して被検体への影響を判断する必要がある。つまり、被検体影響判断部114での判断でも、被検体情報推定部110による被検体情報を用いることが有用である。
例えば、上記式8、式9を参照して説明した圧力pがどの臓器に影響を与えているか、言い換えれば、どの臓器を押しているか、は、被検体内における挿入部14の形状及び配置、被検体の解剖学的配置、これらの組合せ、力の変化等から判断可能である。例えば、式8の断面積Sは、挿入部14又は挿入部先端14aが押し当てられた部分の形状に主に依存する。押し当て方が類型化又はパターン化されていれば、断面積Sはパターンごとに一定と見なされることができ、圧力Sの代わりに力Fで、押し当て方ごとにダメージ、痛み等の被検体への影響が判断されることができる。
被検体影響判断部114は、判断基準に基づく被検体へのダメージの有無、内容、程度の判断に関する影響判断情報を情報出力部116に伝達する。
(情報出力部)
情報出力部116は、第2の力覚情報と影響判断情報とを含む出力情報を制御装置100の外部に出力する。また、情報出力部116は、出力情報記憶部118に出力情報を伝達する。
情報出力部116は、第2の力覚情報と影響判断情報とを含む出力情報を制御装置100の外部に出力する。また、情報出力部116は、出力情報記憶部118に出力情報を伝達する。
(出力情報記憶部)
出力情報記憶部118は、情報出力部116からの出力情報を記憶する。出力情報は、情報呈示装置140にも出力される情報である。出力情報記憶部118は、形状及び配置情報演算部102で演算された形状及び配置情報、時刻、経過時間等も記録してよい。このような記録により、応力の発生箇所、応力発生時の挿入部14の発生箇所での状況が確認可能となる。
出力情報記憶部118は、情報出力部116からの出力情報を記憶する。出力情報は、情報呈示装置140にも出力される情報である。出力情報記憶部118は、形状及び配置情報演算部102で演算された形状及び配置情報、時刻、経過時間等も記録してよい。このような記録により、応力の発生箇所、応力発生時の挿入部14の発生箇所での状況が確認可能となる。
(情報呈示装置)
情報呈示装置140は、情報出力部116を介して、第2の力覚情報算出部108から得られた第2の力覚情報と被検体影響判断部114から得られた影響判断情報との少なくとも一方の情報を取得する。情報呈示装置140は、第2の力覚情報と影響判断情報との少なくとも一方の情報、若しくは、これらに基づいて、適宜、術者等への呈示に適するように加工された情報を呈示する。
情報呈示装置140は、情報出力部116を介して、第2の力覚情報算出部108から得られた第2の力覚情報と被検体影響判断部114から得られた影響判断情報との少なくとも一方の情報を取得する。情報呈示装置140は、第2の力覚情報と影響判断情報との少なくとも一方の情報、若しくは、これらに基づいて、適宜、術者等への呈示に適するように加工された情報を呈示する。
情報呈示装置140は、例えば、液晶ディスプレイ等のモニタ画面を含む表示装置、音声デバイス、内視鏡10の操作部16に設けた振動デバイス及び電気刺激デバイスなどの少なくとも1つであってよい。すなわち、情報呈示装置140は、視覚的な呈示装置、聴覚的な呈示装置、触覚的な呈示装置のいずれか、又はこれらの組合せであってよい。出力方法としては、表示装置を例に取ると、文字、記号、図形、画像などが考えられる。これらの装置又は方法は、2以上のものを同時に用いてもよいし、力覚情報、影響判断結果の程度に応じて切り替えて用いてもよい。
図21は、第1の実施形態に係る力覚評価システム1aの主要な構成の他の例を概略的に示す図である。以下、力覚評価システム1aについて、力覚評価システム1aと力覚評価システム1との相違点のみを説明する。
力覚評価システム1aは、内視鏡システム2aと、制御装置100aとを含む。内視鏡システム2aは、内視鏡10aを含む。内視鏡10aは、駆動機構44を含む。制御装置100aは、力覚評価システム1の情報出力部116、出力情報記憶部118及び情報呈示装置140に代わって、フィードバック回路120と、フィードバック情報記憶部122と、駆動回路124とを含む。内視鏡システム2aでは、挿入部14の駆動系の一部が電動化/自動化されていることが前提である。
なお、力覚評価システム1aが情報出力部116、出力情報記憶部118及び情報呈示装置140を備えてもよい。
(駆動機構)
内視鏡10aの操作部16は、駆動機構44の少なくとも一部を含んでよい。駆動機構44は、例えばモータなどの駆動系を含む。駆動機構44は、挿入部14に動力を与えることにより挿入部14の湾曲形状と位置との少なくとも一方の変化を生じさせる。このように、内視鏡10aは、駆動系の少なくとも一部が電動化された電動内視鏡又は自動挿入内視鏡である。
内視鏡10aの操作部16は、駆動機構44の少なくとも一部を含んでよい。駆動機構44は、例えばモータなどの駆動系を含む。駆動機構44は、挿入部14に動力を与えることにより挿入部14の湾曲形状と位置との少なくとも一方の変化を生じさせる。このように、内視鏡10aは、駆動系の少なくとも一部が電動化された電動内視鏡又は自動挿入内視鏡である。
(フィードバック回路及び駆動回路)
フィードバック回路120は、第2の力覚情報算出部108から得られた第2の力覚情報と被検体影響判断部114から得られた影響判断情報との少なくとも一方に基づいて、適宜、挿入部14の駆動機構44へのフィードバックに適したように加工された駆動制御情報を駆動回路124に提供する。駆動回路124は、フィードバック情報等に基づいて、駆動機構44を動作させる。
フィードバック回路120は、第2の力覚情報算出部108から得られた第2の力覚情報と被検体影響判断部114から得られた影響判断情報との少なくとも一方に基づいて、適宜、挿入部14の駆動機構44へのフィードバックに適したように加工された駆動制御情報を駆動回路124に提供する。駆動回路124は、フィードバック情報等に基づいて、駆動機構44を動作させる。
(フィードバック情報記憶部)
フィードバック情報記憶部122は、フィードバックされる第2の力覚情報と影響判断情報と駆動制御情報との少なくとも1つを記憶する。これら情報は、フィードバック回路120にも出力される情報である。出力情報記憶部118は、形状及び配置情報演算部102で演算された形状及び配置情報、時刻、経過時間等も記録してよい。このような記録により、応力の発生箇所、応力発生時の挿入部14の発生箇所などでの状況が確認可能となる。
フィードバック情報記憶部122は、フィードバックされる第2の力覚情報と影響判断情報と駆動制御情報との少なくとも1つを記憶する。これら情報は、フィードバック回路120にも出力される情報である。出力情報記憶部118は、形状及び配置情報演算部102で演算された形状及び配置情報、時刻、経過時間等も記録してよい。このような記録により、応力の発生箇所、応力発生時の挿入部14の発生箇所などでの状況が確認可能となる。
(力覚評価フロー)
図23は、力覚評価システム1又は1aによる処理フローの一例を示す図である。力覚評価システム1又は1aは、例えば、制御装置100又は100aのプロセッサを上述の各部の全部又は一部として機能させるためのソフトウェアプログラムをメモリ内に用意しておき、そのプログラムをプロセッサが実行することで、上述の各部の少なくとも一部の機能をプロセッサが実施するものであってよい。以下、このようなプロセッサによる処理の一例について説明する。
図23は、力覚評価システム1又は1aによる処理フローの一例を示す図である。力覚評価システム1又は1aは、例えば、制御装置100又は100aのプロセッサを上述の各部の全部又は一部として機能させるためのソフトウェアプログラムをメモリ内に用意しておき、そのプログラムをプロセッサが実行することで、上述の各部の少なくとも一部の機能をプロセッサが実施するものであってよい。以下、このようなプロセッサによる処理の一例について説明する。
ステップS11において、力覚評価システム1又は1aは、挿入部14又は可撓性部材12の形状及び配置情報を演算する。ステップS12において、力覚評価システム1又は1aは、ステップS11で取得した形状及び配置情報に基づいて、挿入部14にかかる力に関する第1の力覚情報を算出する。ステップS13において、力覚評価システム1又は1aは、被検体200の管空に生じる力又は応力に関する第2の力覚情報を算出する。ステップS14において、力覚評価システム1又は1aは、被検体が受けている/受けうる影響を判断する。ステップS15において、力覚評価システム1は、情報を出力する。あるいは、力覚評価システム1aは、駆動機構44に第2の力覚情報/影響判断情報に基づく情報をフィードバックする。
ステップS16において、力覚評価システム1又は1aは、処理を終了するか否かを判定する。終了しないと判定された場合には(ステップS16-No)、ステップS11に戻り、ステップS11以下の処理が繰り返される。終了すると判定された場合には(ステップS16-Yes)、処理は終了する。
このような処理によって、可撓性部材12である挿入部14の配置又は変形のみを検出することで、被検体の管空に生じる力覚情報を、力又は応力を直接測定しなくても効率よく評価することができる。
例えば、内視鏡が被検体に与える影響として、力、圧力を直接測定する試みもある。圧力を検出するには、圧力センサ等のデバイスを用いる方法がある。しかしながら、管状湾曲機構の表面に働く圧力を広い範囲で検出しようとすると多くのセンサを表面付近に配置する必要がある。そうすると、センサ又は配線の設置スペースで確保するために管状湾曲機構の外径が大きくなったり、部材費用又は実装費用がかさんだりする可能性が高い。また、力を検出する触覚センサ、ひずみゲージ、感圧抵抗体、電動ゴムといった電気式センサ、光ファイバ等の光電式センサなどのデバイスを用いて力を検出したり、検出された力と力のかかる面積から単位面積当たりにかかる力、すなわち圧力を検出したりする方法が考えられる。しかしながら、センサが接触している部分に働く力がわかっても、対象となる被検体内部に生じる力が求められなかったり、力から圧力を求めるのに必要な情報、例えば、管状湾曲機構の形状が得られなかったり、特定の条件での圧力が計算できても管状湾曲機構の形状が変化したり、力のかかる位置が変化したときに圧力を計算できなかったり、精度が極端に低下する可能性がある。
これに対して、本実施形態によれば、被検体の体内又は体外の表面に加わる力によって生じる力又は応力に関する第2の力覚情報を、特に、応力推定領域の外周における応力の情報を、直接測定しなくても算出することができる。本実施形態では、被検体を直接測定する力センサ及び応力センサが不要で省スペース化が実現される。例えば、可撓性部材12である挿入部14の細径化が可能である。
また、力覚評価システム1は、被検体情報から被検体に加わる力の情報を推定、算出し、被検体の体内、又は、体外の表面に加わる応力を推定することで、力及び応力の検出精度を高めることができる。
また、力覚評価システム1では、力及び応力の最大値、又は、最大値の取り得る上限を算出することが可能である。これにより、被検体の体内、又は、体外の表面に生じるダメージを推測することが容易となる。
また、力覚評価システム1は、可撓性部材12と被検体200との接触状態、例えば接触領域を推定する接触領域推定部としての接触状態推定部112を含む。被検体に加わる力の情報から被検体の管空に加わる応力を推定するためには、可撓性部材と被検体の体内、又は、体外の表面との接触状態を仮定したり、推定したりする必要がある。その時々の接触状態を推定することで、応力の検出精度を高めることができる。
挿入部先端14aなど、可撓性部材の先端は、腸管等に穿孔を生じさせるといったように、被検体の体内、又は、体外にダメージを与える部位の1つである。挿入部14が挿入経路から外れたり、腸管等の被検体の体内、又は、体外の表面に引っかかったりする場合に、可撓性部材の先端の挿入状態、例えば、形状、体内配置、力情報、さらには、被検体の体内、又は、体外の表面の形状、配置情報、に基づいて、接触状態を推定することで、力及び応力の検出精度を高めることができる。
また、本実施形態では、機械特性記憶部106に記憶された可撓性部材12の機械特性の値が、第1の力覚情報算出部104で取得される。これにより、可撓性部材12に作用する力の検出を簡便な方法で行うことができ、センサを設けて可撓性部材12の径を太くする必要もなく、リアルタイム検出可能な実用的な力及び応力検出機能を有する力覚評価システムとなる。
また、本実施形態では、被検体情報推定部110で推定された被検体情報が第2の力覚情報算出部108で取得される。これにより、被検体の機能への影響の程度が分かることから、操作の中断又は操作解除、すなわち、操作を戻すことをすべきか、操作を継続してもよいかの判断が可能となる。また、生じたと推定される力及び応力に基づいて、被検体への所定の処置を行うべきかの判断などを行うことも可能である。
また、情報呈示装置140により、操作者へ、力及び応力の情報、又は、被検体に与える影響の程度を示す情報の少なくとも一方を提供することで、操作者が適宜対応を検討して判断した上で、操作者による安全な操作の継続、問題のある操作の中断又は問題のある状態からの復帰が可能となる。
また、フィードバック回路120により、駆動機構44へ、力及び応力の情報、又は、被検体に与える影響の程度を示す情報の少なくとも一方を提供し、力及び応力が一定値以下となるように駆動することで、駆動機構44による安全な駆動又は操作の継続、問題のある駆動又は操作の中断又は問題のある状態からの復帰が可能となる。
<第1の実施形態:変形例>
図23は、第1の実施形態の変形例に係る力覚評価システム1bの主要な構成の一例を概略的に示す図である。図24は、第1の実施形態の変形例に係る力覚評価システム1cの主要な構成の一例を概略的に示す図である。以下、力覚評価システム1bについて、力覚評価システム1bと力覚評価システム1との相違点のみを説明する。力覚評価システム1cについて、力覚評価システム1cと力覚評価システム1aとの相違点のみを説明する。
図23は、第1の実施形態の変形例に係る力覚評価システム1bの主要な構成の一例を概略的に示す図である。図24は、第1の実施形態の変形例に係る力覚評価システム1cの主要な構成の一例を概略的に示す図である。以下、力覚評価システム1bについて、力覚評価システム1bと力覚評価システム1との相違点のみを説明する。力覚評価システム1cについて、力覚評価システム1cと力覚評価システム1aとの相違点のみを説明する。
力覚評価システム1bと力覚評価システム1との相違点は、力覚発生判断部126の有無である。力覚評価システム1bは、制御装置100bに力覚発生判断部126を含む。同様に、力覚評価システム1cと力覚評価システム1aとの相違点は、力覚発生判断部126の有無である。力覚評価システム1cは、制御装置100cに力覚発生判断部126を含む。以下、力覚発生判断部126について説明する。
(力覚発生判断部)
力覚発生判断部126は、形状及び配置情報演算部102から挿入部14の形状及び配置情報を取得する。力覚発生判断部126は、挿入部14の形状及び配置情報に基づいて、被検体200の管空に力が生じているか否かを判断する。
力覚発生判断部126は、形状及び配置情報演算部102から挿入部14の形状及び配置情報を取得する。力覚発生判断部126は、挿入部14の形状及び配置情報に基づいて、被検体200の管空に力が生じているか否かを判断する。
例えば、挿入部14が被検体への挿入前の段階だったり、位置検出又は力覚検出における誤検出が生じている状態だったりする場合には、力覚発生判断部126は、力覚は発生してない状態と判断する。挿入前段階であることは、被検体、特に挿入の入口となる肛門や腸管と挿入部14先端の空間的な位置関係から判断が可能である。また、位置検出又は力覚検出においては、挿入操作スピードが平均で数cm/秒程度であることから、突然大きな力覚の値が発生することは考えられず、こうした位置検出誤差又は力覚検出誤差によって生じる場合には、ある程度誤検出として判断可能である。同様に力覚発生時にも、力覚の値が短時間に大きく変動する場合には、誤検出の可能性も考えられる。
力覚発生判断部126による判断結果は、接触状態推定部112に伝達される。
本変形例によれば、力覚発生判断部126による判断により、接触状態又は力覚情報の検出精度を向上させた、被検体の管空に生じる力又は応力に関する力覚情報を検出する力覚評価システム1b、1cを提供することができる。
<第2の実施形態>
本発明の第2の実施形態について、図25乃至図28を参照して説明する。第2の実施形態では、第1の実施形態と同様の構成要素については第1の実施形態と同様の参照符号を付してその説明を省略し、主として第1の実施形態との相違点について説明する。
本発明の第2の実施形態について、図25乃至図28を参照して説明する。第2の実施形態では、第1の実施形態と同様の構成要素については第1の実施形態と同様の参照符号を付してその説明を省略し、主として第1の実施形態との相違点について説明する。
第2の実施形態では、力覚評価システム1dは、挿入機器として作業用マニピュレータ300を含む。力覚評価システム1dは、作業システム2dを含む。作業システム2dは、作業用マニピュレータ300と、本体302とを含む。作業用マニピュレータ300は、複数の可撓性部材として、第1の作業用アーム304と、第2の作業用アーム306と、観察用アーム308を含む。アーム304、306、308は、被検体200に挿入される。本体302は、制御装置100dを含む。
作業用マニピュレータの具体例としては、医療用マニピュレータや産業用マニピュレータが挙げられる。ただし、用途はこれらに限定されるものではない。
医療用マニピュレータは、所定の部位を観察アームで観察しながら、治療用アームで把持・切開・切除・機器等の埋め込み・縫合・投薬・消毒・洗浄等を行うこと想定する。被検体は人や動植物等を想定する。所定の部位は、体腔や切開した体内が主たる用途であるが、使用か所を限定するものではなく、体表面に用いても構わない。観察系を別途有していれば、観察アームは必ずしも必要ではない。また、複数カ所を同時に観察したり、視野確保を確実にしたり、3D画像を生成したりするためなどに、複数の観察アームを有していてもよい。観察アームや治療用アームは、内視鏡挿入部のような弾性体と湾曲部を組み合わせたものや、1つ以上の関節によって屈曲可能なマニピュレータでも、これらの組み合わせや硬性アームをアームの1つとして含むものでもよい。
産業用マニピュレータは、主に機器・配管・構造物等の点検・メンテナンス等に用いること想定する。サイズや環境の点で人が入れない部分や建物・エリアの作業に用いたり、人では出来ない作業を行うことを目的とする。被検体は、機器・配管・構造物・エリア等であり、これらが作業対象である。1つ以上の作業アームを有し、適宜、1つ以上の観察アームを有する。
力覚評価システム1dの用途としては、人の手ではできない精密な作業、多くの操作を同時に行う作業、人の手の長さが足りなかったり人の手では大きすぎたりして、作業部位まで手が届かない作業、人が作業を行うことが困難だったり、危険を伴う環境での作業等が挙げられる。
作業用マニピュレータ300において、第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308は、本体302から延びている。第1の作業用アーム304及び第2の作業用アーム306は、例えば、薄い平板状である。例えば、第1の作業用アーム304及び第2の作業用アーム306は、その断面の辺の長さa、bがa<<bとなる長方形であり、第1の作業用アーム304及び第2の作業用アーム306の長手方向の長さcはa<<b<<cである。第1の作業用アーム304及び第2の作業用アーム306は、幅bの側面に略垂直な方向に主に湾曲する、すなわち、湾曲方向が1方向に制限されているような動きをする。図25には、第1の作業用アーム304及び第2の作業用アーム306の動く方向が限定されているので、可動方向への操作に集中することができ、安定した作業、精密な作業が可能となる。
第1の作業用アーム304及び第2の作業用アーム306は、物を把持したり、加工、組立等の作業を行ったりする。各アーム304、306の先端には、用途に応じた作業工具を適宜装着してよい。作業工具は、必ずしも装着しなくてもよいし、交換可能なものであってもよい。
観察用アーム308は、円形状に近い横断面を有する細長いアームである。観察用アーム308は、その先端に内蔵された照明光学系、観察光学系、撮像素子等を含む。観察用アーム308は、第1の作業用アーム304及び第2の作業用アーム306の先端が対象物に作業を行う際に、湾曲形状を変えることでさまざまな方向から対象物を観察可能となっている。
第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308には、それぞれ、形状センサ310、312、314と、4本の操作ワイヤ316、318、320とが組み込まれている。なお、これらアーム304、306、308には、表面及び裏面に2本ずつ操作ワイヤが設けられているため、図25には、それぞれ、2本の操作ワイヤのみが示されている。
アーム304、306、308は、それぞれ、形状センサ310、312、314により、その位置及び形状が検出されるようになっている。形状センサ310、312、314は、第1の実施形態で説明した形状センサ50のような構成であってよい。また、これらアーム304、306、308は、それぞれ、操作ワイヤ316、318、320により、能動的に湾曲操作が可能となっている。図25には、第1の作業用アーム304の湾曲方向がA5で、湾曲操作可能範囲がA6で示されており、また、第2の作業用アーム306の湾曲方向がA7で、湾曲可能範囲がA8で示されている。さらに、観察用アーム308の湾曲方向がA9、A10で示されている。なお、形状センサ310、312、314以外の、アーム304、306、308の位置及び形状の検出が可能な検出機構を採用してよいし、操作ワイヤ316、318、320以外の、アーム304、306、308の湾曲操作が可能な操作機構を採用してよい。
第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308は、その所定の範囲における曲げ剛性が把握されているものとする。曲げ剛性が長手方向の位置、曲げ方向によって異なる場合には、長手方向の曲げ剛性の分布を、必要な曲げ方向ごとに把握されているものとする。
第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308を用いて、被検体200に対する作業をする際に、アーム304、306、308が被検体200に接触すると、被検体200に力が加わる一方で、被検体200からアーム304、306、308にも力が加わる。また、アーム同士が接触すると、アーム同士に力が加わる。どのアームとどのアームが接触しているかは、各アームの位置及び形状の関係から判断するものとする。
このとき、被検体200から作業用アーム304、306、観察用アーム308に加わる力は、被検体200に加わる力の合力の反力として求めることができる。被検体200に加わる力の合力は、式3で表される曲げモーメントの式で、曲げ剛性と曲げ量を3次元で表現し、式5bの結果を式7に代入することで、曲げ状態から計算される曲げモーメントと外力によって生じる曲げモーメントがつり合うことと、最適化手法を用いて求めることができる。ただし、湾曲方向と長手方向に垂直な方向に力が発生しない場合には、適宜、位置及び形状の計測、力の計算を単純化して求めてもよい。
被検体200に加わる合力から被検体内で生じる個々の力は、被検体200の構造を把握することで、第1の実施の形態と同様に求めることができる。これによって得られる効果は、第1の実施の形態と同様である。
図26は、第2の実施形態に係る力覚評価システム1dの主要な構成の一例を概略的に示す図である。図27は、第2の実施形態に係る力覚評価システム1eの主要な構成の一例を概略的に示す図である。以下、力覚評価システム1dについて、力覚評価システム1dと力覚評価システム1bとの相違点のみを説明する。力覚評価システム1eについて、力覚評価システム1eと力覚評価システム1cとの相違点のみを説明する。
第2の実施形態に係る力覚評価システム1dと第1の実施形態の変形例に係る力覚評価システム1bとの相違点は、可撓性部材影響判断部128及び可撓性部材情報記憶部130の有無である。力覚評価システム1dは、制御装置100dに可撓性部材影響判断部128及び可撓性部材情報記憶部130を含む。同様に、力覚評価システム1eと力覚評価システム1cとの相違点は、可撓性部材影響判断部128及び可撓性部材情報記憶部130の有無である。力覚評価システム1eは、制御装置100eに可撓性部材影響判断部128及び可撓性部材情報記憶部130を含む。以下、可撓性部材影響判断部128及び可撓性部材情報記憶部130について説明する。
(可撓性部材情報記憶部)
可撓性部材情報記憶部130は、可撓性部材である第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308に関する情報である可撓性部材情報を記憶している。可撓性部材情報は、可撓性部材であるアーム304、306、308の機械特性や物理又は化学特性に関する値であってよく、例えば、上述したような、第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308の曲げ剛性の値を含む。
可撓性部材情報記憶部130は、可撓性部材である第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308に関する情報である可撓性部材情報を記憶している。可撓性部材情報は、可撓性部材であるアーム304、306、308の機械特性や物理又は化学特性に関する値であってよく、例えば、上述したような、第1の作業用アーム304、第2の作業用アーム306及び観察用アーム308の曲げ剛性の値を含む。
(可撓性部材影響判断部)
可撓性部材影響判断部128では、可撓性部材に加わった力又は応力についての力覚情報を、可撓性部材であるアーム304、306、308に基づく判断基準と照らし合わせることで、アーム304、306、308への影響を判断する。具体的な判断内容として、部材破損、剛性や操作性の劣化、製品寿命の短縮、といった可撓性部材に与えるダメージの有無や内容、程度、保守の必要性、緊急性等が挙げられる。
可撓性部材影響判断部128では、可撓性部材に加わった力又は応力についての力覚情報を、可撓性部材であるアーム304、306、308に基づく判断基準と照らし合わせることで、アーム304、306、308への影響を判断する。具体的な判断内容として、部材破損、剛性や操作性の劣化、製品寿命の短縮、といった可撓性部材に与えるダメージの有無や内容、程度、保守の必要性、緊急性等が挙げられる。
なお、本実施形態では、3つのアームから構成される作業システム2dについて説明したが、アームの数は任意でよい。例えば、作業用アームが1つのみの作業システムで、観察は、肉眼、あるいは別途顕微鏡を介して行ってもよい。また、3つの作業用アーム及び3つの観察用アームとし、1つの部位を多方向から見ながら作業してもよいし、複数の部位の作業を同時に、又は、順次行ったりしてもよい。複数の作業用アーム及び複数の観察用アームがあることで、被検体を複数に分離して、それぞれを観察、作業をしたり、複数の被検体を一体化、例えば、組込み、注入等、をしたりすることも可能となる。作業用アームと観察用アームとは、機能を変更可能であったり、複数の機能を同時に有したりしてもよい。
作業は、アームの動きや作業の操作を人がその場で、又は、離れた場所から、操作したり、内容の指示のみしたりしてもよい。
第1の実施形態と同様に、変形例として、力覚評価システム1dは、図26に示されるように、情報出力部116及び出力情報記憶部118を含む制御装置100dを有してよい。また、力覚評価システム1eは、図27に示されるように、フィードバック回路120とフィードバック情報記憶部122と駆動回路124とを含む制御装置100eを有してよい。
(力覚評価フロー)
図28は、力覚評価システム1d又は1eによる処理フローの一例を示す図である。力覚評価システム1d又は1eは、例えば、制御装置100d又は100eのプロセッサを上述の各部の全部又は一部として機能させるためのソフトウェアプログラムをメモリ内に用意しておき、そのプログラムをプロセッサが実行することで、上述の各部の少なくとも一部の機能をプロセッサが実施するものであってよい。以下、このようなプロセッサによる処理の一例について説明する。
図28は、力覚評価システム1d又は1eによる処理フローの一例を示す図である。力覚評価システム1d又は1eは、例えば、制御装置100d又は100eのプロセッサを上述の各部の全部又は一部として機能させるためのソフトウェアプログラムをメモリ内に用意しておき、そのプログラムをプロセッサが実行することで、上述の各部の少なくとも一部の機能をプロセッサが実施するものであってよい。以下、このようなプロセッサによる処理の一例について説明する。
ステップS21において、力覚評価システム1d、1eは、可撓性部材であるアーム304、306、308の形状及び配置情報を演算する。ステップS22において、力覚評価システム1d、1eは、ステップS11で取得した形状及び配置情報に基づいて、アーム304、306、308にかかる力に関する第1の力覚情報を算出する。ステップS23において、力覚評価システム1d、1eは、被検体200の管空に生じる力又は応力に関する第2の力覚情報を算出する。ステップS24において、力覚評価システム1d、1eは、可撓性部材が受けている/受けうる影響や、被検体が受けている/受けうる影響を判断する。ステップS25において、力覚評価システム1dは、情報を出力する。あるいは、力覚評価システム1eは、駆動機構44に第2の力覚情報/影響判断に基づく情報をフィードバックする。
ステップS26において、力覚評価システム1d、1eは、処理を終了するか否かを判定する。終了しないと判定された場合には(ステップS26-No)、ステップS21に戻り、ステップS21以下の処理が繰り返される。終了すると判定された場合には(ステップS26-Yes)、処理は終了する。
第2の実施形態によれば、可撓性部材影響判断部128により、被検体、操作者、他の機器、設備、設置場所等の使用環境から受ける、可撓性部材であるアーム304、306、308の機能への影響の程度が分かる。これにより、操作の中断、操作解除、すなわち、操作を戻すことをすべきか、操作を継続してもよいかの判断が可能となる。また、アーム304、306、308に生じたと推定される力及び応力に基づいて、アーム304、306、308への修理、部品交換等の所定の処置を行うべきかの判断ができる。例えば、アーム304、306、308が被検体からの力により破損したり破壊されたりすることが防止される。
以上説明したように、本発明による各実施形態によれば、被検体に生じる力又は応力に関する力覚情報を精度よく容易に取得することができる力覚評価システム1、1a、1b、1c、1d、1e及び力覚評価装置100、100a、100b、100c、100d、100eを提供することができる。このような力覚評価システム及び力覚評価装置によれば、可撓性部材の湾曲形状と可撓性部材が被検体を押す力の情報を取得し、力がかかる位置での挿入部の断面形状、湾曲形状といった情報から、被検体にかかる力又は応力を検出することができる。すなわち、被検体の中で働く種々の力を考慮して被検体にかかる力及び応力を推定することが可能である。
なお、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。さらに、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出されうる。
Claims (15)
- 可撓性を有し、被検体の内部に挿入されて前記被検体の内面に力を加える可撓性部材と、
前記可撓性部材にかかる力に関する力情報を取得する力情報取得部と、
応力を推定する対象領域である前記被検体における所定の応力推定領域の外周の長さと前記応力推定領域における前記被検体の厚みとを含む被検体情報を取得する被検体情報取得部と、
前記力情報に基づいて、前記応力推定領域において前記被検体に加わる力の大きさ及び向きを算出し、算出した前記力の大きさ及び向きと、前記応力推定領域の外周の長さと、前記被検体の厚みとに基づいて、前記応力推定領域の外周における応力の情報を算出する応力推定部と、
を具備する、応力推定システム。 - 前記被検体と前記可撓性部材との接触が生じている領域である接触領域の外周の長さを推定し、前記接触領域を前記応力推定領域に設定する接触領域推定部をさらに具備する、請求項1に記載の応力推定システム。
- 前記被検体情報取得部は、前記被検体が前記被検体の外部の構造物に固定されている固定部の領域を前記応力推定領域とする、請求項1に記載の応力推定システム。
- 前記応力推定部は、安全係数を用いて、前記応力の情報を算出する、請求項1に記載の応力推定システム。
- 前記応力推定部は、前記被検体の内部又は表面から前記可撓性部材にかかる力が前記可撓性部材の先端部にかかる場合に、前記先端部の形状と前記先端部の向く方向と力のかかる方向とのなす角度とを用いて、前記応力の情報を算出する、請求項1乃至4のいずれか1項に記載の応力推定システム。
- 前記応力推定部は、前記可撓性部材にかかる力が前記可撓性部材の長手方向の中間部にかかる場合に、力がかかる位置周辺での前記可撓性部材の断面形状と前記可撓性部材の中心軸方向と前記かかる力の方向とのなす角度とを用いて、前記応力の情報を推定する、請求項1乃至4のいずれか1項に記載の応力推定システム。
- 前記被検体情報を推定する被検体情報推定部をさらに具備し、前記被検体情報取得部は、前記被検体情報推定部から前記被検体情報を取得する、請求項1乃至6のいずれか1項に記載の応力推定システム。
- 前記可撓性部材の形状及び配置に関する形状及び配置情報を検出する形状及び配置情報検出部をさらに具備し、前記被検体情報推定部は、検出した前記形状及び配置情報に基づいて前記被検体情報を推定する、請求項7に記載の応力推定システム。
- 前記可撓性部材の長手方向の複数の位置における機械特性を表す機械特性情報を取得する機械特性取得部と、
前記可撓性部材にかかる力に関する力情報を算出する力情報算出部とをさらに具備し、
前記形状及び配置情報は、前記複数の位置における変形状態の情報を含み、
前記力情報算出部は、前記可撓性部材の長手方向の複数の位置における、前記変形状態の情報と前記機械特性情報とに基づいて、前記可撓性部材の1つ以上の位置にかかる力に関する力情報を算出する、請求項8に記載の応力推定システム。 - 前記応力推定部によって算出された前記応力の情報が前記被検体に与える影響を判断する被検体影響判断部をさらに有する、請求項1乃至9のいずれか1項に記載の応力推定システム。
- 前記応力の情報に基づく呈示情報を示す情報呈示装置をさらに有する、請求項1乃至10のいずれか1項に記載の応力推定システム。
- 前記可撓性部材の形状及び位置の変化を動力により生じさせる駆動部と、
前記応力の情報に基づく駆動情報を前記駆動部にフィードバックする情報フィードバック部と、をさらに有する、請求項1乃至11のいずれか1項に記載の応力推定システム。 - 前記力情報が前記可撓性部材に与える影響を判断する可撓性部材影響判断部をさらに有する、請求項1乃至12のいずれか1項に記載の応力推定システム。
- 被検体の内面に力を加える可撓性部材にかかる力に関する力情報を取得する力情報取得部と、
応力を推定する対象領域である前記被検体における所定の応力推定領域の外周の長さと前記応力推定領域における前記被検体の厚みとを含む被検体情報を取得する被検体情報取得部と、
前記力情報に基づいて、前記応力推定領域において前記被検体に加わる力の大きさ及び向きを算出し、算出した前記力の大きさと向きと、前記応力推定領域の外周の長さと、前記被検体の厚みとに基づいて、前記応力推定領域の外周における応力の情報を算出する応力推定部と、
を具備する、応力推定装置。 - 可撓性を有し、被検体の内部に挿入されて前記被検体の内面に力を加える内視鏡挿入部と、
前記内視鏡挿入部にかかる力に関する力情報を取得する力情報取得部と、
応力を推定する対象領域である前記被検体における所定の応力推定領域の外周の長さと前記応力推定領域における前記被検体の厚みとを含む被検体情報を取得する被検体情報取得部と、
前記力情報に基づいて、前記応力推定領域において前記被検体に加わる力の大きさ及び向きを算出し、算出した前記力の大きさと向きと、前記応力推定領域の外周の長さと、前記被検体の厚みとに基づいて、前記応力推定領域の外周における応力の情報を算出する応力推定部と、
を具備する、内視鏡システム。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020508805A JP7124061B2 (ja) | 2018-03-30 | 2018-03-30 | 応力推定システム、応力推定装置、及び内視鏡システム |
| PCT/JP2018/013671 WO2019187025A1 (ja) | 2018-03-30 | 2018-03-30 | 応力推定システム、応力推定装置及び内視鏡システム |
| CN201880090745.8A CN111801042B (zh) | 2018-03-30 | 2018-03-30 | 应力估算系统、应力估算装置、内窥镜系统和应力估算方法 |
| US17/030,563 US12029383B2 (en) | 2018-03-30 | 2020-09-24 | Stress estimation system, stress estimation apparatus, endoscope apparatus, and stress estimation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2018/013671 WO2019187025A1 (ja) | 2018-03-30 | 2018-03-30 | 応力推定システム、応力推定装置及び内視鏡システム |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| US17/030,563 Continuation US12029383B2 (en) | 2018-03-30 | 2020-09-24 | Stress estimation system, stress estimation apparatus, endoscope apparatus, and stress estimation method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2019187025A1 true WO2019187025A1 (ja) | 2019-10-03 |
Family
ID=68058688
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2018/013671 Ceased WO2019187025A1 (ja) | 2018-03-30 | 2018-03-30 | 応力推定システム、応力推定装置及び内視鏡システム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US12029383B2 (ja) |
| JP (1) | JP7124061B2 (ja) |
| CN (1) | CN111801042B (ja) |
| WO (1) | WO2019187025A1 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113702020A (zh) * | 2021-09-01 | 2021-11-26 | 浙江微度医疗器械有限公司 | 一种内窥镜手术器械力传递系数测试装置 |
| WO2022082377A1 (zh) * | 2020-10-19 | 2022-04-28 | 诺创智能医疗科技(杭州)有限公司 | 手术器械力检测机构及手术器械力检测装置 |
| CN115103620A (zh) * | 2020-02-14 | 2022-09-23 | 奥林巴斯株式会社 | 疼痛估计装置以及疼痛估计方法 |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019171471A1 (ja) * | 2018-03-06 | 2019-09-12 | オリンパス株式会社 | 可撓管挿入装置、剛性制御装置、剛性制御装置の作動方法、及び剛性制御プログラムを記録した記録媒体 |
| WO2020028216A1 (en) * | 2018-08-01 | 2020-02-06 | Intuitive Surgical Operations, Inc. | Systems and methods for controlling a robotic manipulator or associated tool |
| WO2020026386A1 (ja) * | 2018-08-01 | 2020-02-06 | オリンパス株式会社 | 内視鏡システムおよび制御装置 |
| CN116678350B (zh) * | 2023-07-28 | 2023-10-13 | 常熟理工学院 | 应用于外骨骼柔性套索结构的弯曲传感器及测量方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013094337A (ja) * | 2011-10-31 | 2013-05-20 | Olympus Corp | 管状挿入装置 |
| JP2014161374A (ja) * | 2013-02-21 | 2014-09-08 | Olympus Corp | 被検体挿入システム |
| WO2016189724A1 (ja) * | 2015-05-28 | 2016-12-01 | オリンパス株式会社 | 可撓管挿入装置 |
| WO2017009905A1 (ja) * | 2015-07-10 | 2017-01-19 | オリンパス株式会社 | 可撓管挿入装置 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA1334487C (en) * | 1987-04-03 | 1995-02-21 | James Allen Mcewen | Biomedical pressure transducer |
| US5263484A (en) * | 1992-02-13 | 1993-11-23 | Ivac Corporation | Method of determining which portion of a stress sensor is best positioned for use in determining intra-arterial blood pressure |
| JP3242466B2 (ja) | 1992-11-16 | 2001-12-25 | オリンパス光学工業株式会社 | 接触状態検出装置 |
| JP3859296B2 (ja) * | 1997-03-21 | 2006-12-20 | オリンパス株式会社 | 管状挿入具 |
| JP3992342B2 (ja) * | 1997-12-18 | 2007-10-17 | テルモ株式会社 | 生体内挿入用装置 |
| JP4503412B2 (ja) * | 2004-10-05 | 2010-07-14 | 独立行政法人産業技術総合研究所 | 触覚センサ及び触覚センサ装置 |
| US8945095B2 (en) | 2005-03-30 | 2015-02-03 | Intuitive Surgical Operations, Inc. | Force and torque sensing for surgical instruments |
| JP4823696B2 (ja) * | 2006-01-13 | 2011-11-24 | オリンパスメディカルシステムズ株式会社 | 電動湾曲内視鏡 |
| JP4636618B2 (ja) * | 2006-09-28 | 2011-02-23 | 学校法人早稲田大学 | シミュレーション装置及びこれを用いた手術用ロボットの制御システム、並びにシミュレーション装置用のプログラム |
| US9615815B2 (en) * | 2012-09-28 | 2017-04-11 | Clemson University Research Foundation | Devices that cooperate with ultrasound probes for muscoskeletal evaluations and related systems and methods |
| JP6033147B2 (ja) * | 2013-03-26 | 2016-11-30 | オリンパス株式会社 | 挿入装置 |
| JP2015181643A (ja) * | 2014-03-24 | 2015-10-22 | オリンパス株式会社 | 湾曲形状推定システム、管状挿入システム、及び、湾曲部材の湾曲形状推定方法 |
| JP5797317B2 (ja) * | 2014-10-14 | 2015-10-21 | オリンパス株式会社 | 管状挿入装置 |
| JP6535689B2 (ja) * | 2015-01-30 | 2019-06-26 | オリンパス株式会社 | 未然形状推定装置、挿入/抜去作業システム、挿入/抜去作業支援システム及び未然形状推定プログラム |
| JP6648883B2 (ja) * | 2015-06-15 | 2020-02-14 | 国立大学法人京都大学 | 外力推定装置及び方法、並びにコンピュータプログラム |
| CN105662445A (zh) * | 2016-02-25 | 2016-06-15 | 深圳柏斯生物科技有限公司 | 数字乳腺x射线成像系统的全自动曝光控制方法和装置 |
-
2018
- 2018-03-30 WO PCT/JP2018/013671 patent/WO2019187025A1/ja not_active Ceased
- 2018-03-30 CN CN201880090745.8A patent/CN111801042B/zh active Active
- 2018-03-30 JP JP2020508805A patent/JP7124061B2/ja active Active
-
2020
- 2020-09-24 US US17/030,563 patent/US12029383B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013094337A (ja) * | 2011-10-31 | 2013-05-20 | Olympus Corp | 管状挿入装置 |
| JP2014161374A (ja) * | 2013-02-21 | 2014-09-08 | Olympus Corp | 被検体挿入システム |
| WO2016189724A1 (ja) * | 2015-05-28 | 2016-12-01 | オリンパス株式会社 | 可撓管挿入装置 |
| WO2017009905A1 (ja) * | 2015-07-10 | 2017-01-19 | オリンパス株式会社 | 可撓管挿入装置 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115103620A (zh) * | 2020-02-14 | 2022-09-23 | 奥林巴斯株式会社 | 疼痛估计装置以及疼痛估计方法 |
| WO2022082377A1 (zh) * | 2020-10-19 | 2022-04-28 | 诺创智能医疗科技(杭州)有限公司 | 手术器械力检测机构及手术器械力检测装置 |
| CN113702020A (zh) * | 2021-09-01 | 2021-11-26 | 浙江微度医疗器械有限公司 | 一种内窥镜手术器械力传递系数测试装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20210048355A1 (en) | 2021-02-18 |
| JPWO2019187025A1 (ja) | 2021-03-25 |
| JP7124061B2 (ja) | 2022-08-23 |
| US12029383B2 (en) | 2024-07-09 |
| CN111801042A (zh) | 2020-10-20 |
| CN111801042B (zh) | 2023-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7124061B2 (ja) | 応力推定システム、応力推定装置、及び内視鏡システム | |
| US11786106B2 (en) | Robotic endoscope probe having orientation reference markers | |
| US4366810A (en) | Tactile control device for a remote sensing device | |
| US11553834B2 (en) | Force estimation system and force information calculation method | |
| US4469091A (en) | Tactile control device for a remote sensing device | |
| US20170319048A1 (en) | Flexible tube insertion apparatus | |
| CN110831476B (zh) | 管状插入装置及其工作方法 | |
| EP3155953A1 (en) | Endoscope system | |
| US11805986B2 (en) | Flexible tube insertion apparatus, stiffness control apparatus, insertion method, and recording medium storing stiffness control program | |
| JP7110351B2 (ja) | 内視鏡システム及び制御装置 | |
| CN104284637A (zh) | 手术辅助装置 | |
| CN112244752A (zh) | 一种软体内窥镜结构 | |
| WO2018220797A1 (ja) | 可撓管挿入支援装置と可撓管挿入装置 | |
| US20200121163A1 (en) | Flexible tube insertion apparatus, insertion control apparatus, and flexible tube insertion support method | |
| US10517461B2 (en) | Flexible tube insertion apparatus | |
| US12042126B2 (en) | Monitoring system and evaluation method for insertion operation of endoscope | |
| JPWO2017221298A1 (ja) | 可撓管挿入装置 | |
| KR101962533B1 (ko) | 내시경 관리 장치 | |
| JPWO2019131717A1 (ja) | 圧力センサ、内視鏡スコープおよび内視鏡装置 | |
| JP2024065892A (ja) | 処理装置、内視鏡装置、及び処理方法 | |
| JPH03198828A (ja) | 内視鏡装置 | |
| US20220378368A1 (en) | Pain estimation apparatus, pain estimation method, and recording medium | |
| WO2018131134A1 (ja) | 可撓管挿入装置 | |
| WO2024095865A1 (ja) | 処理装置、内視鏡装置、及び処理方法 | |
| WO2024095866A1 (ja) | 処理装置、内視鏡装置、及び処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18912656 Country of ref document: EP Kind code of ref document: A1 |
|
| ENP | Entry into the national phase |
Ref document number: 2020508805 Country of ref document: JP Kind code of ref document: A |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 18912656 Country of ref document: EP Kind code of ref document: A1 |