[go: up one dir, main page]

WO2009081599A1 - 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置 - Google Patents

画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置 Download PDF

Info

Publication number
WO2009081599A1
WO2009081599A1 PCT/JP2008/055361 JP2008055361W WO2009081599A1 WO 2009081599 A1 WO2009081599 A1 WO 2009081599A1 JP 2008055361 W JP2008055361 W JP 2008055361W WO 2009081599 A1 WO2009081599 A1 WO 2009081599A1
Authority
WO
WIPO (PCT)
Prior art keywords
carotid artery
image
ultrasonic
artery wall
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2008/055361
Other languages
English (en)
French (fr)
Inventor
Yasunari Yokota
Fumio Nogata
Yoko Kawamura
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gifu University NUC
Original Assignee
Gifu University NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gifu University NUC filed Critical Gifu University NUC
Priority to US12/808,487 priority Critical patent/US8187188B2/en
Priority to EP08722677A priority patent/EP2226013A4/en
Priority to AU2008341769A priority patent/AU2008341769B2/en
Publication of WO2009081599A1 publication Critical patent/WO2009081599A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Clinical applications
    • A61B8/0858Clinical applications involving measuring tissue layers, e.g. skin, interfaces
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/02007Evaluating blood vessel condition, e.g. elasticity, compliance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48Diagnostic techniques
    • A61B8/485Diagnostic techniques involving measuring strain or elastic properties
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52023Details of receivers
    • G01S7/52036Details of receivers using analysis of echo signal for target characterisation
    • G01S7/52042Details of receivers using analysis of echo signal for target characterisation determining elastic properties of the propagation medium or of the reflective target

Definitions

  • Arteriosclerosis is one of the lifestyle-related diseases that is a risk factor due to uninhibition of lifestyle, and it progresses from a young age with almost no subjective symptoms, and leaving it alone may lead to cerebral infarction, myocardial infarction, angina, etc. There is a possibility of development. Since arteriosclerosis is difficult to cure, it is important to catch signs of arteriosclerosis early and encourage patients to improve their lifestyle and delay disease progression.
  • the ultrasonic echo test is being established as an indispensable test in the current clinical diagnosis because the blood vessel can be directly observed non-invasively.
  • the presence or absence of fat called plaque adhering to the inside of the blood vessel and the intima-media complex thickness (IMT) are evaluated.
  • IMT intima-media complex thickness
  • arteriosclerosis is the hardening of the artery and loses its elasticity
  • the movement of the artery associated with the heartbeat may be evaluated.
  • the aid of a computer is indispensable for quantitative measurement of arterial movement.
  • Patent Document 1 describes that an index of arteriosclerosis can be obtained by measuring a variation in carotid artery diameter associated with a heartbeat.
  • the present applicant has proposed a method for estimating the variation of the carotid artery diameter associated with heartbeat using an ultrasonic B-mode long-axis cross-sectional image. This method is performed under the precondition that the carotid artery is homogeneous regardless of its position on the long axis (y-axis) and shows the same fluctuation according to the heartbeat. This precondition is often met, but not in cases where arteriosclerosis has occurred locally in the carotid artery. Therefore, in such a case, the method previously proposed by the applicant cannot be applied.
  • the estimation accuracy is improved by using information on the spatial shape of the carotid artery long-axis cross-sectional image.
  • a short-axis cross-sectional image of the carotid artery it is difficult to improve the estimation accuracy using information on the spatial shape for the following reason.
  • the first reason is that the short-axis cross-sectional shape of the carotid artery is roughly circular, but there are large individual differences, so it is difficult to express with a unified shape.
  • the second reason is that in the ultrasound B-mode image Since the area occupied by the carotid artery is smaller in the case of the short-axis cross-sectional image than in the case of the long-axis cross-sectional image, there is less information available.
  • the object of the present invention is to use an ultrasonic B-mode image to track the variation of the carotid artery with the heartbeat with sufficient accuracy even when the arteriosclerosis is locally generated in the carotid artery.
  • An image processing apparatus and an image processing program are provided.
  • Another object of the present invention is to provide a storage medium storing such an image processing program and an ultrasonic diagnostic apparatus used by being connected to such an image processing apparatus.
  • an ultrasonic B-mode image of consecutive frames is acquired, and a carotid artery short-axis cross-section included in the ultrasonic B-mode image of a predetermined frame is acquired.
  • the heart rate variability for acquiring the time change of the carotid artery wall by estimating the size of the diameter of the carotid artery wall so that the error between the template image and the acquired ultrasonic B-mode image of each frame is minimized An image processing apparatus including a tracking unit is provided.
  • the carotid artery wall estimating means determines the carotid artery parameter value that determines the position and shape of the carotid artery so that the evaluation function representing the likelihood of being a carotid artery is maximized, thereby Estimate the arterial wall.
  • a processing program is provided.
  • the heart rate variability tracking means when there is a shift in the center of the carotid artery on the ultrasonic B-mode image for each frame, the heart rate variability tracking means also estimates the shift.
  • a storage medium storing an image processing program according to the second aspect is provided.
  • an ultrasonic diagnostic apparatus connected to the image processing apparatus according to the first aspect.
  • the ultrasonic diagnostic apparatus generates an ultrasonic B-mode image based on an echo signal obtained by transmitting and receiving ultrasonic waves by the probe, and outputs the generated ultrasonic B-mode image to the image processing apparatus.
  • FIG. 1 is a schematic diagram of an image processing apparatus according to an embodiment of the present invention.
  • FIG. 2 is a schematic electrical block diagram of the image processing apparatus of FIG. 1.
  • Graph showing the relationship; (P, r 1, r 2, E 1, E 2 r) distance r and displacement d.
  • the conceptual diagram of the heart rate variability tracking method. 2 is a flowchart of an image processing program executed by a computer of the image processing apparatus in FIG. 1. Explanatory drawing of the outline Q of the carotid artery wall inner surface estimated by CPU of the computer. Graph showing the relationship between the change rate d 1 / r 1 and the square error J.
  • FIGS. 13 (a) to 13 (f) are graphs showing the results of estimation of heart rate variability of the carotid artery of a 20-year-old healthy male
  • FIGS. 13 (g) to 13 (l) are necks of a 60-year-old healthy male.
  • the image processing apparatus 11 of this embodiment includes a computer 12, a display 13, and a printer that function as carotid artery wall estimation means (carotid artery wall estimation part) and heartbeat fluctuation tracking means (heartbeat fluctuation tracking part). 14, a keyboard 15, and an ultrasonic diagnostic apparatus 16.
  • the ultrasonic diagnostic apparatus 16 includes a probe 21, a display unit 22, and an ultrasonic generation source (not shown).
  • the probe 21 of the ultrasonic diagnostic apparatus 16 has a distal end surface that transmits a pulse wave into the living body and receives a reflected wave (echo signal) from the carotid artery 23.
  • the tip surface of the probe 21 is formed in a long square shape.
  • the ultrasound diagnostic apparatus 16 generates an echo motion image (that is, a plurality of ultrasound B-mode images) including a carotid artery short-axis cross section acquired in the B mode based on the echo signal. Deformations such as expansion and contraction of the subject's carotid artery 23 are displayed as moving images on the display unit 22 of the ultrasonic diagnostic apparatus 16.
  • FIG. 5 shows a coordinate system in the carotid artery short-axis cross section.
  • the ultrasonic B-mode image is output from the video output of the ultrasonic diagnostic apparatus 16 and is video-captured at a predetermined resolution (m ⁇ n pixels) and a predetermined number of frames per second by a DV converter (not shown), and then computerized as an IEEE 1394 signal. 12 is input.
  • a predetermined resolution m ⁇ n pixels
  • a predetermined number of frames per second by a DV converter (not shown), and then computerized as an IEEE 1394 signal. 12 is input.
  • 30 frames / second is selected as the predetermined number of frames per second, but this value is not limited as long as it is a value that can clearly observe the variation of the carotid artery due to heartbeat. .
  • the echo moving image acquired by the ultrasonic diagnostic apparatus 16 is input to the computer 12 and then stored in a storage device 44 (see FIG. 2) included in the computer 12.
  • the storage device 44 is composed of, for example, a hard disk or a semiconductor storage device, and can read and write various kinds of information.
  • the carotid artery repeatedly expands and contracts due to heartbeat. Surrounding tissues such as fat around the carotid artery expand and contract as the carotid artery expands and contracts. In general, the relationship between stress and strain of such materials is considered from the viewpoint of material mechanics.
  • the carotid artery and surrounding tissue can be modeled by a uniform double-layered cylinder (also called a double-layered thick cylinder in terms of material mechanics) as shown in FIG.
  • the inner radius of the carotid artery wall is represented by r 1 and the outer radius is represented by r 2 .
  • the surrounding tissue is assumed to exist from a position r 2 away from the center of the carotid artery to infinity. It represents an elastic coefficient of the carotid artery wall at E 1, represent the elastic coefficient of the surrounding tissue at E 2.
  • Any Poisson's ratio v 2 of the Poisson's ratio v 1 and surrounding tissues of the carotid artery wall is regarded as 0.5.
  • Displacement amount d in the radial direction of the carotid artery and surrounding tissue when the internal pressure (blood pressure) of the carotid artery changes from a specific reference state in which the inner radius of the carotid artery wall is represented by r 1 and the outer radius is represented by r 2 (R) can be expressed by the following theoretical formula (1) of the two-layer cylindrical model.
  • P represents the amount of change in internal pressure from the reference state.
  • the tissue at a distance r from the center of the carotid artery moves to a position at a distance of r + d (r) from the center of the carotid artery according to a change in internal pressure.
  • the change amount P of the internal pressure is positive
  • the displacement amount d is positive, that is, indicates expansion
  • the change amount P of internal pressure is negative
  • the displacement amount d is negative, that is, indicates contraction.
  • the above equation (1) can be approximated by the following equation (3).
  • the above equation (3) means that when the carotid artery and surrounding tissue are expanded due to cardiac contraction, that is, an increase in blood pressure, the degree of expansion, that is, the amount of displacement, is inversely proportional to the distance r from the center of the carotid artery. ing.
  • E 1 200 kPa
  • E 2 100 kPa
  • r 1 4.0 mm
  • r 2 4.8 mm
  • P 40 mmHg (5.3 kPa)
  • the distance r from the center of the carotid artery and the displacement d (r; P, r 1 , r 2 , E 1 , E 2 ) are shown in FIG.
  • the distance r and displacement d (r; P, r 1 , r 2 , E 1 , E 2 ) when only the change P of the internal pressure from the reference state is changed to ⁇ 10 mmHg, 0 mmHg, 20 mmHg, 40 mmHg
  • the relationship is shown in FIG.
  • the relationship between the distance r and the displacement amount d is expressed in inverse proportion regardless of the change amount P of the internal pressure.
  • FIG. 41 An image processing program process executed by the CPU 41 of the image processing apparatus 11 will be described.
  • the CPU 41 performs the heartbeat fluctuation tracking of the carotid artery by performing the processing of steps S10 to S40 in FIG.
  • a conceptual diagram of the heart rate variability tracking method is shown in FIG.
  • step S10 the CPU 41 measures and acquires an ultrasonic B-mode image of a continuous frame including the carotid artery short-axis cross section.
  • x, y, and t respectively represent a pixel number in the horizontal direction, a pixel number in the vertical direction, and a frame number
  • Nx, Ny, and Nt represent the total number of pixels in the horizontal direction, the total number of pixels in the vertical direction, and the total number of frames, respectively.
  • step S20 the CPU 41 selects one appropriate frame (predetermined frame) from the continuous frames, and more specifically, the position and shape of the carotid artery wall inner surface for the ultrasonic B-mode image Img1 of the selected frame. Then, the inner radius r 1 ( ⁇ ) of the carotid artery wall is estimated (see FIG. 9).
  • the inner radius r 1 ( ⁇ ) represents a function related to the inner radius r 1 of the carotid artery wall having the direction ⁇ (0 ⁇ ⁇ ⁇ 2 ⁇ ) as a variable. Details of the processing in step S20 will be described later.
  • step S30 the CPU 41 deforms the ultrasonic B-mode image of the predetermined frame according to the equation (3). At this time, an estimated value of the displacement d 1 is obtained so that an error between the deformed image and the ultrasonic B-mode image of other frames is minimized. By performing the same for the ultrasonic B-mode images of all the frames, the time change d 1 (t) of the displacement d 1 can be obtained. Details of the processing in step S30 will be described later.
  • step S40 the time change of the inner radius of the carotid artery wall is output to an output device such as the display 13 or the printer 14 as r 1 ( ⁇ ) + d 1 (t).
  • step S20 the CPU 41 selects one appropriate frame from the continuous frames, and the inner radius of the carotid artery wall in the carotid short-axis cross-section included in the ultrasound B-mode image Img1 of the selected frame.
  • Estimate r 1 ( ⁇ ) which frame is selected is not particularly limited, and may be selected at random.
  • the first frame the frame in which the carotid artery is most clearly reflected, the frame in which the carotid artery is in the systole, or the frame in which the carotid artery is in the diastole may be selected.
  • the contour line on the inner surface of the carotid artery wall is a perfect circle or a slightly distorted circle.
  • the contour line on the inner surface of the carotid artery wall is modeled by a Fourier descriptor for expressing a closed curve. This Fourier descriptor is described in Non-Patent Document 2.
  • the coordinates x and y on the image are represented by complex numbers x + iy.
  • i represents an imaginary unit.
  • the closed curve f (s) on the complex plane is expressed by the following equation (4) using the parameter s.
  • c k represents a Fourier descriptor that is a parameter for determining the position and shape of the closed curve
  • K represents an arbitrary integer.
  • the value of the integer K is not limited to this.
  • k 0, ⁇ 1, ⁇ 2,.
  • the carotid artery lumen is a region surrounded by a closed curve f (s), and a set of pixels (x, y) located in these regions is represented by T.
  • a set of pixels (x, y) whose distance from the closed curve f (s) is equal to or less than the thickness W of the carotid artery wall and located outside the closed curve f (s) is represented by B. That is, the pixel (x, y) of the set B is located in a region corresponding to the carotid artery wall.
  • the set B is given by the following equation (5).
  • the carotid artery wall is drawn white due to strong echoes, and the carotid artery lumen is drawn black due to weak echoes. That is, the pixel value of the set B representing the carotid artery wall is large, and the pixel value of the pixel of the set T representing the carotid artery wall lumen is small. Therefore, an evaluation function E (p) expressed by the following equation (6) that represents the high possibility of being a carotid artery is introduced for the carotid artery parameter p that determines the position and shape of the carotid artery.
  • ⁇ and ⁇ are both positive constants, and
  • the first term on the right side assumes a larger value as the pixel value is larger at the position assumed to be the carotid artery wall, that is, the whiter value, and the second term on the right side is assumed to be the carotid artery lumen. The smaller the pixel value at the position, that is, the larger the black value.
  • g (A; Amin, Amax) is a function represented by the following equation (7).
  • A represents the area of the carotid artery lumen, that is, the number of pixels in the set T
  • Amin and Amax represent the possible minimum and maximum values of the area of the carotid artery lumen, respectively.
  • the third term on the right side of the above equation (6) represents a penalty when the area of the carotid artery lumen is out of a possible range.
  • ⁇ in the above equation (6) a positive positive number large enough that no rounding error occurs in the computer is selected.
  • the value of ⁇ in the above formula (6) depends on specifications such as the ratio of echo intensity between the carotid artery wall and the carotid artery lumen, and the image output of the ultrasonic diagnostic apparatus 16, but it is It is clear that about 2.0 may be selected.
  • FIG. 8 shows an example of the weight function w (x, y; p).
  • the value of the carotid artery parameter p that determines the position and shape of the carotid artery in the ultrasonic B-mode image I (x, y) is the maximum of the evaluation function E (p) given by the above equation (6) or the above equation (9). It is decided to become.
  • the value of such a parameter cannot be obtained analytically, but can be obtained using a nonlinear optimization method such as the steepest descent method. Since the tissue having a circular cross section similar to the carotid artery does not exist in the ultrasonic B-mode image, it rarely falls into a local solution.
  • the CPU 41 calculates the inner radius r 1 ( ⁇ ) of the carotid artery wall from the obtained contour line of the carotid artery wall, that is, the closed curve f (s) (where 0 ⁇ s ⁇ 1) as follows.
  • the center coordinate of the carotid artery is given by (Re (c 0 ), Im (c 0 )) using the 0th-order Fourier descriptor c 0 .
  • Re (•) and Im (•) represent a real part and an imaginary part of “•”, respectively.
  • the contour line viewed from the center of the carotid artery is represented by f (s) ⁇ c 0 (where 0 ⁇ s ⁇ 1). Therefore, the radius vector r (s) and the deflection angle ⁇ (s) at a certain parameter s are expressed by the following equations (10) and (11), respectively.
  • the polar coordinate display r 1 ( ⁇ ), 0 ⁇ ⁇ ⁇ 2 ⁇ , of the shape of the inner surface of the carotid artery wall is obtained.
  • An example of the contour line Q of the inner surface of the carotid artery wall estimated by the CPU 41, that is, the inner radius r 1 ( ⁇ ) is shown in FIG.
  • step S30 An area appropriately including the inner surface of the carotid artery wall and the surrounding tissue estimated as described above is cut out from the ultrasonic B-mode image Img1 of a predetermined frame by the CPU 41. That is, a template image template (r, ⁇ ) prepared by polar coordinates of the ultrasonic B-mode image Img1 with the center of the carotid artery estimated in step S20 as the origin is prepared.
  • the CPU 41 displays, as an image I (r, ⁇ , t), a polar coordinate display of the ultrasound B-mode image of an arbitrary frame (t-th frame) with the center of the carotid artery estimated in step S20 as the origin. Prepare as.
  • the value of d 1 thus determined represents the amount of displacement of the carotid artery wall inner surface at time t (see FIG. 9).
  • r is the radius of the region used for evaluating the square error.
  • the value of r is increased, the region that can be used for estimating the heart rate variability of the carotid artery shape increases, and as a result, the estimation accuracy increases. There is expected. However, if the value of r is increased unnecessarily, the estimation accuracy may deteriorate due to the influence of non-uniformity of surrounding tissues.
  • the value of r is preferably about 2 to 3 times the inner radius r 1 ( ⁇ ) of the carotid artery wall.
  • FIG. 12 shows the relationship between the rate of change d 1 / r 1 and the square error J in an ultrasonic B-mode image of a certain frame.
  • r 1 is the average inner radius of the carotid artery wall represented by the following formula (15).
  • the CPU 41 performs the same process on all the acquired frame images except for the frame image used as the template image, thereby obtaining the time variation d 1 (t) of the displacement amount.
  • the time variation of the inner radius of the carotid artery wall is given as r 1 ( ⁇ ) + d 1 (t).
  • the CPU 41 estimates not only d 1 but also the shift (x 0 , y 0 ) of the center coordinates.
  • an image I ′ (r, ⁇ , t) is prepared by shifting the center coordinates of the image I (r, ⁇ , t) by (x 0 , y 0 ).
  • the following formulas (16) and (17) are used instead of the above formulas (13) and (14).
  • FIGS. 13 (g) to 13 (l) show the results of a 60-year-old healthy man.
  • the vertical axis represents the inner radius (mm) of the carotid artery
  • the horizontal axis represents time (seconds).
  • the carotid heart rate variability is estimated in the same order from the distal end (end close to the brain) to the proximal end (end close to the heart). It moves by 5mm toward.
  • the position where the heart rate variability of the carotid artery is estimated in the same order is from the distal end (end close to the brain) to the proximal end (close to the heart).
  • the scale of the vertical axis in FIGS. 13 (g) to 13 (l) is different from the scale of the vertical axis in FIGS. 13 (a) to 13 (l).
  • the time variation of the carotid artery wall is estimated by estimating the size of the diameter of the carotid artery wall so that the error between the deformed template image created by the method and the acquired ultrasonic B-mode image of each frame is minimized. To get.
  • the ultrasonic B-mode image can be acquired from a general ultrasonic diagnostic apparatus, the image processing apparatus 11 is highly versatile.
  • the image processing apparatus 11 of the present embodiment estimates the shift. In this case, even when there is a shift in the center of the carotid artery on the ultrasonic B-mode image for each frame, it is easy to estimate the carotid artery wall.
  • the image processing program of the present embodiment acquires an ultrasonic B-mode image of continuous frames, and estimates a carotid artery wall in a short-axis cross section of the carotid artery included in the ultrasonic B-mode image of a predetermined frame
  • the computer 12 is caused to function as follows.
  • the image processing program also uses, as a template image, an ultrasonic B-mode image including the estimated carotid artery wall and surrounding tissue as a template image, and a deformed template image and each acquired frame
  • the computer 12 is caused to function so as to acquire the time change of the carotid artery wall by estimating the size of the diameter of the carotid artery wall so that the error from the ultrasonic B-mode image of the image is minimized.
  • the image processing apparatus can track the variation of the carotid artery due to heartbeat with sufficient accuracy using an ultrasonic B-mode image.
  • the computer can function.
  • the image processing program of the present embodiment determines the value of the carotid artery parameter that determines the position and shape of the carotid artery so that the evaluation function representing the high possibility of being a carotid artery is maximized.
  • the computer 12 is made to function to estimate the carotid artery wall. In this case, it is easy to estimate the carotid artery wall.
  • the ROM 42 of the present embodiment functions as a storage medium that stores the image processing program.
  • the CPU 41 of the computer 12 executes an image processing program, even when arteriosclerosis is locally generated in the carotid artery, the heartbeat fluctuation of the carotid artery is tracked with sufficient accuracy using an ultrasonic B-mode image. can do.
  • the analysis result regarding arteriosclerosis may be configured to be output from only one of the display 13 and the printer 14.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Vascular Medicine (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

 画像処理装置11のコンピュータ12は、連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する。コンピュータ12はまた、推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と前記取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する。

Description

画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置
 本発明は、画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置に関し、特に、頸動脈の超音波画像のための画像処理装置及び画像処理プログラム、並びにそれらに関連する記憶媒体及び超音波診断装置に関する。
 動脈硬化症は、生活習慣の不摂生が危険因子となる生活習慣病の一つであり、自覚症状がほとんどないまま若年層から進行し、放っておくと脳梗塞、心筋梗塞、狭心症などに発展する可能性がある。動脈硬化症は治癒が困難であるため、早期に動脈硬化の兆候をとらえて患者に生活習慣の改善を促し、病気の進行を遅らせることが重要である。
 動脈硬化症の検査には様々な診断方法があり、なかでも超音波エコー検査は、非侵襲に血管を直接観察できることから、現在の臨床診断において必要不可欠な検査として定着しつつある。動脈硬化症診断のための超音波エコー検査では、血管内部に付着したプラークと呼ばれる脂肪分の有無や内膜中膜複合体厚(intima-media complex thickness(IMT))を評価する。しかし、動脈硬化初期段階ではプラークもなく、IMTも薄くて計測が困難であるため、こうした形態学的観察では、初期の兆候をとらえることは難しい。
 これに対し、動脈硬化は動脈が硬化して弾力性を失うことであるから、心拍動に伴う動脈の動きを評価すればよいという考え方がある。プラーク、IMTなどの形態学的計測とは異なり、動脈の動きの定量的計測には、計算機の援用が不可欠である。
 特許文献1では、心拍動に伴う頸動脈径の変動を測定することにより、動脈硬化の指標を得られることが記載されている。
 また、本件出願人は特願2007-239198号において、超音波Bモード長軸断面像を用いて、心拍動に伴う頸動脈径の変動を推定する方法を提案している。この方法は、頸動脈はその長軸(y軸)上の位置によらず同質であって心拍動に応じて等しい変動を示すという前提条件のもとで行われる。この前提条件は、多くの場合満たされるが、局所的に頸動脈に動脈硬化が生じているようなケースでは満たされない。従って、そのようなケースでは、本件出願人が先に提案している方法を適用することはできない。なお、頸動脈の長軸とは頸動脈の延長方向に延びる軸をいい、長軸に直交する軸は頸動脈の短軸という。
 局所的に頸動脈に動脈硬化が生じているようなケースでは、超音波Bモード画像である頸動脈の短軸断面像を使用して、心拍動に伴う頸動脈の変動を推定することが考えられる。しかし、超音波Bモード画像の1画素のサイズはおおよそ0.07~0.11mmであり、十分に高い解像度とはいえない。そのため、1画素のサイズよりも細かい精度で頸動脈の変動を捉える技術が不可欠である。
 特願2007-239198号において本件出願人が提案している方法では、頸動脈長軸断面像の空間的形状に関する情報を利用して推定精度を改善している。しかし、頸動脈の短軸断面像を使用する場合には、以下の理由によりその空間的形状に関する情報を利用して推定精度を改善させることは難しい。1つ目の理由は、頸動脈の短軸断面形状はおおよそ円形ではあるが個人差が大きいため、統一した形状では表現しにくいことであり、2つ目の理由は、超音波Bモード画像中の頸動脈の占める面積が長軸断面像の場合に比べて短軸断面像の場合には小さいため、利用可能な情報が少ないことである。
 非特許文献1では、Bモード画像上で頸動脈壁上の1点を手動で指定したのち、指定した頸動脈壁上の点の動きを、RF信号を用いて10μmの精度で推定及び追跡する方法が提案されており、この方法は実用化されている。
 非特許文献1で提案されている方法のようにRF信号を用いる場合には、サンプリングレートを高くして位相差追跡法を用いることにより推定精度を改善することができる。しかし、推定精度を改善するためのこのような手法は、Bモード画像を用いて頸動脈の動きを推定及び追跡する方法には適用できない。また、頸動脈の動きを追跡する場合、精度の観点からはRF信号を用いることが有利であるが、RF信号を出力可能な超音波診断装置は一部の機種に限られていて一般的とはいえず、汎用性に欠ける。
特許第3882084号 原田烈光,「エコートラッキング法による動脈硬化指標の計測」,超音波検査技術,Vol.28(3):pp.29-35,2003. ジーエッチ・グランルンド、「フーリエ プレプロセシング フォー ハンド プリント キャラクタ レコグニッシヨン(Fourier preprocessing for hand character recognition)」、IEEE Trans. on Computers, Vol. C-21, pp.195-201,1972. クリス・エル・デ・コルテ他、「キャラクタリゼーション オブ プラーク コンポーネンツ ウイズ イントラバスキュラ ウルトラサウンド エラストグラフィ イン ヒューマン フェモラル アンド コロナリイ アーテェリーズ イン ヴィトロ(Characterization of Plaque Components With Intravascular Ultrasound Elastgraphy in Human Femoral and Coronary Arteries In Vitro)」、 ラジ・エー・バルデュシング,クリス・エル・デ・コルテ他,「コンパリソン オブ ファイナイト エレメンツ モデル エラストグラムス アイヴィユーエス エラストグラムス アクワイヤド フロム ファントム アンド アーテェリーズ(Comparison of Finite Elements Model Elastograms and IVUS Elastograms acquired from Phantoms and Arteries)」、IEEE Symposium, pp.1873-1875,2002 林香苗、「日本人並びに日本産医学実験動物の解剖及び生理学係数」、第2版(訂正復刻版)、文京書院、1965,pp9
 従って、本発明の目的は、局所的に頸動脈に動脈硬化が生じている場合にも、超音波Bモード画像を使用して十分な精度で心拍動に伴う頸動脈の変動を追跡することができる画像処理装置及び画像処理プログラムを提供することにある。又、本発明の他の目的は、そのような画像処理プログラムを記憶した記憶媒体及びそのような画像処理装置に接続して使用される超音波診断装置を提供することにある。
 上記の目的を達成するために、本発明の第1の態様では、連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する頸動脈壁推定手段と、推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と前記取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する心拍変動追跡手段とを備える画像処理装置が提供される。
 好ましくは、頸動脈壁推定手段は、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定する。
 好ましくは、心拍変動追跡手段は、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれも推定する。
 本発明の第2の態様では、コンピュータを、連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する頸動脈壁推定手段、及び推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と前記取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する心拍変動追跡手段として機能させる画像処理プログラムが提供される。
 好ましくは、頸動脈壁推定手段は、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定する。
 好ましくは、心拍変動追跡手段は、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれも推定する。
 本発明の第3の態様では、上記第2の態様に係る画像処理プログラムを記憶した記憶媒体が提供される。
 本発明の第4の態様では、上記第1の態様に係る画像処理装置に接続される超音波診断装置が提供される。超音波診断装置は、探触子による超音波の送受信により得られるエコー信号を基に超音波Bモード画像を生成し、生成した超音波Bモード画像を画像処理装置に出力する。
本発明の一実施形態の画像処理装置の概略図。 図1の画像処理装置の概略電気ブロック図。 頸動脈短軸断面を含む超音波Bモード画像を示す図。 二層円筒モデルの説明図。 頸動脈短軸断面での座標系を示す図。 距離rと変位量d(r; P,r1,r2,E1,E2)の関係を示すグラフ。 基準状態からの血圧の変化量Pが-10mmHg、0mmHg、20mmHg、40mmHgであるときの距離rと変位量d(r; P,r1,r2,E1,E2)の関係を示すグラフ。 重み関数wの説明図。 心拍変動追跡法の概念図。 図1の画像処理装置のコンピュータが実行する画像処理プログラムのフローチャート。 コンピュータのCPUにより推定された頸動脈壁内面の輪郭線Qの説明図。 変化率d/rと2乗誤差Jの関係を示すグラフ。 図13(a)~図13(f)は20歳の健常男性の頸動脈の心拍変動を推定した結果を示すグラフ、図13(g)~図13(l)は60歳の健常男性の頸動脈の心拍変動を推定した結果を示すグラフ。
 以下、本発明の一実施形態を図1~図13(l)を参照して説明する。
 図1に示すように、本実施形態の画像処理装置11は、頸動脈壁推定手段(頸動脈壁推定部)及び心拍変動追跡手段(心拍変動追跡部)として機能するコンピュータ12、ディスプレイ13、プリンタ14、キーボード15、及び超音波診断装置16を備えている。
 超音波診断装置16は、探触子21、表示部22、及び図示しない超音波発生源を備えている。超音波診断装置16の探触子21は、生体内にパルス波を送波して頸動脈23からの反射波(エコー信号)を受波する先端面を有する。探触子21の先端面は長四角形状に形成されている。超音波診断装置16は、前記エコー信号に基づいてBモードで取得される、頸動脈短軸断面を含むエコー動画像(すなわち、複数の超音波Bモード画像)を生成する。超音波診断装置16の表示部22には、被検者の頸動脈23の拡張及び収縮などの変形が動画像で表示される。図5は、頸動脈短軸断面での座標系を示している。
 超音波Bモード画像は、超音波診断装置16のビデオ出力から出力され、図示しないDVコンバータにより所定の解像度(m×n画素)及び所定の毎秒フレーム数でビデオキャプチャされた後、IEEE1394信号としてコンピュータ12に入力される。本実施形態では、所定の毎秒フレーム数として30フレーム/秒を選定しているが、この値は限定されるものではなく、心拍動に伴う頸動脈の変動を明確に観測できる値であればよい。
 ディスプレイ13で表示される超音波画像領域の画素数は、水平方向に関してはNx、垂直方向に関してはNyである。本実施形態では、Nx=540(pixel)及びNy=420(pixel)を選定しているが、この数値は限定されるものではない。
 超音波診断装置16により取得されたエコー動画像は、コンピュータ12に入力された後、コンピュータ12が備える記憶装置44(図2参照)に格納される。記憶装置44は、例えばハードディスク又は半導体記憶装置からなり、各種の情報の読み出し及び書き込みが可能である。
 図2に示すように、コンピュータ12は、中央処理装置(CPU)41、ROM42、及びRAM43を備え、記憶媒体としてのROM42に格納された画像処理プログラムを実行する。RAM43は、前記プログラムを実行する際の作業用メモリである。
 (実施形態の作用)
 次に、上記のように構成された画像処理装置11において、CPU41が実行する画像処理プログラムの処理を説明するが、プログラム処理の説明の前にまず、「頸動脈及び周辺組織の応力及び歪み特性」、「二層円筒モデル」及び「頸動脈壁の心拍変動追跡法の概略」について説明する。
 (頸動脈及び周辺組織の応力及び歪み特性)
 頸動脈は心拍動により拡張及び収縮を繰り返す。頸動脈の周辺にある脂肪などの周辺組織は、頸動脈の拡張及び収縮に伴って伸縮する。一般にこうした物質の応力と歪みの関係は材料力学の見地から考察される。
 図3は、頸動脈短軸断面を含む超音波Bモード画像(以下、単に画像ともいう)を示す。図3中のほぼ中央に円形をした頸動脈50が示されている。超音波Bモード画像においては、図3中でハッチングされている頸動脈内腔50aは黒く描かれ、頸動脈壁50bは白く描かれる。頸動脈は周囲を脂肪などの周辺組織によって囲まれている。
 (二層円筒モデル)
 頸動脈及び周辺組織を、図4に示すような一様な二層円筒(材料力学的には二層厚肉円筒ともいう)でモデル化することができる。頸動脈壁の内半径をrで表し、外半径をrで表す。周辺組織は、頸動脈の中心からrだけ離れた位置から無限遠まで存在するものと仮定する。頸動脈壁の弾性係数をEで表し、周辺組織の弾性係数をEで表す。頸動脈壁のポアソン比v及び周辺組織のポアソン比vはいずれも0.5とみなす。頸動脈壁の内半径がr、外半径がrで表される特定の基準状態から頸動脈の内圧(血圧)に変化があったときの頸動脈及び周辺組織の径方向に関する変位量d(r)は、以下の二層円筒モデルの理論式(1)で表すことができる。式(1)中、Pは基準状態からの内圧の変化量を表す。
Figure JPOXMLDOC01-appb-M000001
 頸動脈の中心からrの距離にある組織は、内圧の変化に応じて、頸動脈の中心からr+d(r)の距離の位置に移動する。内圧の変化量Pが正の場合には変位量dは正であって、つまり拡張を表し、内圧の変化量Pが負の場合には変位量dは負であって、すなわち収縮を表す。
 式(1)にr=rを代入すれば、頸動脈壁内面の変位量dは以下の式(2)で表される。
Figure JPOXMLDOC01-appb-M000002
 ここで、生理学的見地から、頸動脈の弾性係数Eと周辺組織Eの弾性係数は、それほど大きく違わないことが分かっている(非特許文献3,4参照)。また、頸動脈壁の厚みW(W=r-r)は、20歳代及び30歳代で約0.73mm、40歳代で約0.79mm、50歳代で約0.98mm、60歳代で約1.00mm、70歳代で約1.04mm程度であることが分かっており(非特許文献5参照)、これは頸動脈の直径(6-12mm)や周辺組織の厚みに比べて十分に薄いといえる。以上のことを考慮すれば、上式(1)は以下の式(3)で近似することができる。
Figure JPOXMLDOC01-appb-M000003
 上式(3)は、心収縮、すなわち血圧の上昇により頸動脈及び周辺組織が拡張するとき、その拡張の度合い、つまり変位量は、頸動脈の中心からの距離rに反比例することを意味している。一例として、E=200kPa、E=100kPa、r=4.0mm、r=4.8mm、P=40mmHg(5.3kPa)のときの頸動脈の中心からの距離rと変位量d(r; P, r1, r2, E1, E2)の関係を図6に示す。また、基準状態からの内圧の変化量Pだけを-10mmHg、0mmHg、20mmHg、40mmHgと変化させたときの距離rと変位量d(r; P, r1, r2, E1, E2)の関係を図7に示す。図6及び図7に示すように、距離rと変位量dとの関係は、内圧の変化量Pに関わりなく、反比例で表される。
 (頸動脈壁の心拍変動追跡法の概略)
 上式(3)は変位量dが距離rに反比例することを表しているため、図6又は図7に示すグラフ中の1点、すなわち距離rの値とそれに対応する変位量dの値、例えば頸動脈壁の内半径rの値と頸動脈壁内面の変位量dの値が与えられれば、周辺組織も含めて頸動脈の中心からrの距離にある組織の変位量は完全に決まる。
 頸動脈壁の内半径rが分かる超音波Bモード画像Img1(テンプレート画像)があったとき、その画像を式(3)に従って変形させれば、その他の任意の血圧時における超音波Bモード画像Img2(変形後のテンプレート画像)を模擬的に作成できる。その際、拡張或いは収縮の度合いを制御するパラメータはdのみである。テンプレート画像から変形後のテンプレート画像を作成する際に使用されるパラメータdの値を、変形後のテンプレート画像と実際に計測して取得される画像Img2との誤差が最小になるように決定すれば、その決定されたdの値は、画像Img1の撮影時から画像Img2の撮影時までの時間における頸動脈壁内面の変位量dの推定値となる。すなわち、画像Img1では頸動脈の中心からrの距離にあった頸動脈壁内面の位置が、画像Img2では頸動脈の中心からr+dの距離にまで変位したと推定することができる。換言すれば、画像Img1ではrであった頸動脈壁の内半径の大きさが、画像Img2ではr+dに変化したと推定することができる。実際に計測して取得されたすべての超音波Bモード画像について同様のことを行えば、頸動脈壁の内径の時間変化を追跡することが可能である。
 この方法のポイントは、頸動脈壁の心拍変動を追跡するにあたり、頸動脈の周辺組織が心拍動により変位することを利用している点である。超音波Bモード画像中の頸動脈壁の占める面積に比べて周辺組織が占める面積ははるかに大きいため、周辺組織が心拍動により変位することを利用することにより、頸動脈壁の心拍変動の追跡精度を大幅に改善することができる。この追跡精度は、超音波Bモード画像中の周辺組織の占める面積が大きいほど、より一層の改善が可能である。
 (画像処理プログラムの処理)
 次に、画像処理装置11のCPU41が実行する画像処理プログラムの処理を説明する。CPU41は、図10のステップS10~S40の処理を行うことにより、頸動脈の心拍変動追跡を行う。心拍変動追跡法の概念図を図9に示す。
 ステップS10では、CPU41は、頸動脈短軸断面を含む連続したフレームの超音波Bモード画像を計測及び取得する。CPU41により取得された超音波Bモード画像は、I(x,y,t),x=1,...,Nx,y=1,...,Ny,t=1,...,Ntと表される。ただし、x,y,tはそれぞれ、水平方向の画素番号、垂直方向の画素番号、フレーム番号を表し、各超音波Bモード画像上の左上に位置する画素に対してx=1,y=1が与えられる。また、Nx,Ny,Ntはそれぞれ、水平方向の画素総数、垂直方向の画素総数、フレーム総数を表す。1枚の超音波Bモード画像に着目する場合は、その画像は、I(x,y)、x=1,...,Nx,y=1,...,Nyと表される。
 ステップS20では、CPU41は、連続したフレームの中から適当な1つのフレーム(所定フレーム)を選択し、選択したフレームの超音波Bモード画像Img1について、頸動脈壁内面の位置及び形状、より具体的には頸動脈壁の内半径r(θ)を推定する(図9参照)。内半径r(θ)は、方位θ(0≦θ≦2π)を変数にもつ頸動脈壁の内半径rに関する関数を表す。ステップS20における処理の詳細は後述する。
 ステップS30では、CPU41は、所定フレームの超音波Bモード画像を式(3)に従って変形させる。このとき、変形後の画像とその他のフレームの超音波Bモード画像との誤差が最小になるようにして、変位量dの推定値を得る。全てのフレームの超音波Bモード画像について同様のことを行うことにより、変位量dの時間変化d(t)は得られる。ステップS30における処理の詳細は後述する。
 ステップS40では、頸動脈壁の内半径の時間変化をr(θ)+d(t)としてディスプレイ13やプリンタ14などの出力装置に出力する。
 (ステップS20における処理の詳細)
 前記ステップS20においては、CPU41は、連続したフレームの中から適当な一つのフレームを選択し、選択したフレームの超音波Bモード画像Img1中に含まれる頸動脈短軸断面において頸動脈壁の内半径r(θ)を推定する。いずれのフレームを選択するかは、特に限定されるものではなく、無作為に選択されてもよい。あるいは、最初のフレーム、頸動脈が最も鮮明に映っているフレーム、頸動脈が収縮期にあるフレーム、あるいは頸動脈が拡張期にあるフレームが選択されてもよい。
 頸動脈壁内面の輪郭線は、真円もしくは多少歪んだ円である。頸動脈壁内面の輪郭線はは、閉曲線を表現するためのフーリェ記述子でモデル化される。このフーリェ記述子については非特許文献2に記載されている。
 フーリェ記述子を利用して頸動脈壁内面の輪郭線を表現するにあたっては、画像上の座標x,yが複素数x+iyで表される。ただし、iは虚数単位を表す。フーリェ記述子を利用することによって、複素平面上の閉曲線f(s)は、媒介変数sを用いて次式(4)で表現される。
Figure JPOXMLDOC01-appb-M000004
 上式(4)中、cは閉曲線の位置や形状を決めるパラメータであるフーリェ記述子を表し、Kは任意の整数を表す。整数Kの値が大きいほど、複雑な閉曲線を表現することができるようになるが、頸動脈壁内面の輪郭線の場合、K=5程度でよい。ただし、整数Kの値はこれに限定されるものではない。以下、頸動脈壁内面の形状を規定するフーリェ記述子をまとめて頸動脈パラメータp={ck|k=0,±1,±2,....,±K}と呼ぶことにする。
 頸動脈内腔は、閉曲線f(s)で囲まれる領域であり、これらの領域に位置する画素(x,y)の集合をTで表す。閉曲線f(s)からの距離が頸動脈壁の厚みW以下であって閉曲線f(s)の外側に位置する画素(x,y)の集合をBで表す。すなわち、集合Bの画素(x,y)は、頸動脈壁に対応する領域に位置する。集合Bは次式(5)で与えられる。
Figure JPOXMLDOC01-appb-M000005
 画像中、頸動脈壁は強いエコーのために白く描かれ、頸動脈内腔はエコーが弱いため黒く描かれる。すなわち、頸動脈壁を表す集合Bの画素では画素値が大きく、頸動脈壁内腔を表す集合Tの画素では画素値は小さくなる。そこで、頸動脈の位置及び形状を決める頸動脈パラメータpに対し、頸動脈である可能性の高さを表す、次式(6)で表される評価関数E(p)を導入する。
Figure JPOXMLDOC01-appb-M000006
 ただし、上式(6)において、α、βはいずれも正値の定数であり、|・|は、集合の要素数を表す。上式(6)中、右辺第1項は、頸動脈壁と想定される位置で画素値が大きいほど、つまり白いほど大きな値をとり、右辺第2項は、頸動脈内腔と想定される位置で画素値が小さいほど、つまり黒いほど大きな値をとる。上式(6)の右辺第3項において、g(A;Amin,Amax)は次式(7)で表される関数である。
Figure JPOXMLDOC01-appb-M000007
 上式(7)において、Aは、頸動脈内腔の面積、すなわち集合Tの画素の数を表し、Amin及びAmaxはそれぞれ、頸動脈内腔の面積の考え得る最小値及び最大値を表す。上式(6)の右辺第3項は、頸動脈内腔の面積の考え得る範囲を外れた場合のペナルティを表す。Amin及びAmaxの値は、これまでに収集された画像のサンプルに基づいて予め設定される。例えばAmin=20(mm),Amax=110(mm)と設定することができるが、Amin及びAmaxの値はこれに限定されるものではない。上式(6)中のβの値としては、コンピュータにおいて丸め誤差が生じない程度に十分な大きな正数が選択される。上式(6)中のαの値は、頸動脈壁と頸動脈内腔でのエコーの強さの比や、超音波診断装置16の画像出力などの仕様に依存するが、予備試験によりα=2.0程度を選択すればよいことが明らかになっている。
 上式(6)は、重み関数w(x,y;p)を以下の式(8)で定義した場合には、以下の式(9)で書き換えることができる。
Figure JPOXMLDOC01-appb-M000008
 この重み関数w(x,y;p)の例を図8に示す。超音波Bモード画像I(x,y)における頸動脈の位置及び形状を決める頸動脈パラメータpの値は、上式(6)若しくは上式(9)で与えられる評価関数E(p)が最大になるように決定される。そのようなパラメータの値は解析的には求めることができないが、最急降下法などの非線形最適化法を利用して求めることができる。頸動脈に類似した断面円形の組織は超音波Bモード画像中に存在しないため、局所解に陥ることは少ない。
 CPU41は、得られた頸動脈壁内面の輪郭線、すなわち閉曲線f(s)(ただし、0≦s≦1)から頸動脈壁の内半径r(θ)を以下のようにして求める。まず、頸動脈の中心座標は、0次フーリェ記述子c0を用いて(Re(c0),Im(c0))で与えられる。ただし、Re(・)及びIm(・)はそれぞれ、「・」の実部及び虚部を表す。頸動脈の中心から見た輪郭線は、f(s)-c0(ただし、0≦s≦1)で表される。そのため、ある媒介変数sの値での動径r(s)及び偏角θ(s)はそれぞれ、以下の式(10)及び式(11)で表される。
Figure JPOXMLDOC01-appb-M000009
 媒介変数sを外し、r(s)をθ(s)の関数と見たものが頸動脈壁内面の形状の極座標表示r(θ),0≦θ≦2πとなる。CPU41により推定された頸動脈壁内面の輪郭線Q、すなわち内半径r(θ)の一例を図11に示す。
 (ステップS30の詳細)
 上記のように推定された頸動脈壁内面及び周辺組織を適当に含む領域がCPU41によって所定のフレームの超音波Bモード画像Img1から切り出される。すなわち、前記ステップS20で推定された頸動脈の中心を原点として超音波Bモード画像Img1を極座標表示したものがテンプレート画像template(r,θ)として準備される。
 又、CPU41は、任意のフレーム(t番目のフレーム)の超音波Bモード画像について、前記ステップS20で推定された頸動脈の中心を原点として極座標表示したものを画像I(r,θ,t)として準備する。
 原理的には、任意のフレームの画像I(r,θ,t)は、テンプレート画像を適当なdの値を用いて変形、すなわち拡張或いは収縮させることにより、次式(12)で近似することができる。
Figure JPOXMLDOC01-appb-M000010
 上式(12)による近似の2乗誤差Jは以下の式(13)で表される。CPU41は、2乗誤差Jが最小となるように、以下の式(14)に従ってdの値を決定する。
Figure JPOXMLDOC01-appb-M000011
こうして決定されたdの値は、時刻tにおける頸動脈壁内面の変位量を表す(図9参照)。
 ところで、rは2乗誤差を評価するために利用される領域の半径であり、rの値を大きくすると、頸動脈形状の心拍変動の推定に利用できる領域が増える結果、推定精度が高くなることが期待される。しかし、むやみにrの値を大きくすると、周辺組織の非一様性などの影響を受けて推定精度が逆に悪化するおそれがある。この点、rの値は、頸動脈壁の内半径r(θ)の2~3倍程度であることが好ましい。
 ここで一例として、あるフレームの超音波Bモード画像における変化率d/rと2乗誤差Jの関係を図12に示す。ただし、rは、次式(15)で表される頸動脈壁の内半径の平均である。
Figure JPOXMLDOC01-appb-M000012
 図12に示す一例では、変化率d/r=0.08で2乗誤差Jが最小になる。従って、頸動脈壁内面の変位量dの推定値として0.08rが得られる。
 テンプレート画像として使用されるフレームの画像を除く取得したすべてのフレームの画像について同様の処理がCPU41により行われることにより、変位量の時間変化d(t)が得られる。頸動脈壁の内半径の時間変化は、r(θ)+d(t)として与えられる。
 (頸動脈の中心が変動している場合)
 CPU41は、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、dだけでなく、中心座標のずれ(x0,y0)も合わせて推定する。この場合、画像I(r,θ,t)の中心座標を(x0,y0)だけシフトさせた画像I’(r,θ,t)が用意される。また、上記の式(13)及び式(14)の代わりに以下の式(16)及び式(17)が用いられる。
Figure JPOXMLDOC01-appb-M000013
 テンプレート画像template(r,θ)を伸縮させることによりテンプレート画像template(r+d(r;r(θ),d),θ)を作成する際、標本点(画素)の位置もまた伸縮を受けるため、変形後のテンプレート画像の標本点の位置は元のテンプレート画像のそれとは異なる。このままでは、計測画像I(r,θ,t)との誤差を評価することができないため、標本点を一致させるためにリ・サンプリングを行う必要がある。具体的には、2次元線形補間を利用してもよいし、あるいは、モーフィングなどで利用される様々な補間(内挿)技術、例えば2次元キュービック補間や2次元スプライン補間を利用してもよい。
  (推定結果)
 20歳の健常男性及び60歳の健常男性からそれぞれ複数の頸動脈超音波Bモード画像を取得した。取得した画像を利用して、両男性の頸動脈の心拍変動を推定した結果、より具体的には頸動脈の内半径の時間変化r(θ)+d(t)(ただし、θ=0(度)、0≦t≦4(秒))を推定した結果を図13(a)~図13(l)に示す。図13(a)~図13(f)は20歳健常男性の結果を示し、図13(g)~図13(l)は60歳健常男性の結果を示す。図13(a)~図13(l)において、縦軸は頸動脈の内半径(mm)を表し、横軸は時間(秒)を表す。図13(a)~図13(f)では、同順で、頸動脈の心拍変動の推定を行っている位置が遠位端(脳に近い端)から近位端(心臓に近い端)に向かって5mmづつ移動している。同様に、図13(g)~図13(l)では、同順で、頸動脈の心拍変動の推定を行っている位置が遠位端(脳に近い端)から近位端(心臓に近い端)に向かって5mmづつ移動している。なお、図13(g)~図13(l)の縦軸のスケールは、図13(a)~図13(l)の縦軸のスケールとは異なっている。
 図13(a)~図13(f)と図13(g)~図13(l)を比較して明らかなように、20歳男性の頸動脈の心拍変動が大きくはっきりとしているのに対し、60歳男性の頸動脈の心拍変動は小さく、周期性も乏しい。又、20歳男性の場合は、頸動脈のどの断面でも同じような心拍変動を示しているが、60歳男性の場合は、図13(h)及び図13(k)に結果が示されている断面では、他の断面に比べて心拍変動が小さく、局所的に動脈硬化が進んでいることが予想される。
 本実施形態によれば以下の利点が得られる。
 (1) 本実施形態の画像処理装置11は、コンピュータ12が頸動脈壁推定手段として機能することにより、連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する。画像処理装置11はまた、コンピュータ12が心拍変動追跡手段として機能することにより、推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する。
 この結果、本実施形態によれば、局所的に頸動脈に動脈硬化が生じている場合にも、超音波Bモード画像を使用して十分な精度で頸動脈の心拍変動を追跡することができる。特に、超音波Bモード画像の1画素のサイズはおおよそ0.07~0.11mmであり、十分に高い解像度とはいえないにも拘わらず、頸動脈だけでなくその周辺組織も考慮に加えていることにより、十分な精度で頸動脈の心拍変動を追跡することが可能であり、その意義は大きい。さらに、超音波Bモード画像は一般的な超音波診断装置から取得することができるので、画像処理装置11は汎用性が高い。
 (2) 本実施形態の画像処理装置11は、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定する。この場合、頸動脈壁の推定が容易である。
 (3) 本実施形態の画像処理装置11は、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれを推定する。この場合、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合でも、頸動脈壁の推定が容易である。
 (4) 本実施形態の画像処理プログラムは、連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定するようにコンピュータ12を機能させる。画像処理プログラムはまた、推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得するようにコンピュータ12を機能させる。この結果、局所的に頸動脈に動脈硬化が生じている場合にも、超音波Bモード画像を使用して十分な精度で心拍動に伴う頸動脈の変動を追跡することができる画像処理装置としてコンピュータを機能させることができる。
 (5) 本実施形態の画像処理プログラムは、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定するようにコンピュータ12を機能させる。この場合、頸動脈壁の推定が容易である。
 (6) 本実施形態の画像処理プログラムでは、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれを推定するようにコンピュータ12を機能させる。この場合、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合でも、頸動脈の心拍変動の追跡が容易である。
 (7) 本実施形態のROM42は、上記の画像処理プログラムを記憶した記憶媒体として機能する。コンピュータ12のCPU41が画像処理プログラムを実行することにより、局所的に頸動脈に動脈硬化が生じている場合にも、超音波Bモード画像を使用して十分な精度で頸動脈の心拍変動を追跡することができる。
 (8) 本実施形態の超音波診断装置16は、画像処理装置11に接続されているため、上記(1)乃至(3)の効果を容易に実現することができる。
 前記実施形態を次のように変更して構成することもできる。
 画像処理プログラムを記憶する記憶媒体として、ROM42の代わりに記憶装置44を用いてもよい。或いは、CDやDVD、USBメモリ等の記憶媒体に画像処理プログラムを格納し、格納された画像処理プログラムを当該記憶媒体からドライバ装置等を用いて読込みして実行するようにしてもよい。
 動脈硬化に関する解析の結果は、ディスプレイ13またはプリンタ14のいずれか一方のみから出力されるように構成してもよい。

Claims (8)

  1.  連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する頸動脈壁推定手段と、
     推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と前記取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する心拍変動追跡手段と
    を備えることを特徴とする画像処理装置。
  2.  前記頸動脈壁推定手段は、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定することを特徴とする請求項1に記載の画像処理装置。
  3.  前記心拍変動追跡手段は、フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれも推定することを特徴とする請求項1又は請求項2に記載の画像処理装置。
  4.  コンピュータを、
     連続したフレームの超音波Bモード画像を取得して、所定のフレームの超音波Bモード画像中に含まれる頸動脈短軸断面において頸動脈壁を推定する頸動脈壁推定手段、及び
     推定された頸動脈壁及びその周辺組織を含んだ超音波Bモード画像をテンプレート画像として用い、テンプレート画像を変形させることにより作成される変形後のテンプレート画像と前記取得した各フレームの超音波Bモード画像との誤差が最小になるように、頸動脈壁の径の大きさを推定することにより、頸動脈壁の時間変化を取得する心拍変動追跡手段
    として機能させることを特徴とする画像処理プログラム。
  5.  前記頸動脈壁推定手段は、頸動脈である可能性の高さを表す評価関数が最大になるように、頸動脈の位置及び形状を決める頸動脈パラメータの値を決定することにより、頸動脈壁を推定することを特徴とする請求項4に記載の画像処理プログラム。
  6.  前記心拍変動追跡手段は、
     フレームごとに超音波Bモード画像上の頸動脈の中心にずれがある場合には、そのずれも推定することを特徴とする請求項4又は請求項5に記載の画像処理プログラム。
  7.  請求項4乃至請求項6のいずれか1項に記載の画像処理プログラムを記憶した記憶媒体。
  8.  請求項1乃至請求項3のいずれか1項に記載の画像処理装置に接続され、探触子による超音波の送受信により得られるエコー信号を基に超音波Bモード画像を生成し、生成した超音波Bモード画像を画像処理装置に出力することを特徴とする超音波診断装置。
PCT/JP2008/055361 2007-12-20 2008-03-24 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置 Ceased WO2009081599A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US12/808,487 US8187188B2 (en) 2007-12-20 2008-03-24 Image processing apparatus, image processing program, storage medium and ultra-sonograph
EP08722677A EP2226013A4 (en) 2007-12-20 2008-03-24 IMAGE PROCESSING DEVICE, IMAGE PROGRAM, STORAGE MEDIUM AND ULTRASONIC UNIT
AU2008341769A AU2008341769B2 (en) 2007-12-20 2008-03-24 Image processing apparatus, image processing program, storage medium and ultrasonograph

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2007-328325 2007-12-20
JP2007328325A JP4879872B2 (ja) 2007-12-20 2007-12-20 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置

Publications (1)

Publication Number Publication Date
WO2009081599A1 true WO2009081599A1 (ja) 2009-07-02

Family

ID=40800916

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2008/055361 Ceased WO2009081599A1 (ja) 2007-12-20 2008-03-24 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置

Country Status (5)

Country Link
US (1) US8187188B2 (ja)
EP (1) EP2226013A4 (ja)
JP (1) JP4879872B2 (ja)
AU (1) AU2008341769B2 (ja)
WO (1) WO2009081599A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120215339A1 (en) * 2011-02-21 2012-08-23 Jerome Boogaard Method for fabricating an implantable lead for applying electrical pulses to tissue of a patient and system for fabrication thereof

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5412242B2 (ja) 2009-11-05 2014-02-12 伸治 久米 超音波断層画像の処理装置
DE102011083704A1 (de) * 2011-09-29 2013-04-04 Siemens Aktiengesellschaft Angiographisches Untersuchungsverfahren
WO2013124946A1 (ja) * 2012-02-20 2013-08-29 株式会社デンソー 生体の血管径連続測定装置
CN107438408B (zh) 2015-04-03 2021-03-26 皇家飞利浦有限公司 血管识别的超声系统及方法
US11497465B2 (en) 2019-10-25 2022-11-15 Bard Peripheral Vascular, Inc. Method for treatment of a vascular lesion
CN114680938A (zh) * 2020-12-29 2022-07-01 无锡祥生医疗科技股份有限公司 颈动脉斑块测量方法及超声设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005185575A (ja) * 2003-12-25 2005-07-14 Gifu Univ 動脈硬化解析システム、動脈硬化解析方法及び動脈硬化解析プログラム
JP2007239198A (ja) 2006-03-06 2007-09-20 Shin Nikkei Co Ltd 網戸

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2889568B1 (ja) * 1998-05-18 1999-05-10 正男 伊藤 血管膜厚測定装置及び動脈硬化診断装置
US6471655B1 (en) * 1999-06-29 2002-10-29 Vitalwave Corporation Method and apparatus for the noninvasive determination of arterial blood pressure
US6554774B1 (en) * 2000-03-23 2003-04-29 Tensys Medical, Inc. Method and apparatus for assessing hemodynamic properties within the circulatory system of a living subject
JP4587570B2 (ja) * 2001-01-10 2010-11-24 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 血管弾性率計測方法、血管弾性率計算装置および超音波診断装置
US7074187B2 (en) * 2002-12-13 2006-07-11 Selzer Robert H System and method for improving ultrasound image acquisition and replication for repeatable measurements of vascular structures
JP2007268303A (ja) 2003-06-19 2007-10-18 Saraya Kk エコーを用いた血管径測定装置
JP4655616B2 (ja) 2004-12-13 2011-03-23 パナソニック株式会社 超音波診断装置
US20090012399A1 (en) * 2005-02-07 2009-01-08 Kazuhiro Sunagawa Ultrasonic diagnostic apparatus
JP5158679B2 (ja) 2007-09-14 2013-03-06 国立大学法人岐阜大学 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005185575A (ja) * 2003-12-25 2005-07-14 Gifu Univ 動脈硬化解析システム、動脈硬化解析方法及び動脈硬化解析プログラム
JP2007239198A (ja) 2006-03-06 2007-09-20 Shin Nikkei Co Ltd 網戸

Non-Patent Citations (9)

* Cited by examiner, † Cited by third party
Title
"Oryoku.Hizumi Sokutei to Kyodo Hyoka Symposium Koen Ronbunshu, 10 February, 2006 (10.02.06), Dai 37 Kai Oryoku · Hizumi Sokutei to Kyodo Hyoka Shinpo", article TAKAYUKI KATO ET AL.: "Keidomyaku Echo-zo ni yoru Kekkan no Rikugakuteki Kenzensei Hyoka ni Tsuite", pages: 177 - 180 *
CHRIS L DE KORTE ET AL., CHARACTERIZATION OF PLAQUE COMPONENTS WITH LNTRAVASCULAR ULTRASOUND ELASTGRAPHY IN HUMAN FEMORAL AND CORONARY ARTERIES IN VITRO
G. H. GRANLUND: "Fourier preprocessing for hand print character recognition", IEEE TRANS. ON COMPUTERS, vol. C-21, 1972, pages 195 - 201, XP011260694
HARADA A: "Measurement of Arteriosclerosis Indicator by Echo-Tracking Method (in Japanese)", JAPANESE JOURNAL OF MEDICAL ULTRASOUND TECHNIQUE, vol. 28, no. 3, 2003, pages 29 - 35
NOGATA F. ET AL.: "Choonpa Domyakukoka Keisoku System ni Tsuite", THE JAPANESE SOCIETY FOR NON-DESTRUCTIVE INSPECTION TAIKAI KOEN GAIYOSHU, 22 MAY, 2007 (22.05.07), HISEI 19 NENDO SHUNKI TAIKAI, pages 121 - 124 *
NOGATA F. ET AL.: "Choonpa ni yoru Seitai Keidomyaku no Rikigakuteki Kenzensei Hyoka System ni Tsuite", THE JAPAN SOCIETY OF MECHANICAL ENGINEERS KYUSHU SHIBU KOEN RONBUNSHU, 2007.03, DAI 60 KI SOKAI KOENKAI, pages 195 - 196 *
RADJ A. BALDEWSING; CHRIS L, DE KORTE ET AL.: "Comparison of Finite Elements Model Elastograms and IVUS Elastograms acquired from Phantoms and Arteries", IEEE SYMPOSIUM, 2002, pages 1873 - 1875
See also references of EP2226013A4
SUGIMOTO H. ET AL.: "Hishinshu Keisokuho ni yoru Seitai Domyaku no Kikaiteki Seishitsu Hyoka", THE JAPAN SOCIETY OF MECHANICAL ENGINEERS TOKAI SHIBU DAI 52 KI SOKAI KOENKAI KOEN RONBUNSHU, 1 March 2002 (2002-03-01), pages 233 - 234 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120215339A1 (en) * 2011-02-21 2012-08-23 Jerome Boogaard Method for fabricating an implantable lead for applying electrical pulses to tissue of a patient and system for fabrication thereof
US9457194B2 (en) * 2011-02-21 2016-10-04 Advanced Neuromodulation Systems, Inc. Method for fabricating an implantable lead for applying electrical pulses to tissue of a patient and system for fabrication thereof

Also Published As

Publication number Publication date
US8187188B2 (en) 2012-05-29
EP2226013A4 (en) 2011-04-27
US20110112402A1 (en) 2011-05-12
AU2008341769A1 (en) 2009-07-02
JP2009148395A (ja) 2009-07-09
EP2226013A1 (en) 2010-09-08
JP4879872B2 (ja) 2012-02-22
AU2008341769B2 (en) 2011-11-17

Similar Documents

Publication Publication Date Title
JP6160487B2 (ja) 超音波診断装置およびその制御方法
JP5158679B2 (ja) 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置
JP4676334B2 (ja) 生体信号モニタ装置
Yli-Ollila et al. Axial and radial waveforms in common carotid artery: an advanced method for studying arterial elastic properties in ultrasound imaging
JP4879872B2 (ja) 画像処理装置、画像処理プログラム、記憶媒体及び超音波診断装置
JP2023528679A (ja) 血行動態パラメータを推定する方法
JP6591195B2 (ja) 超音波診断装置及び制御プログラム
JP7371105B2 (ja) 血管特性を調査するための方法及びシステム
EP3298958A1 (en) Photoacoustic apparatus, information processing method, and program
JP2022515087A (ja) 対象者から生理学的尺度を取得するための方法及びシステム
Franquet et al. Identification of the in vivo elastic properties of common carotid arteries from MRI: A study on subjects with and without atherosclerosis
Behler et al. Acoustic radiation force beam sequence performance for detection and material characterization of atherosclerotic plaques: preclinical, ex vivo results
EP2226012B1 (en) Image processing apparatus, image processing program, storage medium, and ultrasonic diagnostic apparatus
JPWO2006043528A1 (ja) 超音波診断装置および超音波診断装置の制御方法
JP2018050775A (ja) 光音響装置、情報処理方法、及びプログラム
JP2018050776A (ja) 光音響装置、情報処理方法、及びプログラム
Neidhardt et al. Deep learning for high speed optical coherence elastography with a fiber scanning endoscope
RU2636189C2 (ru) Способ выбора потоконаправляющего стента
Zahnd et al. A new user-independent in vivo method for 2D motion estimation of the carotid wall by ultrasound imaging for early detection of pathological behavior
Raat Accuracy and precision of stroke volume and left ventricular ejection fraction quantification with handheld echocardiography
JP2005270351A (ja) 超音波3次元画像化方法及び画像化装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 08722677

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 12808487

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2008722677

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2008341769

Country of ref document: AU

ENP Entry into the national phase

Ref document number: 2008341769

Country of ref document: AU

Date of ref document: 20080324

Kind code of ref document: A