WO2014050129A1 - 画像処理装置および方法並びにプログラム - Google Patents
画像処理装置および方法並びにプログラム Download PDFInfo
- Publication number
- WO2014050129A1 WO2014050129A1 PCT/JP2013/005751 JP2013005751W WO2014050129A1 WO 2014050129 A1 WO2014050129 A1 WO 2014050129A1 JP 2013005751 W JP2013005751 W JP 2013005751W WO 2014050129 A1 WO2014050129 A1 WO 2014050129A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- region
- histogram
- input image
- major axis
- reference time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus, e.g. for MRI, optical tomography or impedance tomography apparatus; Arrangements of imaging apparatus in a room
- A61B5/0037—Performing a preliminary scan, e.g. a prescan for identifying a region of interest
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4887—Locating particular structures in or on the body
- A61B5/489—Blood vessels
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient; User input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
- A61B5/748—Selection of a region of interest, e.g. using a graphics tablet
- A61B5/7485—Automatic selection of region of interest
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/037—Emission tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Clinical applications
- A61B8/0833—Clinical applications involving detecting or locating foreign bodies or organic structures
- A61B8/085—Clinical applications involving detecting or locating foreign bodies or organic structures for locating body or organic structures, e.g. tumours, calculi, blood vessels, nodules
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/162—Segmentation; Edge detection involving graph-based methods
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/08—Measuring devices for evaluating the respiratory organs
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Definitions
- the image acquisition unit 11 in the present embodiment acquires a slice image constituting the volume data V1 as the input image I1, and acquires a slice image constituting the volume data V2 as the input image I2.
- image processing apparatus 1 it is assumed that image processing to be described later is performed on each of the slice images I1 and I2 constituting the volume data V1 and V2.
- an elliptical region including the vicinity of the major axis L2 is defined as a first region R1_2.
- the probability that the region is the background region RB1 can be easily and preferably used using the information on the major axis L1.
- the high region can be the second region R2_1.
- the region having a predetermined shape can be set as a region having an arbitrary shape as long as it is a region having a predetermined spread located outside the circle C1_1.
- it may be a polygonal region such as a rectangle located outside the circle C1_1.
- FIG. 4A is a diagram illustrating an example of the first histogram in the present embodiment
- FIG. 4B is a diagram illustrating an example of the second histogram in the present embodiment
- FIG. 4C is a first evaluation value in the present embodiment. It is a figure which shows the example of.
- the first histogram and the second histogram calculated as described above are also used when extracting the tumor region RA2 from the volume data V2 at a time point later than the reference time point. Shall be stored in
- the specific region extraction unit 14 of the present embodiment calculates a logarithmic value of the ratio of the frequency value of the first histogram to the frequency value of the second histogram for each range of the same density value, and this is calculated as the first evaluation. Value. Since the first evaluation value is the ratio of the probability of being the tumor region RA1 to the probability of being the background region RB1, it is considered that the first evaluation value represents the probability that the tumor region RA1 is suitably represented for each concentration value. For example, when the first evaluation value is 1 or more, since the likelihood of the tumor region RA1 is relatively larger than the likelihood of the background region SB1, it can be evaluated that the likelihood of the tumor region RA1 is high, and the tumor region RA1 increases as the first evaluation value increases. It can be evaluated that the probability of representing is increased.
- the first evaluation value is not limited to the above embodiment, and the first evaluation value is based on the first histogram and the second histogram as long as each concentration value represents the probability that each concentration value represents a tumor region. , May be defined by any method.
- the specific area extraction unit 14 may calculate a logarithmic value of the ratio of the frequency value of the second histogram to the frequency value of the first histogram for each range of the same density value, and use this as the first evaluation value.
- the first evaluation value is a ratio of the probability of being the background region RB1 to the probability of being the tumor region RA1, for example, when the first evaluation value is 1 or less, the likelihood of the tumor region RA1 is It can be evaluated that the value is high, and it is considered that the probability that the tumor region RA1 is represented decreases as the first evaluation value increases.
- the tumor region is based on both the probability of being the background region RB1 and the probability of being the tumor region RA1. Since the first evaluation value that is the evaluation value of the likelihood is calculated, the probability that the tumor region RA1 is accurately represented by the first evaluation value can be expressed.
- the specific area extraction unit 14 may calculate a difference between the frequency value of the first histogram and the frequency value of the second histogram for each range of the same density value, and use this as the first evaluation value.
- FIG. 4D is an example in which the difference between the frequency value of the first histogram and the frequency value of the second histogram is calculated as the first evaluation value.
- the specific area extraction unit 14 firstly apexes N ij representing each pixel in the determination area D, and Vertices S and T representing labels that can be taken by pixels, n-links composed of sides connecting vertices of adjacent pixels, vertices N ij representing each pixel, and vertex S representing a specific area or vertex representing a background area RB1
- a graph composed of t-links composed of edges connecting T is created.
- the t-link connecting the vertex N ij representing each pixel and the vertex S representing the tumor region RA1 represents the probability that each pixel is a pixel included in the tumor region RA1, and the vertex N ij representing each pixel is
- the t-link connecting the vertices T representing the background region RB represents the likelihood that each pixel is a pixel included in the background region RB1.
- the vertex corresponding to the pixel defines the tumor region RA1.
- the connection cost of t-link is set so that it is easy to connect to the vertex S to be represented (so that the side connecting the vertex corresponding to the pixel and the vertex S representing the tumor region RA1 becomes thick).
- the vertex corresponding to the pixel is easily connected to the vertex T representing the background region RB1 (the vertex corresponding to the pixel and the background region RB1 are
- the connection cost of t-link is set so that the side connecting the vertices T to be expressed becomes thicker.
- connection cost is set so that the connection with the vertex S is easy.
- the vertex corresponding to the pixel located on the outer contour of the second region R2_1 in the input image is the background region RB1 (other than the specific region) Since the pixel is highly likely to belong to (region), the connection cost is set so that it is easy to be connected to the vertex T.
- vertices that do not correspond to any of the first to third vertices are set with a connection cost so that it is difficult to connect to both the vertices S and T.
- N33, N34, N35, and N36 correspond to the first vertex and are connected to the vertex S based on the above condition (1).
- N31, N32, N37, and N38 correspond to the second vertex, and are connected to the vertex T based on the condition (2).
- N13, N15, N21, N48, N54, and N56 correspond to the third vertex, and are connected to the vertex T based on the condition (3).
- the vertices that do not correspond to the first to third vertices shown in FIG. 5 are set so as not to be connected to both the vertex S and the vertex T (the connection cost is 0).
- the tumor region RA1 is likely to spread around the major axis L1. Therefore, as in (1) above, it is determined that the vertex (first vertex) located on the major axis L1 is likely to belong to the tumor region RA1, and the first vertex is easily connected to the vertex S.
- the tumor region RA1 can be extracted from the graph representing the input image with high accuracy by suitably using the information for specifying the set major axis L1.
- connection cost is determined by an arbitrary method based on the set major axis L1 so that the apex located within a predetermined range from the major axis L1 and the apex S are easily connected. May be.
- the predetermined range can be set to an arbitrary range having a high probability of belonging to the tumor region, and is preferably a range having a small distance from the major axis L1.
- the major axis L1 represents the maximum diameter of the tumor region RA1 in the direction in which the major axis L1 extends
- the tumor region RA1 exists outside the both ends of the major axis L1 in the direction in which the major axis L1 extends. Is considered low.
- a vertex second vertex located on the extended line of the long diameter L1 and outside the both ends of the long diameter L1 is likely to belong to the background region RB1.
- the information specifying the major axis L1 is preferably used to extract the tumor region RA1 from the graph representing the input image with high accuracy. be able to.
- a vertex located in an area sufficiently away from the set major axis L1 is likely to belong to the background area RB1. For this reason, as described in (3) above, there is a high possibility that the vertex (third vertex) located in the outer contour of the second region R2_1, which is a highly likely region of the background region RB1, belongs to the background region RB1.
- the connection cost is set so that the third vertex is easily connected to the vertex T, the third vertex is located sufficiently away from the major axis L1, and thus set.
- the tumor region RA1 can be extracted from the graph representing the input image with high accuracy by suitably using the information specifying the major axis L1.
- connection cost is determined by an arbitrary method based on the set major axis L1 so that the apex located at a predetermined distance or more away from the major axis L1 and the apex T are easily connected. May be.
- the predetermined distance can be set to an arbitrary range having a high probability of belonging to the background region RB1, and is preferably a range having a large distance from the major axis L1.
- the present invention is not limited to this embodiment, and the t-link connection cost may be set by any method as long as the t-link connection cost can be set so that the tumor region RA1 and the background region RB1 can be separated. For this reason, some or all of the connection cost settings based on (1) to (4) above are omitted as long as the t-link connection cost can be set so that the tumor region RA1 and the background region RB1 can be separated. Alternatively, the connection cost may be set by another method instead of part or all of the connection cost setting based on (1) to (4) above.
- the t-link connection cost is set according to the given information when information indicating whether the pixel is a pixel indicating either the tumor region RA1 or the background region RB1 has already been given. Can be set in any way. In addition, when such information is not given, it is calculated based on the statistical characteristics of density values in one or more pixels that are known to be pixels indicating the tumor region RA1 or the background region RB1. Also good.
- the specific area extraction unit 14 uses the well-known method applicable to the graph cut method such as the maximum flow and minimum cut method to calculate the evaluation function F representing the sum of the connection costs of t-link and n-link in the above graph. Divide the region by minimizing. As a result, as shown by a dotted line in FIG. 5, an appropriate link among all t-links and n-links is cut and the vertex S is cut off from the vertex T, and the input image is the tumor region RA1 and the background region RB1. It is divided into.
- the graph cut method such as the maximum flow and minimum cut method
- the above is the procedure when the specific region extraction unit 14 extracts the tumor region RA1 from the volume data V1 at the reference time.
- the specific region extraction unit 14 When extracting the tumor region RA2 from the volume data V2 at a time point later than the reference time point, the specific region extraction unit 14 is used to extract the tumor region RA1 from the volume data V1 at the reference time point described above.
- a first histogram that is a density histogram of the first region R1_1 of I1 and a second histogram that is a density histogram of the second region R2_1 are used.
- the specific region extraction unit 14 extracts the first reference vertex S belonging to the tumor region RA2 and the second reference vertex T belonging to the background region RB2, similarly to the case where the tumor region RA1 is extracted from the input image I1.
- a plurality of vertices Nij representing each pixel in the input image I2 are defined, a connection cost representing ease of connection of each vertex is set based on the second evaluation value, and a plurality of vertices are defined based on the connection cost.
- the specific region extraction unit 14 extracts the tumor region RA2 from the input image I2 by the graph cut method in the same manner as when the tumor region RA1 is extracted from the input image I1.
- FIG. 6 is a flowchart showing a flow of processing for extracting the tumor region RA1 from the input image I1 constituting the reference point volume data V1 in the image processing apparatus 1 of the present embodiment.
- FIG. 6 each process of the image processing apparatus 1 of this embodiment is demonstrated in order.
- the display control unit 15 displays the extracted tumor region RA1 on the display (S24), and ends the process.
- An example of the tumor region RA1 extracted by dividing the region as described above is shown in FIG.
- the image acquisition unit 11 acquires, from the medical image storage server 2, the input image I2 constituting the volume data V2 taken at a time after the reference time (S30).
- the long diameter setting unit 12 sets the long diameter L2 based on a long diameter input instruction by the user (S32).
- the region setting unit 13 is a ring-shaped region between the first region R1_2 that is an elliptical region having the major axis L2 as the major axis, and the circle C1_2 and the circle C2_2 that has the major axis L2 as the diameter based on the set major axis L2.
- a second region R2_2 is set (S34).
- the display control unit 15 displays the extracted tumor region RA2 on the display (S44), and ends the process.
- An example of the tumor region RA2 extracted by dividing the region as described above is shown in FIG.
- Tumors are extracted on the same basis using the first and second histograms when extracting a specific region from an input image taken at a sub-time and when extracting a tumor region from an input image taken at a time other than the reference time. Regions can be extracted.
- the blood vessel region is extracted using the first and second histograms calculated based on each input image.
- the reference for extraction differs depending on the size, and the corresponding blood vessel region cannot be extracted appropriately.
- system configuration the hardware configuration, the processing flow, the module configuration, the user interface, specific processing contents, and the like in the above-described embodiment may be variously modified without departing from the spirit of the present invention.
- the technical scope of the present invention are included in the technical scope of the present invention.
- the image processing apparatus 1 may be configured to share the functions as the above-described units by a plurality of computers.
- a device constituting the system such as an input device and a display, all known devices can be employed.
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Theoretical Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- High Energy & Nuclear Physics (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Vascular Medicine (AREA)
- Geometry (AREA)
- Pulmonology (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Description
本発明は、入力画像中の画素の濃度値に基づいて特定領域を抽出する画像処理装置および方法並びにプログラムに関するものである。
医療分野において、腫瘍量の変化を測定することは、がんの治療法を臨床的に評価するために重要な要素であり、がん臨床試験においては、客観的な腫瘍縮小効果と原病の増悪の両方が重要なエンドポイントとして用いられてきた。
たとえば、非特許文献1においては、腫瘍の増悪や腫瘍に対する治療効果を評価するための指標として、腫瘍領域の最長径およびその最長径に直交する方向の最長距離を用いることが提案されている。
しかしながら、このように腫瘍領域の最長径およびその最長径に直交する方向の最長距離を計測しただけでは、腫瘍の大まかな大きさを計測することはできるが、正確な面積や体積を計測することができない。
一方、従来、CT(Computed Tomography)装置などのモダリティによって撮影された3次元画像から腫瘍領域や血管領域などの特定領域を抽出し、その抽出した特定領域を表示して医用画像診断に供することが提案されている。
ここで、上述したように腫瘍に対する治療効果や腫瘍の増悪を確認する方法として、たとえば、同一の患者について時間的に異なる時点において撮影された3次元画像を取得し、これらの3次元画像からそれぞれ腫瘍領域を抽出して表示させる方法が考えられる。
たとえば、特許文献1においては、それぞれ異なる時点で撮影された3次元画像のうち、所定の時点で撮影された3次元画像から第1の陰影領域を検出し、その第1の陰影領域内における所定の点の位置情報を用いて、他の時点で撮影された3次元画像から第1の陰影領域に対応する第2の陰影領域を抽出する方法が提案されている。
Patrick Therasse, et al,"New Guidelines to Evaluate the Response to Treatment in Solid Tumors", Journal of the National Cancer Institute, 2000, volume 92, No. 3, pp. 205-216
しかしながら、上述したように互いに異なる時点で撮影された3次元画像からそれぞれ腫瘍領域を抽出する際、異なる基準で抽出するようにしたのでは、対応する腫瘍領域を正確に抽出することができない。
たとえば、所定の時点で撮影された3次元画像から腫瘍領域を抽出する際には、それほど病状が悪化していない部分も含めて腫瘍領域として抽出していたのに対し、他の時点で撮影された3次元画像から腫瘍領域を抽出する際には、病状がかなり進行して濃度などが明らかに変化した部分を腫瘍領域として抽出するようにしたのでは、腫瘍領域の大きさの変化を正確に把握することができない。
本発明は、上記事情に鑑み、上述したように時間的に互いに異なる時点において撮影された画像から腫瘍領域などの特定領域をそれぞれ抽出する際、同一の基準で各特定領域を抽出することができる画像処理装置および方法並びにプログラムを提供することを目的とするものである。
本発明の画像処理装置は、互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得する画像取得部と、画像取得部によって取得された複数の入力画像のうちの基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定する領域設定部と、第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点において撮影された入力画像内における特定領域を抽出する特定領域抽出部とを備え、特定領域抽出部が、基準時点において撮影された入力画像を用いて算出された第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点以外の時点において撮影された入力画像から、基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出するものであることを特徴とする。
また、上記本発明の画像処理装置においては、特定領域抽出部を、第1ヒストグラムと第2ヒストグラムに基づいて、濃度値ごとに、濃度値が特定領域を表している確からしさを表す第1評価値を算出し、入力画像中の隣接する2つの画素ごとに、その隣接する2つの画素の濃度値にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出し、特定領域に属する第1の基準頂点と、背景領域に属する第2の基準頂点と、入力画像中の各画素をそれぞれ表す複数の頂点とを定義し、第2評価値に基づいて、各頂点間の接続しやすさを表す接続コストを設定し、その設定した接続コストに基づいて各頂点を接続することによって特定領域を抽出するものとできる。
ここで、上記「隣接する2つの画素」とは、互いに直接隣接している2つの画素だけでなく、画素間の距離が入力画像のサイズに対して隣接していると認められる程度に十分近接している2つの画素も含むものとする。
また、上記「第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し」とは、第1の基準頂点と画素を表す頂点間の接続しやすさを表す接続コストと、第2の基準頂点と画素を表す頂点間の接続しやすさを表す接続コストと、複数の画素をそれぞれ表す複数の頂点間の接続しやすさを表す接続コストから選択される接続コストの少なくとも一部が、第2評価値に基づいて設定されていることを意味する。
また、特定領域抽出部を、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値の比に基づいて第1評価値を算出するものとできる。
また、特定領域抽出部を、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差に基づいて第1評価値を算出するものとできる。
また、特定領域抽出部を、入力画像中の画素ごとに、隣接する2つの画素の第1評価値の差が大きくなるほど、輪郭らしさが大きくなるように第2評価値を算出するものとできる。
また、特定領域抽出部を、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素にそれぞれ対応する頂点が接続されにくくなるように接続コストを設定するものとできる。
また、基準時点において撮影された入力画像上における特定領域の長径を設定する長径設定部をさらに設け、領域設定部を、長径設定部において受け付けられた長径に基づいて、第1領域および第2領域を設定するものとできる。
ここで、上記「特定領域の長径」は、特定領域の長径をおおむね表していると認められるものであればよい。上記「特定領域の長径」が、たとえば、入力画像上でユーザが特定領域の長径と判断して設定入力した情報に基づくものである場合には、厳密には特定領域の最も長い径と一致しなくてもよい。
また、基準時点において撮影された入力画像上における特定領域の長径を設定する長径設定部をさらに設け、特定領域抽出部を、長径から所定の範囲内に位置する頂点と第1の基準頂点とが接続されやすくなるように接続コストを設定するものとできる。
また、基準時点において撮影された入力画像上における特定領域の長径を設定する長径設定部をさらに設け、特定領域抽出部を、長径の延びる方向に長径の両端より外側に位置する画素に対応する頂点と第2の基準頂点とが接続されやすくなるように接続コストを設定するものとできる。
ここで、頂点の接続コストが「接続されやすくなるように設定され」とは、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されやすいと評価するものである場合には、接続コストが相対的に大きくなるよう設定されることを意味し、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されにくいと評価するものである場合には、接続コストが相対的に小さくなるよう設定されることを意味する。また、接続コストが「接続されにくくなるように設定され」とは、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されやすいと評価するものである場合には、接続コストが相対的に小さくなるよう設定されることを意味し、特定領域抽出部が用いる評価関数が、接続コストが大きくなるほど接続されにくいと評価するものである場合には、接続コストが相対的に大きくなるよう設定されることを意味する。
また、領域設定部を、長径を長径とする楕円領域に含まれる領域を第1領域として設定するものとできる。
また、領域設定部を、長径を直径とする円の外側に位置する所定形状の領域を第2領域として設定するものとできる。
また、特定領域を、腫瘍領域または血管領域とすることができる。
本発明の画像処理方法は、互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得し、その取得した複数の入力画像のうちの、基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定し、第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点において撮影された入力画像内における特定領域を抽出し、基準時点において撮影された入力画像を用いて算出された第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点以外の時点において撮影された入力画像から、基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出することを特徴とする。
本発明の画像処理プログラムは、コンピュータに、互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得する手順と、その取得した複数の入力画像のうちの、基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定する手順と、第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点において撮影された入力画像内における特定領域を抽出する手順と、基準時点において撮影された入力画像を用いて算出された第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点以外の時点において撮影された入力画像から、基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出する手順とを実行させることを特徴とする。
本発明の画像処理装置および方法並びにプログラムによれば、互いに異なる時点において同一の被写体を撮影した複数の入力画像のうちの、基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定し、第1領域内の濃度ヒストグラムである第1ヒストグラムと、第2領域内の濃度ヒストグラムである第2ヒストグラムとを算出し、第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点において撮影された入力画像内における特定領域を抽出し、かつ上述した第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点以外の時点において撮影された入力画像から、基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出するようにしたので、基準時点において撮影された入力画像から特定領域を抽出する場合と、基準時点以外において撮影された入力画像から特定領域を抽出する場合とで、ともに第1および第2ヒストグラムを用いた同じ基準で特定領域を抽出することができる。
したがって、たとえば特定領域として腫瘍領域を抽出した場合には、同程度まで病状が進行した部分を腫瘍領域としてそれぞれ抽出することができ、これらの大きさの変化を正確に把握することができる。
以下、本発明の医用画像表示装置および方法並びにプログラムの一実施形態を用いた医用画像診断支援システムについて、図面を参照しながら詳細に説明する。図1は、本実施形態を用いた医用画像診断支援システムの概略構成を示すブロック図である。なお、本発明は、入力画像中の特定領域を抽出する処理を行う様々な分野で応用可能であるが、ここでは、医療分野における画像診断における腫瘍領域の抽出に本発明を適用した例について説明する。
本実施形態の医用画像診断支援システムは、図1に示すように、画像処理装置1と、医用画像保管サーバ2と、ディスプレイ3と、入力装置4とを備えている。
画像処理装置1は、コンピュータに本実施形態の画像処理プログラムがインストールされたものである。
そして、画像処理装置1は、中央処理装置(CPU)および半導体メモリや、本実施形態の画像処理プログラムがインストールされたハードディスクやSSD(Solid State Drive)等の医用画像保管サーバデバイスを備えており、これらのハードウェアによって、図1に示すような画像取得部11、長径設定部12、領域設定部13、特定領域抽出部14および表示制御部15が構成されている。そして、医用画像保管サーバデバイスにインストールされた本実施形態の画像処理プログラムが中央処理装置によって実行されることによって上記各部がそれぞれ動作する。
そして、画像処理装置1は、中央処理装置(CPU)および半導体メモリや、本実施形態の画像処理プログラムがインストールされたハードディスクやSSD(Solid State Drive)等の医用画像保管サーバデバイスを備えており、これらのハードウェアによって、図1に示すような画像取得部11、長径設定部12、領域設定部13、特定領域抽出部14および表示制御部15が構成されている。そして、医用画像保管サーバデバイスにインストールされた本実施形態の画像処理プログラムが中央処理装置によって実行されることによって上記各部がそれぞれ動作する。
画像取得部11は、医用画像保管サーバ2に記憶された患者のボリュームデータを入力画像Iとして取得し、メモリに一時記憶するものである。医用画像保管サーバ2には、撮影を担当する検査部門から転送されたボリュームデータや、もしくはデータベース検索により取得されたボリュームデータが記憶されている。なお、医用画像保管サーバ2には、CT、MRI、PET、SPECT、超音波画像などの任意のモダリティで患者を撮影した医用画像が記憶されており、画像取得部11はこれらの医用画像を取得することができる。
そして、本実施形態における画像取得部11は、同一の患者の肺における腫瘍の経過観察を行うためのボリュームデータを取得するものであり、具体的には、ある患者の肺における腫瘍を時間的に互いに異なる時点において撮影したボリュームデータVをそれぞれ取得するものである。なお、以下の説明では、所定の基準時点(たとえば過去の時点)において撮影されたボリュームデータVをボリュームデータV1、その基準時点よりも後の時点(たとえば現時点)において撮影されたボリュームデータVをボリュームデータV2とする。
なお、本実施形態における画像取得部11は、ボリュームデータV1を構成するスライス画像を入力画像I1として取得し、ボリュームデータV2を構成するスライス画像を入力画像I2として取得するものである。そして、画像処理装置1においては、ボリュームデータV1,V2を構成する各スライス画像I1,I2に対して後述する画像処理がそれぞれ施されるものとする。
長径設定部12は、画像取得部11によって取得された入力画像I1上における腫瘍領域RA1の長径L1と、入力画像I2上における腫瘍領域RA2の長径L2とを設定するものである。本実施形態においては、ディスプレイ3に表示された入力画像I1,I2上において、ユーザによって入力装置4を用いて所定の2点の位置がそれぞれ指定され、長径設定部12は、その指定された位置の座標を入力画像I1,I2内における腫瘍領域RA1,RA2の長径L1,L2を特定する情報として取得し、メモリに記憶するものである。図2は、入力画像I1中の腫瘍領域RA1内に長径L1が設定された例を示す図である。なお、入力画像I2中の腫瘍領域RA2の長径L2についても図2と同様に設定される。
また、長径設定部12は、上述したように手動による長径の設定入力を受け付けるものに限らず、既に公知な方法によって自動的に長径L1,L2を計測して設定するものとしてもよい。
領域設定部13は、長径設定部12において設定された長径L1に基づいて、腫瘍領域RA1である蓋然性が高いと推定される第1領域R1_1を入力画像I1内に設定し、腫瘍領域RA1以外の領域である背景領域RB1である蓋然性が高いと推定される第2領域R2_1を入力画像I1内に設定する。図3は、図2に示された長径L1に基づいて設定された第1領域R1_1と第2領域R2_1が設定された例を示す図である。
また、領域設定部13は、長径設定部12において設定された長径L2に基づいて腫瘍領域RA2である蓋然性が高いと推定される第1領域R1_2を入力画像I2内に設定し設定し、腫瘍領域RA2以外の領域である背景領域RB2である蓋然性が高いと推定される第2領域R2_2を入力画像I2内に設定する。
第1領域R1_1は、腫瘍領域RA1である蓋然性が高いと推定される領域である。入力画像I1中の腫瘍領域RA1は、長径L1の中点を中心に広がる領域である可能性が高いため、長径L1の近傍の領域は腫瘍領域RA1である可能性が高いと推定できる。このため、本実施形態では、図3に示すように、長径L1の近傍を含む楕円領域を第1領域R1_1とする。また、楕円領域の短径は、長径L1に所定の比率を乗算した値に設定される。長径L1の近傍を含む楕円領域に含まれる領域を第1領域R1_1とすることにより、腫瘍領域RAである蓋然性が高い領域を簡易かつ好適に第1領域R1として設定することができる。また、同様の理由により長径L2の近傍を含む楕円領域を第1領域R1_2とする。
なお、本実施形態においては、長径L1,L2の全体を長径とする楕円領域を第1領域R1_1,R1_2として設定するようにしたが、これに限らず、たとえば上記楕円領域の部分領域を第1領域R1_1,R1_2として設定してもよい。
また、第1領域R1_1,R1_2は、長径L1,L2に基づいて、腫瘍領域RA1,RA2である蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよく、任意の位置に配置されてよい。また、上記第1領域R1_1,R1_2は、長径L1,L2の近傍を含み、背景領域RB1,RB2を含みにくい形状とすることが好ましい。また、腫瘍領域RA1,RA2である蓋然性を判断可能な任意の推定方法が適用可能である。また、第1領域R1_1,R1_2は、1つの領域から構成されるものとしてもよいし、複数の領域から構成されるものとしてもよい。
第2領域R2_1は、背景領域RB1である蓋然性が高いと推定される領域である。上述したとおり、腫瘍領域RA1は長径L1の中点を中心に広がる領域である可能性が高く、長径L1は腫瘍領域RA1の最大径を表していると判断できるため、長径L1より外側では、腫瘍領域RA1が存在しないか、または、腫瘍領域RA1に含まれる領域よりも背景領域RB1に含まれる領域の割合が相対的に大きいと推定できる。
したがって、長径L1を直径とする円C1_1の外側に位置する所定形状の領域を第2領域R2_1として設定することにより、長径L1の情報を利用して、簡易かつ好適に背景領域RB1である蓋然性が高い領域を第2領域R2_1とすることができる。なお、所定形状の領域は、円C1_1の外側に位置する所定の拡がりを持った領域であれば任意の形状の領域として設定できる。例えば、円C1_1の外側に位置する矩形などの多角形領域であってもよい。
本実施形態においては、図3に示すように、長径L1を直径とする円C1_1の外側に広がる輪状の領域を第2領域R2_1として設定する。なお、本実施形態においては、長径L1を直径とする円C1_1と、長径L1よりも長い直径を有する円C2_1との間の輪状領域が第2領域R2_1として設定される。円C2_1の中心は円C1_1の中心と一致するように設定され、円C2_1の直径の長さは設定された長径L1の長さに1より大きい所定の比率を乗算することにより設定される。
また、入力画像I2における第2領域R2_2についても、上記と同様に、長径L2を直径とする円C1_2と、長径L2よりも長い直径を有する円C2_2との間の輪状領域が第2領域R2_2として設定される。
第2領域R2_1,R2_2は、上記長径L1,L2に基づいて、腫瘍領域以外の領域である蓋然性が高いと推定される領域であれば、任意の大きさおよび任意の形状を有する領域であってよく、任意の位置に配置されてよい。また、腫瘍領域以外の領域である蓋然性を判断可能な任意の推定方法が適用可能である。また、第2領域R2_1,R2_2は、1つの領域から構成されるものであってもよく、複数の領域から構成されるものであってもよい。
特定領域抽出部14は、画像取得部11において取得されたボリュームデータVを構成する入力画像I内における腫瘍領域RAを抽出するものである。そして、上述したように、本実施形態における画像取得部11は、ある患者の肺における腫瘍を時間的に異なる時点で撮影したボリュームデータV1,V2をそれぞれ取得するものであるが、特定領域抽出部14は、これらのボリュームデータV1,V2からそれぞれ腫瘍領域RA1,RA2を抽出するものである。
まず、特定領域抽出部14が、基準点のボリュームデータV1から腫瘍領域RA1を抽出する場合について説明する。
特定領域抽出部14は、基準時点のボリュームデータV1を構成する入力画像I1から腫瘍領域RA1を抽出する場合には、領域設定部13において設定された第1領域内R1_1の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、第2領域R2_1内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムを算出し、この第1ヒストグラムと第2ヒストグラムに基づいて入力画像I1内における腫瘍領域RA1を抽出する。
より具体的には、特定領域抽出部14は、上述した第1ヒストグラムと第2ヒストグラムに基づいて、濃度値ごとに、その濃度値が腫瘍領域RA1を表している確からしさを表す第1評価値を算出する。
図4Aは、本実施形態における第1ヒストグラムの一例を示す図であり、図4Bは、本実施形態における第2ヒストグラムの一例を示す図であり、図4Cは、本実施形態における第1評価値の例を示す図である。
第1ヒストグラムは、腫瘍領域RA1である蓋然性が高い領域(第1領域R1_1)の濃度値のみを用いて算出した濃度ヒストグラムである。このため、第1ヒストグラムにおける頻度は、その濃度値が腫瘍領域RA1を表している確からしさを表していると考えられる。つまり、第1ヒストグラムにおいて頻度が大きいほど、その頻度に対応する濃度値は、腫瘍領域RA1を表す確からしさが大きくなると考えられる。
第2ヒストグラムは、背景領域RB1である蓋然性が高い領域(第2領域R2_1)の濃度値のみを用いて算出した濃度ヒストグラムである。このため、第2ヒストグラムにおける頻度は、その濃度値が背景領域RBを表している確からしさを表していると考えられる。言い換えると、第2ヒストグラムにおいて頻度が大きいほど、その頻度に対応する濃度値は、背景領域RB1を表す確からしさが大きくなると考えられる。また、第2ヒストグラムにおいて頻度に応じて背景領域RB1を表す確からしさが大きくなると、これに伴って腫瘍領域RA1である確からしさが小さくなると考えられる。
なお、第1ヒストグラムと第2ヒストグラムは、縦軸同士のスケールと横軸同士のスケールがそれぞれ一致するように正規化されることが好ましい。後述の第1評価値が、第1ヒストグラムと第2ヒストグラムを互いに比較することにより算出されるためである。ここでは、第1ヒストグラムと第2ヒストグラムの表す濃度値の範囲が一致するように正規化される。具体的には、両ヒストグラムの濃度値の範囲が調整され、第1ヒストグラムの算出に用いられた全画素数は、第2ヒストグラムの算出に用いられた全画素数と一致するように適宜調整される。
なお、本実施形態においては、上述したようにして算出された第1ヒストグラムと第2ヒストグラムは、基準時点よりも後の時点のボリュームデータV2から腫瘍領域RA2を抽出する際にも用いるためメモリなどに記憶されるものとする。
そして、本実施形態の特定領域抽出部14は、同じ濃度値の範囲ごとに、第2ヒストグラムの頻度の値に対する第1ヒストグラムの頻度の値の比の対数値を算出し、これを第1評価値とするものである。第1評価値は、背景領域RB1である確からしさに対する腫瘍領域RA1である確からしさの比であるため、濃度値ごとに腫瘍領域RA1を好適に表している確からしさを表していると考えられる。例えば、第1評価値が1以上の場合には背景領域SB1らしさよりも腫瘍領域RA1らしさが相対的に大きいため、腫瘍領域RA1らしさが高いと評価でき、第1評価値が大きくなるほど腫瘍領域RA1を表す確からしさが大きくなると評価できる。
なお、上記実施形態に限定されず、第1評価値は、濃度値ごとに、各濃度値が腫瘍領域を表している確からしさを表すものであれば、第1ヒストグラムと第2ヒストグラムに基づいて、任意の方法によって定義されたものであってよい。
また、特定領域抽出部14において、同じ濃度値の範囲ごとに、第1ヒストグラムの頻度の値に対する第2ヒストグラムの頻度の値の比の対数値を算出し、これを第1評価値としてもよい。この場合には、第1評価値は、腫瘍領域RA1である確からしさに対する背景領域RB1である確からしさの比であるため、例えば、第1評価値が1以下の場合には腫瘍領域RA1らしさが高いと評価でき、第1評価値が大きくなるほど腫瘍領域RA1を表す確からしさが小さくなると考えられる。
このように第1ヒストグラムと第2ヒストグラムを用いて第1評価値を算出した場合には、背景領域RB1である確からしさと腫瘍領域RA1である確からしさの両方に基づいて、腫瘍領域である確からしさの評価値である第1評価値を算出しているため、第1評価値によって精度よく腫瘍領域RA1である確からしさを表すことができる。
また、特定領域抽出部14において、同じ濃度値の範囲ごとに、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差を算出し、これを第1評価値としてもよい。図4Dは、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差を第1評価値として算出した例である。
上述のように、第2ヒストグラムにおける頻度は、その濃度値が背景領域RB1を表している確からしさを表しているため、第2ヒストグラムにおける頻度は、腫瘍領域RA1でない確からしさを示しているとも考えることができる。このため、第1ヒストグラムの頻度の値と第2ヒストグラムの頻度の値との差は、腫瘍領域RA1を表す確からしさと腫瘍領域RA1でない確からしさとの差を表すものとなり、この差を第1評価値とした場合にも、第1評価値は腫瘍領域RA1を表す確からしさを表しているといえる。図4Dのように、第1評価値を、第1ヒストグラムの頻度の値から第2ヒストグラムの頻度の値を減算した値を表すようにした場合にも、第1評価値が大きいほど特定領域らしさが大きくなると評価できる。
また、特定領域抽出部14は、入力画像I1中の隣接する2つの画素ごとに、その2つの画素の濃度値に基づいて、隣接する2つの画素のそれぞれの第1評価値を取得し、その取得した隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する。
ここで、隣接する2つの画素が輪郭を表す輪郭らしさは、隣接する2つの画素が互いに異なる2つの領域(腫瘍領域RA1と背景領域RB1)にそれぞれ属する確からしさと捉えることができる。そして、腫瘍領域RA1に位置する画素と、背景領域RB1に位置する画素とでは腫瘍領域RA1である確からしさである第1評価値が異なる値を取る可能性が高いと推定できる。このため、2つの隣接する画素が両方とも腫瘍領域RA1(または背景領域RB1)に属する場合よりも、2つの隣接する画素の一方が腫瘍領域RA1に属し、他方が背景領域RB1に属する場合の方が、2つの隣接する画素にそれぞれ対応する第1評価値の差が大きくなると考えられる。このことを利用して、本実施形態では、入力画像I1中の画素の第1評価値と、その画素に隣接する隣接画素の第1評価値との差の絶対値を第2評価値として算出し、第2評価値が大きくなるほど、その隣接する2つの画素が輪郭を表している確からしさである輪郭らしさが大きくなると評価する。
なお、上記実施形態に限定されず、第2評価値は、入力画像中の互いに隣接する2つの画素ごとに、その画素のペアが輪郭を表している確からしさ(輪郭らしさ)を表すものであれば、互いに隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、任意の方法によって定義されたものであってよい。
そして、特定領域抽出部14は、腫瘍領域RA1に属する第1の基準頂点Sと、背景領域RB1に属する第2の基準頂点Tと、入力画像I1中の各画素をそれぞれ表す複数の頂点Nijを定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、腫瘍領域RA1を抽出するものである。
本実施形態では、特定領域抽出部14は、図5に示すように、入力画像I1を、腫瘍領域RA1に属する第1の基準頂点S(頂点S)と、背景領域RB1に属する第2の基準頂点T(頂点T)と、入力画像I1中の各画素を表す複数の頂点Nijと複数の頂点間を結ぶ辺とで構成されるグラフとして定義し、第2評価値に基づいて、互いに隣接する2つの画素の輪郭らしさが大きくなるほど、その画素に対応する頂点とその隣接する画素に対応する頂点とが接続されにくくなるように接続コストを設定し、その接続コストに基づいて、グラフカット法によりグラフから腫瘍領域RA1を抽出する。なお、図5におけるグラフは、説明のために頂点の間隔や頂点の個数が簡略化されている。また、グラフカット法の詳細については、特許文献1にも記載されている。
より具体的には、特定領域抽出部14は、入力画像I1の全領域を判別領域Dとすると、図5に示すように、まず、判別領域D中の各画素を表す頂点Nijと、各画素が取り得るラベルを表す頂点S、Tと、隣接する画素の頂点同士をつなぐ辺からなるn-linkと、各画素を表す頂点Nijと特定領域を表す頂点Sまたは背景領域RB1を表す頂点Tとをつなぐ辺からなるt-linkとから構成されるグラフを作成する。
ここで、n-linkは、隣接する画素が同一領域の画素である確からしさを接続コストの大きさ(図5中における辺の太さ)で表すものである。ここでは、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素に対応する頂点が互いに接続されにくくなるように(辺が細くなるように)、n-linkの接続コストが設定されている。なお、上記n-linkの接続コストは、隣接する画素間の距離または濃度値の差などに基づいて、さらに重み付けされてもよい。また、ここでは、頂点間の辺の太さは、接続コストの大きさを示しており、辺が太いほど大きい接続コストが設定されているものとする。
各画素を表す頂点Nijと腫瘍領域RA1を表す頂点Sをつなぐt-linkは、各画素が腫瘍領域RA1に含まれる画素である確からしさを表すものであり、各画素を表す頂点Nijと背景領域RBを表す頂点Tをつなぐt-linkは、各画素が背景領域RB1に含まれる画素である確からしさを表すものである。
本実施形態では、長径設定部12において設定された長径L1を特定する情報を利用して、その画素が腫瘍領域RA1に属すると判別できる場合には、その画素に対応する頂点が腫瘍領域RA1を表す頂点Sに接続されやすくなるように(その画素に対応する頂点と腫瘍領域RA1を表す頂点Sを結ぶ辺が太くなるように)、t-linkの接続コストを設定する。また、その画素が背景領域RB1に属すると判別できる場合には、その画素に対応する頂点が背景領域RB1を表す頂点Tに接続されやすくなるように(その画素に対応する頂点と背景領域RB1を表す頂点Tを結ぶ辺が太くなるように)、t-linkの接続コストを設定する。
具体的には、以下の4つの条件(1)~(4)に基づいて、t-linkの接続コストを設定する。
(1)長径L1上に位置する画素に対応する頂点および第1領域R1_1内に存在する画素に対応する頂点(第1の頂点)は、腫瘍領域RA1に属する可能性が高い画素であるため、頂点Sと接続されやすくなるように接続コストが設定される。
(2)長径L1の延長線上であって、長径L1の両端より外側に位置する画素に対応する頂点(第2の頂点、図5における破線L3上に位置する頂点)は、背景領域RB1に属する可能性が高い画素であるため、頂点Tと接続されやすくなるように接続コストが設定される。
(3)入力画像中の第2領域R2_1の外側の輪郭に位置する画素に対応する頂点(第3の頂点、図5における円C2_1上に位置する頂点)は、背景領域RB1(特定領域以外の領域)に属する可能性が高い画素であるため、頂点Tと接続されやすくなるように接続コストが設定される。
(4)入力画像を表すグラフを構成する頂点のうち、第1から第3の頂点のいずれにも該当しない頂点は、頂点Sおよび頂点Tの両方に接続されにくくなるように接続コストが設定される。
図5に示す例では、N33、N34、N35、N36が第1の頂点に相当し、上記条件(1)に基づいて頂点Sと接続されている。また、N31、N32、N37、N38が第2の頂点に相当し、上記条件(2)に基づいて頂点Tと接続されている。また、N13、N15、N21、N48、N54、N56が第3の頂点に相当し、上記条件(3)に基づいて頂点Tと接続されている。また、図5に示す上記第1から第3の頂点に該当しない頂点は、頂点Sおよび頂点Tの両方に接続されないように(接続コストが0となるように)設定されている。
腫瘍領域RA1は、長径L1を中心に広がっている可能性が高いと推定される。このため、上記(1)のように、長径L1上に位置する頂点(第1の頂点)は腫瘍領域RA1に属する可能性が高いと判別して、第1の頂点を頂点Sに接続されやすくなるように接続コストを設定した場合には、設定された長径L1を特定する情報を好適に利用して、精度よく入力画像を表すグラフから腫瘍領域RA1を抽出することができる。
なお、上記条件(1)に換えて、設定された長径L1に基づいて、長径L1から所定の範囲内に位置する頂点と頂点Sとが接続されやすくなるように任意の方法で接続コストを決定してもよい。なお、上記所定の範囲とは、腫瘍領域に属する蓋然性の高い任意の範囲に設定でき、長径L1との距離が小さい範囲であることが好ましい。
また、長径L1は、長径L1の延びる方向の腫瘍領域RA1の最大径を表していると判断できるため、長径L1の延びる方向に、長径L1の両端より外側には腫瘍領域RA1が存在する可能性は低いと考えられる。このため、上記(2)のように、長径L1の延長線上であって、長径L1の両端より外側に位置する頂点(第2の頂点)を背景領域RB1に属する可能性が高いと判別して、第2の頂点を頂点Tに接続されやすくなるようにした場合にも、設定された長径L1を特定する情報を好適に利用して、精度よく入力画像を表すグラフから腫瘍領域RA1を抽出することができる。
なお、上記条件(2)に換えて、設定された長径L1に基づいて、長径L1の延びる方向に、長径L1の両端より外側に位置する画素に対応する頂点とT頂点とが接続されやすくなるように任意の方法で接続コストを設定してもよい。
また、設定された長径L1から十分離れた領域に位置する頂点は背景領域RB1に属する可能性が高いと考えられる。このため、上記(3)のように、背景領域RB1である蓋然性が高い領域である第2領域R2_1の外側の輪郭に位置する頂点(第3の頂点)を背景領域RB1に属する可能性が高いと判別して、第3の頂点を頂点Tに接続されやすくなるように接続コストを設定した場合には、第3の頂点は長径L1から十分離間して位置するものであるため、設定された長径L1を特定する情報を好適に利用して、精度よく入力画像を表すグラフから腫瘍領域RA1を抽出することができる。
なお、上記(3)に換えて、設定された長径L1に基づいて、長径L1から所定の距離以上離れて位置する頂点と頂点Tとが接続されやすくなるように任意の方法で接続コストを決定してもよい。なお、上記所定の距離とは、背景領域RB1に属する蓋然性の高い任意の範囲に設定でき、長径L1との距離が大きい範囲であることが好ましい。
本実施形態に限定されず、腫瘍領域RA1と背景領域RB1を分離可能にt-linkの接続コストを設定可能であればあらゆる方法でt-linkの接続コストを設定してよい。このために、腫瘍領域RA1と背景領域RB1を分離可能にt-linkの接続コストを設定可能な範囲で、上記(1)から(4)に基づく接続コストの設定の一部または全てを省略してもよく、上記(1)から(4)に基づく接続コストの設定の一部または全てに換えて別の手法で接続コストを設定してもよい。
なお、上記t-linkの接続コストの設定は、その画素が腫瘍領域RA1また背景領域RB1のいずれかを示す画素であるかの情報がすでに与えられている場合には、その与えられた情報に従って任意の方法で設定できる。また、そのような情報が与えられてない場合には、腫瘍領域RA1または背景領域RB1を示す画素であることが既知である1以上の画素における濃度値の統計的な特徴に基づいて算出してもよい。
そして、特定領域抽出部14は、上記のグラフにおけるt-linkとn-linkの接続コストの総和を表す評価関数Fを、最大流最小切断法などのグラフカット法に適用可能な周知の方法により最小化することにより領域分割をする。この結果、図5に点線で示すように、全てのt-linkおよびn-linkのうち適当なリンクが切断されて、頂点Sが頂点Tから切り離され、入力画像は腫瘍領域RA1と背景領域RB1に分割される。
以上が、特定領域抽出部14において、基準時点のボリュームデータV1から腫瘍領域RA1を抽出する場合の手順である。
次に、特定領域抽出部14において、基準時点よりも後の時点のボリュームデータV2から腫瘍領域RA2を抽出する場合について説明する。
特定領域抽出部14は、基準時点よりも後の時点のボリュームデータV2から腫瘍領域RA2を抽出する場合には、上述した基準時点のボリュームデータV1から腫瘍領域RA1を抽出する際に用いた入力画像I1の第1領域R1_1の濃度ヒストグラムである第1ヒストグラムと、第2領域R2_1の濃度ヒストグラムである第2ヒストグラムとを用いる。
すなわち、特定領域抽出部14は、基準時点のボリュームデータV1を構成する入力画像I1から腫瘍領域RA1を抽出する場合と、基準時点よりも後の時点のボリュームデータV2を構成する入力画像I2から腫瘍領域RA2を抽出する場合との両方において、同じ第1ヒストグラムと第2ヒストグラムとを用いて腫瘍領域RA1,RA2をそれぞれ抽出する。
より具体的には、特定領域抽出部14は、入力画像I2における腫瘍領域RA2を抽出する際には、入力画像I1における腫瘍領域RA1を抽出する際に記憶された上述した第1ヒストグラムと第2ヒストグラムを読み出し、この第1ヒストグラムと第ヒストグラムとに基づいて、濃度値ごとに、その濃度値が腫瘍領域RA2を表している確からしさを表す第1評価値を算出する。なお、第1評価値の算出方法については、入力画像I1から腫瘍領域RA1を抽出する場合と同様である。
また、特定領域抽出部14は、入力画像I2中の隣接する2つの画素ごとに、その2つの画素の濃度値に基づいて、隣接する2つの画素のそれぞれの第1評価値を取得し、その取得した隣接する2つの画素にそれぞれ対応する第1評価値に基づいて、隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出する。この第2評価値の算出方法についても、入力画像I1から腫瘍領域RA1を抽出する場合と同様である。
そして、特定領域抽出部14は、入力画像I1から腫瘍領域RA1を抽出する場合と同様に、腫瘍領域RA2に属する第1の基準頂点Sと、背景領域RB2に属する第2の基準頂点Tと、入力画像I2中の各画素をそれぞれ表す複数の頂点Nijを定義し、第2評価値に基づいて、各頂点の接続しやすさを表す接続コストを設定し、接続コストに基づいて複数の頂点を接続することにより、腫瘍領域RA2を抽出するものである。
なお、接続コストの設定方法については、上述した入力画像I1から腫瘍領域RA1を抽出する場合と同様であるが、各画素を表す頂点Nijと腫瘍領域RA2を表す頂点Sをつなぐt-linkと、各画素を表す頂点Nijと背景領域RB2を表す頂点Tをつなぐt-linkとの接続コストについては、入力画像I1内において設定された腫瘍領域RA1の長径L1の代わりに、入力画像I2内において設定された腫瘍領域RA2の長径L2が用いられ、入力画像I1内において設定された第1領域R1_1および第2領域R2_1の代わりに、入力画像I2内において設定された第1領域R1_2および第2領域R2_2が用いられるものとする。
そして、特定領域抽出部14は、入力画像I1から腫瘍領域RA1を抽出する場合と同様にグラフカット法によって、入力画像I2から腫瘍領域RA2を抽出する。
以上が、特定領域抽出部14において、基準時点よりも後の時点のボリュームデータV2から腫瘍領域RA2を抽出する場合の手順である。
表示制御部15は、入力画像I1,I2、上記画像処理の過程で作成された種々の画像、抽出された腫瘍領域RA1,RA2などを、ユーザの指示やプログラムの要求などの必要に応じて適宜ディスプレイ3に表示させるものである。
図6は、本実施形態の画像処理装置1において、基準時点のボリュームデータV1を構成する入力画像I1から腫瘍領域RA1を抽出する処理の流れを示すフローチャートである。以下、図6に従って、本実施形態の画像処理装置1の各処理を順に説明する。
まず、画像取得部11が、基準時点に撮影されたボリュームデータV1を構成する入力画像I1を医用画像保管サーバ2から取得する(S10)。次いで、長径設定部12が、ユーザによる長径の入力指示に基づいて長径L1を設定する(S10)。領域設定部13は、設定された長径L1に基づいて、長径L1を長径とする楕円領域である第1領域R1と、長径L1を直径とする円C1_1と円C2_1との間の輪状領域である第2領域R2_1を設定する(S14)。
次に、特定領域抽出部14は、第1領域R1_1における各画素の濃度値に基づいて第1ヒストグラムを作成し、第2領域R2_1における各画素の濃度値に基づいて第2ヒストグラムを作成して、両ヒストグラムを正規化する(S16)。そして、特定領域抽出部14は、濃度値ごとに、第2ヒストグラムの頻度の値に対する第1ヒストグラムの頻度の値の比の対数値を、腫瘍領域RA1を表す確からしさを表す第1評価値として算出する(S18)。さらに、特定領域抽出部14は、入力画像I1における隣接する2つの画素ごとに、隣接する2つの画素にそれぞれ対応する第1評価値の差の絶対値を、輪郭らしさを表す第2評価値として算出する(S20)。
次いで、特定領域抽出部14は、入力画像I1を、腫瘍領域RA1に属する第1の基準頂点Sと、背景領域RB1に属する第2の基準頂点Tと、入力画像I1中の各画素を表す複数の頂点と複数の頂点間を結ぶ辺とで構成されるグラフとして定義する。そして、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素にそれぞれ対応する頂点が互いに接続されにくくなるようにn-linkの接続コストを設定する。また、設定された長径L1に基づいて、腫瘍領域RA1に属すると推定される第1の頂点が腫瘍領域RA1を表す頂点Sと接続され、背景領域RB1に属すると推定される第2の頂点および第3の頂点が背景領域RB1を表す頂点Tと接続されるようにt-linkの接続コストを設定する。そして、接続コストに基づいて、評価関数Fを最小化することによりグラフを分割し、入力画像I1から腫瘍領域RA1を抽出する(S22)。
そして、表示制御部15は、抽出された腫瘍領域RA1をディスプレイに表示して(S24)、処理を終了する。以上のように領域分割して抽出した腫瘍領域RA1の一例を図7に示す。
図8は、本実施形態の画像処理装置1において、基準時点よりも後の時点に撮影されたボリュームデータV2を構成する入力画像I2から腫瘍領域RA2を抽出する処理の流れを示すフローチャートである。以下、図8に従って、本実施形態の画像処理装置1の各処理を順に説明する。
まず、画像取得部11が、基準時点より後の時点に撮影されたボリュームデータV2を構成する入力画像I2を医用画像保管サーバ2から取得する(S30)。次いで、長径設定部12が、ユーザによる長径の入力指示に基づいて長径L2を設定する(S32)。領域設定部13は、設定された長径L2に基づいて、長径L2を長径とする楕円領域である第1領域R1_2と、長径L2を直径とする円C1_2と円C2_2との間の輪状領域である第2領域R2_2を設定する(S34)。
次に、特定領域抽出部14は、入力画像I1から腫瘍領域RA1を抽出する際に作成された第1ヒストグラムと第2ヒストグラムとを取得する(S36)。そして、特定領域抽出部14は、濃度値ごとに、第2ヒストグラムの頻度の値に対する第1ヒストグラムの頻度の値の比の対数値を、腫瘍領域RA2を表す確からしさを表す第1評価値として算出する(S38)。さらに、特定領域抽出部14は、入力画像I2における隣接する2つの画素ごとに、隣接する2つの画素にそれぞれ対応する第1評価値の差の絶対値を、輪郭らしさを表す第2評価値として算出する(S40)。
次いで、特定領域抽出部14は、入力画像I2を、腫瘍領域RA2に属する第1の基準頂点Sと、背景領域RB2に属する第2の基準頂点Tと、入力画像I2中の各画素を表す複数の頂点と複数の頂点間を結ぶ辺とで構成されるグラフとして定義する。そして、第2評価値に基づいて、隣接する2つの画素の輪郭らしさが大きくなるほど、隣接する2つの画素にそれぞれ対応する頂点が互いに接続されにくくなるようにn-linkの接続コストを設定する。また、設定された長径L2に基づいて、腫瘍領域RA2に属すると推定される第1の頂点が腫瘍領域RA2を表す頂点Sと接続され、背景領域RB2に属すると推定される第2の頂点および第3の頂点が背景領域RB2を表す頂点Tと接続されるようにt-linkの接続コストを設定する。そして、接続コストに基づいて、評価関数Fを最小化することによりグラフを分割し、入力画像I2から腫瘍領域RA2を抽出する(S42)。
そして、表示制御部15は、抽出された腫瘍領域RA2をディスプレイに表示して(S44)、処理を終了する。以上のように領域分割して抽出した腫瘍領域RA2の一例を図9に示す。
本実施形態の医用画像診断支援システムによれば、基準時点において撮影された入力画像内において、腫瘍領域である蓋然性が高いと推定される第1領域と、腫瘍領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定し、その第1領域内の濃度ヒストグラムである第1ヒストグラムと、第2領域内の濃度ヒストグラムである第2ヒストグラムとを算出し、その第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点において撮影された入力画像内における腫瘍領域を抽出し、かつ上述した第1ヒストグラムと第2ヒストグラムとに基づいて、基準時点以外の時点において撮影された入力画像から、基準時点において撮影された入力画像内における腫瘍領域に対応する腫瘍領域を抽出するようにしたので、基準時点において撮影された入力画像から特定領域を抽出する場合と、基準時点以外において撮影された入力画像から腫瘍領域を抽出する場合とで、ともに第1および第2ヒストグラムを用いた同じ基準で腫瘍領域を抽出することができる。
したがって、基準時点において撮影された入力画像と基準時点以外に撮影された入力画像とで、同程度まで病状が進行した部分を腫瘍領域としてそれぞれ抽出することができ、これらの大きさの変化を正確に把握することができる。
ここで、基準時点以外において撮影された入力画像I2から腫瘍領域を抽出する際、基準時点の入力画像I1から算出された第1および第2ヒストグラムを用いるのではなく、基準時点以外の入力画像I2から算出された第1および第2ヒストグラムを用いて腫瘍領域RA3を抽出した場合の一例を図10に示す。図10に示すように、入力画像I2から算出された第1および第2ヒストグラムを用いて腫瘍領域RA3を抽出した場合、病状が進行して濃度が低くなった部分(白く変化した部分)のみが腫瘍領域RA3として抽出され、図9に示す本来抽出すべき腫瘍領域RA2よりも抽出される領域が小さくなってしまっているのがわかる。
なお、上記実施形態においては、特定領域として腫瘍領域を抽出するようにしたが、これに限らず、血管領域を抽出するようにしてもよい。血管領域の場合、病状の進行によってプラークが増大し、このプラークの部分が画像上において濃度が低くなってしまう。
したがって、たとえば、互いに異なる時点において撮影された入力画像から血管領域をそれぞれ抽出する際、各入力画像に基づいて算出された第1および第2ヒストグラムを用いて血管領域を抽出したのでは、プラークの大きさによって抽出する際の基準が異なることになってしまい、対応する血管領域を適切に抽出することができない。
そこで、上記実施形態の医用画像診断システムのように、基準時点において撮影された入力画像から算出された第1および第2ヒストグラムを用いて、基準時点以外の入力画像から血管領域を抽出することによって、対応する血管領域を適切に抽出することができる。なお、血管領域を抽出する場合には、領域設定部13においては、血管が伸びる方向に直交する断面画像上において長径が設定されるものとする。
また、上記実施形態においては、グラフカット法を用いて特定領域を抽出するようにしたが、グラフカット法に限らず、その他の方法を用いるようにしてもよい。たとえば、入力画像の各画素に対応する第1評価値に対して閾値処理を施すことによって特定領域を抽出するようにしてもよい。なお、このように閾値処理によって特定領域を抽出する場合、特定領域以外の背景領域に含まれる骨などの部分も特定領域として抽出する可能性があるため、第1評価値を算出する際、領域設定部13において設定される第1領域および第2領域との距離などに基づいて重み付けをして第1評価値を算出することが望ましい。または、算出された第1評価に対して、第1領域および第2領域との距離などに基づいて重み付けを付加した後に、閾値処理を行うようにしてもよい。
上記の各実施形態はあくまでも例示であり、上記のすべての説明が本発明の技術的範囲を限定的に解釈するために利用されるべきものではない。
この他、上記の実施形態におけるシステム構成、ハードウェア構成、処理フロー、モジュール構成、ユーザインターフェースや具体的処理内容等に対して、本発明の趣旨から逸脱しない範囲で様々な改変を行ったものも、本発明の技術的範囲に含まれる。
また、画像処理装置1は、複数台のコンピュータにより、上記各部としての機能を分担する構成としてもよい。また、入力装置、ディスプレイ等、システムを構成する装置としては、公知のあらゆる装置を採用することができる。
Claims (14)
- 互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得する画像取得部と、
該画像取得部によって取得された複数の入力画像のうちの基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、前記特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定する領域設定部と、
前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点において撮影された入力画像内における前記特定領域を抽出する特定領域抽出部とを備え、
該特定領域抽出部が、前記基準時点において撮影された入力画像を用いて算出された前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点以外の時点において撮影された入力画像から、前記基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出するものであることを特徴とする画像処理装置。 - 前記特定領域抽出部が、前記第1ヒストグラムと前記第2ヒストグラムに基づいて、濃度値ごとに、該濃度値が前記特定領域を表している確からしさを表す第1評価値を算出し、
前記入力画像中の隣接する2つの画素ごとに、該隣接する2つの画素の濃度値にそれぞれ対応する前記第1評価値に基づいて、前記隣接する2つの画素が輪郭を表す確からしさである輪郭らしさを表す第2評価値を算出し、
前記特定領域に属する第1の基準頂点と、前記背景領域に属する第2の基準頂点と、前記入力画像中の各画素をそれぞれ表す複数の頂点とを定義し、前記第2評価値に基づいて、前記各頂点間の接続しやすさを表す接続コストを設定し、該設定した接続コストに基づいて前記各頂点を接続することによって前記特定領域を抽出するものであることを特徴とする請求項1記載の画像処理装置。 - 前記特定領域抽出部が、前記第1ヒストグラムの頻度の値と前記第2ヒストグラムの頻度の値の比に基づいて前記第1評価値を算出するものであることを特徴とする請求項2項記載の画像処理装置。
- 前記特定領域抽出部が、前記第1ヒストグラムの頻度の値と前記第2ヒストグラムの頻度の値との差に基づいて前記第1評価値を算出するものであることを特徴とする請求項2記載の画像処理装置。
- 前記特定領域抽出部が、前記入力画像中の画素ごとに、前記隣接する2つの画素の前記第1評価値の差が大きくなるほど、前記輪郭らしさが大きくなるように前記第2評価値を算出するものであることを特徴とする請求項2から4のいずれか1項記載の画像処理装置。
- 前記特定領域抽出部が、前記第2評価値に基づいて、前記隣接する2つの画素の前記輪郭らしさが大きくなるほど、前記隣接する2つの画素にそれぞれ対応する前記頂点が接続されにくくなるように前記接続コストを設定するものであることを特徴とする請求項2から5のいずれか1項記載の画像処理装置。
- 前記基準時点において撮影された入力画像上における前記特定領域の長径を設定する長径設定部を備え、
前記領域設定部が、前記長径設定部において受け付けられた長径に基づいて、前記第1領域および前記第2領域を設定するものであることを特徴とする請求項1記載の画像処理装置。 - 前記基準時点において撮影された入力画像上における前記特定領域の長径を設定する長径設定部を備え、
前記特定領域抽出部が、前記長径から所定の範囲内に位置する前記頂点と前記第1の基準頂点とが接続されやすくなるように前記接続コストを設定するものであることを特徴とする請求項2記載の画像処理装置。 - 前記基準時点において撮影された入力画像上における前記特定領域の長径を設定する長径設定部を備え、
前記特定領域抽出部が、前記長径の延びる方向に前記長径の両端より外側に位置する画素に対応する前記頂点と前記第2の基準頂点とが接続されやすくなるように前記接続コストを設定するものであることを特徴とする請求項2または8記載の画像処理装置。 - 前記領域設定部が、前記長径を長径とする楕円領域に含まれる領域を前記第1領域として設定するものであることを特徴とする請求項7から9のいずれか1項記載の画像処理装置。
- 前記領域設定部が、前記長径を直径とする円の外側に位置する所定形状の領域を前記第2領域として設定するものであることを特徴とする請求項7から10のいずれか1項記載の画像処理装置。
- 前記特定領域が、腫瘍領域または血管領域であることを特徴とする請求項1から11いずれか1項記載の画像処理装置。
- 互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得し、
該取得した複数の入力画像のうちの、基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、前記特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定し、
前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点において撮影された入力画像内における前記特定領域を抽出し、
前記基準時点において撮影された入力画像を用いて算出された前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点以外の時点において撮影された入力画像から、前記基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出することを特徴とする画像処理方法。 - コンピュータに、
互いに異なる時点において同一の被写体を撮影した複数の入力画像を取得する手順と、
該取得した複数の入力画像のうちの、基準時点において撮影された入力画像内において、特定領域である蓋然性が高いと推定される第1領域と、前記特定領域以外の領域である背景領域である蓋然性が高いと推定される第2領域とを設定する手順と、
前記第1領域内の各画素の濃度値の濃度ヒストグラムである第1ヒストグラムと、前記第2領域内の各画素の濃度値の濃度ヒストグラムである第2ヒストグラムとを算出し、前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点において撮影された入力画像内における前記特定領域を抽出する手順と、
前記基準時点において撮影された入力画像を用いて算出された前記第1ヒストグラムと前記第2ヒストグラムとに基づいて、前記基準時点以外の時点において撮影された入力画像から、前記基準時点において撮影された入力画像内における特定領域に対応する特定領域を抽出する手順とを実行させることを特徴とする画像処理プログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US14/668,196 US9436889B2 (en) | 2012-09-28 | 2015-03-25 | Image processing device, method, and program |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012217935A JP5961512B2 (ja) | 2012-09-28 | 2012-09-28 | 画像処理装置およびその作動方法並びに画像処理プログラム |
| JP2012-217935 | 2012-09-28 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| US14/668,196 Continuation US9436889B2 (en) | 2012-09-28 | 2015-03-25 | Image processing device, method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2014050129A1 true WO2014050129A1 (ja) | 2014-04-03 |
Family
ID=50387561
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2013/005751 Ceased WO2014050129A1 (ja) | 2012-09-28 | 2013-09-27 | 画像処理装置および方法並びにプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9436889B2 (ja) |
| JP (1) | JP5961512B2 (ja) |
| WO (1) | WO2014050129A1 (ja) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5881625B2 (ja) * | 2013-01-17 | 2016-03-09 | 富士フイルム株式会社 | 領域分割装置、プログラムおよび方法 |
| JP6415878B2 (ja) * | 2014-07-10 | 2018-10-31 | キヤノンメディカルシステムズ株式会社 | 画像処理装置、画像処理方法及び医用画像診断装置 |
| JP6769173B2 (ja) * | 2015-12-15 | 2020-10-14 | コニカミノルタ株式会社 | 超音波画像診断装置、超音波画像計測方法及びプログラム |
| JP7318058B2 (ja) * | 2017-06-30 | 2023-07-31 | キヤノンメディカルシステムズ株式会社 | 画像処理装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002008045A (ja) * | 2000-06-23 | 2002-01-11 | Canon Inc | 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体 |
| JP2007159934A (ja) * | 2005-12-15 | 2007-06-28 | Hitachi Medical Corp | 比較読影支援装置 |
| JP2009301254A (ja) * | 2008-06-12 | 2009-12-24 | Fujifilm Corp | 画像処理装置および方法ならびにプログラム |
| WO2011061905A1 (ja) * | 2009-11-20 | 2011-05-26 | 日本電気株式会社 | 物体領域抽出装置、物体領域抽出方法、及びコンピュータ可読媒体 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4999163B2 (ja) * | 2006-04-17 | 2012-08-15 | 富士フイルム株式会社 | 画像処理方法および装置ならびにプログラム |
-
2012
- 2012-09-28 JP JP2012217935A patent/JP5961512B2/ja active Active
-
2013
- 2013-09-27 WO PCT/JP2013/005751 patent/WO2014050129A1/ja not_active Ceased
-
2015
- 2015-03-25 US US14/668,196 patent/US9436889B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002008045A (ja) * | 2000-06-23 | 2002-01-11 | Canon Inc | 画像処理装置、画像処理システム、画像処理方法、及び記憶媒体 |
| JP2007159934A (ja) * | 2005-12-15 | 2007-06-28 | Hitachi Medical Corp | 比較読影支援装置 |
| JP2009301254A (ja) * | 2008-06-12 | 2009-12-24 | Fujifilm Corp | 画像処理装置および方法ならびにプログラム |
| WO2011061905A1 (ja) * | 2009-11-20 | 2011-05-26 | 日本電気株式会社 | 物体領域抽出装置、物体領域抽出方法、及びコンピュータ可読媒体 |
Non-Patent Citations (2)
| Title |
|---|
| BOYKOV, Y.Y. ET AL.: "Interactive graph cuts for optimal boundary & region segmentation of objects in N-D images, Computer Vision", ICCV 2001. PROCEEDINGS. EIGHTH IEEE INTERNATIONAL CONFERENCE ON, vol. 1, 2001, pages 105 - 112 * |
| MASARU MASUDA ET AL.: "CT Image Contrast Enhancement and Liver Tumor Detection by using Probability Density Functions and EM/MPM Algorithms (MR/AR no Jitsuyoka ni Muketa CV/PR Gijutsu no Kadai to Tenbo)", IEICE TECHNICAL REPORT. PRMU, PATTERN NINSHIKI. MEDIA RIKAI, vol. 110, no. 381, 2011, pages 21 - 26 * |
Also Published As
| Publication number | Publication date |
|---|---|
| US20150199586A1 (en) | 2015-07-16 |
| US9436889B2 (en) | 2016-09-06 |
| JP2014068861A (ja) | 2014-04-21 |
| JP5961512B2 (ja) | 2016-08-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113711271B (zh) | 用于通过正电子发射断层摄影进行肿瘤分割的深度卷积神经网络 | |
| CN105431089B (zh) | 根据肝脏扫描确定肝功能的系统和方法 | |
| US10039501B2 (en) | Computer-aided diagnosis (CAD) apparatus and method using consecutive medical images | |
| CN104637024B (zh) | 医用图像处理装置以及医用图像处理方法 | |
| US8958614B2 (en) | Image-based detection using hierarchical learning | |
| US10692607B2 (en) | Treatment planning and evaluation for rectal cancer via image analytics | |
| US10650515B2 (en) | Characterizing intra-tumoral heterogeneity for response and outcome prediction using radiomic spatial textural descriptor (RADISTAT) | |
| CN107133946B (zh) | 医学图像处理方法、装置及设备 | |
| CN104838422B (zh) | 图像处理设备及方法 | |
| JP6442311B2 (ja) | 核医学画像中の腫瘍輪郭を抽出する技術 | |
| ES2693369T3 (es) | Método y sistema para determinar un fenotipo de un neoplasma en un cuerpo humano o animal | |
| US20150356733A1 (en) | Medical image processing | |
| JP6703323B2 (ja) | 生体の画像検査のためのroiの設定技術 | |
| US20230115927A1 (en) | Systems and methods for plaque identification, plaque composition analysis, and plaque stability detection | |
| CN114332132A (zh) | 图像分割方法、装置和计算机设备 | |
| JP5961512B2 (ja) | 画像処理装置およびその作動方法並びに画像処理プログラム | |
| Elnakib et al. | New automated Markov–Gibbs random field based framework for myocardial wall viability quantification on agent enhanced cardiac magnetic resonance images | |
| US9483705B2 (en) | Image processing device, image processing method, and image processing program | |
| CN107076857B (zh) | 核医学图像解析技术 | |
| JP6442309B2 (ja) | 核医学画像解析技術 | |
| US20190236776A1 (en) | Rib developed image generation apparatus, method, and program | |
| JP6442310B2 (ja) | 核医学画像中の腫瘍領域を抽出する技術 | |
| CN114846555A (zh) | 在图像中进行测量 | |
| JP5132559B2 (ja) | デジタル画像のセグメント化方法およびコンピュータ読み取り可能なプログラム記憶装置 | |
| KR101432275B1 (ko) | 생체 중 특정 부위에 대한 변화정보 출력방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 13842396 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 13842396 Country of ref document: EP Kind code of ref document: A1 |