JP2005066045A - 音データ処理装置及びプログラム - Google Patents
音データ処理装置及びプログラム Download PDFInfo
- Publication number
- JP2005066045A JP2005066045A JP2003300418A JP2003300418A JP2005066045A JP 2005066045 A JP2005066045 A JP 2005066045A JP 2003300418 A JP2003300418 A JP 2003300418A JP 2003300418 A JP2003300418 A JP 2003300418A JP 2005066045 A JP2005066045 A JP 2005066045A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- sound data
- spectrum information
- abnormal
- function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000001228 spectrum Methods 0.000 claims abstract description 81
- 238000012545 processing Methods 0.000 claims abstract description 75
- 230000002159 abnormal effect Effects 0.000 claims abstract description 67
- 208000037656 Respiratory Sounds Diseases 0.000 claims abstract description 44
- 230000005236 sound signal Effects 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims abstract description 20
- 230000006870 function Effects 0.000 claims description 29
- 238000004458 analytical method Methods 0.000 claims description 25
- 238000005070 sampling Methods 0.000 claims description 21
- 230000003595 spectral effect Effects 0.000 claims description 15
- 238000000034 method Methods 0.000 claims description 12
- 238000006243 chemical reaction Methods 0.000 claims description 9
- 230000029058 respiratory gaseous exchange Effects 0.000 claims description 6
- 238000000926 separation method Methods 0.000 claims description 2
- 206010039109 Rhonchi Diseases 0.000 abstract 2
- 241000288140 Gruiformes Species 0.000 description 4
- 230000001066 destructive effect Effects 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 206010037833 rales Diseases 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 238000007405 data analysis Methods 0.000 description 2
- 240000002791 Brassica napus Species 0.000 description 1
- 206010041235 Snoring Diseases 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000241 respiratory effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
【課題】呼吸音に含まれる副雑音等、検出音に含まれる多様な異常音を十分正確に検出できるようにすること。
【解決手段】音データ処理装置100は、音信号取得手段10によって呼吸音信号を取得し、この呼吸音信号をデジタル化して呼吸音データを作成し、呼吸音に含まれる各種異常音(断続性ラ音や連続性ラ音等の副雑音。)の検出に好適な複数の異なる長さの全時間区分に基づいて当該呼吸音データをFFT処理してスペクトル情報を算出し、このスペクトル情報をデータ解析して各種異常音の検出を行う。
【選択図】 図1
【解決手段】音データ処理装置100は、音信号取得手段10によって呼吸音信号を取得し、この呼吸音信号をデジタル化して呼吸音データを作成し、呼吸音に含まれる各種異常音(断続性ラ音や連続性ラ音等の副雑音。)の検出に好適な複数の異なる長さの全時間区分に基づいて当該呼吸音データをFFT処理してスペクトル情報を算出し、このスペクトル情報をデータ解析して各種異常音の検出を行う。
【選択図】 図1
Description
本発明は、呼吸音等の音データを解析処理するための音データ処理装置、音データ処理方法及びプログラムに関する。
最近の医療分野では、デジタルデータ化された医用画像等の診断情報を各種診断に活用するための診断支援装置が種々開発されている。
特に、近年、聴診器等により取得される呼吸音等をデジタルデータに変換してデータ解析し、当該解析結果を診断(音診断)に活用するための診断支援装置の開発が進められつつある(例えば、特許文献1、2を参照。)。
ここで、「呼吸音(respiratory sounds)」は、呼吸運動に伴って生じ、胸部において聴診され得る音の総称であり、気道・肺胞に生じる気流の音としての「呼吸音(breath sounds)」と、異常音である「副雑音(adventitious sounds)」とに大別される。以下、「呼吸音」を上記「respiratory sounds」の意に用いる。
また、最近では、音による構造物等の非破壊検査等に多くの関心が寄せられている。この場合も、マイク等によって取得される音は、デジタルデータ化されてデータ解析される。
特開平5−73093号公報
特表2002−511295号公報
しかしながら、上記呼吸音等の音データを解析するための従来の技術には以下のような問題点がある。
一般に、呼吸音には多様な副雑音(断続性ラ音や連続性ラ音等。)が異常音として含まれる。このため、上記従来の音診断に対する診断支援装置では、呼吸音を表す音データを解析して、これら多様な副雑音を十分正確に検出するのが困難である。
更に、非破壊検査のような場合でも、構造物等からは極めて多様な音が発生するため、当該多様な音の中から異常音を正確に検出するのは困難である。
一般に、呼吸音には多様な副雑音(断続性ラ音や連続性ラ音等。)が異常音として含まれる。このため、上記従来の音診断に対する診断支援装置では、呼吸音を表す音データを解析して、これら多様な副雑音を十分正確に検出するのが困難である。
更に、非破壊検査のような場合でも、構造物等からは極めて多様な音が発生するため、当該多様な音の中から異常音を正確に検出するのは困難である。
本発明の課題は、呼吸音に含まれる副雑音等の多様な異常音を十分正確に検出できるようにすることである。
上記課題を解決するため、請求項1に記載の発明は、
検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出するスペクトル情報取得手段と、
前記算出された複数のスペクトル情報を解析処理するスペクトル情報解析手段と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする。
検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出するスペクトル情報取得手段と、
前記算出された複数のスペクトル情報を解析処理するスペクトル情報解析手段と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする。
更に、請求項2に記載の発明のように、請求項1に記載の発明において、
前記音データが呼吸音を表すデータの場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する呼気吸気分別手段を更に備え、
前記スペクトル情報取得手段は、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定するのが好ましい。
前記音データが呼吸音を表すデータの場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する呼気吸気分別手段を更に備え、
前記スペクトル情報取得手段は、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定するのが好ましい。
更に、請求項3に記載の発明のように、請求項2に記載の発明において、
前記スペクトル情報取得手段は、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出し、
前記スペクトル情報解析手段は、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行い、
前記異常音検出手段は、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出するのが好ましい。
前記スペクトル情報取得手段は、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出し、
前記スペクトル情報解析手段は、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行い、
前記異常音検出手段は、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出するのが好ましい。
また、上記課題を解決するため、請求項4に記載の発明は、
検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出するスペクトル情報取得手段と、
前記算出されたスペクトル情報を解析処理するスペクトル情報解析手段と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする。
検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出するスペクトル情報取得手段と、
前記算出されたスペクトル情報を解析処理するスペクトル情報解析手段と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする。
更に、請求項5に記載の発明のように、請求項1〜4のうち何れか一項に記載の発明において、
前記スペクトル情報解析手段は、
前記スペクトル情報に対しケプストラム法を用いてスペクトル包絡を算出し、
前記異常音検出手段は、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマントを検出し、当該検出したフォルマントに基づいて前記異常音を検出するのが好ましい。
前記スペクトル情報解析手段は、
前記スペクトル情報に対しケプストラム法を用いてスペクトル包絡を算出し、
前記異常音検出手段は、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマントを検出し、当該検出したフォルマントに基づいて前記異常音を検出するのが好ましい。
また、上記課題を解決するため、請求項6に記載の発明は、
検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出する機能と、
前記算出された複数のスペクトル情報を解析処理する機能と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させる。
検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出する機能と、
前記算出された複数のスペクトル情報を解析処理する機能と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させる。
更に、請求項7に記載の発明のように、請求項6に記載の発明において、
前記コンピュータに、
前記音データが呼吸音を表すデータの場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する機能と、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定する機能と、
を更に実現させるのが好ましい。
前記コンピュータに、
前記音データが呼吸音を表すデータの場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する機能と、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定する機能と、
を更に実現させるのが好ましい。
更に、請求項8に記載の発明のように、請求項7に記載の発明において、
前記コンピュータに、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出する機能と、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行う機能と、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出する機能と、
を更に実現させるのが好ましい。
前記コンピュータに、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出する機能と、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行う機能と、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出する機能と、
を更に実現させるのが好ましい。
また、上記課題を解決するため、請求項9に記載の発明は、
検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出する機能と、
前記算出されたスペクトル情報を解析処理する機能と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させる。
検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出する機能と、
前記算出されたスペクトル情報を解析処理する機能と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させる。
更に、請求項10に記載の発明のように、請求項6〜9のうち何れか一項に記載の発明において、
前記コンピュータに、
前記スペクトル情報に対しケプストラム法を用いてスペクトル包絡を算出する機能と、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマントを検出し、当該検出したフォルマントに基づいて前記異常音を検出する機能と、
を更に実現させるのが好ましい。
前記コンピュータに、
前記スペクトル情報に対しケプストラム法を用いてスペクトル包絡を算出する機能と、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマントを検出し、当該検出したフォルマントに基づいて前記異常音を検出する機能と、
を更に実現させるのが好ましい。
更に、請求項11に記載の発明のように、請求項1〜5のうち何れか一項に記載の発明において、
入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換するA/D変換手段を更に備えるのが好ましい。
入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換するA/D変換手段を更に備えるのが好ましい。
更に、請求項12に記載の発明のように、請求項11に記載の発明において、
前記A/D変換手段は、
異常音の種類に応じて予め上記メモリに格納された複数のサンプリング間隔に基づいてデジタル化を行うのが好ましい。
前記A/D変換手段は、
異常音の種類に応じて予め上記メモリに格納された複数のサンプリング間隔に基づいてデジタル化を行うのが好ましい。
更に、請求項13に記載の発明のように、請求項1〜5、11、12のうち何れか一項に記載の発明において、
前記スペクトル情報取得手段は、
異常音の種類に応じて予めメモリに格納された複数の時間区分に基づいてFFT処理するのが好ましい。
前記スペクトル情報取得手段は、
異常音の種類に応じて予めメモリに格納された複数の時間区分に基づいてFFT処理するのが好ましい。
更に、請求項14に記載の発明のように、請求項6〜10のうち何れか一項に記載の発明において、
前記コンピュータに、
入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換する機能を更に実現させるのが好ましい。
前記コンピュータに、
入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換する機能を更に実現させるのが好ましい。
更に、請求項15に記載の発明のように、請求項14に記載の発明において、
前記コンピュータに、
異常音の種類に応じて上記メモリに予め格納された複数のサンプリング間隔に基づいてデジタル化する機能を更に実現させるのが好ましい。
前記コンピュータに、
異常音の種類に応じて上記メモリに予め格納された複数のサンプリング間隔に基づいてデジタル化する機能を更に実現させるのが好ましい。
更に、請求項16に記載の発明のように、請求項6〜10、14、15のうち何れか一項に記載の発明において、
前記コンピュータに、
異常音の種類に応じてメモリに予め格納された複数の時間区分に基づいてFFT処理する機能を更に実現させるのが好ましい。
前記コンピュータに、
異常音の種類に応じてメモリに予め格納された複数の時間区分に基づいてFFT処理する機能を更に実現させるのが好ましい。
従って、各種副雑音の検出に好適なスペクトル情報が算出でき、異常に応じた正確なデータ解析が行えるので、副雑音を十分正確に検出することが可能となる。
更に、非破壊検査のような場合でも、構造物等から発生する多様な音の中から異常音を十分正確に検出できる。
更に、非破壊検査のような場合でも、構造物等から発生する多様な音の中から異常音を十分正確に検出できる。
図面を参照して本発明を適用した音データ処理装置100について詳細に説明する。なお、本実施の形態では、一例として、呼吸音に含まれる副雑音等の異常音を検出する場合について説明するが、呼吸音以外の他の検出音に対しても適用可能である。
図1に示すように、音データ処理装置100は、音信号取得手段10、A/D変換手段20、データ処理手段30、出力手段40等を備えて構成される。
音信号取得手段10はマイク(図示せず。)を備え、当該マイクにより集音される呼吸音をアナログ形式の音信号(以下、呼吸音信号という。)に変換してA/D変換手段20に出力する。
A/D変換手段20は、音信号検出手段10から入力される呼吸音信号を、操作者により予め設定されたサンプリング間隔に基づいてデジタル化して音データ(以下、呼吸音データという。)を作成する。サンプリング間隔は、呼吸音信号をデジタル化する最小の時間単位であり、検出対象の異常音に種類に応じて操作者により設定される。すなわち、高周波な異常音を対象とする場合には、サンプリング間隔が短くなるように設定され、低周波な異常音を対象とする場合には、サンプリング間隔が長くなるように設定されるのが好ましい。
なお、上記サンプリング間隔は、異常音の種類に応じてデータ処理手段30の図示しない内蔵メモリ(或いは、他のメモリや記録媒体。)に予め格納されていてもよい。
なお、上記サンプリング間隔は、異常音の種類に応じてデータ処理手段30の図示しない内蔵メモリ(或いは、他のメモリや記録媒体。)に予め格納されていてもよい。
データ処理手段30は、スペクトル情報取得手段31、スペクトル情報解析手段32、異常音検出手段33を備える。
データ処理手段30は、スペクトル情報取得手段31〜異常音検出手段33を用いて図2のフローチャートに示すデータ処理を実行し、音信号取得手段10により取得された呼吸音信号を解析処理するとともに、当該解析処理に必要な各種画像情報や音情報、或いは、処理結果を表す各種画像情報や音情報等を出力手段40に出力する。
なお、スペクトル情報取得手段31〜異常音検出手段33は、ハードウェアであってもよいし、或いは、データ処理手段30により実行されるプログラムが有する各機能を表すものであってもよい。ここで、当該プログラムは、図2のフローチャートに示すデータ処理を行うためのプログラムであり、データ処理手段30の内蔵メモリ(図示せず。)に予め格納されているものとする。
スペクトル情報取得手段31〜異常音検出手段33の動作の詳細については、図2のフローチャートに基づいて後に詳述する。
出力手段40は、LCD(Liquid Crystal Display)等の表示装置やスピーカ(何れも、図示せず。)等を備え、データ処理手段30から入力される各種画像情報や音情報を上記表示装置に表示したり、上記スピーカから放音する。
次に、図2を参照して、データ処理手段30によって行われるデータ処理について説明する。
A/D変換手段20から入力された呼吸音データは、スペクトル情報取得手段31により、予め設定された複数の異なる長さの全時間区分に基づいてFFT処理されたパワースペクトル(周波数毎の強度)や、当該時間区分毎に時間的に順序立てられた複数のパワースペクトルによって成るサウンドスペクトログラム(時間及び周波数毎の強度が色の濃淡等により表される)等のスペクトル情報が算出される(ステップS1)。
なお、スペクトル情報取得手段31は、複数の異なる長さの時間区分のうち、操作者により設定された一つの時間区分のみに基づいてFFT処理するようにしてもよい。また、時間区分は、異常音の種類に応じてデータ処理手段30の上記内蔵メモリ(或いは、他のメモリや記録媒体。)に予め格納されていてもよい。
ここで、短い時間区分でFFT処理する場合、異常音の発生時間を特定する精度は高くなるが周波数分解能は低下する。逆に長い時間区分でFFT処理する場合、異常音の発生時間を特定する精度は低くなるが周波数分解能は向上する。
また、高周波な信号に対してはサンプリング間隔を細かくして当該信号の再現性を高めたり、或いは、時間区分を短くしてどの時間に信号が発生したかをできるだけ正確に取得できるようにするのが好ましい。更に、取得する呼吸音データのデータ量は、メモリの節約、処理速度の高速化等の理由から、少ないほうが好ましい。時間区分を短くしたり、サンプリング周波数を細かくすれば、それだけデータ量が増えるが、以上の点を考慮して、検出する信号の周波数、持続時間に応じた好適な時間区分、サンプリング周波数が指定される。
以下では、上記複数の異なる全時間区分の各々に基づいてFFT処理される場合について説明する。これにより、各異常音に好適なスペクトル情報が一度に算出可能となる。例えば、短い時間区分(例えば、25ms〜100ms。)、かつ、短いサンプリング間隔(1ms以下が好ましい。)に基づいてFFT処理されて作成されるスペクトル情報は、短時間で発生する比較的高周波な異常音に好適であり、短い時間区分(例えば、10ms〜50ms。)、かつ、比較的短いサンプリング間隔(2ms以下が好ましい。)に基づいてFFT処理されて作成されるスペクトル情報は、水泡音等の比較的短時間に発生する比較的低周波な異常音に好適であり、長い時間区分(250ms〜1000ms。)、かつ、短いサンプリング間隔(1ms以下が好ましい。)に基づいてFFT処理されて作成されるスペクトル情報は、連続性ラ音等の比較的長時間に発生する高周波な異常音に好適であり、長い時間区分(250ms〜1000ms。)、かつ、長いサンプリング間隔(100ms以下が好ましい。)に基づいてFFT処理されて作成されるスペクトル情報は、いびき音等の比較的長時間に発生する低周波な異常音に好適である。
なお、スペクトル情報取得手段31により算出された各サウンドスペクトログラムは、出力手段40の表示装置に表示されるようにしてもよい。
ステップS1の後、スペクトル情報解析手段32は、上記算出されたスペクトル情報のうち、サウンドスペクトログラムに対してケプストラム法を適用して当該サウンドスペクトログラムに係るスペクトル包絡を算出する(ステップS2)。
なお、スペクトル情報解析手段32による各解析結果は、必要に応じて出力手段40の表示装置に表示されるようにしてもよい。
そして、異常音検出手段33は、上記各スペクトル包絡とサウンドスペクトログラムとに基づき、各種異常音を特徴付ける優勢な周波数成分(フォルマントと称する。)が、所定時間継続して発生しているか否かを判定し、当該処理結果に基づいて異常音を検出する(すなわち、異常音の有無の判定や異常音の特定が行われる。)(ステップS3)。
その後、データ処理手段30は、ステップS3の検出結果を、必要に応じて出力手段40の表示装置に表示する(ステップS4)。
以上説明したように、音データ処理装置100は、音信号取得手段10によって呼吸音信号を取得し、この呼吸音信号をデジタル化して呼吸音データを作成し、呼吸音に含まれる各種異常音(断続性ラ音や連続性ラ音等の副雑音。)の検出に好適な複数の異なる長さの全時間区分に基づいて当該呼吸音データをFFT処理してスペクトル情報を算出し、このスペクトル情報をデータ解析して各種異常音の検出を行う。
従って、各種副雑音の検出に好適なスペクトル情報が算出でき、異常に応じた正確なデータ解析が行えるので、副雑音を十分正確に検出することが可能となる。
更に、非破壊検査のような場合でも、構造物等から発生する多様な音の中から異常音を十分正確に検出できる。
更に、非破壊検査のような場合でも、構造物等から発生する多様な音の中から異常音を十分正確に検出できる。
なお、本実施の形態における記述は、本発明に係る音データ処理装置及びプログラムの一例を示すものであり、これに限定されるものではない。本実施の形態における音データ処理装置100の細部構成および詳細動作に関しては、本発明の趣旨を逸脱しない範囲で適宜変更可能である。
例えば、音データ処理装置100は、入力された呼吸音信号に対し、複数の異なる長さの時間区分全てに基づいてまとめてFFT処理してスペクトル情報を算出するとしたが、これに限らず、操作者により設定された一つの時間区分のみに基づいてFFT処理するようにしてもよい。この場合には、スペクトル情報取得手段31における処理時間が大幅に短縮化可能となる。
また、データ処理手段30は、呼吸音データから呼気・吸気を識別し、当該呼吸音データを、更に、呼気に対応するデータと吸気に対応するデータとに分別する呼気吸気分別手段(図示せず。)を有するとしてもよい。ここで、呼気・吸気の識別は、例えば、呼吸音の集音時に操作者により入力された呼気・吸気を示す情報に基づいて行われるようにしてもよいし、また、呼気・吸気に固有の波形データと比較(例えば、統計処理による比較。)することにより自動的に行われるようにしてもよい。
この場合、FFT処理に係る時間区分の長さは、上記呼気吸気分別手段(若しくはスペクトル情報取得手段31。)により算出される一呼吸に要する呼吸時間を基準にして算出される。例えば、一呼吸時間の1/5以下の長さの時間区分に基づいてFFT処理されたり、好ましくは1/10以下の長さの時間区分に基づいてFFT処理される。
更に、この場合、異常音検出手段33による異常音の検出は、呼気、吸気それぞれに対応する呼吸音データに基づいて行われる。例えば、呼気に対応する呼吸音データのうち、高周波成分(500〜1000Hz)が一定以上の強度で、25msec以内持続する音成分がある場合、当該音成分は断続性ラ音によるものと判定され、また、周波数400Hz以上が一定以上の強度で250msec以上持続している音成分がある場合、当該音成分は連続性ラ音によるものと判定される。
また、上記データ処理を行うためのプログラム、呼吸音データや、上記時間区分、サンプリング間隔を表すデータ等は、CD(Compact Disk)などの各種記録媒体に予め格納されているものであってもよいし、ネットワークを介して外部機器から取得できるようにしてもよい。この場合、音データ処理装置100は、当該記録媒体との間でデータの読み込み/書き込みを自在に行うための専用ドライバや、ネットワークに接続してデータの送受信を行うための通信装置を備える(何れも図示せず。)。
10 音信号取得手段
20 A/D変換手段
30 データ処理手段
31 スペクトル情報取得手段
32 スペクトル情報解析手段
33 異常音検出手段
40 出力手段
100 音データ処理装置
20 A/D変換手段
30 データ処理手段
31 スペクトル情報取得手段
32 スペクトル情報解析手段
33 異常音検出手段
40 出力手段
100 音データ処理装置
Claims (16)
- 検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT(Fast Fourier Transform)処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出するスペクトル情報取得手段と、
前記算出された複数のスペクトル情報を解析処理するスペクトル情報解析手段と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする音データ処理装置。 - 前記音データが呼吸音を表すデータ場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する呼気吸気分別手段を更に備え、
前記スペクトル情報取得手段は、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定することを特徴とする請求項1に記載の音データ処理装置。 - 前記スペクトル情報取得手段は、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出し、
前記スペクトル情報解析手段は、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行い、
前記異常音検出手段は、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出することを特徴とする請求項2に記載の音データ処理装置。 - 検出された音データを解析処理するための音データ処理装置において、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出するスペクトル情報取得手段と、
前記算出されたスペクトル情報を解析処理するスペクトル情報解析手段と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する異常音検出手段と、
を備えたことを特徴とする音データ処理装置。 - 前記スペクトル情報解析手段は、
前記スペクトル情報に対しケプストラム(cepstrum)法を用いてスペクトル包絡(spectral envelop)を算出し、
前記異常音検出手段は、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマント(formant)を検出し、当該検出したフォルマントに基づいて前記異常音を検出することを特徴とする請求項1〜4のうち何れか一項に記載の音データ処理装置。 - 検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された複数の異なる長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含む複数のスペクトル情報を算出する機能と、
前記算出された複数のスペクトル情報を解析処理する機能と、
前記複数の解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させるためのプログラム。 - 前記コンピュータに、
前記音データが呼吸音を表すデータの場合、当該音データを、一呼吸を構成する呼気に対応する音データと、吸気に対応する音データとに分別する機能と、
前記FFT処理の際に用いる前記時間区分の長さを、前記一呼吸分の呼吸時間に基づいて設定する機能と、
を更に実現させるための請求項6に記載のプログラム。 - 前記コンピュータに、
前記呼気、吸気の各々に対応する音データ毎にスペクトル情報を算出する機能と、
前記呼気、吸気の各々に対応するスペクトル情報毎に解析処理を行う機能と、
前記呼気、吸気毎に行われる解析結果に基づいて呼気、吸気毎に異常音を検出する機能と、
を更に実現させるための請求項7に記載のプログラム。 - 検出された音データを解析処理するためのコンピュータに、
前記音データに対し、予め設定された長さの時間区分に基づいてFFT処理して当該音データに係るパワースペクトルを含むスペクトル情報を算出する機能と、
前記算出されたスペクトル情報を解析処理する機能と、
前記解析結果に基づいて、前記音データが表す音に含まれる異常音を検出する機能と、
を実現させるためのプログラム。 - 前記コンピュータに、
前記スペクトル情報に対しケプストラム法を用いてスペクトル包絡を算出する機能と、
前記算出されたスペクトル包絡と当該スペクトル情報とからフォルマントを検出し、当該検出したフォルマントに基づいて前記異常音を検出する機能と、
を更に実現させるための請求項6〜9のうち何れか一項に記載のプログラム。 - 入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換するA/D変換手段を更に備えたことを特徴とする請求項1〜5のうち何れか一項に記載の音データ処理装置。
- 前記A/D変換手段は、
異常音の種類に応じて予め上記メモリに格納された複数のサンプリング間隔に基づいてデジタル化を行うことを特徴とする請求項11に記載の音データ処理装置。 - 前記スペクトル情報取得手段は、
異常音の種類に応じて予めメモリに格納された複数の時間区分に基づいてFFT処理することを特徴とする請求項1〜5、11、12のうち何れか一項に記載の音データ処理装置。 - 前記コンピュータに、
入力されたアナログ形式の音信号を、予め設定されたサンプリング間隔に基づいてデジタル化して前記音データに変換する機能を更に実現させるための請求項6〜10のうち何れか一項に記載のプログラム。 - 前記コンピュータに、
異常音の種類に応じて上記メモリに予め格納された複数のサンプリング間隔に基づいてデジタル化する機能を更に実現させるための請求項14に記載のプログラム - 前記コンピュータに、
異常音の種類に応じてメモリに予め格納された複数の時間区分に基づいてFFT処理する機能を更に実現させるための請求項6〜10、14、15のうち何れか一項に記載のプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003300418A JP2005066045A (ja) | 2003-08-25 | 2003-08-25 | 音データ処理装置及びプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003300418A JP2005066045A (ja) | 2003-08-25 | 2003-08-25 | 音データ処理装置及びプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005066045A true JP2005066045A (ja) | 2005-03-17 |
| JP2005066045A5 JP2005066045A5 (ja) | 2006-10-05 |
Family
ID=34405356
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003300418A Withdrawn JP2005066045A (ja) | 2003-08-25 | 2003-08-25 | 音データ処理装置及びプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2005066045A (ja) |
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010119763A1 (en) * | 2009-04-14 | 2010-10-21 | Sharp Kabushiki Kaisha | Method and system for respiratory phase classification using explicit labeling with label verification |
| WO2011115240A1 (en) * | 2010-03-18 | 2011-09-22 | Sharp Kabushiki Kaisha | Methods and devices for continual respiratory monitoring using adaptive windowing |
| JP2012120688A (ja) * | 2010-12-08 | 2012-06-28 | Sony Corp | 呼吸状態分析装置、呼吸状態表示装置およびそれらにおける処理方法ならびにプログラム |
| KR101191667B1 (ko) | 2010-05-20 | 2012-10-17 | 충북대학교 산학협력단 | 시간 영역 특징을 이용한 심장 질환 진단 장치 |
| WO2013089073A1 (ja) * | 2011-12-13 | 2013-06-20 | シャープ株式会社 | 情報解析装置、電子聴診器、情報解析方法、測定システム、制御プログラム、および、記録媒体 |
| JP2013123494A (ja) * | 2011-12-13 | 2013-06-24 | Sharp Corp | 情報解析装置、情報解析方法、制御プログラム、および、記録媒体 |
| JP2014014543A (ja) * | 2012-07-10 | 2014-01-30 | Tokyo Metropolitan Univ | 判断システム、判断方法、及び判断システム用のプログラム |
| JP2014028111A (ja) * | 2011-10-31 | 2014-02-13 | Jvc Kenwood Corp | 呼吸音分析装置、断続性ラ音検出装置、連続性ラ音検出装置、呼吸音分析方法、断続性ラ音検出方法、連続性ラ音検出方法および呼吸音分析プログラム |
| JP2014050672A (ja) * | 2012-08-09 | 2014-03-20 | Jvc Kenwood Corp | 呼吸音分析装置、呼吸音分析方法および呼吸音分析プログラム |
| JP2014064675A (ja) * | 2012-09-25 | 2014-04-17 | Yamaguchi Prefectural Industrial Technology Institute | 非拘束無呼吸検知システムとその方法とそのプログラム |
| JP2015084849A (ja) * | 2013-10-29 | 2015-05-07 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| JP2015188601A (ja) * | 2014-03-28 | 2015-11-02 | パイオニア株式会社 | 呼吸音解析装置及び呼吸音解析方法、並びにコンピュータプログラム及び記録媒体 |
| WO2016002004A1 (ja) * | 2014-07-01 | 2016-01-07 | パイオニア株式会社 | 呼吸音解析装置及び呼吸音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JP2016506581A (ja) * | 2012-12-31 | 2016-03-03 | ゼネラル・エレクトリック・カンパニイ | 非破壊検査システムの遠隔制御のためのシステムおよび方法 |
| WO2016166318A1 (en) * | 2015-04-16 | 2016-10-20 | Koninklijke Philips N.V. | Device, system and method for detecting a cardiac and/or respiratory disease of a subject |
| JP2017118927A (ja) * | 2015-12-28 | 2017-07-06 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| WO2017130417A1 (ja) * | 2016-01-29 | 2017-08-03 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| WO2017130415A1 (ja) * | 2016-01-29 | 2017-08-03 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JP2017536905A (ja) * | 2014-12-12 | 2017-12-14 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 音響的監視システム、監視方法及び監視するコンピュータプログラム |
| JP2019141597A (ja) * | 2019-03-05 | 2019-08-29 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| JP2020192354A (ja) * | 2020-08-12 | 2020-12-03 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| CN112166475A (zh) * | 2018-05-29 | 2021-01-01 | 健康网络公司 | 基于呼吸系统的声音管理呼吸状况 |
| CN113729338A (zh) * | 2020-05-29 | 2021-12-03 | 高俊阁 | 一种智能工矿头盔及其监测方法 |
| US11320473B2 (en) | 2016-08-22 | 2022-05-03 | Pioneer Corporation | Capacitance detection device and optical wavelength-selective filter device |
| CN114916953A (zh) * | 2022-05-12 | 2022-08-19 | 上海交通大学 | 呼吸音半自动标注方法、系统及设备 |
| CN115089207A (zh) * | 2022-06-10 | 2022-09-23 | 海南医学院 | 一种呼吸音监测方法和呼吸音监测设备 |
-
2003
- 2003-08-25 JP JP2003300418A patent/JP2005066045A/ja not_active Withdrawn
Cited By (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102395322A (zh) * | 2009-04-14 | 2012-03-28 | 夏普株式会社 | 使用利用标记验证进行显式加标记的呼吸阶段分类的方法和系统 |
| WO2010119763A1 (en) * | 2009-04-14 | 2010-10-21 | Sharp Kabushiki Kaisha | Method and system for respiratory phase classification using explicit labeling with label verification |
| JP2012523249A (ja) * | 2009-04-14 | 2012-10-04 | シャープ株式会社 | ラベル検証による明示的なラベリングを用いた呼吸フェーズ分類方法およびシステム |
| JP2013521834A (ja) * | 2010-03-18 | 2013-06-13 | シャープ株式会社 | 適応型ウィンドウを使用する継続的な呼吸モニタリングの方法および装置 |
| WO2011115240A1 (en) * | 2010-03-18 | 2011-09-22 | Sharp Kabushiki Kaisha | Methods and devices for continual respiratory monitoring using adaptive windowing |
| CN102791195A (zh) * | 2010-03-18 | 2012-11-21 | 夏普株式会社 | 使用自适应加窗进行连续呼吸监测的方法和设备 |
| KR101191667B1 (ko) | 2010-05-20 | 2012-10-17 | 충북대학교 산학협력단 | 시간 영역 특징을 이용한 심장 질환 진단 장치 |
| JP2012120688A (ja) * | 2010-12-08 | 2012-06-28 | Sony Corp | 呼吸状態分析装置、呼吸状態表示装置およびそれらにおける処理方法ならびにプログラム |
| US9109971B2 (en) | 2010-12-08 | 2015-08-18 | Sony Corporation | Respiratory condition analysis apparatus, respiratory condition display apparatus, processing method therein, and program |
| JP2014028111A (ja) * | 2011-10-31 | 2014-02-13 | Jvc Kenwood Corp | 呼吸音分析装置、断続性ラ音検出装置、連続性ラ音検出装置、呼吸音分析方法、断続性ラ音検出方法、連続性ラ音検出方法および呼吸音分析プログラム |
| WO2013089073A1 (ja) * | 2011-12-13 | 2013-06-20 | シャープ株式会社 | 情報解析装置、電子聴診器、情報解析方法、測定システム、制御プログラム、および、記録媒体 |
| JP2013123494A (ja) * | 2011-12-13 | 2013-06-24 | Sharp Corp | 情報解析装置、情報解析方法、制御プログラム、および、記録媒体 |
| JPWO2013089073A1 (ja) * | 2011-12-13 | 2015-04-27 | シャープ株式会社 | 情報解析装置、電子聴診器、情報解析方法、測定システム、制御プログラム、および、記録媒体 |
| JP2014014543A (ja) * | 2012-07-10 | 2014-01-30 | Tokyo Metropolitan Univ | 判断システム、判断方法、及び判断システム用のプログラム |
| JP2014050672A (ja) * | 2012-08-09 | 2014-03-20 | Jvc Kenwood Corp | 呼吸音分析装置、呼吸音分析方法および呼吸音分析プログラム |
| JP2014064675A (ja) * | 2012-09-25 | 2014-04-17 | Yamaguchi Prefectural Industrial Technology Institute | 非拘束無呼吸検知システムとその方法とそのプログラム |
| JP2016506581A (ja) * | 2012-12-31 | 2016-03-03 | ゼネラル・エレクトリック・カンパニイ | 非破壊検査システムの遠隔制御のためのシステムおよび方法 |
| JP2015084849A (ja) * | 2013-10-29 | 2015-05-07 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| JP2015188601A (ja) * | 2014-03-28 | 2015-11-02 | パイオニア株式会社 | 呼吸音解析装置及び呼吸音解析方法、並びにコンピュータプログラム及び記録媒体 |
| WO2016002004A1 (ja) * | 2014-07-01 | 2016-01-07 | パイオニア株式会社 | 呼吸音解析装置及び呼吸音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JPWO2016002004A1 (ja) * | 2014-07-01 | 2017-05-25 | パイオニア株式会社 | 呼吸音解析装置及び呼吸音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JP2017536905A (ja) * | 2014-12-12 | 2017-12-14 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 音響的監視システム、監視方法及び監視するコンピュータプログラム |
| WO2016166318A1 (en) * | 2015-04-16 | 2016-10-20 | Koninklijke Philips N.V. | Device, system and method for detecting a cardiac and/or respiratory disease of a subject |
| US11534130B2 (en) | 2015-04-16 | 2022-12-27 | Koninklijke Philips N.V. | Device, system and method for detecting a cardiac and/or respiratory disease of a subject |
| JP2017118927A (ja) * | 2015-12-28 | 2017-07-06 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| US11185251B2 (en) | 2016-01-29 | 2021-11-30 | Pioneer Corporation | Biological sound analyzing apparatus, biological sound analyzing method, computer program, and recording medium |
| WO2017130415A1 (ja) * | 2016-01-29 | 2017-08-03 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JPWO2017130415A1 (ja) * | 2016-01-29 | 2018-09-27 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| JPWO2017130417A1 (ja) * | 2016-01-29 | 2018-11-22 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| US10482897B2 (en) | 2016-01-29 | 2019-11-19 | Pioneer Corporation | Biological sound analyzing apparatus, biological sound analyzing method, computer program, and recording medium |
| WO2017130417A1 (ja) * | 2016-01-29 | 2017-08-03 | パイオニア株式会社 | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 |
| US11320473B2 (en) | 2016-08-22 | 2022-05-03 | Pioneer Corporation | Capacitance detection device and optical wavelength-selective filter device |
| CN112166475A (zh) * | 2018-05-29 | 2021-01-01 | 健康网络公司 | 基于呼吸系统的声音管理呼吸状况 |
| JP2019141597A (ja) * | 2019-03-05 | 2019-08-29 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| CN113729338A (zh) * | 2020-05-29 | 2021-12-03 | 高俊阁 | 一种智能工矿头盔及其监测方法 |
| CN113729338B (zh) * | 2020-05-29 | 2024-05-14 | 高俊阁 | 一种智能工矿头盔及其监测方法 |
| JP7025494B2 (ja) | 2020-08-12 | 2022-02-24 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| JP2020192354A (ja) * | 2020-08-12 | 2020-12-03 | パイオニア株式会社 | 信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体 |
| CN114916953A (zh) * | 2022-05-12 | 2022-08-19 | 上海交通大学 | 呼吸音半自动标注方法、系统及设备 |
| CN115089207A (zh) * | 2022-06-10 | 2022-09-23 | 海南医学院 | 一种呼吸音监测方法和呼吸音监测设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2005066045A (ja) | 音データ処理装置及びプログラム | |
| Davis | Acoustic characteristics of normal and pathological voices | |
| JP4935931B2 (ja) | 無呼吸検出プログラムおよび無呼吸検出装置 | |
| JP2005065904A (ja) | 睡眠時無呼吸症候群診断装置、並びに、信号解析装置及びその方法 | |
| WO2010044452A1 (ja) | 情報判定支援方法、音情報判定方法、音情報判定支援装置、音情報判定装置、音情報判定支援システム及びプログラム | |
| US20050033144A1 (en) | Biological-sound data processing system, program, and recording medium | |
| Mehta et al. | Smartphone-based detection of voice disorders by long-term monitoring of neck acceleration features | |
| Döllinger et al. | Analysis of vocal fold function from acoustic data simultaneously recorded with high-speed endoscopy | |
| JP2005066045A5 (ja) | ||
| US20080045805A1 (en) | Method and System of Indicating a Condition of an Individual | |
| JP2005066044A (ja) | 呼吸音データ処理装置及びプログラム | |
| KR20140134443A (ko) | 음성신호의 특징벡터를 이용한 연하장애 판단방법 | |
| Leal et al. | Noise detection in phonocardiograms by exploring similarities in spectral features | |
| US11246526B2 (en) | Swallowing diagnosis apparatus and storage medium | |
| Abeyratne et al. | Pitch-jitter analysis of snoring sounds for the diagnosis of sleep apnea | |
| CN113226173A (zh) | 生物体信息分析装置、生物体信息分析方法、以及生物体信息分析系统 | |
| US20250149148A1 (en) | Medical tool aiding diagnosed psychosis patients in detecting auditory psychosis symptoms associated with psychosis | |
| KR102624676B1 (ko) | 스마트폰으로 수집한 기침음, 호흡음, 성음 측정 데이터를 이용한 호흡기 질환 예측 방법 | |
| Leal et al. | Detection of different types of noise in lung sounds | |
| EP4096524B1 (en) | Tool for assisting individuals experiencing auditory hallucinations to differentiate between hallucinations and ambient sounds | |
| Mitsuke et al. | Diagnosis Through Adventitious Sounds Detection and Respiratory Phases Identification Using XGBoost | |
| Shanthakumari et al. | Lung Disease Diagnosis Through Mel Spectrogram and Acoustic Feature Analysis | |
| Makalov et al. | Inertial Acoustic Electronic Auscultation System for the Diagnosis of Lung Diseases | |
| JP6298527B2 (ja) | 生体音解析装置及び生体音解析方法、並びにコンピュータプログラム及び記録媒体 | |
| Mondal et al. | Diagnosing of the lungs status using morphological anomalies of the signals in transformed domain |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Effective date: 20060821 Free format text: JAPANESE INTERMEDIATE CODE: A523 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060821 |
|
| A761 | Written withdrawal of application |
Effective date: 20090724 Free format text: JAPANESE INTERMEDIATE CODE: A761 |