[go: up one dir, main page]

KR20020020615A - Voice identification telephone number guidance and auto-connecting method and system therefor - Google Patents

Voice identification telephone number guidance and auto-connecting method and system therefor Download PDF

Info

Publication number
KR20020020615A
KR20020020615A KR1020000062487A KR20000062487A KR20020020615A KR 20020020615 A KR20020020615 A KR 20020020615A KR 1020000062487 A KR1020000062487 A KR 1020000062487A KR 20000062487 A KR20000062487 A KR 20000062487A KR 20020020615 A KR20020020615 A KR 20020020615A
Authority
KR
South Korea
Prior art keywords
voice
main server
user
file
telephone number
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020000062487A
Other languages
Korean (ko)
Other versions
KR100383054B1 (en
Inventor
한태현
Original Assignee
한태현
(주)이오피
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한태현, (주)이오피 filed Critical 한태현
Publication of KR20020020615A publication Critical patent/KR20020020615A/en
Application granted granted Critical
Publication of KR100383054B1 publication Critical patent/KR100383054B1/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/487Arrangements for providing information services, e.g. recorded voice services or time announcements
    • H04M3/493Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals
    • H04M3/4936Speech interaction details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/54Arrangements for diverting calls for one subscriber to another predetermined subscriber
    • H04M3/546Arrangements for diverting calls for one subscriber to another predetermined subscriber in private branch exchanges
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/40Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2203/00Aspects of automatic or semi-automatic exchanges
    • H04M2203/55Aspects of automatic or semi-automatic exchanges related to network data storage and management
    • H04M2203/558Databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 음성 인식 전화번호 안내 및 자동연결 방법과 그 시스템에 관한 것으로 본 발명의 방법은 사용자로부터 수신된 음성을 인터페이스 장치에서 파일로 만들어 메인 서버로 전송하는 단계와, 상기 메인서버에서 전송받은 음성 파일을 LVR로써 인식하여 문자로 변경하는 단계와, 상기 메인서버에서 상기 문자를 담화기술을 이용하여 키워드(Keyword)를 찾는 단계와, 찾은 상기 키워드로 상기 메인서버에서 전화번호부가 수록되어 있는 데이터베이스를 검색하는 단계와, 검색된 전화번호를 상기 메인서버에서 RealSpeak를 사용하여 음성파일로 만들어 인터페이스로 전송하는 단계와, 상기 인터페이스 장치에서 전송받은 음성 파일을 음성으로 바꾸어 사용자에게 전송하는 단계를 포함한다. 이때 전화걸기를 원할 경우 검색된 전화번호로 메인서버에서 자동으로 전화를 걸어주는 단계 또는 전화번호인 숫자를 인식하여 그 숫자대로 전화를 걸어주는 단계도 포함한다. 본 발명에 의하면 안내원의 인력을 컴퓨터로 대체하므로서 이에 따른 부속장비, 장소, 관리 인력등을 절감하는 효과를 거둘 수 있으며, 또 안내원과의 통화를 위해 기다리는 대기시간이 발생하지 않아 보다 빠르게 전화번호 안내 시스템을 이용할 수 있는 효과를 거둘 수 있다.The present invention relates to a voice recognition telephone number guide and automatic connection method and a system thereof. The method of the present invention comprises the steps of transmitting a voice received from a user to a main server by making a file in the interface device, and the voice received from the main server. Recognizing the file as an LVR and converting the text into a character; searching for a keyword using the discourse technique in the main server; and a database including a phone book in the main server with the found keyword. Searching, and the phone number to be retrieved from the main server using the RealSpeak to send a voice file to the interface, and converting the voice file received from the interface device to a voice and transmitting to the user. At this time, if you want to make a phone call, the main server automatically dials the searched phone number. According to the present invention, by replacing the personnel of the receptionist with a computer, it is possible to reduce the accessories, places, management personnel, etc. accordingly, and also because the waiting time for the call with the receptionist does not occur, so The effect of using a number guidance system can be achieved.

본 발명의 특징은 한국어뿐만 아니라 미국영어, 영국영어, 일본어, 중국어, 독일어등 세계 각국의 언어 특성에 맞게끔 운영할 수 있다.The features of the present invention can be operated in accordance with the language characteristics of the world, such as American English, British English, Japanese, Chinese, German as well as Korean.

Description

음성 인식 전화번호 안내 및 자동연결 방법과 그 시스템{Voice identification telephone number guidance and auto-connecting method and system therefor}Voice identification telephone number guidance and auto-connecting method and system therefor}

본원 발명은 음성인식 기술을 통해 전화번호를 안내하는 전화번호 안내 및 자동연결 방법과 시스템에 관한 것으로, 더욱 상세하게는 종래에 전화교환 안내원에 의해 이루어지던 질문을 받고 원하는 전화번호를 검색하는 부분을 프로그램에 의해 자동적으로 수행하도록 하고 이를 자동연결해주는 자동화된 전화번호 안내 및 자동연결 방법과 그 시스템에 관한 것이다.The present invention relates to a telephone number guide and automatic connection method and system for guiding a telephone number through voice recognition technology, and more particularly, a part for searching a desired telephone number after receiving a question made by a telephone operator. The present invention relates to an automated telephone number guide and automatic connection method and system for automatically executing the program and automatically connecting the same.

종래의 전화번호 안내 시스템은 사용자가 전화를 걸면 안내원이 사용자와의 대화를 통해 전화번호를 알고 싶은 장소나 사람(이하 '키워드'라 함)를 듣고 상기 키워드를 컴퓨터로 직접 검색한 뒤 나오는 결과를 자동음성응답 시스템(ARS : Automatic Response System)을 통해 사용자에게 알려주는 시스템이다.In the conventional telephone number guide system, when a user makes a phone call, a receptionist listens to a place or person (hereinafter referred to as a keyword) that wants to know the telephone number through a conversation with the user, and searches for the keyword directly on a computer. This is a system for informing a user through an Automatic Response System (ARS).

그리고 조직내에서 구내전화를 걸 경우에는 구내전화번호 책자나 구내 전화번호표를 참조하였다.In addition, when making an extension call in the organization, refer to the extension number booklet or the extension number table.

그러나, 종래의 전화번호 안내 시스템에서는 각 사용자별로 안내원과의 통화가 이루어져야 하므로 많은 사용자가 동시에 안내 시스템을 사용할 경우 안내원과의 통화를 위해 기다리는 대기시간이 발생하는 문제점과 인력의 필요성에 따른 비용및 관리의 문제점이 있어 왔다.However, in the conventional phone number guide system, each user must make a call with the guide, so when many users use the guide system at the same time, there is a problem of waiting time waiting for a call with the guide and the cost of necessity of manpower. And management has been a problem.

또한 안내원을 통해 전화번호를 안내받고 다시 전화를 걸어야 하는 불편함이 있어 왔다.In addition, there has been the inconvenience of having to receive a phone number through a receptionist and call back.

그리고 조직내에서 구내전화를 걸 경우에는 전화를 거는 사람이 구내전화번호 책자나 전화번호표가 없거나 직접적인 번호를 알지 못하는 경우에는 전화를 걸지 못하는 문제점이 있어 왔다.And if you make an internal call in your organization, there is a problem that the person who makes the call cannot make a call if they do not have an extension number booklet or a telephone number or do not know the direct number.

본원 발명의 목적은 상기와 같은 문제점을 해결하기 위한 것으로써, 본 발명의 목적은 사용자의 음성을 LVR 엔진으로 인식하여 담화기술을 통해 자동으로 전화번호를 검색, RealSpeak를 통해 알려주고 사용자의 의사에 따라 해당번호로 전화를 연결해주는 개선된 전화번호 안내 및 자동연결 방법 및 그 시스템을 제공하는 데에 있다.An object of the present invention is to solve the above problems, the object of the present invention is to recognize the voice of the user to the LVR engine and automatically search for the phone number through the discourse technology, RealSpeak informed according to the user's intention The present invention provides an improved telephone number guide and automatic connection method and system for connecting a call to a corresponding number.

도 1은 종래의 전화번호 안내 시스템을 도시한 블럭도이다.1 is a block diagram showing a conventional telephone number guide system.

도 2는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템을 도시한 블럭도이다.2 is a block diagram illustrating a phone number guide and automatic connection system according to the present invention.

도 3은 본원 발명에 따른 전화번호 안내 및 자동연결 시스템중 인터페이스 장치의 내부 모듈을 도시한 블럭도이다.Figure 3 is a block diagram showing the internal module of the interface device of the telephone number guide and automatic connection system according to the present invention.

도 4는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템중 메인 서버의 내부 모듈을 도시한 블럭도이다.Figure 4 is a block diagram showing the internal module of the main server of the telephone number guide and automatic connection system according to the present invention.

도 5는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템에서의 전체 프로세스를 도시한 흐름도이다.5 is a flowchart showing the overall process in the telephone number guide and automatic connection system according to the present invention.

도 6은 본원 발명에서 이용되는 키워드 검색용 스크립트의 일 예를 도시한 도면이다.6 is a diagram illustrating an example of a keyword search script used in the present invention.

본원 발명의 일 측면에 따르면, 본원 발명에 따른 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 방법은 사용자로부터 수신된 음성을 인터페이스 장치에서 파일로 만들어 메인 서버로 전송하는 단계와, 상기 메인서버에서 전송받은 음성 파일을 LVR 엔진으로 인식하여 문자로 변환하는 단계와, 상기 메인서버에서 문자로 변환된 일련의 Digit 값들을 담화기술을 이용하여 키워드(Keyword)를 찾는 단계와, 찾은 상기 키워드로 상기 메인서버에서 전화번호부가 수록되어 있는 데이터베이스를 검색하는 단계와, 검색된 전화번호를 상기 메인서버에서 RealSpeak를 활용하여 음성파일로 만들어 인터페이스로 전송하는 단계와, 상기 인터페이스 장치에서 전송받은 음성 파일을 음성으로 바꾸어 사용자에게 전송하는 단계를 포함한다. 또한 검색된 전화번호로 메인서버에서 자동으로 전화를 걸어주는 단계 또는 전화번호인 숫자를 인식하여 그 숫자대로 전화를 걸어주는 단계를 포함한다.According to an aspect of the present invention, a voice recognition telephone number guide method for recognizing and processing a user's voice according to the present invention comprises the steps of transmitting a voice received from the user to a main server in a file in the interface device, the main server Recognizing the voice file received from the LVR engine and converting the text into a character, Finding a keyword (Keyword) using a discourse technique for the series of Digit values converted into a text in the main server, and the found keyword Searching the database containing the phone book in the main server; transmitting the searched phone number to the interface by using RealSpeak in the main server; and transmitting the voice file received from the interface device to the voice. And sending it to the user. It also includes a step of automatically calling the main server with the searched phone number or a step of recognizing a number that is a phone number and dialing the number accordingly.

또한 본원 발명의 다른 일 측면에 따르면, 본원 발명에 따른 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 시스템은 사용자로부터 수신된 음성을 인터페이스 장치에서 파일로 만들어 메인 서버로 전송하는 수단과, 상기 메인서버에서 전송받은 음성 파일을 LVR 엔진으로 인식하여 문자로 변환하는 수단과, 상기 메인서버에서 문자로 변환된 일련의 Digit 값들을 담화기술을 이용하여 키워드(Keyword)를 찾는 수단과, 찾은 상기 키워드로 상기 메인서버에서 전화번호부가 수록되어 있는 데이터베이스를 검색하는 수단과, 검색된 전화번호를 상기 메인서버에서 RealSpeak를 활용하여 음성파일로 만들어 인터페이스로 전송하는 수단과, 상기 인터페이스 장치에서 전송받은 음성 파일을 음성으로 바꾸어 사용자에게 전송하는 수단을 포함한다. 또한 검색된 전화번호로 메인서버에서 자동으로 전화를 걸어주는 수단 또는 전화번호인 숫자를 인식하여 그 숫자대로 전화를 걸어주는 수단을 포함한다.In addition, according to another aspect of the present invention, the voice recognition telephone number guide system for recognizing and processing the user's voice according to the present invention is a means for transmitting the voice received from the user to the main server to make a file in the interface device, and Means for recognizing the voice file received from the main server by the LVR engine and converting the text file into text; means for finding a keyword using a discourse technique for a series of digit values converted from the main server into text; Means for searching the database containing the phone book in the main server, means for transmitting the searched phone number to the interface by using RealSpeak in the main server, and transmitting it to the interface, and the voice file received from the interface device. Means for transmitting the voice to the user. It also includes a means for automatically calling the main server from the retrieved telephone number or a means for recognizing a number that is a telephone number and dialing the number accordingly.

이하, 도면을 참조하여 본원 발명을 보다 상세하게 설명하고자 한다.Hereinafter, the present invention will be described in more detail with reference to the drawings.

도 1은 종래의 전화번호 안내 시스템을 도시한 블럭도이다.1 is a block diagram showing a conventional telephone number guide system.

종래의 전화번호 안내 시스템은 사용자의 전화를 각각의 안내원에게 연결시켜주는 사설구내교환기(Private Branch Exchange: PBX, 100), 사용자의 전화를 받고 사용자가 찾는 전화번호를 검색하는 전화교환 안내원(Operator, 110), 전화교환안내원이 전화번호를 검색하는 수단인 단말기(120), 전화번호 데이터가 저장되어 있는 데이터베이스 서버(130) 그리고 상기 단말기(120)들과 상기 데이터베이스 서버(130)를 연결하고 있는 네트워크망(140)을 포함한다. 네트워크망(140)은 TCP/IP 프로토콜을 사용할 수 있다. 상기 안내 시스템의 이용방법은 다음과 같다. 전화교환 서비스를 이용하고자 하는 사용자들이 전화기(150)를 이용하여 전화번호 안내 시스템에 전화를 걸면 공중전화망(Public Switched Telephone Network :PSTN, 160)을 통하여 상기 전화번호 안내 시스템의 PBX(100)에 연결된다. 상기 PBX(100)는 자체적으로 전화교환 안내원(110)으로 걸려온 전화를 교환시키고 안내원(110)은 사용자와의 대화를 통해 전화번호를 알고 싶은 장소나 사람(이하 '키워드'라 함)을 인식하고 단말기(120)를 통해 데이터베이스 서버(130)를 키워드로 검색하여 나온 결과를 자동음성응답 시스템(ARS : Automatic Response System, 도시되지 않음)을 통해 사용자에게 알려준다.Conventional telephone directory guidance system is a Private Branch Exchange (PBX, 100) that connects the user's phone to each guide, a telephone operator who receives the user's call and retrieves the phone number you're looking for ( Operator (110), the terminal 120, which is a means for the telephone operator to retrieve the telephone number, the database server 130 in which the telephone number data is stored and connects the terminals 120 and the database server 130. The network 140 is being included. The network 140 may use the TCP / IP protocol. How to use the guide system is as follows. When the user who wants to use the telephone exchange service calls the telephone number guide system using the telephone 150, the user connects to the PBX 100 of the telephone number guide system through a public switched telephone network (PSTN) 160. do. The PBX 100 itself exchanges the incoming call to the telephone exchange guide 110, the guide 110 is a place or person (hereinafter referred to as 'keyword') that you want to know the phone number through a dialogue with the user After recognizing and searching the database server 130 as a keyword through the terminal 120, the user is informed of the result through an automatic voice response system (ARS) (not shown).

도 2는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템을 도시한 블럭도이다.2 is a block diagram illustrating a phone number guide and automatic connection system according to the present invention.

본원 발명에 따른 전화번호 안내 시스템은 사용자의 전화를 인터페이스 장치(200)에 연결시켜주는 사설구내교환기(PBX, 230), 사용자와 상호작용하고 메인 서버(210)와 상기 PBX(230)사이에서 인터페이스 역할을 하는 인터페이스 장치(200), 상기 인터페이스 장치(200)로부터 전송받은 음성을 인식하여 문자로 변경하는 음성인식모듈과 상기 변경된 문자에서 키워드를 찾고 키워드를 데이터베이스 서버(220)에서 검색하는 검색모듈 및 검색된 전화번호를 음성으로 변경하는 음성합성모듈 그리고 자동으로 전화를 걸어주는 전화 자동 연결 모듈을 포함하는 메인 서버(210), 전화번호 데이터가 저장되어 있는 데이터베이스 서버(220) 그리고 상기 인터페이스 장치(200), 상기 메인 서버(210) 및 상기 데이터베이스 서버(220)를 연결하고 있는 네트워크망(240)을 포함한다. 네트워크망(140)은 TCP/IP 프로토콜을 사용할 수 있다.The telephone number guide system according to the present invention is a private branch exchange (PBX, 230) that connects the user's phone to the interface device 200, interacts with the user and interfaces between the main server 210 and the PBX 230 The interface device 200 to play a role, a voice recognition module for recognizing the voice received from the interface device 200 to change the text and a search module to find a keyword in the changed text and to search the keyword in the database server 220 and A main server 210 including a voice synthesis module for converting a searched phone number into a voice and an automatic phone connection module for automatically making a call, a database server 220 storing phone number data, and the interface device 200. And a network 240 connecting the main server 210 and the database server 220. The network 140 may use the TCP / IP protocol.

도 3은 본원 발명에 따른 전화번호 안내 및 자동연결 시스템중 인터페이스 장치의 내부 모듈을 도시한 블럭도이다. 인터페이스 장치(200)는 전화회선을 할당하는 교환 모듈(300)과 메인서버에서 음성을 인식할 수 있도록 사용자의 음성을 프로토콜에 맞추어 변형하는 포맷(Formatting) 모듈(310)을 포함한다.Figure 3 is a block diagram showing the internal module of the interface device of the telephone number guide and automatic connection system according to the present invention. The interface device 200 includes an exchange module 300 for allocating a telephone line and a formatting module 310 for modifying a user's voice according to a protocol so that the voice can be recognized by the main server.

교환 모듈(300)에서는 여러개의 포트(접합지)가 있을 때 전화를 건 사용자의 위치를 잃지 않게끔 유지하는 역할을 한다.The exchange module 300 serves to maintain the location of the user who dialed when there are multiple ports (junctions).

포맷 모듈(310)에서는 사용자의 음성을 메인서버(210)에서 인식하게끔 파일로 변형하고 메인 서버(210)로부터 받은 음성 파일을 사용자가 들을 수 있게끔 변형하는 역할을 한다. 상기 인터페이스 장치(210)에서 사용하는 음성지원보드가 각 회사마다 스펙(Spec)이 다르므로 일률적으로 메인서버(210)에서 인식가능하도록 변형해야 한다.The format module 310 transforms the user's voice into a file to be recognized by the main server 210 and transforms the voice file received from the main server 210 to be heard by the user. Since the voice support board used in the interface device 210 has a different specification for each company, it should be uniformly modified to be recognizable by the main server 210.

도 4는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템중 메인 서버의내부 모듈을 도시한 블럭도이다. 메인 서버(210)는 인터페이스 장치(200)로부터 음성을 전달받으면 이 음성을 인식하여 문자로 변경하는 음성인식모듈(400)과 상기 변경된 문자에서 키워드를 찾고 키워드를 데이터베이스 서버(220)에서 검색하는 검색 모듈(410) 및 검색된 전화번호를 음성으로 변경하는 음성합성모듈(420) 그리고 검색된 전화번호로 자동 전화연결하는 전화 자동연결 모듈(430)을 포함한다.Figure 4 is a block diagram showing the internal module of the main server of the telephone number guide and automatic connection system according to the present invention. When the main server 210 receives the voice from the interface device 200, the voice recognition module 400 recognizes the voice and changes it into a text, and searches for a keyword in the changed text and searches the keyword in the database server 220. Module 410, a voice synthesis module 420 for changing the retrieved phone number into voice, and an automatic phone connection module 430 for automatically dialing the retrieved phone number.

상기 음성인식모듈(400)에서는 전송받은 음성을 분석하여 인식불가능한 경우에는 사용자에게 음성이 인식불가능을 알리고 다시 한 번 시도하도록 알리는 음성을 인터페이스 장치(200)를 통해 사용자에게 전송한다. 전송받은 음성을 인식한 경우에는 음성을 문자(Text)로 변경하여 검색 모듈(410)로 전송한다. 상기 음성인식모듈(400)은 L&H 사의 LVR(Large Vocabulary Recognition) 엔진을 사용하여 구현할 수 있다.The voice recognition module 400 analyzes the received voice and transmits a voice to the user through the interface device 200 informing the user that the voice is not recognizable and to try again. When the received voice is recognized, the voice is changed to a text and transmitted to the search module 410. The voice recognition module 400 may be implemented using LV (Large Vocabulary Recognition) engine.

검색 모듈(410)은 상기 음성인식모듈(400)로부터 전송받은 문자에서 키워드를 찾는다. 키워드를 찾을 수 없는 경우에는 사용자에게 원하는 전화번호를 찾을 수 없음을 알리고 다시 한 번 시도하도록 알리는 음성을 인터페이스 장치(200)를 통해 사용자에게 전송한다. 키워드를 찾은 경우에는 데이터베이스 서버(220)를 검색하여 사용자가 원하는 전화번호를 찾는다. 검색 결과가 존재하는 경우에는 문자를 음성합성모듈(420)로 전송하고 존재하지 않는 경우에는 사용자가 원하는 전화번호는 존재하지 않음을 알리고 다시 한 번 시도하도록 알리는 음성을 인터페이스 장치(200)를 통해 사용자에게 전송한다.The search module 410 finds a keyword in the text received from the voice recognition module 400. If the keyword is not found, a voice is transmitted to the user through the interface device 200 informing the user that the desired telephone number cannot be found and informing the user to try again. If a keyword is found, the user searches the database server 220 to find a desired phone number. If there is a search result, the user transmits a text to the voice synthesis module 420. If the search result does not exist, the user notifies the user that the desired phone number does not exist, and then tries again. Send to.

음성합성모듈(420)은 상기 검색 모듈(410)로부터 전송받은 문자를 바탕으로문장을 합성하여 음성으로 변경한다. 음성합성방법은 제한된 어휘 개수와 구문구조의 문장만을 합성하는 자동음성응답 시스템(Automatic Response System:ARS)을 이용하여 할 수도 있고 임의의 문장을 입력받아 음성 합성하는 무제한 어휘 합성 시스템을 이용하여 할 수도 있다. 무제한 어휘 합성 시스템을 이용하는 경우 상기 무제한 어휘 합성 시스템은 L&H 사의 TTS(Text to Speech) 엔진인 RealSpeak을 사용하여 구현할 수 있다. 음성 합성뒤 상기 합성된 음성을 인터페이스 장치(200)를 통해 사용자에게 전송한다.The voice synthesis module 420 synthesizes a sentence based on the text received from the search module 410 and converts it into a voice. The speech synthesis method can be performed by using an automatic speech response system (ARS) that synthesizes only a limited number of vocabulary and syntax structures, or an unlimited lexical synthesis system that synthesizes speech by receiving arbitrary sentences. have. In the case of using an unlimited lexical synthesis system, the unlimited lexical synthesis system may be implemented using RealSpeak, a text-to-speech (TTS) engine of L & H. After the voice synthesis, the synthesized voice is transmitted to the user through the interface device 200.

전화 자동연결 모듈(430)은 상기 검색모듈(410)에서 찾은 전화번호를 이용하여 자동으로 전화연결을 가능하게 한다. 사용자에게 자동전화연결여부에 대해 문의한 뒤 사용자가 원하는 경우에는 우선 연결하려는 전화기가 유선용 일반 전화기인지 이동전화인지 확인한다. 즉, 전화번호값을 PBX에 인터페이스 시켜서 유선용 일반 전화기인 경우에는 시스템에 포함된 PBX, PSTN을 통하여 전화를 연결하여 주고, 이동전화인 경우에는 시스템에 포함된 PBX, PSTN 및 이동전화망에 포함된 여러 교환기들(MSC(Mobile Switching Center), BSC(Binary Synchronous Communication), BTS(Basestation Tansmit Substation))을 통하여 전화를 연결하여 준다.The automatic telephone connection module 430 enables automatic telephone connection using the telephone number found in the search module 410. Ask the user if they want to connect automatically, and if they want, first check whether the phone you want to connect is a landline phone or a mobile phone. In other words, the telephone number is interfaced to the PBX to connect the telephone through the PBX and PSTN included in the system in the case of a wired general telephone, and the PBX, PSTN and the mobile telephone network included in the system in the case of a mobile telephone. The telephone is connected through several exchanges (Mobile Switching Center (MSC), Binary Synchronous Communication (BSC), and Basestation Tansmit Substation (BTS)).

도 5는 본원 발명에 따른 전화번호 안내 및 자동연결 시스템에서의 전체 프로세스를 도시한 흐름도이다. 단계(500)에서, 사용자가 전화번호 안내 및 자동연결 시스템에 전화를 걸면 인터페이스 장치의 교환 모듈에서 전화 회선을 할당한다. 할당된 사용자와 컴퓨터를 통한 대화(501)시 안내 멘트가 나오고 사용자가 질문을 하면 단계(502)에서, 사용자의 음성을 수신하여 단계(503)에서, 인터페이스 장치의 포맷 모듈을 통해 음성을 메인 서버가 인식할 수 있도록 파일로 포맷팅하고 메인 서버의 음성인식모듈로 전송한다. 단계(510)에서, 음성인식모듈은 전송받은 음성을 인식하여 인식할 수 없는 경우에는 단계(511)에서, 음성인식을 할 수 없다는 내용을 인터페이스 장치를 통해 사용자에게 전송하고 단계(501)로 되돌아간다. 인식할 수 있는 경우에는 단계(512)에서, 음성을 문자로 변경한 뒤 메인 서버의 검색 모듈로 전송한다. 문자를 전송받은 검색 모듈은 단계(520)에서, 문자에서 키워드를 찾는다. 키워드를 찾을 수 없는 경우에는 단계(521)에서, 키워드를 찾을 수 없다는 내용을 인터페이스 장치를 통해 사용자에게 전송하고 단계(501)로 되돌아간다. 키워드를 찾을 수 있는 경우에는 단계(522)에서, 찾은 키워드로 데이터베이스 서버를 검색하고 단계(523)에서, 검색결과가 존재하는지 판단하여 존재하지 않는 경우에는 단계(524)에서, 검색결과가 없다는 내용을 인터페이스 장치를 통해 사용자에게 전송하고 단계(501)로 되돌아간다. 검색 결과가 존재하는 경우에는 검색 결과는 메인 서버의 음성합성모듈로 전송되고 음성합성모듈은 단계(530)에서, 검색결과를 바탕으로 문장을 합성하여 음성으로 변경하고 상기 음성을 인터페이스 장치로 전송한다. 단계(540)에서, 인터페이스 장치가 상기 음성 파일을 전송받으면 포맷 모듈에서 사용자가 인식할 수 있도록 포맷팅하고 단계(550)에서, 포맷팅된 음성을 사용자에게 전송한다. 또한 단계(560)에서, 상기 전화번호로 연결을 원하는지 여부를 사용자에게 문의하여 사용자가 원하는 경우 단계(561)에서, 메인서버(210)의 전화 자동연결모듈(430)에서 상기한 방법에 의해 전화연결을 하는 단계를 포함할 수 있다.5 is a flowchart showing the overall process in the telephone number guide and automatic connection system according to the present invention. In step 500, when the user dials the telephone number guide and autoconnect system, the switch module of the interface device allocates the telephone line. When the user is asked a question when the user communicates with the assigned user through computer 501, in step 502, the user receives a voice and in step 503, the voice is transmitted through the format module of the interface device. Format the file so that it can be recognized and send it to the voice recognition module of the main server. In step 510, if the voice recognition module cannot recognize and recognize the received voice, in step 511, the voice recognition module transmits a message indicating that voice recognition is not possible to the user through the interface device and returns to step 501. Goes. If it can be recognized, in step 512, the voice is changed to text and transmitted to the search module of the main server. The search module receiving the text, in step 520, finds a keyword in the text. If the keyword is not found, in step 521, the content notifying that the keyword cannot be found is transmitted to the user through the interface device, and the flow returns to step 501. If a keyword can be found, in step 522, the database server is searched for by the found keyword, and in step 523, it is determined whether a search result exists. Is sent to the user via the interface device and the process returns to step 501. If there is a search result, the search result is transmitted to the voice synthesis module of the main server. In step 530, the voice synthesis module synthesizes the sentence based on the search result, changes the voice, and transmits the voice to the interface device. . In step 540, when the interface device receives the voice file, the format module formats the format so that the user can recognize it. In step 550, the formatted voice is transmitted to the user. In addition, in step 560, the user inquires whether the user wants to connect to the phone number, and if the user wants, in step 561, the telephone is automatically connected by the method described above in the automatic connection module 430 of the main server 210. And making a connection.

또 다른 변형예에 있어서, 단계(523)에서 검색결과가 존재하는 경우에도 사용자에게 단계(510)에서의 인식 내용이 맞는지를 사용자에게 확인 요청하고 사용자의 대답을 분석하여 맞다는 내용의 대답이 나올 경우에만 단계(530), 단계(540) 및 단계(550)의 절차를 진행하고 맞지 않다는 내용의 대답이 나올 경우에는 단계(501)로 되돌아갈 수도 있다.In another variation, even when a search result is present in step 523, the user is asked to confirm whether the recognition content in step 510 is correct, and the user's answer is analyzed and the answer is correct. If only the process of step 530, step 540 and step 550 proceeds and the answer is not correct, step 501 may be returned.

도 6은 본원 발명에서 이용되는 키워드 검색용 스크립트의 일 예를 도시한 도면이다. 상기와 같이 메인 서버(210)의 검색 모듈(410)에서는 사용자의 음성 파일을 변경한 문자를 통해 키워드를 찾아낸다. 그 방법은 다음과 같다. 사용자마다 전화번호를 문의하는 문장은 다를 수 있으며 그 가능한 내용을 스크립트로 정의하여 메인 서버(210)의 저장공간에 미리 저장하여 둔다. 검색 모듈(410)에서는 전송받은 문자를 메인 서버(210)의 저장공간에 저장된 검색용 스크립트와 비교한다. 상기 스크립트에서는 주제어의 위치까지 지정하고 있으며 비교를 통해서 전송받은 문자에서 키워드를 추출해 낼 수 있다. 만약에 비교결과 키워드를 찾을 수 없는 경우에는 상기한 바와 같이 키워드를 찾을 수 없다는 내용을 사용자에게 전송하고 전송받은 문자를 따로 저장하여 스크립트의 내용을 추가할 때 참고자료로 사용하게 한다.6 is a diagram illustrating an example of a keyword search script used in the present invention. As described above, the search module 410 of the main server 210 finds the keyword through the text of the user's voice file. The method is as follows. The sentence for inquiring a telephone number for each user may be different, and possible contents thereof are defined in a script and stored in advance in a storage space of the main server 210. The search module 410 compares the received text with a search script stored in the storage space of the main server 210. In the script, the location of the main word is specified, and a keyword can be extracted from the received character through comparison. If the keyword is not found as a result of the comparison, the keyword cannot be found as described above, and the received text is stored separately so that the script can be used as a reference when adding the content of the script.

상술한 바와 같이, 본 발명에 의하면 많은 사용자가 동시에 전화번호 안내시스템을 이용하더라도 음성인식 시스템을 통하여 사용자의 요구를 안내원을 대신하여 컴퓨터로 대체하므로서 이에 따른 부속장비, 장소, 관리 인력등을 절감하는 효과를 거둘 수 있으며, 또 안내원과의 통화를 위해 기다리는 대기시간이 발생하지 않아 보다 빠르게 전화번호 안내 시스템을 이용할 수 있는 효과를 거둘 수 있다.As described above, according to the present invention, even if many users use the telephone number guide system at the same time, the user's request is replaced by a computer on behalf of the guide through the voice recognition system, thereby reducing the accompanying equipment, place, management personnel, etc. In addition, the waiting time for the call with the receptionist does not occur, and the phone number guide system can be used more quickly.

또한 본 발명에 의하면 자동으로 전화연결을 할 수 있어, 보다 편리하게 이용할 수 있는 효과를 갖는다.In addition, according to the present invention can be automatically connected to the phone, there is an effect that can be used more conveniently.

본 발명의 특징은 한국어뿐만 아니라 미국영어, 영국영어, 일본어, 중국어, 독일어등 세계 각국의 언어 특성에 맞게끔 운영할 수 있다.The features of the present invention can be operated in accordance with the language characteristics of the world, such as American English, British English, Japanese, Chinese, German as well as Korean.

Claims (9)

사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법에 있어서,In the voice recognition phone number guidance and automatic connection method for recognizing and processing the user's voice, 사용자로부터 수신된 음성을 인터페이스 장치에서 파일로 만들어 메인 서버로 전송하는 단계와,Transmitting a voice received from the user into a file in the interface device and transmitting the file to the main server; 상기 메인서버에서 전송받은 음성 파일을 LVR 엔진으로 인식하여 문자로 변경하는 단계와,Recognizing the voice file received from the main server to the LVR engine to change the text; 상기 메인서버에서 상기 일련의 문자를 담화기술을 이용하여 키워드(Keyword)를 찾는 단계와,Finding a keyword in the main server by using the discourse technique; 찾은 상기 키워드로 상기 메인서버에서 전화번호부가 수록되어 있는 데이터베이스를 검색하는 단계와,Searching a database in which a phone book is stored in the main server using the found keyword; 검색된 전화번호를 상기 메인서버에서 RealSpeak를 통해 음성파일로 만들어 인터페이스로 전송하는 단계와,Transmitting the searched phone number to the interface by making a voice file through the RealSpeak on the main server; 상기 인터페이스 장치에서 전송받은 음성 파일을 음성으로 바꾸어 사용자에게 전송하는 단계를 포함하는 것을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.And converting the voice file received from the interface device into a voice and transmitting the voice file to the user. 제 1항에 있어서, 상기 방법은 상기 전화번호로 연결을 원하는지 여부를 사용자에게 문의하는 단계와,The method of claim 1, further comprising the steps of: asking a user whether or not they want to connect to the phone number; 사용자가 원하는 경우 메인서버에서 전화연결을 하는 단계와,If the user wants to make a call from the main server, 또 전화번호인 숫자를 인식하여 그 숫자대로 전화를 걸어주는 단계를 더 포함하는 것을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The method further includes recognizing a number that is a telephone number and making a call according to the number, wherein the voice recognition telephone number guide and automatic connection method recognizes and processes the user's voice. 제 2항에 있어서, 전화연결을 하는 단계는 서버의 전화번호값을 PBX에 인터페이스 시켜서 해당자에게 자동으로 전화해주는 방법으로 이루어짐을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The voice recognition telephone number guide for recognizing and processing a user's voice according to claim 2, wherein the step of making a telephone call is performed by automatically calling a corresponding person by interfacing the telephone number value of the server to the PBX. And automatic connection method. 제 1항에 있어서, 상기 음성파일을 인식하는 단계는 L&H사의 LVR(Large Vocabulary Recognition) 엔진을 사용하여 이루어짐을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The voice recognition telephone number guidance and automatic connection method of claim 1, wherein the step of recognizing the voice file is performed by using a Large Vocabulary Recognition (LVR) engine of L & H. 제 1항에 있어서, 상기 검색된 전화번호를 음성파일로 만드는 단계는 L&H사의 TTS(Text to Speech) 엔진(RealSpeak)을 사용하여 이루어짐을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The voice recognition phone number of claim 1, wherein the step of making the retrieved phone number into a voice file is performed by using a text to speech (TTS) engine (RealSpeak) of L & H. Instructions and how to connect automatically. 제 1항에 있어서, 상기 검색된 전화번호를 음성파일로 만드는 단계는 자동음성 응답 시스템(Automatic Response System:ARS)을 이용하여 이루어짐을 특징으로하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The voice recognition telephone number guide of claim 1, wherein the step of making the retrieved telephone number into a voice file is performed by using an automatic response system (ARS). And automatic connection method. 제 1항에 있어서, 상기 키워드(Keyword)를 찾는 단계는 담화기술로서 상기 문자를 상기 메인 서버의 저장공간에 미리 저장된 검색용 스크립트와 비교하여 키워드를 추출하는 방법으로 이루어짐을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The method of claim 1, wherein the searching of the keyword comprises a method of extracting a keyword by comparing the text with a search script previously stored in a storage space of the main server. Voice recognition phone number guide and automatic connection method to recognize and process voice. 제 7항에 있어서, 상기 문자와 상기 검색용 스크립트를 비교하여 키워드를 추출할 수 없는 경우 상기 문자를 검색용 스크립트 추가를 위해서 메인 서버의 저장공간에 저장하는 것을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 방법.The method of claim 7, wherein when the keyword cannot be extracted by comparing the text with the search script, the text is stored in a storage space of the main server for adding the search script. How to process voice recognition phone number and automatic connection. 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 시스템에 있어서,In the voice recognition phone number guide system for recognizing and processing the user's voice, 사용자로부터 수신된 음성을 인터페이스 장치에서 파일로 만들어 메인 서버로 전송하는 수단과,Means for converting the voice received from the user into a file on the interface device and transmitting the file to the main server; 상기 메인서버에서 전송받은 음성 파일을 LVR 엔진으로 인식하여 문자로 변경하는 수단과,Means for recognizing the voice file received from the main server by using an LVR engine and converting it into text; 상기 메인서버에서 상기 일련의 문자들를 담화기술을 이용하여키워드(Keyword)를 찾는 수단과,Means for retrieving a keyword in the main server using a discourse technique for the series of characters; 찾은 상기 키워드로 상기 메인서버에서 전화번호부가 수록되어 있는 데이터베이스를 검색하는 수단과,Means for searching a database containing a telephone directory in the main server by the found keyword; 검색된 전화번호를 상기 메인서버에서 TTS를 통해 음성파일로 만들어 인터페이스로 전송하는 수단과,Means for transmitting the retrieved telephone number to the interface by making a voice file through the TTS in the main server; 상기 인터페이스 장치에서 전송받은 음성 파일을 음성으로 바꾸어 사용자에게 전송하는 수단과,Means for converting a voice file received from the interface device into a voice and transmitting the same to a user; 검색된 전화번호로 상기 메인서버에서 자동으로 전화를 걸어주는 수단과,Means for automatically calling the main server from the retrieved telephone number; 또 전화번호인 숫자를 인식하여 그 숫자대로 전화를 걸어주는 수단을 포함하는 것을 특징으로 하는, 사용자의 음성을 인식하여 처리하는 음성 인식 전화번호 안내 및 자동연결 시스템.And a means for recognizing a number, which is a telephone number, and dialing the number accordingly.
KR10-2000-0062487A 2000-09-08 2000-10-24 Voice identification telephone number guidance and auto-connecting method and system therefor Expired - Fee Related KR100383054B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020000053396 2000-09-08
KR20000053396 2000-09-08

Publications (2)

Publication Number Publication Date
KR20020020615A true KR20020020615A (en) 2002-03-15
KR100383054B1 KR100383054B1 (en) 2003-05-22

Family

ID=19688168

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2000-0062487A Expired - Fee Related KR100383054B1 (en) 2000-09-08 2000-10-24 Voice identification telephone number guidance and auto-connecting method and system therefor

Country Status (1)

Country Link
KR (1) KR100383054B1 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010107808A (en) * 2001-10-09 2001-12-07 정규석 System and method to connect call for civil service to the government and public office with single telephone number
KR20020065229A (en) * 2001-02-06 2002-08-13 (주)유니와이드 테크놀러지 Intelligent telephone service system
KR20020072359A (en) * 2001-03-09 2002-09-14 주식회사 웰컴넷 System and Method of manless automatic telephone switching and web-mailing using speech recognition
WO2003021923A1 (en) * 2001-09-04 2003-03-13 Moon-Seub Lee Automatic voice call connection service method using personal phone book database constructed through voice recognition
KR100396817B1 (en) * 2001-06-04 2003-09-02 (주)씨에스테크놀로지 Voice Cognition Call Exchange System and The Method for Voice Cognition Exchange using the same thereof
KR20040039586A (en) * 2002-11-04 2004-05-12 (주)포이시스 Ststem and method for extracting from ars-information using speech recognition
WO2007147352A1 (en) * 2006-06-14 2007-12-27 Huawei Technologies Co., Ltd. Communication terminal calling method and system and remote server
KR100822170B1 (en) * 2006-12-29 2008-04-16 주식회사 케이티프리텔 Database Construction Method and System for Voice Recognition ARS Service

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100277105B1 (en) * 1998-02-27 2001-01-15 윤종용 Apparatus and method for determining speech recognition data

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020065229A (en) * 2001-02-06 2002-08-13 (주)유니와이드 테크놀러지 Intelligent telephone service system
KR20020072359A (en) * 2001-03-09 2002-09-14 주식회사 웰컴넷 System and Method of manless automatic telephone switching and web-mailing using speech recognition
KR100396817B1 (en) * 2001-06-04 2003-09-02 (주)씨에스테크놀로지 Voice Cognition Call Exchange System and The Method for Voice Cognition Exchange using the same thereof
WO2003021923A1 (en) * 2001-09-04 2003-03-13 Moon-Seub Lee Automatic voice call connection service method using personal phone book database constructed through voice recognition
US7561672B2 (en) 2001-09-04 2009-07-14 Moon Seub Lee Automatic voice call connection service method using personal phone book database constructed through voice recognition
KR20010107808A (en) * 2001-10-09 2001-12-07 정규석 System and method to connect call for civil service to the government and public office with single telephone number
KR20040039586A (en) * 2002-11-04 2004-05-12 (주)포이시스 Ststem and method for extracting from ars-information using speech recognition
WO2007147352A1 (en) * 2006-06-14 2007-12-27 Huawei Technologies Co., Ltd. Communication terminal calling method and system and remote server
KR100822170B1 (en) * 2006-12-29 2008-04-16 주식회사 케이티프리텔 Database Construction Method and System for Voice Recognition ARS Service

Also Published As

Publication number Publication date
KR100383054B1 (en) 2003-05-22

Similar Documents

Publication Publication Date Title
US6907119B2 (en) Automated business directory assistance
US6996531B2 (en) Automated database assistance using a telephone for a speech based or text based multimedia communication mode
US6999563B1 (en) Enhanced directory assistance automation
US5802149A (en) On-line training of an automated-dialing directory
US6404877B1 (en) Automated toll-free telecommunications information service and apparatus
US6714641B2 (en) Web based personal directory
US20020181669A1 (en) Telephone device and translation telephone device
US6947539B2 (en) Automated call routing
KR100383054B1 (en) Voice identification telephone number guidance and auto-connecting method and system therefor
EP1718052A1 (en) Voice mail system with phone number recognition
CN111050002B (en) Intelligent telephone exchange and working method and system thereof
US20040193603A1 (en) Technique for effectively searching for information in response to requests in information assistance service
JP2002190879A (en) Wireless mobile terminal communication system
JP2001274907A (en) Caller recognition system and method
KR100383053B1 (en) The method of storing, guiding and auto-connecting telephone numbers with voice identification for the cellular phone and the system of the same
JP2003511989A (en) Voice activated telephone connection method and corresponding voice server
WO2005053295B1 (en) Telecommunications services apparatus and methods
KR100449640B1 (en) Method for providing dialing service by voice and system for the same
KR100336994B1 (en) The system and method for speech recognition potal service using multi-step speech recognition
KR0183140B1 (en) Search method of voice information service using consonant
KR100420773B1 (en) A system and method for providing voice information service during real time calling, using voice recognition
JP7484177B2 (en) Private branch exchange, telephone directory search method, and telephone directory search program
KR200321190Y1 (en) Caller Information Voice Output Device
WO2000005861A1 (en) Telecommunication audio processing systems and methods therefor
RU9562U1 (en) INFOCOM INFORMATION AND COMMUNICATION SYSTEM OF SUBSCRIBERS SERVICE

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

N231 Notification of change of applicant
PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

G170 Re-publication after modification of scope of protection [patent]
PG1701 Publication of correction

St.27 status event code: A-5-5-P10-P19-oth-PG1701

Patent document republication publication date: 20040424

Republication note text: Request for Correction Notice (Document Request)

Gazette number: 1003830540000

Gazette reference publication date: 20030522

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

FPAY Annual fee payment

Payment date: 20080423

Year of fee payment: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20090424

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20090424

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000