[go: up one dir, main page]

KR19990081035A - 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법 - Google Patents

시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법 Download PDF

Info

Publication number
KR19990081035A
KR19990081035A KR1019980014704A KR19980014704A KR19990081035A KR 19990081035 A KR19990081035 A KR 19990081035A KR 1019980014704 A KR1019980014704 A KR 1019980014704A KR 19980014704 A KR19980014704 A KR 19980014704A KR 19990081035 A KR19990081035 A KR 19990081035A
Authority
KR
South Korea
Prior art keywords
sign language
input
message
motion
visually impaired
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1019980014704A
Other languages
English (en)
Other versions
KR100248391B1 (ko
Inventor
박찬용
장병태
김정식
박찬종
Original Assignee
정선종
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 정선종, 한국전자통신연구원 filed Critical 정선종
Priority to KR1019980014704A priority Critical patent/KR100248391B1/ko
Publication of KR19990081035A publication Critical patent/KR19990081035A/ko
Application granted granted Critical
Publication of KR100248391B1 publication Critical patent/KR100248391B1/ko
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00—Teaching, or communicating with, the blind, deaf or mute
    • G09B21/04—Devices for conversing with the deaf-blind
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 시각 장애인의 대화 수단인 시각 장애자용 키보드 및 브레일리(Braille)를 이용한 입·출력시스템과 청각 장애인의 대화 수단인 수화에 사용되는 팔에 부착시킨 위치 및 방향센서(41)(42)와 손에 부착시킨 관절 센서를 컴퓨터에 설치하여 의사 전달 시스템을 구성하므로 시각 장애인과 청각 장애인의 상호간에 의사를 전달할 수 있는 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법에 관한 것이다.

Description

시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법
본 발명은 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법에 관한 것으로, 더 상세하게는 시각 장애인의 대화 수단인 시각장애자용 키보드 및 브레일리(Braille)를 이용한 입·출력시스템과 청각 장애인의 대화 수단인 수화에 사용되는 팔에 부착시킨 위치 및 방향센서와 손에 부착시킨 관절 센서를 컴퓨터에 설치하여 의사 전달 시스템을 구성하므로 시각 장애인과 청각 장애인의 상호간에 의사를 전달할 수 있도록 구성된 것이다.
일반적으로 장애인을 위해 일반인들과의 상호 대화를 위한 장치들이 개발되고 있으나, 장애인들간의 상호 대화를 위한 장치는 개발되지 않고 있다. 특히, 시각 장애인들과 청각 장애인들간의 상호대화는 장애 특성상 불가능한 문제점이 있었다.
본 발명의 목적은 시각 장애인과 청각 장애인에게 의사 전달 시스템을 이용하여 시각 장애인들과 청각 장애인들이 상호 의사를 전달 할 수 있도록 하는 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법을 제공하는데 있다.
상기 목적을 달성하기 위해 본 발명은 시각 장애인의 대화 수단인 시각장애자용 키보드 및 브레일리(Braille)를 이용한 입·출력시스템과 청각 장애인의 대화 수단인 수화에 사용되는 손과 팔에 부착시킨 위치 및 방향센서와 관절 센서를 컴퓨터에 설치하여 의사 전달 시스템을 구성하므로 시각 장애인과 청각 장애인의 상호간에 의사를 전달할 수 있도록 구성된 것이다.
도 1 은 본 발명의 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템을 나타낸 구성도
도 2 는 시각 장애인이 청각 장애인에게 의사를 전달하는 과정을 나타낸 구성도
도 3 은 시각 장애인이 청각 장애인에게 의사를 전달하는 구조를 나타낸 구성도
도 4 는 청각 장애인이 시각 장애인에게 의사를 전달하는 과정을 나타낸 구성도
도 5 는 청각 장애인이 시각 장애인에게 의사를 전달하는 구조를 나타낸 구성도
도 6 은 본 발명의 시각 장애인과 청각 장애인의 의사 전달을 위한 방법을 나타낸 흐름도
* 도면의 주요 부분에 대한 부호의 설명 *
10 : 입력부 11 : 입력 키보드 20 : 제어부
21 : 수화 모션 데이터 베이스
22 : 수화 인식 데이터 베이스
30 : 출력부 40 : 수화자
41,42 : 위치 및 방향센서
50 : 출력부
본 발명은 도 1 에 도시된 바와 같이, 상기 목적을 달성하기 위한 수단으로서 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템은
시각 장애인의 의사전달 수단인 시각장애자용 입력 키보드(11)로 구성된 입력부(10)와,
상기 입력부(10)의 키 입력 문자 코드를 단어로 변화시켜, 변환된 단어를 수화 모션 테이터 베이스(21)를 이용하여 청각 장애인에게 전달하고자 하는 수화 메시지를 검색하는 제어부(20)와,
제어부(20)에서 검색된 메시지를 청각 장애인이 인식할 수 있도록 3차원 그래픽을 이용한 수화 애니메인션으로 출력되는 출력부(30)와,
상기, 전달된 메시지를 청각 장애인이 인식하여 청각 장애인의 의사 전달 수단인 손과 팔을 통해 메시지를 전달함에 있어, 상기 팔에 위치 및 방향센서(41)(42)와 손에 관절 센서를 부착한 수화자(40)와,
수화자(40)를 통해 입력받은 팔의 위치 및 방향을 가지고 수화 인식 데이터 베이스(22)를 이용하여 시각 장애인에게 전달하고자 하는 메시지로 변환하는 제어부(20)와,
제어부(20)에서 변환된 메시지를 시각 장애인이 인식할 수 있도록 브레일리로 출력하는 출력부(50)로 구성한다.
상기한 목적을 달성하기 위한 방법으로서, 도 2 및 도 3 에 도시된 바와 같이, 본 발명의 시각 장애인이 청각 장애인에게 의사를 전달하는 과정을 설명하면,
시각 장애인이 시각장애자용 입력 키보드(11)로 메시지를 입력하면 문자코드로 데이터 통신의 표준인 RS-232C 포트를 통해 컴퓨터인 제어부(20)로 입력되면 수화의 모션으로 변환되어 수화 모션 데이터 베이스(21)를 통하여 3 차원 그래픽으로 수화의 모션을 모니터에 디스플레이 하게 된다.
또한, 도 4 및 도 5 에 도시된 바와 같이, 본 발명의 청각 장애인이 시각 장애인에게 의사를 전달하는 과정을 설명하면, 청각 장애인의 수화에 사용되는 팔에 각각 2 개씩의 위치 및 방향센서(41)(42)를 장착함과 동시에 손에 18개의 관절센서를 장착하여 수화로 의사를 전달함으로서, 각각의 위치 및 방향센서(41)(42)는 수화자(40)의 손과 팔의 위치를 컴퓨터인 제어부(20)로 전달하고, 제어부(20)에서는 입력받은 손과 팔의 위치 및 방향을 가지고 수화 인식 데이터 베이스(22)를 통하여 의사전달 메시지를 검색하여 데이터 통신 표준인 RS-232C포트를 통하여 의사전달 내용을 브레일리로 출력하므로 시각 장애인에게 청각 장애인의 의사를 전달할 수 있게 되므로 시각 장애인과 청각 장애인의 상호 의사 전달시 불가능한 시각 장애인과 청각 장애인간의 상호 대화를 가능하게 할 수 있게 된다.
상기한 목적을 달성하기 위한 수단으로서, 본 발명의 의사 전달을 위한 방법은 도 6에 도시된 바와 같이,
시각 장애인의 시각장애자용 키보드에서 키 입력 및 청각 장애인의 수화로 의사전달 메시지가 입력되는 단계(100)와,
브레일리 키의 입력여부를 판단하는 단계(110)와,
만약, 브레일리 키가 입력되면 키 입력을 단어로 변환하는 단계(111)와,
수화 모션 데이터 베이스(21)를 통해 키 입력된 단어를 검색하는 단계(112)와,
상기, 키 입력된 단어가 수화 모션 데이터 베이스(21)에 존재 여부를 판단하는 단계(113)와,
수화 모션 데이터 베이스(21)에 존재하게 되면 3 차원 그래픽을 이용하여 수화를 디스플레이 하고, 존재하지 않게 되면, 재시도 메시지를 브레일리 출력 장치로 출력하는 단계(114)와,
상기, 브레일리 키의 입력여부를 판단하는 단계에서 키가 입력되지 않으면 수화의 움직임 여부를 판단하는 단계(120)와,
수화의 움직임이 없으면 초기 단계로 돌아가고, 움직임이 있으면 수화 인식 데이터 베이스를 통해 수화의 모션을 검색하는 단계(121)와,
상기 수화의 모션이 수화 인식 데이터 베이스에 존재 여부를 판단하는 단계(122)와,
수화의 모션이 수화 인식 데이터 베이스(22)에 존재하게 되면 인식된 단어를 점자로 변화하고 브레일리 출력기로 출력하고, 존재하기 않게 되면, 재시도 메시지를 3 차원 그래픽을 이용하여 수화로 디스플레이 하는 단계(123)로 구성하여 상호 의사전달을 제어하므로 시각 장애인과 청각 장애인의 상호간에 의사를 전달할 수 있도록 하는 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법을 제공하는 장점이 있다.
이상에서 설명한 바와 같이 본 발명은 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템 및 방법에 관한 것으로, 더 상세하게는 시각 장애인의 대화 수단인 시각장애자용 키보드 및 브레일리(Braille)를 이용한 입·출력시스템과 청각 장애인의 대화 수단인 수화에 사용되는 팔에 부착시킨 위치 및 방향센서를 컴퓨터에 설치하여 의사 전달 시스템을 구성하므로 시각 장애인과 청각 장애인의 상호간에 의사를 전달할 수 있는 효과가 있다.

Claims (2)

  1. 시각 장애인의 의사전달 수단인 시각장애자용 입력 키보드(11)로 구성된 입력부(10)와,
    상기 입력부(10)의 키 입력 문자 코드를 단어로 변화시켜, 변환된 단어를 수화 모션 테이터 베이스(21)를 이용하여 청각 장애인에게 전달하고자 하는 수화 메시지를 검색하는 제어부(20)와,
    제어부(20)에서 검색된 메시지를 청각 장애인이 인식할 수 있도록 3차원 그래픽을 이용한 수화 애니메인션으로 출력되는 출력부(30)와,
    상기, 전달된 메시지를 청각 장애인이 인식하여 청각 장애인의 의사전달 수단인 손과 팔을 통해 메시지를 전달함에 있어 상기 손과 팔에 위치 및 방향센서센서(41)(42)와 관절센서를 부착한 수화자(40)와,
    수화자(40)를 통해 입력받은 팔의 위치 및 방향을 가지고 수화 인식 데이터 베이스(22)를 이용하여 시각 장애인에게 전달하고자 하는 메시지로 변환하는 제어부(20)와,
    제어부(20)에서 변환된 메시지를 시각 장애인이 인식할 수 있도록 브레일리로 출력하는 출력부(50)로 구성한 것을 특징으로 하는 시각 장애인과 청각 장애인의 의사 전달을 위한 시스템.
  2. 시각 장애인의 브레일리 키 입력 및 청각 장애인의 수화로 의사전달 메시지가 입력되는 단계(100)와,
    브레일리 키의 입력여부를 판단하는 단계(110)와,
    만약, 브레일리 키가 입력되면 키 입력을 단어로 변환하는 단계(111)와,
    수화 모션 데이터 베이스(21)를 통해 키 입력된 단어를 검색하는 단계(112)와,
    상기, 키 입력된 단어가 수화 모션 데이터 베이스(21)에 존재 여부를 판단하는 단계(113)와,
    수화 모션 데이터 베이스(21)에 존재하게 되면 3 차원 그래픽을 이용하여 수화를 디스플레이 하고, 존재하지 않게 되면, 재시도 메시지를 브레일리 출력 장치로 출력하는 단계(114)와,
    상기, 브레일리 키의 입력여부를 판단하는 단계에서 키가 입력되지 않으면 수화의 움직임 여부를 판단하는 단계(120)와,
    수화의 움직임이 없으면 초기 단계로 돌아가고, 움직임이 있으면 수화 인식 데이터 베이스를 통해 수화의 모션을 검색하는 단계(121)와,
    상기 수화의 모션이 수화 인식 데이터 베이스에 존재 여부를 판단하는 단계(122)와,
    수화의 모션이 수화 인식 데이터 베이스(22)에 존재하게 되면 인식된 단어를 점자로 변화하고 브레일리 출력기로 출력하고, 존재하기 않게 되면, 재시도 메시지를 3 차원 그래픽을 이용하여 수화로 디스플레이 하는 단계(123)로 구성된 것을 특징으로 하는 시각 장애인과 청각 장애인의 의사 전달을 위한 방법.
KR1019980014704A 1998-04-24 1998-04-24 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법 Expired - Fee Related KR100248391B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1019980014704A KR100248391B1 (ko) 1998-04-24 1998-04-24 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019980014704A KR100248391B1 (ko) 1998-04-24 1998-04-24 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR19990081035A true KR19990081035A (ko) 1999-11-15
KR100248391B1 KR100248391B1 (ko) 2000-03-15

Family

ID=19536666

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019980014704A Expired - Fee Related KR100248391B1 (ko) 1998-04-24 1998-04-24 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR100248391B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020011451A (ko) * 2002-01-19 2002-02-08 이종철 광센서 및 휨센서를 이용한 수화 번역기
WO2017065324A1 (ko) * 2015-10-13 2017-04-20 주식회사 네오펙트 수화교육 시스템, 방법 및 프로그램

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030006570A (ko) * 2001-07-13 2003-01-23 엘지전자 주식회사 수화전송장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020011451A (ko) * 2002-01-19 2002-02-08 이종철 광센서 및 휨센서를 이용한 수화 번역기
WO2017065324A1 (ko) * 2015-10-13 2017-04-20 주식회사 네오펙트 수화교육 시스템, 방법 및 프로그램

Also Published As

Publication number Publication date
KR100248391B1 (ko) 2000-03-15

Similar Documents

Publication Publication Date Title
US6083270A (en) Devices and methods for interfacing human users with electronic devices
US20030218638A1 (en) Mobile multimodal user interface combining 3D graphics, location-sensitive speech interaction and tracking technologies
WO2002015604A3 (en) Mobile data communication system
WO2004051451A3 (en) Graphic user interface having touch detectability
KR20190121102A (ko) 장애인을 위한 커뮤니케이션 시스템이 구비된 차량 및 장애인을 위한 커뮤니케이션 시스템 제어방법
Muralidharan et al. Modelling of sign language smart glove based on bit equivalent implementation using flex sensor
Monti et al. On improving GlovePi: Towards a many-to-many communication among deaf-blind users
KR100248391B1 (ko) 시각 장애인과 청각 장애인의 의사 전달을위한 시스템 및 방법
Kranthi et al. A two-way communication system with Morse code medium for people with multiple disabilities
Petrucci et al. WebSound: a generic Web sonification tool, and its application to an auditory Web browser for blind and visually impaired users
KR20090032635A (ko) 시각 장애인용 이동 통신 단말 및 이를 이용한 문자 메시지송신 방법
Nandyal et al. Raspberrypi based assistive communication system for deaf, dumb and blind person
KR101910448B1 (ko) 장애인용 입력 보조 장치
Nagpal et al. Helping hand device for speech impaired people
KR100235194B1 (ko) 수화 인식 시스템
Flachberger et al. Compose Autonomy!-An Adaptable User Interface for Assistive Technology Systems
KR20250119493A (ko) 감각 기반 입력·출력 인터페이스를 포함하는 실시간 통역 및 통신 시스템
Petrucci et al. WebSound: a generic Web sonification tool allowing HCI researchers to dynamically create new access modalities
Komala et al. Design of Multi Model Interface to Establish Communication Among Differently Abled People Using IOT
Ali ADAPTIVE INFORMATION SYSTEMS FOR PEOPLE WITH DISABILITIES: A HUMAN-CENTERED COMPUTING PERSPECTIVE
Sinthia et al. An Assistive Technology Solution for the Visually and Hearing Impaired Integrating Raspberry Pi, Ultrasonic Sensors, and Braille Feedback
JPH10225886A (ja) ロボットの操作装置
Tadahiro et al. A study of tactile impressions from vibration stimuli- Various status transmission method based on vibration for deaf/blind and visually impaired persons
Jena et al. Implementation of Hand Gesture System for Speech Impaired People
Sen et al. Design of a Multi-Functional Smart Glove That Translates Sign Language to Speech for Better Communication Access

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

R17-X000 Change to representative recorded

St.27 status event code: A-3-3-R10-R17-oth-X000

R17-X000 Change to representative recorded

St.27 status event code: A-3-3-R10-R17-oth-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 9

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 10

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 11

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 12

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 13

FPAY Annual fee payment

Payment date: 20121129

Year of fee payment: 14

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 14

FPAY Annual fee payment

Payment date: 20131128

Year of fee payment: 15

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 15

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R14-asn-PN2301

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

FPAY Annual fee payment

Payment date: 20141217

Year of fee payment: 16

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 16

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

FPAY Annual fee payment

Payment date: 20151209

Year of fee payment: 17

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 17

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20161218

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20161218

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000