[go: up one dir, main page]

KR20120075565A - Mobile sports guide system and method using augmented reality - Google Patents

Mobile sports guide system and method using augmented reality Download PDF

Info

Publication number
KR20120075565A
KR20120075565A KR1020100128086A KR20100128086A KR20120075565A KR 20120075565 A KR20120075565 A KR 20120075565A KR 1020100128086 A KR1020100128086 A KR 1020100128086A KR 20100128086 A KR20100128086 A KR 20100128086A KR 20120075565 A KR20120075565 A KR 20120075565A
Authority
KR
South Korea
Prior art keywords
athlete
information
player
augmented reality
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
KR1020100128086A
Other languages
Korean (ko)
Inventor
박찬호
Original Assignee
고스트리트(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고스트리트(주) filed Critical 고스트리트(주)
Priority to KR1020100128086A priority Critical patent/KR20120075565A/en
Publication of KR20120075565A publication Critical patent/KR20120075565A/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/026Services making use of location information using location based information parameters using orientation information, e.g. compass

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Primary Health Care (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 증강현실을 이용한 장치 및 방법에 관한 것으로, 제1 GPS 수신기, 송신부를 포함하는 운동선수용 송신기, 제2 GPS 수신기, 카메라, 디스플레이부, 거리감지부, 방향감지부 및 송수신부를 포함하는 사용자용 단말, 및 데이터 저장부, 연산부 및 송수신부를 포함하는 데이터 서버;를 포함하는 모바일 스포츠 가이드 시스템에서, 상기 운동선수용 송신기는 제1 GPS 수신기에 의해 감지된 제1 위치정보를 상기 데이터 서버로 전송하며, 상기 사용자용 단말은 상기 제2 GPS 수신기에 의해 감지된 제2 위치정보, 상기 거리감지부 및 방향감지부에 의해 측정된 상기 단말로부터 상기 운동선수까지의 거리정보 및 상대적 방향정보를 상기 데이터 서버로 전송하며, 상기 데이터 서버로부터 전송받은 상기 운동선수의 정보를 상기 카메라에 의해 촬영된 영상과 중첩하여 상기 디스플레이부에 현시하며, 상기 데이터 서버는 상기 사용자용 단말로부터 전송받은 제2 위치정보, 거리정보 및 방향정보를 바탕으로 제3 위치정보를 산출하고, 상기 제3 위치정보가 상기 제1 위치정보와 동일한 경우에만 상기 데이터 저장부에 저장된 선수정보를 상기 사용자용 단말로 전송하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템을 제공한다.
본 발명에 따르면, 운동선수 및 휴대용 단말의 위치정보를 기반으로 스포츠 현장의 각종 정보를 증강현실을 통하여 실시간으로 제공함으로써, 스포츠 경기를 더욱 현실감있게 관전할 수 있다.
The present invention relates to an apparatus and method using augmented reality, a user terminal comprising a first GPS receiver, an athlete transmitter including a transmitter, a second GPS receiver, a camera, a display, a distance detector, a direction detector, and a transceiver. And a data server including a data storage unit, a calculation unit, and a transceiver unit, wherein the athlete transmitter transmits first position information detected by a first GPS receiver to the data server. The user terminal transmits the second location information detected by the second GPS receiver, the distance information and the relative direction information from the terminal to the athlete measured by the distance detecting unit and the direction detecting unit to the data server, The information of the athlete received from the data server and the image taken by the camera To the display unit, the data server calculates third location information based on the second location information, the distance information, and the direction information received from the user terminal, and the third location information is the first location. Only when the information is the same, it provides a mobile sports guide system using augmented reality, characterized in that for transmitting the player information stored in the data storage to the user terminal.
According to the present invention, by providing a variety of information on the sports scene in real time through augmented reality based on the position information of the athlete and the portable terminal, it is possible to watch the sports game more realistically.

Description

증강현실을 이용한 모바일 스포츠 가이드 시스템 및 방법{Mobile Sports Guide System And Method Using Augmented Reality}Mobile Sports Guide System And Method Using Augmented Reality

본 발명은 증강현실을 이용한 장치 및 방법에 관한 것으로, 특히 운동선수 및 휴대용 단말의 위치정보를 기반으로 스포츠 현장의 각종 정보를 증강현실을 통하여 실시간으로 제공할 수 있는 모바일 스포츠 가이드 시스템 및 이를 이용한 방법에 관한 것이다.
The present invention relates to an apparatus and method using augmented reality, in particular, a mobile sports guide system and method using the same that can provide a variety of information on the sports scene in real time through augmented reality based on the position information of the athlete and the portable terminal. It is about.

일반적인 증강현실 장치는 미리 고안된 형태의 마커를 특정 물체의 표면에 부착하고 카메라로부터 영상을 캡처하여 부착된 마커를 인식하는 절차를 거처 이루어진다. A general augmented reality device is based on a procedure of attaching a marker of a predesigned form to the surface of a specific object and capturing an image from a camera to recognize the attached marker.

또한 일반적인 위치기반으로 증강현실을 구현하는 경우에는 장치에 제공된 GPS 수신기 등을 이용하여 고정된 위치의 사물 또는 장소 등을 표시한다.In addition, when augmented reality is implemented based on a general location, an object or a place of a fixed location is displayed using a GPS receiver provided in the device.

스포츠 경기의 관전시에 카메라가 구비된 휴대용 단말기(예컨대, 휴대전화, MP3 및 동영상 플레이어, PDA, 또는 태블릿 PC 등)를 이용하여 증강현실을 구현할 수 있다면, 예컨대 카메라를 통해 단말기의 디스플레이에 운동선수가 현시됨과 동시에 운동선수의 각종 정보를 제공함으로써 스포츠 경기를 더욱 생동감있게 관전할 수 있을 것이다.If augmented reality can be implemented using a portable terminal equipped with a camera (eg, a mobile phone, an MP3 player, a video player, a PDA, or a tablet PC, etc.) at the time of watching a sporting event, for example, an athlete can use the camera to display the terminal. At the same time, by providing a variety of information of athletes will be able to watch the sport more lively.

그러나, 운동선수와 같이 끊임없이 연속적으로 이동하게 되는 대상의 경우에는 종래의 GPS 수신기 등을 이용한 위치기반 증강현실을 곧바로 적용하기 어려운 문제가 있다. 또한 축구장이나 야구장과 같은 대형 시설물 내에서 관전하게 되는 스포츠 경기의 경우에는 운동선수에게 마커를 부착하더라도 이를 인식하는 것이 현실적으로 어렵기 때문에, 마커를 이용한 일반적인 증강현실을 적용하는 것에도 어려움이 있다.
However, in the case of a target continuously moving like an athlete, there is a problem that it is difficult to apply location-based augmented reality using a conventional GPS receiver immediately. In addition, in the case of a sports game that is watched in a large facility such as a soccer field or a baseball field, it is difficult to apply a general augmented reality using a marker because it is difficult to recognize this even if a marker is attached to an athlete.

본 발명은 전술한 문제점을 해결하기 위하여 안출된 것으로, 특히 운동선수 및 휴대용 단말의 위치정보를 기반으로 스포츠 현장의 각종 정보를 증강현실을 통하여 실시간으로 제공할 수 있는 모바일 스포츠 가이드 시스템 및 이를 이용한 방법을 제공하는 것을 목적으로 한다.The present invention has been made to solve the above problems, in particular, a mobile sports guide system that can provide a variety of information on the sports scene in real time through augmented reality based on the location information of athletes and portable terminals and methods using the same The purpose is to provide.

이를 위하여, 본 발명은 운동선수의 위치측정을 위한 제1 GPS 수신기, 무선통신을 위한 송신부를 포함하는 운동선수용 송신기, 사용자의 위치측정을 위한 제2 GPS 수신기, 상기 운동선수가 포함된 영상을 촬영하기 위한 카메라, 상기 영상이 표시되는 디스플레이부, 상기 운동선수까지의 거리를 측정하기 위한 거리감지부, 상기 운동선수가 위치한 방향을 측정하기 위하여 방향감지부 및 무선통신을 위한 송수신부를 포함하는 사용자용 단말, 및 상기 운동선수 및 운동 경기에 대한 정보가 저장되는 데이터 저장부, 상기 제2 GPS 수신기, 거리감지부 및 방향감지부로부터 측정된 정보를 바탕으로 제3 위치정보를 연산하는 연산부 및 무선통신을 위한 송수신부를 포함하는 데이터 서버;를 포함하는 모바일 스포츠 가이드 시스템에서, 상기 운동선수용 송신기는 제1 GPS 수신기에 의해 감지된 제1 위치정보를 상기 데이터 서버로 전송하며, 상기 사용자용 단말은 상기 제2 GPS 수신기에 의해 감지된 제2 위치정보, 상기 거리감지부 및 방향감지부에 의해 측정된 상기 단말로부터 상기 운동선수까지의 거리정보 및 상대적 방향정보를 상기 데이터 서버로 전송하며, 상기 데이터 서버로부터 전송받은 상기 운동선수의 정보를 상기 카메라에 의해 촬영된 영상과 중첩하여 상기 디스플레이부에 현시하며, 상기 데이터 서버는 상기 사용자용 단말로부터 전송받은 제2 위치정보, 거리정보 및 방향정보를 바탕으로 상기 제3 위치정보를 산출하고, 상기 제3 위치정보가 상기 제1 위치정보와 동일한 경우에만 상기 데이터 저장부에 저장된 선수정보를 상기 사용자용 단말로 전송하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템을 제공한다.To this end, the present invention is a first GPS receiver for measuring the position of the athlete, an athlete transmitter including a transmitter for wireless communication, a second GPS receiver for measuring the position of the user, the image containing the athlete A user terminal including a camera, a display unit on which the image is displayed, a distance detector for measuring a distance to the athlete, a direction detector for measuring a direction in which the athlete is located, and a transceiver for wireless communication; And a data storage unit for storing information about the athlete and the athletic event, an operation unit for calculating third position information based on information measured from the second GPS receiver, a distance sensor, and a direction sensor, and a transceiver for wireless communication. In the mobile sports guide system, the athlete transmitter comprising a; The first position information sensed by the first GPS receiver is transmitted to the data server, and the user terminal is measured by the second position information sensed by the second GPS receiver, the distance sensing unit, and the direction detecting unit. The distance information and the relative direction information from the terminal to the athlete is transmitted to the data server, and the information of the athlete received from the data server is displayed on the display by overlapping with the image taken by the camera, The data server calculates the third location information based on the second location information, the distance information, and the direction information received from the user terminal, and the data only when the third location information is the same as the first location information. Mobile using augmented reality, characterized in that for transmitting the player information stored in the storage to the user terminal Provide a sports guide system.

또한 본 발명은 휴대용 단말을 이용하여 운동선수가 포함된 영상을 실시간으로 촬영하여 화면상에 출력된 상기 운동선수를 인식하고, 상기 단말로부터 운동선수까지의 거리 및 상대적 방향정보를 산출하는 단계; 상기 단말의 제1 위치정보, 상기 운동선수까지의 거리 및 상대적 방향정보를 서버로 전송하는 단계; 상기 운동선수의 위치정보를 실시간으로 상기 서버로 전송하는 단계; 상기 단말의 제1 위치정보, 상기 운동선수와의 거리 및 상대적 방향정보를 바탕으로 산출된 상기 운동선수의 위치가 상기 운동선수의 위치정보와 동일한지 판단하는 단계; 동일한 것으로 판단되는 경우, 상기 운동선수의 정보가 상기 단말로 전송되는 단계; 및 상기 운동선수의 정보를 상기 단말에서 촬영되는 실시간 영상과 상기 화면상에 출력된 운동선수의 좌표에 중첩하여 현시하는 단계;를 포함하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 방법을 제공한다.
In another aspect, the present invention comprises the steps of recognizing the athlete output on the screen by recording the image containing the athlete in real time using a portable terminal, and calculating the distance and relative direction information from the terminal to the athlete; Transmitting first location information of the terminal, distance to the athlete, and relative direction information to a server; Transmitting location information of the athlete to the server in real time; Determining whether the position of the athlete calculated based on the first position information of the terminal, the distance from the athlete, and the relative direction information is the same as the position information of the athlete; If it is determined to be the same, transmitting the information of the athlete to the terminal; And superimposing the information of the athlete on the real-time image photographed by the terminal and superimposing the coordinates of the athlete output on the screen to present the mobile sports guide method using augmented reality. .

전술한 바와 같이, 본 발명에 따르면 운동선수 및 휴대용 단말의 위치정보를 기반으로 스포츠 현장의 각종 정보를 증강현실을 통하여 실시간으로 제공함으로써 스포츠 경기를 더욱 생생하게 관전할 수 있다.
As described above, according to the present invention, it is possible to observe a sporting event more vividly by providing various information of a sports scene in real time through augmented reality based on the position information of the athlete and the portable terminal.

도 1은 본 발명에 따른 모바일 스포츠 가이드 시스템을 나타내는 개략적인 구성도,
도 2는 사용자용 단말을 이용하여 운동선수의 위치를 특정하는 방법을 설명하는 도면,
도 3은 본 발명에 따라 구현된 증강현실이 반영된 화상이 표시된 단말기를 나타낸다.
1 is a schematic configuration diagram showing a mobile sports guide system according to the present invention,
2 is a view for explaining a method of specifying the position of an athlete using a user terminal;
3 illustrates a terminal displaying an image reflecting augmented reality implemented according to the present invention.

이하 본 발명의 실시예를 첨부도면을 참조하여 상세하게 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 모바일 스포츠 가이드 시스템을 나타내는 개략적인 구성도이다.1 is a schematic diagram showing a mobile sports guide system according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 모바일 스포츠 가이드 시스템은 운동선수용 송신기(100), 데이터 서버(200) 및 사용자용 단말(300)을 포함한다.Referring to FIG. 1, the mobile sports guide system of the present invention includes an athlete transmitter 100, a data server 200, and a user terminal 300.

운동선수용 송신기(100)는 제1 GPS 수신기(110)를 포함한다. 제1 GPS 수신기(110)에 의해 측정된 운동선수의 제1 위치정보는 무선으로 데이터 서버(200)에 전송된다. 운동선수용 송신기(100)는 원칙적으로 사이즈에 제약이 없으나, 운동선수의 이동을 방해하지 않기 위하여 운동선수의 신발, 모자 또는 헬멧, 유니폼 등에 내장되거나 부착될 수 있도록 소형으로 제작되는 것이 바람직하다.The athlete transmitter 100 includes a first GPS receiver 110. The first location information of the athlete measured by the first GPS receiver 110 is wirelessly transmitted to the data server 200. The athlete transmitter 100 is in principle not limited in size, but in order not to interfere with the movement of the athlete, it is preferable that the transmitter 100 be made compact so that it can be embedded or attached to a shoe, a hat or a helmet, or a uniform.

또한, 상기 운동선수용 송신기(100)에는 지자기 센서, 가속도 센서 또는 자이로 센서 중 하나 이상이 포함된 센싱부(120)가 구비되어 사용자용 단말(300)에 상기 운동선수의 움직임 정보를 전달할 수도 있다.In addition, the athlete transmitter 100 may include a sensing unit 120 including one or more of a geomagnetic sensor, an acceleration sensor, or a gyro sensor to transmit the movement information of the athlete to the user terminal 300.

본 발명의 모바일 스포츠 가이드 시스템에서 운동선수용 송신기(100)는 하나 이상이 될 수 있다. 즉, 단체경기, 예컨대 축구, 야구 등의 경우에는 각 팀별로 각각 9명 11명의 선수가 운동선수용 송신기(100)를 개별적으로 소지할 수 있다.In the mobile sports guide system of the present invention, the athlete transmitter 100 may be more than one. That is, in the case of a group game, for example, soccer, baseball, etc., nine or eleven players each may individually carry the athlete transmitter 100.

또한, 운동선수용 송신기(100)는 소형 카메라를 더 포함할 수 있다. 상기 카메라는 운동선수와 동일한 시선의 영상을 사용자에게 생생하게 전달하기 위한 것이다. 따라서, 상기 소형 카메라는 운동선수의 모자 또는 헬멧에 고정되어 운동선수의 시선과 동일한 방향을 바라보도록 하는 것이 바람직하다. 또한, 상기 소형 카메라는 운동선수용 송신기(100)와 일체로 또는 분리형으로 형성되어도 무방하다. In addition, the athlete transmitter 100 may further include a small camera. The camera is for vividly transmitting the image of the same gaze as the athlete to the user. Therefore, the small camera is preferably fixed to the athlete's hat or helmet to look in the same direction as the athlete's gaze. In addition, the compact camera may be formed integrally with or separate from the athlete transmitter 100.

운동선수를 식별하기 위하여, 운동선수용 송신기(100)는 운동선수 고유의 식별코드를 상기 제1 위치정보와 함께 전송한다. 식별코드는 실별정보 저장부(140)에 저장되며, 식별정보 저장부(140)는 플래시메모리 등의 저장수단이 될 수 있다.In order to identify an athlete, the athlete transmitter 100 transmits an athlete's unique identification code together with the first location information. The identification code is stored in the actual information storage unit 140, the identification information storage unit 140 may be a storage means such as a flash memory.

사용자용 단말(300)은 제2 GPS 수신기(310), 카메라 모듈(320), 디스플레이부(330), 거리감지부(340), 방향감지부(350), 송수신부(360) 및 제어부(370)를 포함한다.The user terminal 300 includes a second GPS receiver 310, a camera module 320, a display unit 330, a distance detector 340, a direction detector 350, a transceiver 360, and a controller 370. Include.

사용자용 단말(300)은 카메라 모듈(320)을 이용하여 운동선수가 포함된 영상을 촬영하여 디스플레이부(330)에 현시한다. 디스플레이부(330)는 LCD 또는 LED 등의 화면부로 이루어지며, 이에 터치 센서가 구비된 터치스크린인 것이 바람직하다. The user terminal 300 captures an image including an athlete using the camera module 320 and displays it on the display unit 330. The display unit 330 is composed of a screen unit such as an LCD or an LED, and is preferably a touch screen equipped with a touch sensor.

상기 영상은 정지영상 또는 동영상 중 어느 것이든 무방하다. 또한 사용자용 단말(300)은 디스플레이부(330)에 표시된 영상에서 운동선수를 인식한다. 즉, 디스플레이부(330)에서 상기 운동선수가 표시된 좌표를 인식하는 것이다. 운동선수를 인식하는 메커니즘은 움직임 인식 또는 사람의 형상 인식 등 공지된 임의의 방법을 이용할 수 있으므로, 자세한 설명은 생략한다.The image may be either a still image or a moving image. In addition, the user terminal 300 recognizes an athlete in the image displayed on the display unit 330. That is, the display unit 330 recognizes the coordinates displayed by the athlete. Since the mechanism for recognizing the athlete can use any known method such as movement recognition or human shape recognition, detailed description thereof will be omitted.

위치정보 기반의 증강현실을 구현하기 위하여, 사용자용 단말(300)은 제2 GPS 수신기(310), 거리감지부(340) 및 방향감지부(350)에 의해 각각 측정된 제2 위치정보, 단말로부터 운동선수까지의 거리, 및 단말의 자세정보를 데이터 서버(200)로 전송한다. 단말의 자세정보를 측정하는 방향감지부(350)는 지자기 센서, 가속도 센서, 또는 자이로 센서 중 하나 이상으로 구성되는 것이 바람직하다.In order to implement the augmented reality based on the location information, the user terminal 300 includes the second position information measured by the second GPS receiver 310, the distance detector 340, and the direction detector 350, respectively, from the terminal. The distance to the athlete and the attitude information of the terminal are transmitted to the data server 200. The direction detecting unit 350 measuring posture information of the terminal is preferably configured of at least one of a geomagnetic sensor, an acceleration sensor, and a gyro sensor.

본 발명은 디스플레이부(330)에 현시된 운동선수의 정보를 나타내기 위하여 위치정보 매칭방법을 사용한다. 이러한 방법은 디스플레이부(330)에 2인 이상의 운동선수가 현시된 경우에 각 선수를 구분할 수 있기 때문에 매우 효과적이다.The present invention uses the location information matching method to display the information of the athlete displayed on the display unit 330. This method is very effective because each player can be distinguished when two or more athletes are displayed on the display unit 330.

구체적으로, 사용자용 단말(300)의 거리감지부(340) 및 방향감지부(350)를 이용하여 사용자용 단말(300)로부터 운동선수(피사체)까지의 거리 및 상대적 방향정보를 측정한다.Specifically, the distance and relative direction information from the user terminal 300 to the athlete (subject) is measured using the distance detecting unit 340 and the direction detecting unit 350 of the user terminal 300.

제2 GPS 수신기(310)를 이용하여 사용자용 단말(300)의 제2 위치정보를 알고 있기 때문에, 제2 위치정보를 기준으로 운동선수까지의 거리정보 및 방향정보를 부가하면 운동선수의 위치를 연산하는 것이 가능하다. 이때 필요한 방향정보는 수평성분과 수직성분을 포함한다. 이러한 연산은 사용자용 단말(300)에서 직접 수행될 수도 있으며, 필요에 따라 데이터 서버(200)에서 수행될 수도 있다. 후자의 경우, 사용자의 단말(300)은 연산을 위하여 필요한 정보, 즉 제2 위치정보, 운동선수까지의 거리정보 및 방향정보를 데이터 서버(200)로 전송하여야 함은 자명한 것이다.Since the second position information of the user terminal 300 is known by using the second GPS receiver 310, when the distance information and the direction information to the athlete are added based on the second position information, the position of the athlete is determined. It is possible to compute. At this time, the necessary direction information includes a horizontal component and a vertical component. Such an operation may be directly performed by the user terminal 300 or may be performed by the data server 200 as necessary. In the latter case, it is obvious that the terminal 300 of the user should transmit information necessary for calculation, that is, second position information, distance information to the athlete, and direction information to the data server 200.

거리감지부(340)는 초음파 또는 레이저를 이용한 거리측정장치가 될 수도 있으며, 이것으로 제한되는 것은 아니다. 방향감지부(350)는 디지털 나침반 등을 이용하여 수평성분을 측정하고, 자이로 센서 등을 이용하여 수평성분 및 수직성분을 측정할 수 있다.The distance detecting unit 340 may be a distance measuring device using an ultrasonic wave or a laser, but is not limited thereto. The direction detecting unit 350 may measure a horizontal component using a digital compass, and may measure a horizontal component and a vertical component using a gyro sensor.

따라서, 운동선수의 실제 위치인 제1 위치정보와 위와 같은 방법으로 연산된 운동선수의 위치를 비교하면, 운동선수가 다수인 경우에도 특정 선수를 식별하는 것이 가능하다. 이때 각종 측정수단의 오차범위를 고려하여 일정범위의 마진을 설정하는 것이 바람직하다. 예컨대 야구경기의 경우에는 상기 제1 위치정보와 전술할 방식으로 산출된 운동선수의 위치의 차이가 반경 5m 내인 경우에 동일 위치로 판정할 수 있다.Therefore, by comparing the first position information, which is the actual position of the athlete, with the position of the athlete calculated in the above manner, it is possible to identify a specific athlete even when there are a large number of athletes. At this time, it is preferable to set a margin of a predetermined range in consideration of the error range of various measuring means. For example, in the case of a baseball game, when the difference between the position of the first athlete and the position of the athlete calculated in the above-described manner is within a radius of 5 m, the same position may be determined.

도 1을 참조하면, 데이터 서버(200)는 데이터 저장부(210, 연산부(220) 및 송수신부(230를 포함한다.Referring to FIG. 1, the data server 200 includes a data storage unit 210, a calculator 220, and a transceiver 230.

데이터 저장부(210)에는 운동선수의 각종 선수정보가 저장된다. 선수정보는 예컨대 선수의 이름, 사진, 소속팀, 등 번호, 생년월일, 신장, 몸무게, 출신학교 중 하나 이상을 포함하는 것이 바람직하다. 또한 운동 종목에 따라 별도의 특정 정보가 포함될 수 있다. 예컨대, 야구경기의 경우에는 시즌타율, 안타, 홈런, 득점, 도루, 장타율 등의 정보를 더 포함할 수 있다. 후술하는 바와 같이, 이러한 선수정보는 사용자용 단말(300)의 디스플레이부(330)에 운동선수의 모습과 함께 증강현실로 충접되어 제공된다(도 3 참조).The data storage unit 210 stores various athlete information of the athlete. The player information may preferably include one or more of a player's name, photograph, team member, uniform number, date of birth, height, weight, and school of origin. In addition, specific specific information may be included depending on the sport. For example, a baseball game may further include information such as a season batting rate, hit, home run, score, steal, and long hitting rate. As will be described later, such athlete information is provided to the display unit 330 of the user terminal 300 in contact with the augmented reality with the appearance of the athlete (see Fig. 3).

데이터 저장부(210)에 저장된 선수정보에는 운동선수 고유의 식별코드가 더 포함되어, 상기 운동선수용 송신기로부터 송신된 식별코드를 바탕으로 해당 운동선수의 선수정보를 분류할 수 있다.The athlete information stored in the data storage unit 210 may further include an athlete's unique identification code, and may classify the athlete's athlete information based on the identification code transmitted from the athlete transmitter.

데이터 저장부(210)의 선수정보에는 전술한 정보 이외에도 실시간으로 생성되는 운동 경기의 정보가 포함될 수도 있다. 예컨대 야구경기의 경우에는 게임도중 타자가 타석에 들어설 때마다 성적(타율, 안타, 홈런 등)이 변하기 때문에 실시간으로 해당 정보를 업데이트할 필요가 있기 때문이다.In addition to the above-described information, the player information of the data storage unit 210 may include information of an athletic event generated in real time. For example, in the case of a baseball game, because the score (batting rate, hits, home run, etc.) changes every time the batter enters the batting during the game, it is necessary to update the information in real time.

이를 위하여 본 발명은 상기 데이터 저장부를 종래의 전광판(400)과 연동하는 방식을 제안한다. 즉, 야구, 농구, 축구 경기가 벌어지는 운동장에는 일반적으로 전광판(400)이 설치되어 있으며, 전광판(400)에는 선수들의 각종 정보가 현시되어 있다. 따라서, 본 발명에 따른 데이터 저장부(210)에는 별도의 입력절차 없이 전광판(400)에 입력되는 정보를 연동하여 사용하는 것이 바람직하다.To this end, the present invention proposes a method of interlocking the data storage unit with the conventional electronic display panel 400. In other words, a baseball board, a basketball, and a soccer game field are generally provided with a scoreboard 400, and various scores of players are displayed on the scoreboard 400. Therefore, the data storage unit 210 according to the present invention is preferably used in conjunction with the information input to the electronic sign 400 without a separate input procedure.

다음, 사용자 단말(300)에서 상기 운동선수의 모습 및 정보가 증강현실로 구현되는 과정을 설명한다.Next, the process of the appearance and information of the athlete in the user terminal 300 is implemented in augmented reality.

전술한 바와 같이, 본 발명에 따르면, 사용자 단말(300)은 카메라 모듈(320)을 이용하여 1인 이상의 운동선수가 포함된 영상을 촬영하고, 촬영된 영상을 디스플레이부(330)에 표시한다. 디스플레이부(330)에 표시된 영상에는 운동선수의 모습과 함께 운동선수의 정보가 중첩되어 현시된다.As described above, according to the present invention, the user terminal 300 captures an image including one or more athletes using the camera module 320 and displays the captured image on the display unit 330. The image displayed on the display unit 330 overlaps the information of the athlete and the information of the athlete.

이하, 증강현실이 구현되는 실시예를 야구 경기를 통해 설명한다. 이것을 예시적인 것일 뿐 본 방명이 야구경기로만 제한되는 것은 아니다.Hereinafter, an embodiment in which augmented reality is implemented will be described through a baseball game. This is merely illustrative, and the present invention is not limited to baseball games.

도 3은 본 발명에 따른 모바일 스포츠 가이드가 적용된 사용자용 단말을 나타내는 예시도이다.3 is an exemplary view showing a user terminal to which the mobile sports guide according to the present invention is applied.

도 3을 참조하면, 사용자용 단말(300)의 디스플레이부(330)에는 다수의 야구선수가 경기를 펼치고 있는 야구장의 모습이 현시되어 있으며, 특정 선수(331, 332)의 위치에는 선수정보(333, 334)가 중첩되어 표시되고 있다. 도 3에는 특정 선수로서 투수(332) 및 타자(331) 만을 표시하였으나, 이는 본 발명을 설명을 위하여 제공된 것이며 본 발명이 이것으로 제한되는 것은 아니다. 또한, 디스플레이부(330)의 하단에는 현재 게임 정보가 실시간으로 표시되고 있으며, 이는 전광판에 표시되는 정보와 연동된 것임은 전술한 바와 같다.Referring to FIG. 3, the display unit 330 of the user terminal 300 shows a state of a baseball field in which a plurality of baseball players play a game, and player information 333 is located at the positions of specific players 331 and 332. , 334 are superimposed. Although only the pitcher 332 and the batter 331 are shown in FIG. 3 as a specific player, this is provided for illustrative purposes and the present invention is not limited thereto. In addition, the current game information is displayed at the bottom of the display unit 330 in real time, which is linked to the information displayed on the electronic signboard as described above.

또한, 디스플레이부(330)에 표시된 선수정보(333, 334)를 클릭하면, 해당 선수의 정보를 상세하게 볼 수 있다. 예컨대, 선수의 사진, 이름, 생년월일, 소속팀, 시즌 성적, 오늘의 성적 등을 일목요연하게 정리하여 사용자가 볼 수 있도록 구성하는 것이 바람직하다.In addition, when the player information 333, 334 displayed on the display unit 330 is clicked, the information of the player can be viewed in detail. For example, it is preferable to organize the photo, name, date of birth, team, season score, today's score, and the like so that the user can see them.

또한, 본 발명의 설명을 위하여 야구경기를 예시하였으나, 본 발명은 이것으로 제한되지 않는다. 전술한 운동선수는 야구선수 이외에, 농구선수, 배구선수, 축구선수, 핸드볼선수, 탁구선수, 테니스선수, 배드민턴선수, 수영선수, 골프선수, 바둑선수, 체조선수, 양궁선수, 사격선수, 승마선수, 피켜스케이트선수, 스피드스케이트선수, 스키선수, 육상선수, 승마선수, 당구선수, F1선수, 태권도선수, 유도선수, 레슬링선수, 복싱선수, 우슈선수, 씨름선수, 하키선수, 아이스하키선수, 미식축구선수, 폴로선수, 및 사이클선수를 포함하는 것으로 해석되어야 한다.In addition, the baseball game is illustrated for explanation of the present invention, but the present invention is not limited thereto. The athletes mentioned above are not only baseball players, but also basketball players, volleyball players, soccer players, handball players, table tennis players, tennis players, badminton players, swimmers, golf players, go players, gymnasts, archers, shooters, and equestrian players. , Figure skater, speed skater, skier, athlete, equestrian player, billiard player, F1 player, taekwondo player, judo player, wrestler, boxer, wushu player, wrestling player, hockey player, ice hockey player, gourmet It should be interpreted to include football players, polo players, and cyclists.

본 발명에 따르면, 위치기반의 증강현실로 모바일 스포츠 가이드 시스템을 구현함으로써 카메라의 시선 변경에 따라서 새롭게 디스플레이에 들어오는 선수들의 정보를 실시간으로 중첩하여 표시하는 것이 가능하다.According to the present invention, by implementing a mobile sports guide system with a location-based augmented reality it is possible to superimpose and display the information of the players newly entering the display in real time according to the change of the gaze of the camera.

따라서, 본 발명에 따르면, 휴대용 단말을 소지한 사용자가 야구장, 축구장 등 대형 경기장의 스탠드에서도 선수들의 정보를 정확하게 제공받음으로써, 스포츠 경기를 더욱 현장감 있게 관전할 수 있다.Therefore, according to the present invention, a user having a portable terminal can accurately watch the sports game by realistically receiving the information of the players even in the stands of a large stadium such as a baseball field or a soccer field.

100: 운동선수용 송신기
110: 제1 GPS 수신기
120: 센싱부
130: 송신부
140: 식별정보 저장부
200: 터이터 서버
210: 데이터 저장부
220: 연산부
230: 송수신부
300: 사용자용 단말
310: 제2 GPS 수신기
320: 카메라 모듈
330: 디스플레이부
331, 332: 운동선수
333, 334: 운동선수의 정보
340: 거리감지부
350: 자세감지부
360: 송수신부
370: 제어부
400: 전광판
100: athlete transmitter
110: first GPS receiver
120: sensing unit
130: transmitter
140: identification information storage unit
200: terminator server
210: data storage
220: calculator
230: transceiver
300: user terminal
310: second GPS receiver
320: camera module
330: display unit
331, 332: athlete
333, 334: athlete information
340: distance detection unit
350: posture detection unit
360: transceiver
370: control unit
400: electronic board

Claims (9)

운동선수의 위치측정을 위한 제1 GPS 수신기, 무선통신을 위한 송신부를 포함하는 운동선수용 송신기, 사용자의 위치측정을 위한 제2 GPS 수신기, 상기 운동선수가 포함된 영상을 촬영하기 위한 카메라, 상기 영상이 표시되는 디스플레이부, 상기 운동선수까지의 거리를 측정하기 위한 거리감지부, 상기 운동선수가 위치한 방향을 측정하기 위하여 방향감지부 및 무선통신을 위한 송수신부를 포함하는 사용자용 단말, 및 상기 운동선수 및 운동 경기에 대한 정보가 저장되는 데이터 저장부, 상기 제2 GPS 수신기, 거리감지부 및 방향감지부로부터 측정된 정보를 바탕으로 제3 위치정보를 연산하는 연산부 및 무선통신을 위한 송수신부를 포함하는 데이터 서버;를 포함하는 모바일 스포츠 가이드 시스템에서,
상기 운동선수용 송신기는 제1 GPS 수신기에 의해 감지된 제1 위치정보를 상기 데이터 서버로 전송하며,
상기 사용자용 단말은 상기 제2 GPS 수신기에 의해 감지된 제2 위치정보, 상기 거리감지부 및 방향감지부에 의해 측정된 상기 단말로부터 상기 운동선수까지의 거리정보 및 상대적 방향정보를 상기 데이터 서버로 전송하며, 상기 데이터 서버로부터 전송받은 상기 운동선수의 정보를 상기 카메라에 의해 촬영된 영상과 중첩하여 상기 디스플레이부에 현시하며,
상기 데이터 서버는 상기 사용자용 단말로부터 전송받은 제2 위치정보, 거리정보 및 방향정보를 바탕으로 상기 제3 위치정보를 산출하고, 상기 제3 위치정보가 상기 제1 위치정보와 동일한 경우에만 상기 데이터 저장부에 저장된 선수정보를 상기 사용자용 단말로 전송하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
A first GPS receiver for measuring an athlete's position, an athlete's transmitter including a transmitter for wireless communication, a second GPS receiver for measuring a user's position, a camera for capturing an image including the athlete, the image The display unit, a distance detecting unit for measuring the distance to the athlete, a user terminal including a direction detecting unit and a wireless communication unit for measuring the direction in which the athlete is located, and the athlete and the exercise A data server including a data storage unit for storing information about a game, an operation unit calculating third position information based on information measured from the second GPS receiver, a distance sensor, and a direction sensor, and a transceiver for wireless communication; In the included mobile sports guide system,
The athlete transmitter transmits the first location information detected by the first GPS receiver to the data server,
The user terminal transmits the second position information detected by the second GPS receiver, the distance information and the relative direction information from the terminal to the athlete measured by the distance sensing unit and the direction detecting unit to the data server. The information of the athlete received from the data server is displayed on the display unit by overlapping with the image taken by the camera,
The data server calculates the third location information based on the second location information, the distance information, and the direction information received from the user terminal, and the data only when the third location information is the same as the first location information. Mobile sports guide system using augmented reality, characterized in that for transmitting the player information stored in the storage to the user terminal.
제1항에 있어서,
상기 모바일 스포츠 가이드 시스템은 운동장에 설치된 전광판을 더 포함하며,
상기 데이터 서버는 상기 전광판과 유무선으로 연결되어 상기 운동선수의 정보 중 적어도 일부를 상기 전광판에 표시하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 1,
The mobile sports guide system further includes an electronic board installed in the playground,
The data server is connected to the electronic board and wired or wireless, the mobile sports guide system using augmented reality, characterized in that to display at least a part of the information of the athlete on the electronic sign.
제1항에 있어서,
상기 운동선수는 2인 이상인 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 1,
The athlete is a mobile sports guide system using augmented reality, characterized in that two or more.
제1항에 있어서,
상기 운동선수의 정보는 이름, 사진, 소속팀, 등 번호, 생년월일, 신장, 몸무게, 출신학교 중 하나 이상을 포함하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 1,
The information of the athlete, name, photo, team, etc. number, date of birth, height, weight, mobile sports guide system using augmented reality, characterized in that it comprises one or more of the school.
제1항에 있어서,
상기 운동선수는 야구선수, 농구선수, 배구선수, 축구선수, 핸드볼선수, 탁구선수, 테니스선수, 배드민턴선수, 수영선수, 골프선수, 바둑선수, 체조선수, 양궁선수, 사격선수, 승마선수, 피켜스케이트선수, 스피드스케이트선수, 스키선수, 육상선수, 승마선수, 당구선수, F1선수, 태권도선수, 유도선수, 레슬링선수, 복싱선수, 우슈선수, 씨름선수, 하키선수, 아이스하키선수, 미식축구선수, 폴로선수, 사이클선수 중 하나인 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 1,
The athlete is a baseball player, basketball player, volleyball player, football player, handball player, table tennis player, tennis player, badminton player, swimmer, golf player, go player, gymnast, archery player, shooter, equestrian player, figure Skate player, speed skater, ski player, athlete, equestrian player, billiard player, F1 player, taekwondo player, judo player, wrestler, boxer, wushu player, wrestling player, hockey player, ice hockey player, american football player , Polo player, mobile sports guide system using augmented reality, characterized in that one of the cyclists.
제1항에 있어서,
상기 운동선수 송신기에는 지자기 센서, 가속도 센서 또는 자이로 센서 중 하나 이상이 포함되어 상기 사용자용 단말에 상기 운동선수의 움직임 정보가 전달되는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 1,
The athlete transmitter includes at least one of a geomagnetic sensor, an acceleration sensor or a gyro sensor, the mobile sports guide system using augmented reality, characterized in that the movement information of the athlete is transmitted to the user terminal.
휴대용 단말을 이용하여 운동선수가 포함된 영상을 실시간으로 촬영하여 화면상에 출력된 상기 운동선수를 인식하고, 상기 단말로부터 운동선수까지의 거리 및 상대적 방향정보를 산출하는 단계;
상기 단말의 제1 위치정보, 상기 운동선수까지의 거리 및 상대적 방향정보를 서버로 전송하는 단계;
상기 운동선수의 위치정보를 실시간으로 상기 서버로 전송하는 단계;
상기 단말의 제1 위치정보, 상기 운동선수와의 거리 및 상대적 방향정보를 바탕으로 산출된 상기 운동선수의 위치가 상기 운동선수의 위치정보와 동일한지 판단하는 단계;
동일한 것으로 판단되는 경우, 상기 운동선수의 정보가 상기 단말로 전송되는 단계; 및
상기 운동선수의 정보를 상기 단말에서 촬영되는 실시간 영상과 상기 화면상에 출력된 운동선수의 좌표에 중첩하여 현시하는 단계;를 포함하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 방법.
Recognizing the athlete displayed on the screen by capturing an image including the athlete in real time using a portable terminal, and calculating distance and relative direction information from the terminal to the athlete;
Transmitting first location information of the terminal, distance to the athlete, and relative direction information to a server;
Transmitting location information of the athlete to the server in real time;
Determining whether the position of the athlete calculated based on the first position information of the terminal, the distance from the athlete, and the relative direction information is the same as the position information of the athlete;
If it is determined to be the same, transmitting the information of the athlete to the terminal; And
And superimposing the information of the athlete on the real-time image photographed by the terminal and superimposing the coordinates of the athlete output on the screen.
제7항에 있어서,
상기 운동선수는 2인 이상인 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 7, wherein
The athlete is a mobile sports guide system using augmented reality, characterized in that two or more.
제7항에 있어서,
상기 운동선수의 정보는 이름, 사진, 소속팀, 등 번호, 생년월일, 신장, 몸무게, 출신학교 중 하나 이상을 포함하는 것을 특징으로 하는 증강현실을 이용한 모바일 스포츠 가이드 시스템.
The method of claim 7, wherein
The information of the athlete, name, photo, team, etc. number, date of birth, height, weight, mobile sports guide system using augmented reality, characterized in that it comprises one or more of the school.
KR1020100128086A 2010-12-15 2010-12-15 Mobile sports guide system and method using augmented reality Withdrawn KR20120075565A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100128086A KR20120075565A (en) 2010-12-15 2010-12-15 Mobile sports guide system and method using augmented reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100128086A KR20120075565A (en) 2010-12-15 2010-12-15 Mobile sports guide system and method using augmented reality

Publications (1)

Publication Number Publication Date
KR20120075565A true KR20120075565A (en) 2012-07-09

Family

ID=46709423

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100128086A Withdrawn KR20120075565A (en) 2010-12-15 2010-12-15 Mobile sports guide system and method using augmented reality

Country Status (1)

Country Link
KR (1) KR20120075565A (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2811748A1 (en) * 2013-02-28 2014-12-10 Samsung Electronics Co., Ltd. Content delivery system with augmented reality mechanism and method of operation thereof
KR20170000963A (en) 2015-06-25 2017-01-04 주식회사 호텔신라 System for supplying and managing sports program based on location awareness of user
KR20170121720A (en) * 2016-04-25 2017-11-02 장부다 Method and device for providing content and recordimg medium thereof
KR20180056055A (en) 2016-11-18 2018-05-28 주식회사 탑시드 System for providing solution of justice on martial arts sports and analyzing bigdata using augmented reality, and Drive Method of the Same
CN109771957A (en) * 2019-02-02 2019-05-21 网易(杭州)网络有限公司 The method and device watched in game, electronic equipment, storage medium
KR102141713B1 (en) * 2019-12-12 2020-08-06 주식회사 모피어스시큐리티 Golf assistant apparatus capable of measuring putting distance and direction
WO2022075659A1 (en) * 2020-10-07 2022-04-14 삼성전자 주식회사 Method for displaying augmented reality and electronic device for performing same
CN114584679A (en) * 2020-11-30 2022-06-03 北京市商汤科技开发有限公司 Race condition data presentation method and device, computer equipment and readable storage medium
WO2024128667A1 (en) * 2022-12-14 2024-06-20 Cj Olivenetworks Co., Ltd. Artificial intelligence-based fighting video broadcasting apparatus and method
US12340469B2 (en) 2020-10-07 2025-06-24 Samsung Electronics Co., Ltd. Method of displaying augmented reality and electronic device for performing same

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9654818B2 (en) 2013-02-28 2017-05-16 Samsung Electronics Co., Ltd. Content delivery system with augmented reality mechanism and method of operation thereof
EP2811748A1 (en) * 2013-02-28 2014-12-10 Samsung Electronics Co., Ltd. Content delivery system with augmented reality mechanism and method of operation thereof
KR20170000963A (en) 2015-06-25 2017-01-04 주식회사 호텔신라 System for supplying and managing sports program based on location awareness of user
KR20170121720A (en) * 2016-04-25 2017-11-02 장부다 Method and device for providing content and recordimg medium thereof
KR20180056055A (en) 2016-11-18 2018-05-28 주식회사 탑시드 System for providing solution of justice on martial arts sports and analyzing bigdata using augmented reality, and Drive Method of the Same
CN109771957B (en) * 2019-02-02 2022-08-09 网易(杭州)网络有限公司 Method and device for fighting in game, electronic equipment and storage medium
CN109771957A (en) * 2019-02-02 2019-05-21 网易(杭州)网络有限公司 The method and device watched in game, electronic equipment, storage medium
KR102141713B1 (en) * 2019-12-12 2020-08-06 주식회사 모피어스시큐리티 Golf assistant apparatus capable of measuring putting distance and direction
WO2021118016A1 (en) * 2019-12-12 2021-06-17 주식회사 언더스트록 Golf assisting device and method which can measure putting distance and putting direction
WO2022075659A1 (en) * 2020-10-07 2022-04-14 삼성전자 주식회사 Method for displaying augmented reality and electronic device for performing same
US12340469B2 (en) 2020-10-07 2025-06-24 Samsung Electronics Co., Ltd. Method of displaying augmented reality and electronic device for performing same
CN114584679A (en) * 2020-11-30 2022-06-03 北京市商汤科技开发有限公司 Race condition data presentation method and device, computer equipment and readable storage medium
WO2024128667A1 (en) * 2022-12-14 2024-06-20 Cj Olivenetworks Co., Ltd. Artificial intelligence-based fighting video broadcasting apparatus and method
KR20240091610A (en) * 2022-12-14 2024-06-21 씨제이올리브네트웍스 주식회사 Artificial intelligence based-apparatus and method for relaying fighting video

Similar Documents

Publication Publication Date Title
US10715759B2 (en) Athletic activity heads up display systems and methods
KR20120075565A (en) Mobile sports guide system and method using augmented reality
US20240293718A1 (en) Sport ball motion monitoring methods and systems
US10607349B2 (en) Multi-sensor event system
US11541294B2 (en) Golf aid including heads up display for green reading
US11400356B2 (en) Electronic tracking system with heads up display
JP6244487B2 (en) Method and system for monitoring sports ball movement
JP6504746B2 (en) How to determine performance information on personal and sports objects
JP6285106B2 (en) Method and system for monitoring exercise
US10121065B2 (en) Athletic attribute determinations from image data
US10025987B2 (en) Classification of activity derived from multiple locations
US20160166912A1 (en) Tennis training device using virtual targets
KR20200062399A (en) Golf information providing system using drone and smart phone
KR101864039B1 (en) System for providing solution of justice on martial arts sports and analyzing bigdata using augmented reality, and Drive Method of the Same
US11141645B2 (en) Athletic ball game using smart glasses
WO2024258386A1 (en) Shooting data detection system and method for football game
TWM524739U (en) Stimulation device combining swinging and running exercises
TWI601561B (en) Jogging and swing simulation apparatus and method

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20101215

N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20111125

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20120405

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

PG1501 Laying open of application
N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20120810

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

PC1203 Withdrawal of no request for examination
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid