JP6798019B2 - パノラマ画像の表示制御方法、装置及び記憶媒体 - Google Patents
パノラマ画像の表示制御方法、装置及び記憶媒体 Download PDFInfo
- Publication number
- JP6798019B2 JP6798019B2 JP2019520848A JP2019520848A JP6798019B2 JP 6798019 B2 JP6798019 B2 JP 6798019B2 JP 2019520848 A JP2019520848 A JP 2019520848A JP 2019520848 A JP2019520848 A JP 2019520848A JP 6798019 B2 JP6798019 B2 JP 6798019B2
- Authority
- JP
- Japan
- Prior art keywords
- mobile terminal
- panoramic image
- parameter
- smart
- panoramic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42208—Display device provided on the remote control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4781—Games
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- User Interface Of Digital Computer (AREA)
Description
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む。
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む。
パノラマ画像トリガ操作に応じて、メディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記メディアコンテンツサーバが前記パノラマ画像トリガ命令を前記移動端末にバインドされたスマートテレビに送信するようにし、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする。
移動端末により送信されたパノラマ画像トリガ命令を受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記移動端末にバインドされたスマートテレビに前記パノラマ画像トリガ命令を送信し、前記スマートテレビが現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする。
メディアコンテンツサーバは、移動端末の現在位置に対応するパノラマ画像の視点と視角のパノラマ空間における第2の基準点に対する視点変化パラメータと視角変化パラメータを取得した後に、視角調整パラメータ及び/又は視点調整パラメータをスマートテレビを送信し、スマートテレビは、当該視角調整パラメータ及び/又は視点調整パラメータに基づいて、移動端末の現在位置に対応するパノラマ画像の視点と視角を確定し、そして当該視点と視角のパノラマ画像を表示する。
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定すること、を含み
ここで、前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む。
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得することを含み、
ここで、前記ディスクリプションパラメータを前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることを含む。
3以上であるM個のネットワークアクセスポイントを設置し、
前記移動端末の基準点位置と現在位置で受信されたそれぞれの前記M個のネットワークアクセスポイントのM個の無線信号強度に基づいて、前記基準点位置座標と現在位置座標とをそれぞれ確定し、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定するために用いられる。
複数の位置点で受信されたネットワークアクセスポイントの無線信号の強度を確定し、位置点座標と対応する無線信号強度とを記憶し、
移動端末の基準点位置と現在位置で受信されたネットワークアクセスポイントの第1の無線信号強度と第2の無線信号強度を確定し、記憶されている無線信号強度から前記第1の無線信号強度と第2の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第1の無線信号強度と第2の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とし、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定するために用いられる。
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定し、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定するために用いられる。
102 スマートテレビ
103 メディアコンテンツサーバ
104 インターネット
Claims (25)
- パノラマ画像の表示制御方法であって、移動端末に適用され、
パノラマ画像トリガ操作に応じて、前記移動端末がメディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記パノラマ画像トリガ命令に応じて、前記メディアコンテンツサーバが前記移動端末にバインドされたスマートテレビにパノラマ画像表示命令を送信するようにし、前記パノラマ画像表示命令に応じて、前記スマートテレビが前記スマートテレビに現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む、
ことを特徴する前記方法。 - 前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
ここで、前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得すること、を含み、
ここで、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む、
請求項1に記載の方法。 - 前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記立体空間にM個のネットワークアクセスポイントが配置され、ここでMが3以上であり、ここで、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末が基準点位置で受信された前記M個のネットワークアクセスポイントのM個の無線信号強度と、現在位置で受信された前記M個のネットワークアクセスポイントのM個の無線信号強度とに基づいて、前記基準点位置を示す基準点位置座標と前記現在位置を示す現在位置座標とをそれぞれ確定することと、
前記基準点位置座標と前記現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を含む、
請求項1に記載の方法。 - 前記ディスクリプションパラメータは位置変化パラメータを含み、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
前記移動端末が複数の位置点で受信されたネットワークアクセスポイントの無線信号強度を確定し、位置点座標と位置点座標に対応する無線信号強度とを関連付けて記憶することと、
移動端末が基準点位置と現在位置でそれぞれ受信されたネットワークアクセスポイントの第1の無線信号強度と第2の無線信号強度とを確定し、記憶されている無線信号強度から前記第1の無線信号強度と第2の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第1の無線信号強度と第2の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とすることと、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を含む、
請求項1に記載の方法。 - 前記ディスクリプションパラメータは姿勢変化パラメータを含み、前記移動端末の立体空間におけるディスクリプションパラメータを取得することは、
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定することと、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定することと、を含む、
請求項1に記載の方法。 - 前記方法は、
メディアコンテンツサーバから送信された前記スマートテレビの現在表示されているパノラマ画像データを受信し、前記パノラマ画像を表示すること、をさらに含む、
請求項1に記載の方法。 - 前記方法は、
メディアコンテンツサーバから送信された前記調整パラメータを受信することと、
前記調整パラメータに基づいて前記パノラマ画像を調整することと、をさらに含む、
請求項6に記載の方法。 - 前記方法は、
メディアコンテンツサーバから送信されたリマインド情報を受信して表示することをさらに含み、前記リマインド情報は、前記移動端末を操作するように前記移動端末のユーザにリマインドするために用いられる、
請求項6又は7に記載の方法。 - パノラマ画像の表示制御方法であって、メディアコンテンツサーバに適用され、
移動端末により送信されたパノラマ画像トリガ命令を前記メディアコンテンツサーバが受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記メディアコンテンツサーバが、前記移動端末にバインドされたスマートテレビにパノラマ画像表示命令を送信し、前記パノラマ画像表示命令に応じて、前記スマートテレビが前記スマートテレビに現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を含む、
ことを特徴する前記方法。 - 前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定することと、
ここで、前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることは、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすること、を含む、
請求項9に記載の方法。 - 前記移動端末から送信された前記移動端末の第1の座標系データを受信し、当該第1の座標系によって取得したパラメータが前記移動端末の立体空間における位置座標と姿勢角度を示すために用いられることと、
前記スマートテレビから送信されたパノラマ空間内の第2の座標系データを受信し、当該第2の座標系によって取得したパラメータがパノラマ画像の視点と視角を示すために用いられることと、
前記第1の座標系データと前記第2の座標系データとに基づいて、前記第1の座標系におけるディスクリプションパラメータから前記第2の座標系における調整パラメータへのマッピング関係を確定すること、をさらに含み、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記マッピング関係と前記ディスクリプションパラメータとに基づいて、前記調整パラメータを確定すること、を含む、
請求項9に記載の方法。 - 前記パノラマ画像に一つのターゲット対象が含まれ、
前記方法は、
前記調整パラメータと前記ターゲット対象の位置とに基づいて、リマインド情報を確定し、前記リマインド情報は、前記移動端末に対して操作を行うことをリマインドするために用いられることと、
前記リマインド情報を前記移動端末に送信して表示させることと、をさらに含む、
請求項9に記載の方法。 - パノラマ画像の表示制御装置であって、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
パノラマ画像トリガ操作に応じて、移動端末がメディアコンテンツサーバにパノラマ画像トリガ命令を送信し、前記パノラマ画像トリガ命令に応じて、前記メディアコンテンツサーバが、移動端末にバインドされたスマートテレビにパノラマ画像表示命令を送信するようにし、前記パノラマ画像表示命令に応じて、前記スマートテレビが前記スマートテレビに現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末に対する操作に応じて、前記移動端末の立体空間におけるディスクリプションパラメータを取得し、前記メディアコンテンツサーバに前記ディスクリプションパラメータを送信し、前記メディアコンテンツサーバが前記ディスクリプションパラメータに基づいて前記パノラマ画像のパノラマ空間における調整パラメータを確定し、前記調整パラメータを前記スマートテレビに送信するようにし、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする、
前記パノラマ画像の表示制御装置。 - 前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末に対する移動操作に応じて、前記位置変化パラメータを取得し、前記移動端末に対する回転操作に応じて、前記姿勢変化パラメータを取得することと、
前記位置変化パラメータと前記姿勢変化パラメータと前記メディアコンテンツサーバに送信し、前記メディアコンテンツサーバが前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定し、前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信するようにし、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることと、を実現するようにする、
請求項13に記載の装置。 - 前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記立体空間にM個のネットワークアクセスポイントが配置され、ここでMが3以上であり、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末が基準点位置で受信された前記M個のネットワークアクセスポイントのM個の無線信号強度と、現在位置で受信された前記M個のネットワークアクセスポイントのM個の無線信号強度とに基づいて、前記基準点位置を示す基準点位置座標と前記現在位置を示す現在位置座標とをそれぞれ確定する
ことと、
前記基準点位置座標と前記現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を実現するようにする、
請求項13に記載の装置。 - 前記ディスクリプションパラメータは位置変化パラメータを含み、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末が複数の位置点で受信されたネットワークアクセスポイントの無線信号強度を確定し、各位置点座標とそれぞれに対応する無線信号強度と関連付けて記憶することと、
移動端末が基準点位置と現在位置でそれぞれ受信されたネットワークアクセスポイントの第1の無線信号強度と第2の無線信号強度とを確定し、記憶されている無線信号強度から前記第1の無線信号強度と第2の無線信号強度とに最も近い無線信号強度をそれぞれサーチし、サーチして得られた前記第1の無線信号強度と第2の無線信号強度とにそれぞれ最も近い無線信号強度に対応する位置点の位置座標を、基準点位置座標及び現在位置座標とすることと、
前記基準点位置座標と現在位置座標とに基づいて、前記移動端末の立体空間における位置変化パラメータを確定することと、を実現するようにする、
請求項13に記載の装置。 - 前記ディスクリプションパラメータは姿勢変化パラメータを含み、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
ジャイロから取得されたセンサーパラメータに基づいて、前記移動端末の基準点偏向角度と現在の偏向角度とをそれぞれ確定することと、
前記移動端末の基準点偏向角度と現在の偏向角度とに基づいて、前記移動端末の姿勢変化パラメータを確定することと、を実現するようにする、
請求項13に記載の装置。 - 前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信された前記スマートテレビの現在表示されているパノラマ画像データを受信し、前記パノラマ画像を表示することと、を実現するようにする、
請求項13に記載の装置。 - 前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信された前記調整パラメータを受信することと、
前記調整パラメータに基づいて前記パノラマ画像を調整することと、を実現するようにする、
請求項18に記載の装置。 - 前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
メディアコンテンツサーバから送信されたリマインド情報を受信して表示し、前記リマインド情報は、前記移動端末を操作するように前記移動端末のユーザにリマインドするために用いられることと、を実現するようにする、
請求項18又は19に記載の装置。 - パノラマ画像の表示制御装置であって、一つ以上のプロセッサと一つ以上のメモリとを含み、前記一つ以上のメモリがコンピュータでの読み取り可能な命令を含み、設定によって前記一つ以上のプロセッサで実行され、
移動端末により送信されたパノラマ画像トリガ命令をメディアコンテンツサーバが受信することと、
受信された前記パノラマ画像トリガ命令に応じて、前記メディアコンテンツサーバが、前記移動端末にバインドされたスマートテレビにパノラマ画像表示命令を送信し、前記パノラマ画像表示命令に応じて、前記スマートテレビが前記スマートテレビに現在表示されているメディアコンテンツに対応するパノラマ画像を表示するようにすることと、
前記移動端末により送信された前記移動端末の立体空間におけるディスクリプションパラメータを受信することと、
前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することと、
前記調整パラメータを前記スマートテレビに送信し、前記スマートテレビが前記調整パラメータに基づいて前記パノラマ画像を調整するようにすることと、を実現するようにする、
前記パノラマ画像の表示制御装置。 - 前記ディスクリプションパラメータは、位置変化パラメータと姿勢変化パラメータとを含み、前記調整パラメータは視角調整パラメータと視点調整パラメータとを含み、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記位置変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視点調整パラメータを確定し、前記姿勢変化パラメータに基づいて、前記パノラマ画像のパノラマ空間における視角調整パラメータを確定することと、
前記視点調整パラメータと前記視角調整パラメータとを前記スマートテレビに送信し、前記スマートテレビが前記視点調整パラメータに基づいて前記パノラマ画像の視点を調整し、前記視角調整パラメータに基づいて前記パノラマ画像の視角を調整するようにすることと、を実現するようにする、
請求項21に記載の装置。 - 前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記移動端末から送信された前記移動端末の第1の座標系データを受信し、当該第1の座標系によって取得したパラメータが前記移動端末の立体空間における位置座標と姿勢角度を示すために用いられることと、
前記スマートテレビから送信されたパノラマ空間内の第2の座標系データを受信し、当該第2の座標系によって取得したパラメータがパノラマ画像の視点と視角を示すために用いられることと、
前記第1の座標系データと前記第2の座標系データとに基づいて、前記第1の座標系におけるディスクリプションパラメータから前記第2の座標系における調整パラメータへのマッピング関係を確定することと、を実現するようにし、
ここで、前記ディスクリプションパラメータに基づいて、前記パノラマ画像のパノラマ空間における調整パラメータを確定することは、
前記マッピング関係と前記ディスクリプションパラメータとに基づいて、前記調整パラメータを確定すること、を含む、
請求項21に記載の装置。 - 前記パノラマ画像に一つのターゲット対象が含まれ、ここで、前記一つ以上のプロセッサが前記コンピュータでの読み取り可能な命令を実行し、
前記調整パラメータと前記ターゲット対象の位置とに基づいて、リマインド情報を確定し、前記リマインド情報は、前記移動端末に対して操作を行うことをリマインドするために用いられることと、
前記リマインド情報を前記移動端末に送信して表示させることと、を実現するようにする、
請求項21に記載の装置。 - 不揮発性コンピュータでの読み取り可能な記憶媒体であって、
前記記憶媒体に機械可読命令が記憶され、前記機械可読命令は、プロセッサによって実行され、請求項1〜12のいずれか1項に記載の方法を実現するようにする、
前記不揮発性コンピュータでの読み取り可能な記憶媒体。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710191254.X | 2017-03-28 | ||
| CN201710191254.XA CN107659851B (zh) | 2017-03-28 | 2017-03-28 | 全景图像的展示控制方法及装置 |
| PCT/CN2018/080819 WO2018177314A1 (zh) | 2017-03-28 | 2018-03-28 | 全景图像的展示控制方法、装置及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019533372A JP2019533372A (ja) | 2019-11-14 |
| JP6798019B2 true JP6798019B2 (ja) | 2020-12-09 |
Family
ID=61127613
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019520848A Active JP6798019B2 (ja) | 2017-03-28 | 2018-03-28 | パノラマ画像の表示制御方法、装置及び記憶媒体 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US10764626B2 (ja) |
| EP (1) | EP3525473A4 (ja) |
| JP (1) | JP6798019B2 (ja) |
| KR (1) | KR102184586B1 (ja) |
| CN (1) | CN107659851B (ja) |
| WO (1) | WO2018177314A1 (ja) |
Families Citing this family (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106570100B (zh) * | 2016-10-31 | 2019-02-26 | 腾讯科技(深圳)有限公司 | 信息搜索方法和装置 |
| CN107659851B (zh) * | 2017-03-28 | 2019-09-17 | 腾讯科技(北京)有限公司 | 全景图像的展示控制方法及装置 |
| WO2019194434A1 (ko) * | 2018-04-05 | 2019-10-10 | 엘지전자 주식회사 | 복수의 뷰포인트들에 대한 메타데이터를 송수신하는 방법 및 장치 |
| JP6368881B1 (ja) * | 2018-04-09 | 2018-08-01 | チームラボ株式会社 | 表示制御システム,端末装置,コンピュータプログラム,及び表示制御方法 |
| CN109451139B (zh) * | 2018-09-13 | 2020-11-20 | 腾讯科技(深圳)有限公司 | 消息传输方法、终端、装置、电子设备及可读介质 |
| CN111198610B (zh) * | 2018-11-16 | 2021-08-10 | 北京字节跳动网络技术有限公司 | 一种全景视频的视场控制方法、装置、设备及存储介质 |
| US10972789B2 (en) * | 2019-06-03 | 2021-04-06 | At&T Intellectual Property I, L.P. | Methods, systems, and devices for providing service differentiation for different types of frames for video content |
| CN112150603B (zh) * | 2019-06-28 | 2023-03-28 | 上海交通大学 | 基于三维点云的初始视角控制和呈现方法及系统 |
| CN112423108B (zh) * | 2019-08-20 | 2023-06-30 | 中兴通讯股份有限公司 | 码流的处理方法、装置、第一终端、第二终端及存储介质 |
| CN110446116B (zh) * | 2019-09-05 | 2021-11-02 | 青岛一舍科技有限公司 | 全景视频播放装置和方法 |
| CN111369684B (zh) * | 2019-12-10 | 2023-09-01 | 杭州海康威视系统技术有限公司 | 目标跟踪方法、装置、设备及存储介质 |
| CN111126975A (zh) * | 2019-12-11 | 2020-05-08 | 中国建设银行股份有限公司 | 电子红包的处理方法、装置、电子设备及可读存储介质 |
| CN111161144B (zh) * | 2019-12-18 | 2021-07-20 | 北京城市网邻信息技术有限公司 | 全景图获取方法、全景图获取装置及存储介质 |
| CN112312227B (zh) * | 2020-06-15 | 2022-09-16 | 青岛一舍科技有限公司 | 一种全景交互方法和装置 |
| CN111913645B (zh) * | 2020-08-17 | 2022-04-19 | 广东申义实业投资有限公司 | 三维图像展示的方法、装置、电子设备及存储介质 |
| CN112203127A (zh) * | 2020-10-12 | 2021-01-08 | 广州欢网科技有限责任公司 | 基于移动终端和智能电视的vr视频交互方法、装置及系统 |
| CN113297984B (zh) * | 2021-05-27 | 2024-02-27 | 北京皮尔布莱尼软件有限公司 | 虚拟现实展馆内展品的展示方法及计算设备 |
| CN115442644A (zh) * | 2021-10-29 | 2022-12-06 | 佛山欧神诺云商科技有限公司 | 一种全景图像的展示角度操控方法、设备、介质及产品 |
| CN114040119A (zh) * | 2021-12-27 | 2022-02-11 | 未来电视有限公司 | 全景视频显示方法、装置和计算机设备 |
| CN114440857A (zh) * | 2022-01-21 | 2022-05-06 | 支付宝(杭州)信息技术有限公司 | 一种场景展示、场景导航方法、装置、设备及介质 |
| CN114691068A (zh) * | 2022-03-23 | 2022-07-01 | 北京优酷科技有限公司 | 基于投屏技术的信息显示方法及装置 |
| CN115393380B (zh) * | 2022-08-01 | 2023-07-04 | 北京城市网邻信息技术有限公司 | 车内全景图像显示方法、装置、电子设备及存储介质 |
| CN115379277B (zh) * | 2022-08-22 | 2023-07-25 | 烽火通信科技股份有限公司 | 一种基于iptv业务的vr全景视频播放方法和系统 |
| CN117237532A (zh) * | 2022-09-26 | 2023-12-15 | 如你所视(北京)科技有限公司 | 模型外点位的全景图展示方法和装置、设备、介质 |
| CN117421829A (zh) * | 2023-11-21 | 2024-01-19 | 深圳市蓝鲸智联科技股份有限公司 | 一种基于汽车360度全景标定设计方法 |
Family Cites Families (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5940785B2 (ja) * | 2011-09-14 | 2016-06-29 | 株式会社バンダイナムコエンターテインメント | プログラムおよびゲーム装置 |
| JP5892797B2 (ja) * | 2012-01-20 | 2016-03-23 | 日本放送協会 | 送受信システム及び送受信方法、受信装置及び受信方法 |
| JP6006536B2 (ja) * | 2012-06-01 | 2016-10-12 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法 |
| JP6181993B2 (ja) * | 2012-12-04 | 2017-08-16 | 任天堂株式会社 | 情報処理システム、情報処理装置、情報処理プログラム、および、情報の送受信方法 |
| JP6450064B2 (ja) * | 2013-03-18 | 2019-01-09 | 任天堂株式会社 | 情報処理装置、動画データのデータ構造、情報処理システム、動画再生プログラム、および、動画の再生方法。 |
| US10062209B2 (en) * | 2013-05-02 | 2018-08-28 | Nintendo Co., Ltd. | Displaying an object in a panoramic image based upon a line-of-sight direction |
| KR102223732B1 (ko) * | 2014-06-26 | 2021-03-05 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
| WO2016003165A1 (ko) * | 2014-07-01 | 2016-01-07 | 엘지전자 주식회사 | 외부 장치를 이용한 방송 데이터 처리 방법 및 장치 |
| US20160094866A1 (en) * | 2014-09-29 | 2016-03-31 | Amazon Technologies, Inc. | User interaction analysis module |
| KR101909254B1 (ko) * | 2015-07-08 | 2018-10-17 | 주식회사 케이티 | 셋톱 박스에서 고화질 파노라마를 제공하는 방법, 디바이스 및 시스템 |
| CN105979242A (zh) * | 2015-11-23 | 2016-09-28 | 乐视网信息技术(北京)股份有限公司 | 一种视频的播放方法和装置 |
| CN105898460A (zh) * | 2015-12-10 | 2016-08-24 | 乐视网信息技术(北京)股份有限公司 | 调整智能电视的全景视频播放视角的方法和装置 |
| CN105913478A (zh) * | 2015-12-28 | 2016-08-31 | 乐视致新电子科技(天津)有限公司 | 360度全景显示方法、显示模块及移动终端 |
| CN105847850A (zh) * | 2016-03-28 | 2016-08-10 | 乐视控股(北京)有限公司 | 全景视频的实时播放方法及装置 |
| CN106028132A (zh) * | 2016-06-30 | 2016-10-12 | 四川长虹电器股份有限公司 | 通过智能移动终端在电视上观看全景视频的系统及方法 |
| CN106296819A (zh) * | 2016-08-12 | 2017-01-04 | 北京航空航天大学 | 一种基于智能机顶盒的全景视频播放器 |
| US10917559B2 (en) * | 2016-10-18 | 2021-02-09 | Huawei Technologies Co., Ltd. | Method for achieving non-selfie-taking effect through selfie-taking and photographing device |
| WO2018081290A1 (en) * | 2016-10-25 | 2018-05-03 | Aether, Inc. | Video content switching and synchronization system and method for switching between multiple video formats |
| CN106454450B (zh) * | 2016-10-31 | 2019-07-12 | 努比亚技术有限公司 | 全景视频播放装置及方法 |
| CN107659851B (zh) * | 2017-03-28 | 2019-09-17 | 腾讯科技(北京)有限公司 | 全景图像的展示控制方法及装置 |
-
2017
- 2017-03-28 CN CN201710191254.XA patent/CN107659851B/zh active Active
-
2018
- 2018-03-28 WO PCT/CN2018/080819 patent/WO2018177314A1/zh not_active Ceased
- 2018-03-28 EP EP18776100.2A patent/EP3525473A4/en active Pending
- 2018-03-28 KR KR1020197017921A patent/KR102184586B1/ko active Active
- 2018-03-28 JP JP2019520848A patent/JP6798019B2/ja active Active
-
2019
- 2019-04-22 US US16/390,171 patent/US10764626B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| EP3525473A4 (en) | 2019-12-18 |
| US10764626B2 (en) | 2020-09-01 |
| KR102184586B1 (ko) | 2020-11-30 |
| KR20190087530A (ko) | 2019-07-24 |
| WO2018177314A1 (zh) | 2018-10-04 |
| US20190246162A1 (en) | 2019-08-08 |
| JP2019533372A (ja) | 2019-11-14 |
| EP3525473A1 (en) | 2019-08-14 |
| CN107659851B (zh) | 2019-09-17 |
| CN107659851A (zh) | 2018-02-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6798019B2 (ja) | パノラマ画像の表示制御方法、装置及び記憶媒体 | |
| JP2022537614A (ja) | マルチ仮想キャラクターの制御方法、装置、およびコンピュータプログラム | |
| US20240087157A1 (en) | Image processing method, recording medium, image processing apparatus, and image processing system | |
| JP7625808B2 (ja) | 画像通信システムおよび画像表示方法 | |
| US12389120B2 (en) | Communication terminal, image communication system, and method of displaying image | |
| JP7533061B2 (ja) | 通信端末、画像通信システム、画像表示方法およびプログラム | |
| US20220103763A1 (en) | Communication management apparatus, image communication system, communication management method, and recording medium | |
| JP6617547B2 (ja) | 画像管理システム、画像管理方法、プログラム | |
| JP2017212510A (ja) | 画像管理装置、プログラム、画像管理システム及び情報端末 | |
| JP2016194784A (ja) | 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム | |
| JP2014072608A (ja) | 情報処理システム、情報処理装置、表示装置、及びプログラム | |
| JP2016194783A (ja) | 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム | |
| JP2022057771A (ja) | 通信管理装置、画像通信システム、通信管理方法及びプログラム | |
| CN114422644B (zh) | 设备控制方法、装置、用户设备和计算机可读存储介质 | |
| JP2016194782A (ja) | 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム | |
| US12464248B2 (en) | Display terminal, communication system, and display method | |
| JP2017201743A (ja) | 画像管理システム、画像管理装置、プログラム及び情報端末 | |
| US12506967B2 (en) | Display terminal, communication system, display method, and recording medium which displays an image of predetermined area in a wide visual field image and the wide visual field image | |
| US20240323537A1 (en) | Display terminal, communication system, display method, and recording medium | |
| US20250292489A1 (en) | Information processing apparatus, screen generation method, non-transitory recording medium, and information processing system | |
| EP4611384A1 (en) | Display terminal, display method, and carrier means | |
| EP4530811A1 (en) | Display terminal, system, display method, and carrier means | |
| EP4436190A1 (en) | Display terminal, communication system, and method for displaying | |
| JP2004054828A (ja) | 画像処理装置 | |
| JP2023089686A (ja) | 情報表示システム、情報表示方法、情報処理装置、情報処理端末及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190418 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200319 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200427 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200722 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201102 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201118 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6798019 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |