WO2021002263A1 - ガス検出端末装置 - Google Patents
ガス検出端末装置 Download PDFInfo
- Publication number
- WO2021002263A1 WO2021002263A1 PCT/JP2020/024853 JP2020024853W WO2021002263A1 WO 2021002263 A1 WO2021002263 A1 WO 2021002263A1 JP 2020024853 W JP2020024853 W JP 2020024853W WO 2021002263 A1 WO2021002263 A1 WO 2021002263A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image
- imaging
- unit
- gas detection
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M3/00—Investigating fluid-tightness of structures
- G01M3/02—Investigating fluid-tightness of structures by using fluid or vacuum
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B15/00—Special procedures for taking photographs; Apparatus therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Definitions
- the present invention relates to a gas detection terminal device.
- a gas detection system for monitoring gas leaks in natural gas wells and gas treatment plants has been developed and used.
- a gas leak is detected by using a camera capable of visualizing the gas.
- An infrared camera is generally used as this camera.
- Patent Document 1 includes an infrared camera and a visible light camera that capture an image (moving image) of an inspection area including an inspection target, an image processing unit that processes infrared image data captured by the infrared camera, and a display unit.
- the gas detection device to have is described.
- the image processing unit extracts an image of fluctuations caused by gas leakage from the image data in the inspection area.
- the display unit displays an inspection image in which the image data of the fluctuation is superimposed on the image data of the inspection region captured by the visible light camera.
- the location of the gas leak in the inspection area can be easily visually identified by visually recognizing the inspection image displayed on the display unit.
- the shooting location, the shooting date and time, and the like are recorded as inspection data.
- the inspector captures the inspection image and sets a mark at the position of interest in the captured image.
- the captured image with this mark is recorded in the recording unit.
- the inspector performs the inspection and imaging while paying attention to the marked position while referring to the captured image with the mark recorded in the first inspection.
- the first examination and the second examination have different imaging positions even though they actually want to image from the same position. Therefore, when imaging is performed in the second inspection, it is difficult for the inspector to quickly and accurately determine where the marked position is. Therefore, even if a mark indicating the position of interest is set in the first inspection, it is not easy to continuously image the position in the subsequent inspection to confirm the change with time.
- An object of the present invention is to enable the mark to be displayed at the same position corresponding to the position of interest in the captured image even when the captured images are different as in the first inspection and the second inspection. It is to provide a gas detection terminal device which can improve convenience.
- the gas detection terminal device of the present invention is The gas detection terminal device in a gas detection system including an image pickup device capable of capturing an infrared moving image of at least a predetermined gas and a gas detection terminal device capable of recording an image captured by the image pickup device.
- a recording unit capable of recording the captured image and
- a display unit capable of displaying the captured image and
- a marking setting unit that can set markings in the captured image
- An imaging information acquisition unit that acquires information including the imaging position, the distance to the marked imaging target, and the imaging direction as imaging information when the captured image is captured from the imaging device.
- a storage unit that stores the imaging information and the marking information in association with each other.
- a gas detection terminal device comprising.
- the mark can be displayed at the same position corresponding to the position of interest in the captured image, and the convenience of inspection is improved.
- Block diagram showing the overall configuration of the gas detection system according to the embodiment The figure which shows the example of the captured image displayed on the display part. The figure which shows the example of the captured image displayed on the display part. The figure which shows the example of the captured image displayed on the display part.
- FIG. 1 is a block diagram showing an overall configuration of the gas detection system 10 according to the present embodiment.
- the gas detection system 10 includes a portable imaging device 100, a portable gas detection terminal device 200, and a management server 300.
- a gas detection terminal device 200 can be connected to the management server 300, and another gas detection terminal device 200-1 having the same configuration as the gas detection terminal device 200 can be connected.
- An image pickup device 100-1 having the same configuration as the image pickup device 100 can be connected to the gas detection terminal device 200-1.
- the image pickup device 100 and the gas detection terminal device 200 are connected by a communication cable (not shown).
- the inspector carries the image pickup device 100 and the gas detection terminal device 200 and patrols the gas well mining area to perform a gas leak inspection. Therefore, at the time of gas leak inspection, the image pickup device 100 and the gas detection terminal device 200 are arranged in the vicinity, the inspector captures an image with the image pickup device 100, and the captured image is displayed and recorded on the gas detection terminal device 200. ..
- the image pickup device 100 may be connected to the gas detection terminal device 200 via wireless communication, or the image pickup device 100 and the gas detection terminal device 200 may be integrated.
- the gas detection terminal device 200 and the management server 300, and the gas detection terminal device 200-1 and the management server 300 are connected via a network such as the Internet.
- the image pickup device 100 is, for example, a portable camera device, and images an inspection area including a gas production facility (tank, plant, etc.) to be inspected, and generates infrared image data of the inspection area.
- the image pickup device 100 may be a camera device fixed at a predetermined position.
- the imaging device 100 includes an infrared imaging unit 102, a visible light imaging unit 104, a position detecting unit 106, and an angle detecting unit 108.
- the image pickup apparatus 100 includes, for example, a CPU (Central Processing Unit) as a processor, a storage medium such as a ROM (Read Only Memory) storing a control program, and a working memory such as a RAM (Random Access Memory). , And a communication circuit.
- a CPU Central Processing Unit
- ROM Read Only Memory
- RAM Random Access Memory
- the infrared imaging unit 102 has a filter that allows infrared light to pass through and an infrared sensor including a CMOS image sensor, and obtains infrared image data of a predetermined gas by imaging the infrared light.
- the infrared imaging unit 102 can image methane gas or the like by capturing light in a wavelength range of, for example, 3.2 to 3.4 ⁇ m.
- the infrared imaging unit 102 images, for example, an inspection region including a gas production facility to be inspected, and sequentially transmits infrared image data to the gas detection terminal device 200.
- the infrared image data obtained by the infrared imaging unit 102 is a still image or a moving image, and shows the temperature distribution in the inspection region.
- the visible light imaging unit 104 has a filter that allows visible light to pass through and a visible light sensor including a CMOS image sensor, and obtains visible light image data by imaging visible light.
- the visible light imaging unit 104 images the inspection area in synchronization with the infrared imaging unit 102, and sequentially transmits the visible image data to the gas detection terminal device 200.
- the visible image data generated by the visible light imaging unit 104 is a still image or a moving image.
- the position detection unit 106 receives, for example, a GPS (Global Positioning System) signal, and detects the current position of the image pickup apparatus 100 based on the received GPS signal. The position detection unit 106 transmits the current position of the detected image pickup device 100 to the gas detection terminal device 200.
- GPS Global Positioning System
- the angle detection unit 108 detects, for example, a composite value of acceleration in the three axial directions generated in the image pickup device 100 main body based on a detection signal of an acceleration sensor (not shown) included in the image pickup device 100, and uses the composite value as the composite value. Based on this, the imaging angle (imaging direction) imaged by the imaging device 100 is detected. The angle detection unit 108 transmits the detected imaging angle of the imaging device 100 to the gas detection terminal device 200.
- the management server 300 has a data storage unit 301, and stores the data transmitted from the transmission / reception unit 207 of the gas detection terminal device 200 in the data storage unit 301. For example, a moving image of an inspection image transmitted from the gas detection terminal device 200 and its additional data (for example, position information for displaying a mark at a specific position corresponding to an imaged object in the captured image) are stored in the data storage unit 301. .. The management server 300 transmits the data stored in the data storage unit 301 in response to the request from the gas detection terminal devices 200 and 200-1.
- the management server 300 when the management server 300 receives a request for a moving image of an inspection image from the gas detection terminal device 200-1, the management server 300 transmits the stored moving image data and its additional data to the gas detection terminal device 200-1.
- the gas detection terminal device 200 is embodied as a mobile terminal such as a tablet terminal, a smartphone, a laptop terminal, or a wearable terminal.
- the gas detection terminal device 200 visualizes the gas generated in the inspection area by using the received information (infrared image data, visible image data) from the image pickup device 100.
- the gas detection terminal device 200 includes an image processing unit 201, a recording unit 202, a display unit 203, a transmission / reception unit 204, an imaging information acquisition unit 205, a storage unit 206, a mark position calculation unit 207, and an input reception unit. It has 208 and.
- the storage unit 206 is described separately from the recording unit 202 in order to make the explanation easy to understand, but the function of the storage unit 206 may be possessed by the recording unit 202.
- the gas detection terminal device 200 is, for example, a work such as a CPU (Central Processing Unit) as a processor, a storage medium such as a ROM (Read Only Memory) storing a control program, and a RAM (Random Access Memory). It has a memory for use and a communication circuit. In this case, the functions of each part described later are realized by the CPU executing the control program.
- a CPU Central Processing Unit
- ROM Read Only Memory
- RAM Random Access Memory
- the image processing unit 201 acquires the infrared image data of the inspection region transmitted from the infrared imaging unit 102. Then, the image processing unit 201 performs predetermined image processing on the infrared image data in the inspection region, detects a portion where gas is present in the infrared image data, and visualizes the detected portion. The image processing unit 201 adds a specific color (for example, red) to a portion where gas exists in the infrared image data before image processing.
- a specific color for example, red
- a method of detecting gas from infrared image data in the inspection area will be briefly described.
- a temperature change that is, a change in brightness in the infrared image data of the inspection area
- the image processing unit 201 detects a portion where the gas is present based on such a temperature change. Since various known image processing methods can be applied to the gas detection method, detailed description here will be omitted.
- the image processing unit 201 acquires the visible image data transmitted from the visible light imaging unit 104. Then, the image processing unit 201 generates inspection image data by synthesizing the infrared image data after the image processing with the visible image data before the image processing.
- the inspection image data is displayed as an inspection image on the display unit 203 and recorded on the recording unit 202.
- the infrared image data after the above-mentioned image processing may be used as inspection image data without being combined with the visible image data.
- the display unit 203 is composed of, for example, a liquid crystal display or an organic EL display.
- the display unit 203 is a flat panel display with a touch panel.
- the input receiving unit 208 receives various operation inputs by the user via an operation unit (touch panel) (not shown).
- the image processing unit 201, the recording unit 202, the display unit 203, and the transmission / reception unit 204 input an operation signal corresponding to the user operation from the input reception unit 208, and operate based on the operation signal. Further, the input receiving unit 208 has a function as a mark setting unit for setting a mark in the captured image.
- the operation information acquisition unit 205 acquires information including the imaging position, the distance to the marked imaging target, and the imaging direction when the captured image is captured from the imaging device 100 as imaging information. Specifically, the position information acquisition unit 205 acquires the GPS position information of the image pickup device 100 when the captured image is taken from the position detection unit 106 of the image pickup device 100 as the image pickup position, and captures the image captured image from the image pickup device 100. The focal distance information at that time is acquired as the distance to the marked imaging target, and the imaging direction information of the imaging device 100 when the captured image is captured from the angle detection unit 108 of the imaging device 100 is acquired as the imaging direction. ..
- the storage unit 206 stores the imaging information (imaging position, distance to the marked imaging target, and imaging direction) acquired by the imaging information acquisition unit 205 in association with the marking information.
- the mark position calculation unit 207 inputs the current image pickup information from the image pickup information acquisition unit 205, and inputs the past image pickup information and the marking information from the storage unit 206. Then, the mark position calculation unit 207 calculates the mark position in the current captured image based on the current imaging information, the past imaging information, and the marking information. In other words, the mark position calculation unit 207 has the image pickup information when the image pickup device 100 has taken an image in the first time, and the image pickup device 100 stored in the storage unit 206 at a time earlier than the first time. The mark position in the captured image captured by the imaging device 100 at the first time is calculated based on the imaging information and the marking information when the image is captured by.
- the transmission / reception unit 204 transmits the imaging information (imaging position, distance to the marked imaging target, and imaging direction) and marking information stored in the storage unit 206 to the external device of the management server 300. .. In addition, the transmission / reception unit 204 can also receive imaging information (imaging position, distance to the marked imaging target, and imaging direction) and marking information from an external device such as the management server 300.
- FIG. 2 is an example of an captured image displayed on the display unit 203 of the gas detection terminal device 200.
- the input receiving unit 208 accepts this operation, and the marks M1 and M2 are displayed at the touched positions in the captured image.
- the storage unit 206 is associated with the imaging information (imaging position, distance to the marked imaging target, and imaging direction) when the image of FIG. 2 is captured, and the marking information. Be remembered.
- FIG. 3 is an example of an captured image displayed on the display unit 203 when an image is taken at a date and time after the marking as shown in FIG.
- new marks M3 and M4 are attached to new attention positions.
- the previously set marks M1 and M2 are displayed on this captured image.
- the inspector can confirm whether or not the gas leak at that position has stopped by confirming the image of the position where the marks M1 and M2 are attached. That is, the status of the attention position with the marks M1 and M2 can be continuously confirmed.
- the storage unit 206 stores the imaging information (imaging position, the distance to the marked imaging target, and the imaging) when the image was taken in the past.
- the direction) and the marking information are stored in association with each other, and the mark position calculation unit 207 stores the mark position in the current captured image based on the current imaging information, the past imaging information, and the marking information. Therefore, even if the captured images are different, the mark can be displayed at the same position corresponding to the imaged object in the captured image.
- the mark set for the past captured image is attached to the same position in the subsequent captured image and displayed, so that the inspector continuously confirms the change in the marked attention position. become able to.
- the gas detection terminal device 200 includes a recording unit 202 capable of recording an captured image, a display unit 203 capable of displaying an captured image, and a captured image.
- Information including a mark setting unit (input reception unit 208) capable of setting a mark on the image, an imaging position when an image is captured from the imaging device 100, a distance to a marked imaging target, and an imaging direction. It has an imaging information acquisition unit 205 that acquires the image as imaging information, and a storage unit 206 that stores the imaging information and marking information in association with each other.
- the gas detection terminal device 200 can also be shared with the other gas detection terminal device 200-1.
- the mark can be displayed at the same position as. For example, even when an object is photographed by a second image pickup device arranged at a position opposite to that of the first image pickup device (for example, a plant), the image captured by the first image pickup device can be obtained. The attached mark can be displayed at a corresponding position in the captured image of the second imaging device.
- the mark follows the attention position based on the imaging information even if the imaging device is moved as long as the marked attention position is shown in the captured image. It may be controlled so that it is displayed.
- the display / non-display of the above-mentioned marks M1-M4 may be switched. Further, as shown in FIG. 4, a comment area R1 in which a comment for the marks M1-M4 can be described may be displayed.
- the comment may be input by text, by voice, or by gesture. In particular, by noting the comments and video information of the gas inspector according to the image, it is possible to convey precautions to another worker when maintaining the ejection location.
- the captured image is a moving image
- the captured image may be a still image
- the mark is set by the user, but the present invention is not limited to this.
- the mark is automatically set at the detected position.
- the mark may be set.
- the present invention can be applied to a gas detection terminal device used in a gas detection system.
- Gas detection system 100, 100-1 Imaging device 102 Infrared imaging unit 104 Visible light imaging unit 106 Position detection unit 108 Angle detection unit 200, 200-1 Gas detection terminal device 201 Image processing unit 202 Recording unit 203 Display unit 204 Transmission / reception unit 205 Image capture information acquisition unit 206 Storage unit 207 Mark position calculation unit 208 Input reception unit 300 Management server 301 Data storage unit M1-M4 mark
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Examining Or Testing Airtightness (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
ガス検出端末装置(200)は、撮像画像を記録可能な記録部(202)と、撮像画像を表示可能な表示部(203)と、撮像画像中にマークを設定可能なマーク設定部(入力受付部(208))と、撮像装置(100)から撮像画像を撮像したときの、撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部(205)と、前記撮像情報及びマーキングの情報を関連付けて記憶する記憶部(206)と、を有する。
Description
本発明は、ガス検出端末装置に関する。
従来、天然ガスのガス井戸やガス処理プラントなどでのガス漏れを監視するガス検出システムが開発され、使用されている。このようなガス検出システムにおいては、ガスを可視化可能なカメラを用いることでガス漏れを検知する。このカメラとしては一般に赤外線カメラが用いられる。
特許文献1には、検査対象を含む検査領域の画像(動画)を撮像する赤外線カメラ及び可視光カメラと、赤外線カメラにより撮像された赤外画像データを処理する画像処理部と、表示部とを有するガス検出装置が記載されている。画像処理部は、検査領域の画像データからガス漏れに起因するゆらぎの画像を抽出する。そして、表示部は、可視光カメラにより撮像された検査領域の画像データにゆらぎの画像データが重ね合わされた検査画像を表示する。
特許文献1に記載されたガス検出装置を用いれば、表示部に表示された検査画像を視認することにより、検査領域におけるガス漏れの場所を視覚的に容易に特定することができる。このようなガス漏洩検査においては、撮像画像に加えて、撮影場所及び撮影日時などが検査データとして記録される。
ところで、撮像画像中のガス漏洩位置や修繕位置などの注目位置にマークを付すようにすれば、ガス漏洩位置や修繕位置の経時的な変化を確認する上で非常に便利であると考えられる。具体的に説明する。検査員は、第1の検査において、検査画像を撮像するとともに、撮像画像中の注目位置にマークを設定する。このマークが付された撮像画像は、記録部に記録される。第1の検査よりも後の第2の検査において、検査員は、第1の検査において記録されたマークが付された撮像画像を参照にしながら、マーキングされた位置に注目しながら検査や撮像を行う。
しかしながら、第1の検査と第2の検査とでは、本当は同じ位置から撮像したいにも拘わらず撮像位置が異なることがほとんどである。従って、第2の検査においてに撮像を行う場合、検査員は、マークが付された位置がどこであるかを迅速かつ的確に判断するのは困難である。よって、第1の検査においてに注目位置を示すマークを設定したとしても、その位置を後の検査においても継続的に撮像して経時的な変化を確認することは容易ではなかった。
本発明の目的は、第1の検査と第2の検査のように撮像画像が異なった場合でも、撮像画像中の注目位置に対応する同一位置にマークを表示できるようにすることで、検査の利便性を向上し得るガス検出端末装置を提供することである。
本発明のガス検出端末装置の一つの態様は、
少なくとも所定ガスの赤外線動画を撮像可能な撮像装置と、前記撮像装置の撮像画像を記録可能なガス検出端末装置と、を備えるガス検出システムにおける前記ガス検出端末装置であって、
前記撮像画像を記録可能な記録部と、
前記撮像画像を表示可能な表示部と、
前記撮像画像中にマーキングを設定可能なマーキング設定部と、
前記撮像装置から前記撮像画像を撮像したときの、撮像位置、前記マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部と、
前記撮像情報及び前記マーキングの情報を関連付けて記憶する記憶部と、
を備えるガス検出端末装置。
少なくとも所定ガスの赤外線動画を撮像可能な撮像装置と、前記撮像装置の撮像画像を記録可能なガス検出端末装置と、を備えるガス検出システムにおける前記ガス検出端末装置であって、
前記撮像画像を記録可能な記録部と、
前記撮像画像を表示可能な表示部と、
前記撮像画像中にマーキングを設定可能なマーキング設定部と、
前記撮像装置から前記撮像画像を撮像したときの、撮像位置、前記マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部と、
前記撮像情報及び前記マーキングの情報を関連付けて記憶する記憶部と、
を備えるガス検出端末装置。
本発明によれば、撮像画像が異なった場合でも、撮像画像中の注目位置に対応する同一位置にマークを表示できるようになり、検査の利便性が向上する。
以下、本発明の実施の形態を、図面を参照して説明する。
<1>ガス検出システム
図1は、本実施の形態におけるガス検出システム10の全体構成を示すブロック図である。図1に示すように、ガス検出システム10は、ポータブル型の撮像装置100と、ポータブル型のガス検出端末装置200と、管理サーバー300と、を有する。管理サーバー300には、ガス検出端末装置200が接続可能であるとともに、ガス検出端末装置200と同様の構成を有する他のガス検出端末装置200-1が接続可能である。ガス検出端末装置200-1には、撮像装置100と同様の構成を有する撮像装置100-1が接続可能である。
図1は、本実施の形態におけるガス検出システム10の全体構成を示すブロック図である。図1に示すように、ガス検出システム10は、ポータブル型の撮像装置100と、ポータブル型のガス検出端末装置200と、管理サーバー300と、を有する。管理サーバー300には、ガス検出端末装置200が接続可能であるとともに、ガス検出端末装置200と同様の構成を有する他のガス検出端末装置200-1が接続可能である。ガス検出端末装置200-1には、撮像装置100と同様の構成を有する撮像装置100-1が接続可能である。
撮像装置100とガス検出端末装置200との間は、通信ケーブル(図示しない)によって接続される。検査員は、撮像装置100と、ガス検出端末装置200とを携帯してガス井戸採掘エリア内を巡回してガス漏洩検査を行う。よって、ガス漏洩検査時に撮像装置100とガス検出端末装置200は近傍に配置され、検査員は、撮像装置100で画像を撮像し、その撮像画像は、ガス検出端末装置200に表示及び記録される。なお、撮像装置100は、ガス検出端末装置200と無線通信を介して接続されてもよいし、撮像装置100とガス検出端末装置200とが一体でもよい。
ガス検出端末装置200と管理サーバー300との間、及び、ガス検出端末装置200-1と管理サーバー300との間は、インターネットなどのネットワークを介して接続されている。
まず、撮像装置100の構成について説明する。撮像装置100は、例えば携帯可能なカメラ装置であり、検査対象であるガス生産施設(タンク、プラントなど)を含む検査領域を撮像し、検査領域の赤外線画像データを生成する。なお、撮像装置100は、所定位置に固定されたカメラ装置であってもよい。
撮像装置100は、赤外線撮像部102と、可視光撮像部104と、位置検出部106と、角度検出部108とを有する。
なお、撮像装置100は、図示しないが、例えば、プロセッサとしてのCPU(Central Processing Unit)、制御プログラムを格納したROM(Read Only Memory)などの記憶媒体、RAM(Random Access Memory)などの作業用メモリ、及び通信回路を有する。この場合、上記した各部の機能は、CPUが制御プログラムを実行することにより実現される。
赤外線撮像部102は、赤外光を通過させるフィルターと、CMOSイメージセンサーなどからなる赤外線センサーとを有し、赤外光を撮像することで所定ガスの赤外画像データを得る。赤外線撮像部102は、例えば3.2~3.4μmの波長域の光を撮像することで、メタンガスなどを撮像することができる。赤外線撮像部102は、可視光撮像部104と同期した状態で、例えば、検査対象であるガス生産施設を含む検査領域を撮像し、赤外画像データをガス検出端末装置200に順次送信する。赤外線撮像部102により得られた赤外画像データは、静止画又は動画であり、検査領域の温度分布を示す。
可視光撮像部104は、可視光を通過させるフィルターと、CMOSイメージセンサーなどからなる可視光センサーとを有し、可視光を撮像することで可視光画像データを得る。可視光撮像部104は、赤外線撮像部102と同期した状態で、検査領域を撮像し、可視画像データをガス検出端末装置200に順次送信する。可視光撮像部104により生成される可視画像データは、静止画又は動画である。
位置検出部106は、例えば、GPS(Global Positioning System)信号を受信し、受信したGPS信号に基づいて、撮像装置100の現在位置を検出する。位置検出部106は、検出した撮像装置100の現在位置をガス検出端末装置200に送信する。
角度検出部108は、例えば、撮像装置100が有する加速度センサー(図示せず)の検出信号に基づいて、撮像装置100本体に生じた3軸方向の加速度の合成値を検出し、その合成値に基づいて、撮像装置100が撮像している撮像角度(撮像方向)を検出する。角度検出部108は、検出した撮像装置100の撮像角度をガス検出端末装置200に送信する。
管理サーバー300は、データ格納部301を有し、ガス検出端末装置200の送受信部207から送信されたデータをデータ格納部301に格納する。例えばガス検出端末装置200から送信された検査画像の動画及びその付加データ(例えば撮像画像中の撮像物に対応する特定位置にマークを表示するための位置情報)がデータ格納部301に格納される。管理サーバー300は、ガス検出端末装置200、200-1からの要求に応じて、データ格納部301に格納したデータを送信する。
例えば、管理サーバー300は、ガス検出端末装置200-1から検査画像の動画の要求があると、格納している動画データ及びその付加データをガス検出端末装置200-1に送信する。
<2>ガス検出端末装置
次に、本実施の形態のガス検出端末装置200の構成について詳しく説明する。ガス検出端末装置200は、タブレット端末、スマートフォン、ラップトップ型端末又はウェアラブル端末などの携帯端末として具現化されている。
次に、本実施の形態のガス検出端末装置200の構成について詳しく説明する。ガス検出端末装置200は、タブレット端末、スマートフォン、ラップトップ型端末又はウェアラブル端末などの携帯端末として具現化されている。
ガス検出端末装置200は、撮像装置100からの受信情報(赤外画像データ、可視画像データ)を用いて、検査領域に発生したガスを可視化する。
ガス検出端末装置200は、画像処理部201と、記録部202と、表示部203と、送受信部204と、撮像情報取得部205と、記憶部206と、マーク位置算出部207と、入力受付部208と、を有する。ちなみに、本実施の形態では、説明を分かり易くするために、記憶部206を記録部202と分けて記載しているが、記憶部206の機能は記録部202が有していてもよい。
なお、ガス検出端末装置200は、図示しないが、例えば、プロセッサとしてのCPU(Central Processing Unit)、制御プログラムを格納したROM(Read Only Memory)などの記憶媒体、RAM(Random Access Memory)などの作業用メモリ、及び通信回路を有する。この場合、後述する各部の機能は、CPUが制御プログラムを実行することにより実現される。
画像処理部201は、赤外線撮像部102から送信された検査領域の赤外画像データを取得する。そして、画像処理部201は、検査領域の赤外画像データに所定の画像処理を施して、当該赤外画像データにおいてガスが存在する部分を検出し、検出した部分を可視化する。画像処理部201は、画像処理前の赤外画像データにおいてガスが存在する部分に、特定の色(例えば、赤色など)を付す。
ここで、検査領域の赤外画像データからガスを検出する方法について簡単に説明する。検査領域においてガス漏れが発生すると、検査領域の赤外画像データにおいてガスが存在する部分に、温度変化(つまり、検査領域の赤外画像データにおいて輝度の変化)が生じる。画像処理部201は、このような温度変化に基づいて、ガスが存在する部分を検出する。なお、ガスの検出方法は、公知の様々な画像処理方法を適用可能であるため、ここでの詳細な説明は省略する。
また、画像処理部201は、可視光撮像部104から送信された可視画像データを取得する。そして、画像処理部201は、画像処理前の可視画像データに、画像処理後の赤外画像データを合成することで、検査画像データを生成する。
検査画像データは、検査画像として表示部203に表示されるとともに記録部202に記録される。なお、上述の画像処理後の赤外画像データを、可視画像データと合成することなく、検査画像データとしてもよい。
表示部203は、例えば液晶ディスプレイや有機ELディスプレイなどにより構成されている。本実施の形態では、表示部203は、タッチパネル付きのフラットパネルディスプレイである。
入力受付部208は、図示しない操作部(タッチパネル)を介してユーザーによる各種の操作入力を受け付ける。画像処理部201、記録部202、表示部203及び送受信部204は、入力受付部208からのユーザー操作に応じた操作信号を入力し、当該操作信号に基づいて動作する。また、入力受付部208は、撮像画像中にマークを設定するマーク設定部としての機能を有する。
操作情報取得部205は、撮像装置100から撮像画像を撮像したときの、撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する。具体的には、位置情報取得部205は、撮像装置100の位置検出部106から撮像画像を撮像したときの撮像装置100のGPS位置情報を撮像位置として取得し、撮像装置100から撮像画像を撮像したときの焦点距離情報をマーキングが施された撮像対象までの距離として取得し、撮像装置100の角度検出部108から撮像画像を撮像したときの撮像装置100の撮影方向情報を撮像方向として取得する。
記憶部206は、撮像情報取得部205によって取得された撮像情報(撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向)と、マーキングの情報と、を関連付けて記憶する。
マーク位置算出部207は、撮像情報取得部205から現在の撮像情報を入力するとともに、記憶部206から過去の撮像情報及びマーキング情報を入力する。そして、マーク位置算出部207は、現在の撮像情報と、過去の撮像情報及びマーキング情報と、に基づいて、現在の撮像画像中でのマーク位置を算出する。換言すれば、マーク位置算出部207は、第1の時間に撮像装置100によって撮像したときの撮像情報と、記憶部206に記憶されている、第1の時間よりも過去の時間に撮像装置100によって撮像したときの撮像情報及びマーキング情報と、に基づいて、第1の時間に撮像装置100によって撮像された撮像画像中でのマーク位置を算出する。
送受信部204は、記憶部206に記憶された、撮像情報(撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向)及びマーキングの情報を、管理サーバー300の外部装置に送信する。また、送受信部204は、管理サーバー300などの外部装置から撮像情報(撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向)及びマーキングの情報を受信することもできる。
次に、図2及び図3を用いて、本実施の形態の動作について説明する。
図2は、ガス検出端末装置200の表示部203に表示された撮像画像の例である。検査員が、ガス漏洩箇所などをタッチ操作すると、入力受付部208によってこの操作が受け付けられ、撮像画像中のタッチ位置にはマークM1、M2が表示される。このとき、記憶部206には、図2の画像を撮像したときの撮像情報(撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向)と、マーキングの情報と、が関連付けて記憶される。
図3は、図2のようなマーキングを行ったよりも後の日時に、撮像を行ったときに表示部203に表示された撮像画像の例である。因みに、図3の例では、新たな注目位置に新たなマークM3、M4が付されている。図から分かるように、この撮像画像には、以前に設定されたマークM1、M2が表示される。これにより、検査員は、マークM1、M2が付された位置の画像を確認することで、その位置のガス漏洩が止まっているか否かなどを確認できる。つまり、マークM1、M2が付された注目位置の状況を継続して確認できる。
ここで、図2と図3とでは撮影位置が異なるので、従来は、対応する注目位置にマークを表示することはできず、そのため、過去の撮像画像にマークが付されていたとしても、現在の撮像画像中でその位置がどこであるかを迅速かつ的確に判断するのは困難であった。
これに対して、本実施の形態のガス検出端末装置200によれば、記憶部206に、過去に撮像したときの撮像情報(撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向)とマーキングの情報とを関連付けて記憶しておき、マーク位置算出部207が、現在の撮像情報と、過去の撮像情報及びマーキング情報と、に基づいて、現在の撮像画像中でのマーク位置を算出したので、撮像画像が異なった場合でも、撮像画像中の撮像物に対応する同一位置にマークを表示できるようになる。
この結果、過去の撮像画像に対して設定されたマークが、その後の撮像画像中でも同じ位置に付されて表示されるので、検査員は、マークが付された注目位置の変化を継続的に確認できるようになる。
<3>効果
以上説明したように、本実施の形態によれば、ガス検出端末装置200は、撮像画像を記録可能な記録部202と、撮像画像を表示可能な表示部203と、撮像画像中にマークを設定可能なマーク設定部(入力受付部208)と、撮像装置100から撮像画像を撮像したときの、撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部205と、前記撮像情報及びマーキングの情報を関連付けて記憶する記憶部206と、を有する。これにより、撮像画像が異なった場合でも、撮像画像中の撮像物に対応する同一位置にマークを表示できるようになり、検査の利便性が向上する。
以上説明したように、本実施の形態によれば、ガス検出端末装置200は、撮像画像を記録可能な記録部202と、撮像画像を表示可能な表示部203と、撮像画像中にマークを設定可能なマーク設定部(入力受付部208)と、撮像装置100から撮像画像を撮像したときの、撮像位置、マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部205と、前記撮像情報及びマーキングの情報を関連付けて記憶する記憶部206と、を有する。これにより、撮像画像が異なった場合でも、撮像画像中の撮像物に対応する同一位置にマークを表示できるようになり、検査の利便性が向上する。
また、あるガス検出端末装置200の撮像情報を、例えば管理サーバー301を介して他のガス検出端末装置200-1と共有することで、他のガス検出端末装置200-1でもガス検出端末装置200と同様の位置にマークを表示することができるようになる。例えば、第1の撮像装置に対して、対象物(例えばプラント)を挟んで逆の位置に配置された第2の撮像装置で対象物を撮影した場合でも、第1の撮像装置の撮像画像に付されたマークを、第2の撮像装置の撮像画像における対応位置に表示させることができるようになる。
上述の実施の形態は、本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することの無い範囲で、様々な形で実施することができる。
上述の実施の形態に加えて、一旦注目位置にマークを設定すると、撮像画像中にマーキングした注目位置が写っている限り、撮像装置を動かしても撮像情報に基づいてその注目位置にマークが追従して表示されるように制御してもよい。
上述のマークM1-M4の表示/非表示を切り替えることができるようにしてもよい。また、図4に示したように、マークM1-M4に対するコメントを記述可能なコメント領域R1を表示してもよい。なお、コメントは、テキストによって入力してもよく、音声によって入力してもよく、ジェスチャーによって入力してもよい。特に、ガス検査員のコメントや動画情報を画像に合わせて表記することで、噴出箇所メンテナンスの際、注意事項等が別作業者にも伝えることができる。
上述の実施の形態では、撮像画像が動画である例が示されているが、撮像画像は静止画であってもよい。
上述の実施の形態では、マークはユーザーによって設定される場合について述べたが、これに限らない、例えば、ガス検出端末装置200がガス漏れ位置を自動検知する機能を有する場合、検知した位置に自動的にマークが設定されてもよい。
2019年7月3日出願の特願2019-124713の日本出願に含まれる明細書、図面および要約書の開示内容は、すべて本願に援用される。
本発明は、ガス検出システムに用いられるガス検出端末装置に適用し得る。
10 ガス検出システム
100、100-1 撮像装置
102 赤外線撮像部
104 可視光撮像部
106 位置検出部
108 角度検出部
200、200-1 ガス検出端末装置
201 画像処理部
202 記録部
203 表示部
204 送受信部
205 撮像情報取得部
206 記憶部
207 マーク位置算出部
208 入力受付部
300 管理サーバー
301 データ格納部
M1-M4 マーク
100、100-1 撮像装置
102 赤外線撮像部
104 可視光撮像部
106 位置検出部
108 角度検出部
200、200-1 ガス検出端末装置
201 画像処理部
202 記録部
203 表示部
204 送受信部
205 撮像情報取得部
206 記憶部
207 マーク位置算出部
208 入力受付部
300 管理サーバー
301 データ格納部
M1-M4 マーク
Claims (6)
- 少なくとも所定ガスの赤外線動画を撮像可能な撮像装置と、前記撮像装置の撮像画像を記録可能なガス検出端末装置と、を備えるガス検出システムにおける前記ガス検出端末装置であって、
前記撮像画像を記録可能な記録部と、
前記撮像画像を表示可能な表示部と、
前記撮像画像中にマーキングを設定可能なマーキング設定部と、
前記撮像装置から前記撮像画像を撮像したときの、撮像位置、前記マーキングが施された撮像対象までの距離、及び、撮像方向を含む情報を撮像情報として取得する撮像情報取得部と、
前記撮像情報及び前記マーキングの情報を関連付けて記憶する記憶部と、
を備えるガス検出端末装置。 - 第1の時間に前記撮像装置によって撮像したときの前記撮像情報と、前記記憶部に記憶されている、前記第1の時間よりも過去の時間に前記撮像装置によって撮像したときの前記撮像情報及び前記マーキングの情報と、に基づいて、前記第1の時間に前記撮像装置によって撮像された撮像画像中でのマーキング位置を算出する、マーキング位置算出部を、さらに備える、
請求項1に記載のガス検出端末装置。 - 前記撮像情報取得部が取得する前記撮影位置は、前記撮影装置のGPS位置である、
請求項1又は2に記載のガス検出端末装置。 - 前記撮像情報取得部が取得する前記撮像対象までの距離は、前記撮影装置の焦点距離である、
請求項1又は2に記載のガス検出端末装置。 - 前記撮影情報を外部装置に送信する送信部を、さらに備える、
請求項1から4のいずれか一項に記載のガス検出端末装置。 - 前記撮影情報を外部装置から受信する受信部を、さらに備える、
請求項1から5のいずれか一項に記載のガス検出端末装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019-124713 | 2019-07-03 | ||
| JP2019124713A JP2022120219A (ja) | 2019-07-03 | 2019-07-03 | ガス検出端末装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2021002263A1 true WO2021002263A1 (ja) | 2021-01-07 |
Family
ID=74101068
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2020/024853 Ceased WO2021002263A1 (ja) | 2019-07-03 | 2020-06-24 | ガス検出端末装置 |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2022120219A (ja) |
| WO (1) | WO2021002263A1 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022136541A (ja) * | 2021-03-08 | 2022-09-21 | 株式会社フジタ | ガス検出マップ生成システム及びガス検出マップ生成方法 |
| JP2022136542A (ja) * | 2021-03-08 | 2022-09-21 | 株式会社フジタ | ガスの移動検出装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013038668A (ja) * | 2011-08-10 | 2013-02-21 | Casio Comput Co Ltd | 表示装置、表示方法及びプログラム |
| WO2018038149A1 (ja) * | 2016-08-24 | 2018-03-01 | コニカミノルタ株式会社 | ガス検出情報表示システム及びガス検出情報表示プログラム |
| JP2018128318A (ja) * | 2017-02-07 | 2018-08-16 | コニカミノルタ株式会社 | ガス検知装置 |
-
2019
- 2019-07-03 JP JP2019124713A patent/JP2022120219A/ja active Pending
-
2020
- 2020-06-24 WO PCT/JP2020/024853 patent/WO2021002263A1/ja not_active Ceased
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013038668A (ja) * | 2011-08-10 | 2013-02-21 | Casio Comput Co Ltd | 表示装置、表示方法及びプログラム |
| WO2018038149A1 (ja) * | 2016-08-24 | 2018-03-01 | コニカミノルタ株式会社 | ガス検出情報表示システム及びガス検出情報表示プログラム |
| JP2018128318A (ja) * | 2017-02-07 | 2018-08-16 | コニカミノルタ株式会社 | ガス検知装置 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022136541A (ja) * | 2021-03-08 | 2022-09-21 | 株式会社フジタ | ガス検出マップ生成システム及びガス検出マップ生成方法 |
| JP2022136542A (ja) * | 2021-03-08 | 2022-09-21 | 株式会社フジタ | ガスの移動検出装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2022120219A (ja) | 2022-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2018012945A1 (en) | Method and device for obtaining image, and recording medium thereof | |
| US20120251996A1 (en) | Method and system for plant management by augmentation reality | |
| US9551597B2 (en) | Measurement system with image capture capabilities | |
| US10732123B2 (en) | Inspection routing systems and methods | |
| JP2016018463A (ja) | 状態変化管理システム及び状態変化管理方法 | |
| KR20130101922A (ko) | 열화상 내에서 특정부위 추적이 가능한 열상시스템 및 이를 이용한 특정부위의 추적방법 | |
| US10254748B2 (en) | Inspection work support device, inspection work support system, and inspection work support method | |
| JP2015102880A (ja) | 作業支援システム | |
| US20210235023A1 (en) | Image-capturing support device and image-capturing support method | |
| WO2021002263A1 (ja) | ガス検出端末装置 | |
| US12335655B2 (en) | Thermal imaging asset inspection systems and methods | |
| CN113227719B (zh) | 测定系统、测定装置、测定方法以及程序 | |
| JP2017143387A (ja) | 画像処理制御方法、画像処理制御プログラムおよび画像処理制御装置 | |
| CN104238980A (zh) | 信息显示设备和信息显示方法 | |
| WO2020003644A1 (ja) | 漏洩ガス検出装置および漏洩ガス検出方法 | |
| WO2019093449A1 (ja) | 計測値読取りシステム、計測値読取り装置及び計測値読取方法 | |
| WO2018158815A1 (ja) | 点検支援装置、点検支援方法および記録媒体 | |
| JP2019065467A (ja) | 杭位置検査装置及び杭位置検査方法 | |
| US9916664B2 (en) | Multi-spectrum segmentation for computer vision | |
| JP2018106439A (ja) | 計測支援装置 | |
| WO2019044346A1 (ja) | 作業支援システム | |
| JP2015005700A (ja) | 検査システム、検査方法及び端末 | |
| JP2014179958A5 (ja) | ||
| WO2020262463A1 (ja) | ガス検出端末装置及びガス検出システム | |
| WO2018158818A1 (ja) | 点検支援装置、点検支援方法および記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20834767 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 20834767 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: JP |