WO2019065439A1 - レーダー装置及び物標検出方法 - Google Patents
レーダー装置及び物標検出方法 Download PDFInfo
- Publication number
- WO2019065439A1 WO2019065439A1 PCT/JP2018/034783 JP2018034783W WO2019065439A1 WO 2019065439 A1 WO2019065439 A1 WO 2019065439A1 JP 2018034783 W JP2018034783 W JP 2018034783W WO 2019065439 A1 WO2019065439 A1 WO 2019065439A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- target
- radar device
- transmission
- spread
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/50—Systems of measurement based on relative movement of target
- G01S13/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
- G01S13/583—Velocity or trajectory determination systems; Sense-of-movement determination systems using transmission of continuous unmodulated waves, amplitude-, frequency-, or phase-modulated waves and based upon the Doppler effect resulting from movement of targets
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/415—Identification of targets based on measurements of movement associated with the target
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/06—Systems determining position data of a target
- G01S13/42—Simultaneous measurement of distance and other co-ordinates
Definitions
- the present invention relates to a radar device and a target detection method for detecting surrounding targets (targets), and more particularly to a technology for recognizing a type of a specific target.
- ITS Intelligent Transport Systems
- a safety support operation for example, a warning, for detecting a surrounding environment (for example, a surrounding vehicle, a pedestrian, an obstacle, etc.) by a sensor and avoiding or reducing danger based on the detection result.
- Techniques for performing brake control etc. have been put to practical use.
- a radar device using a millimeter wave having a wavelength of 1 to 10 mm (frequency: 30 to 300 GHz) is known (so-called millimeter wave radar).
- the millimeter wave radar uses radio waves, and therefore has the advantage of being able to maintain a certain sensitivity even in bad weather such as rain or fog.
- a high resolution millimeter wave radar using a wide band 79 GHz band (77 to 81 GHz) millimeter wave has been put to practical use.
- FMCW Frequency Modulated-Continuous Wave
- a frequency-modulated continuous wave millimeter wave
- a reflected wave reflected by a target object hereinafter referred to as a "target"
- the position (distance and azimuth) and relative velocity of the target are detected.
- Patent Documents 1 to 5 discloses that a two-wheeled vehicle is identified using an image captured by a camera and information obtained by a radar device.
- Patent No. 4992367 gazette JP, 2014-153256, A JP, 2009-211212, A JP 2007-139650 A Patent No. 5959581
- An object of the present invention is to provide a radar device and a target detection method capable of highly accurately recognizing the type of a specific target (in particular, a two-wheeled vehicle) by the radar device alone.
- a radar device is A transmitter configured to transmit a transmission wave based on a transmission signal toward a target; A reception unit that receives a reflected wave generated by the transmission wave reflected by the target and generates a reception signal; A target detection unit for acquiring information on a target based on the transmission signal and the reception signal; The target detection unit Calculate the relative velocities of multiple detection points in the same target, It is characterized in that the type of the target is determined based on the spread of the relative speed.
- the target detection method is A target detection method for detecting a target using a radar device, comprising: A first step of transmitting a transmission wave based on the transmission signal toward a target; A second step of receiving a reflected wave generated by the transmission wave reflected by the target to generate a reception signal; And a third step of acquiring information on a target based on the transmission signal and the reception signal, The third step is Calculate the relative velocities of multiple detection points in the same target, It is characterized in that the type of the target is determined based on the spread of the relative speed.
- the type of a specific target can be recognized with high accuracy by the radar device alone.
- FIG. 1 is a view showing the configuration of a radar device 1 according to an embodiment of the present invention.
- the radar device 1 is, for example, an FMCW millimeter wave radar using millimeter waves in the 79 GHz band.
- the radar device 1 is disposed, for example, in a front bumper or a rear bumper of a vehicle.
- the radar device 1 detects a surrounding environment (for example, a surrounding vehicle, a pedestrian, an obstacle, etc.) of the vehicle, and outputs information on the surrounding environment to, for example, an electronic control unit (ECU) of the vehicle. .
- the ECU performs, for example, a driving support operation for avoiding or reducing danger based on the information on the surrounding environment output from the radar device 1.
- Information on the surrounding environment includes the position (distance and orientation) and relative velocity of the target.
- the radar device 1 includes a transmitter 10, a receiver 20, a signal processor 30, and the like.
- the radar device 1 can apply a one-chip IC in which the transmission unit 10, the reception unit 20, and the signal processing unit 30 are disposed on one substrate.
- the transmitting unit 10 includes a signal source 11, a directional coupler 12 and a transmitting antenna 13.
- the transmission unit 10 transmits a transmission wave based on a transmission signal toward a target.
- the signal source 11 generates a frequency-modulated transmission signal (FM) by adding a triangular modulation signal to a control voltage of a voltage controlled oscillator (VCO).
- the directional coupler 12 outputs the transmission signal to the transmission antenna 13 and distributes part of the transmission signal to the mixer 22.
- the transmission antenna 13 radiates a transmission signal as a transmission wave around the vehicle. When the transmitted wave reaches the target, it is reflected according to the reflectance of the target.
- the receiving unit 20 includes a receiving antenna 21 and a mixer 22.
- the receiving unit 20 receives a reflected wave generated by the transmission wave reflected by the target and generates a reception signal.
- the receiving antenna 21 receives the reflected wave reflected by the target and outputs it as a received signal.
- the mixer 22 mixes the reception signal output from the reception antenna 21 with the transmission signal output from the directional coupler 12 to generate a beat signal.
- the mixer 22 outputs the reception signal and the beat signal to the signal processing unit 30.
- the signal processing unit 30 includes a target detection unit 31.
- the target detection unit 31 performs information processing such as fast Fourier transform (FFT) on the reception signal and the beat signal to perform frequency analysis, thereby detecting information on the target.
- FFT fast Fourier transform
- the target detection unit 31 detects, for example, the presence of the target based on the frequency distribution of the received signal and the beat signal, and detects the position (distance and orientation) and relative velocity of the detected target. it can.
- Information on the target detected by the target detection unit 31 is output to an ECU of a vehicle that functions as a driving support device, for example, via an external interface (not shown).
- the radar device 1 has distance resolution and orientation resolution such that a plurality of detection points are included in the same target when detecting a target such as a vehicle (including a bicycle).
- FIG. 2 is a flowchart showing an example of target detection processing in the signal processing unit 30 (target detection unit 31).
- the target detection process shown in FIG. 2 is started, for example, by the CPU of the signal processing unit 30 executing a predetermined target detection program when the power of the radar device 1 is turned on.
- the type of the target T moving at the relative speed A specifically, the case where it is determined whether the target T is a two-wheeled vehicle will be described.
- a target T such as a vehicle is present in the observation range of the radar device 1
- features are detected at a plurality of detection points P.
- the target T is a two-wheeled vehicle, since the rotating body that generates the speed component is in the target, a difference occurs in the relative speed observed by the detection point in the target.
- step S101 of FIG. 2 the signal processing unit 30 (target detection unit 31) receives the reception signal and the beat signal output from the receiving unit 20.
- step S102 the signal processing unit 30 calculates the position (distance and orientation) of the detection point P.
- the distance and direction of the detection point P can be determined by frequency analysis of the beat signal and the received signal.
- step S103 the signal processing unit 30 calculates the relative velocity for each detection point P.
- the well-known method by the conventional radar apparatus can be applied to calculation of the position of the detection point P in step S102 and step S103, and relative velocity, detailed description is abbreviate
- the signal processing unit 30 specifies a detection point P in the same target.
- a detection point P for example, a group of detection points P in which the features of the detection points P are within a predetermined range can be regarded as detection points within the same target.
- the feature of the detection point P is a concept including the position of the detection point P and the relative velocity.
- step S105 the signal processing unit 30 calculates the spread (distribution) of the relative velocity based on the feature of the detection point P.
- the detection points P in the same target are clustered based on the features (positions) of the detection points P, and plotted on XY coordinates (see FIG. 4).
- the eigenvectors of the target T are calculated to determine the inclination of the cluster.
- all points are rotated so that the inclination of the cluster is 0 (see FIG. 5).
- the X direction after rotation indicates the length of the target T
- the Y direction indicates the width of the target T.
- the horizontal axis is plotted as the X coordinate after rotation, and the vertical axis is plotted as the relative velocity of the detection point P (see FIG. 6). Then, the horizontal axis direction is divided into a plurality of sections, and the spread of the relative velocity in each section is obtained.
- the shape of the spread of the relative velocity becomes the shape as shown in FIG.
- step S106 of FIG. 2 the signal processing unit 30 determines the type of the target T. Specifically, the type of target T is compared by comparing the shape of the relative speed spread obtained in step S105 with the reference shape of the relative speed spread prepared in advance according to the type of target T. Determine
- the relative velocity of the detection point at the top of the front and rear wheels is theoretically twice the relative velocity of the target T become.
- the relative velocity of the detection point at the lower portion (grounding point) of the front and rear wheels is theoretically zero.
- the relative velocity of the detection point in the portion other than the front and rear wheels such as the frame is equal to the relative velocity of the target T. Therefore, in the vehicle length direction, the spread of the relative velocity becomes large at the position corresponding to the front and rear wheels, and the spread of the relative velocity becomes small at the position corresponding to the portion other than the front and rear wheels such as the frame (see FIG. 6).
- the object T is a two-wheeled vehicle by referring to a reference shape having peaks at positions corresponding to the front and rear wheels in the vehicle length direction.
- a plurality of reference shapes may be prepared depending on the size and type of the two-wheeled vehicle.
- the optimum reference shape can be selected by estimating the features (wheel diameter, wheel spacing, etc.) of the target from the shape of the detection points plotted in a two-dimensional plane.
- the radar device 1 generates the reception signal by receiving the reflected wave generated by the transmission wave reflected by the target T and the transmission unit 10 that transmits the transmission wave based on the transmission signal toward the target T and transmits the transmission wave.
- a target detection unit 31 (signal processing unit 30) for acquiring information on the target T based on the transmission signal and the reception signal.
- the target detection unit 31 calculates relative speeds of a plurality of detection points P in the same target, and determines the type of the target based on the spread of the relative speed.
- the target detection method in the radar device 1 includes a first step of transmitting a transmission wave based on a transmission signal toward the target T, and receiving and receiving a reflected wave generated when the transmission wave is reflected by the target T A second step of generating a signal and a third step of acquiring information on the target T based on the transmission signal and the reception signal.
- the third step calculates relative speeds of a plurality of detection points P in the same target, and determines the type of the target based on the spread of the relative speed.
- the radar device 1 it is possible to recognize with high accuracy the type of a specific target T, specifically, whether or not the target T is a two-wheeled vehicle, by the radar device 1 alone.
- the type of the target T obtained by the radar device 1 is output to the driving assistance device (ECU) of the vehicle as information on the surrounding environment together with the position and relative speed of the target T.
- the driving support device performs a driving support operation for avoiding or reducing the danger based on the information on the surrounding environment.
- the driving support operation controls the braking operation of the vehicle to automatically decelerate or stop the vehicle, controls the steering wheel operation, automatically changes the traveling direction of the vehicle, or the passenger or It includes an operation of giving a warning to the outside (for example, a warning by voice and / or information display).
- the driving support operation is performed based on the information on the surrounding environment, the safety of the own vehicle as well as the safety of other vehicles and pedestrians is significantly improved.
- the present invention is not limited to the above-mentioned embodiment, and can be changed in the range which does not deviate from the gist.
- the features of the target T (such as the distance between the wheels of a two-wheeled vehicle) estimated from the shape of the spread of the relative speed (the relative speed etc) of the target T detected by the radar device 1 It is preferable to determine the type of target in consideration of As a result, the determination system of the type of the target T is improved, and it becomes possible to distinguish between a bicycle and a motorcycle.
- the reference shape for the relative speed spread of the bicycle and the reference shape for the motorcycle may be different from each other so that the bicycle and the motorcycle can be distinguished.
- the reference shape for a bicycle has peaks corresponding to the pedals between peaks corresponding to the front and rear wheels.
- the radar device 1 may be one to which a method other than the FMCW method, such as a pulse method, FSK (Frequency Shift Keying), or the like, is applied.
- the radar apparatus 1 which concerns on this invention can be mounted in the transportation apparatus of a rail vehicle, a ship, a plane, etc. other than a vehicle, or the roadside machine installed in the road.
- the transport device may be mounted in combination with other radar devices (for example, 76 GHz millimeter wave radar) and sensors such as a stereo camera. By mounting a plurality of sensors, the surrounding environment of the transport device can be more accurately grasped.
- the process of determining the type of the target T executed by the target detection unit 31 may be realized by causing the ECU of the vehicle to execute the target detection program. . That is, the target detection method of the present invention can be applied not only to the radar device but also to an external device such as an ECU that uses the output from the radar device. In this case, the existing radar device can be used effectively.
- Reference Signs List 1 radar device 10 transmitting unit 11 signal source 12 directional coupler 13 transmitting antenna 20 receiving unit 21 receiving antenna 22 mixer 30 signal processing unit 31 object detection unit
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Radar Systems Or Details Thereof (AREA)
- Traffic Control Systems (AREA)
Abstract
レーダー装置単独で、特定の物標の種別(特に、二輪車)を高精度で認識できるレーダー装置。レーダー装置は、送信信号に基づく送信波を物標に向けて送信する送信部と、送信波が物標で反射して生じる反射波を受信して受信信号を生成する受信部と、送信信号及び受信信号に基づいて物標に関する情報を取得する物標検出部と、を備える。物標検出部は、同一物標内の複数の検出点の相対速度を算出し、相対速度の拡がりに基づいて、物標の種別を判定する。
Description
本発明は、周辺の物標(ターゲット)を検出するレーダー装置及び物標検出方法に関し、特に、特定の物標の種別を認識する技術に関する。
従来、情報通信技術を利用して道路交通上の問題解決を図る高度道路交通システム(ITS:Intelligent Transport Systems)の開発が進められている。この分野では、例えば、センサーによって車両の周囲環境(例えば、周囲の車両や歩行者、障害物等)を検出し、検出結果に基づいて危険を回避又は軽減するための安全支援動作(例えば警告、ブレーキ制御等)を行う技術が実用化されている。
このセンサーの1つとして、波長が1~10mm(周波数:30~300GHz)のミリ波を使用するレーダー装置が知られている(いわゆるミリ波レーダー)。ミリ波レーダーは電波を使用するため、雨や霧などの悪天候下でも一定の感度を確保できるという利点がある。近年では、広帯域の79GHz帯(77~81GHz)のミリ波を使用した高分解能のミリ波レーダーが実用化されている。
車載用のレーダー装置では、FMCW(Frequency Modulated-Continuous Wave)方式が広く用いられている。FMCW方式では、周波数変調した連続波(ミリ波)を送信し、目標物体(以下、「物標」と称する)で反射してきた反射波を受信する。そして、送受信信号間での周波数差に基づいて、物標の位置(距離及び方位)や相対速度を検出する。
また、レーダー装置によって得られる情報を利用して、静止物の判定、レーダー装置の取付角度の検出、物標(例えば、先行車両)の移動方向の検出、又は物標の種別の判定などを行うことができる(例えば、特許文献1~5)。特許文献5には、カメラによる撮像画像とレーダー装置によって得られる情報を利用して、二輪車の判別を行うことが開示されている。
しかしながら、レーダー装置単独では、物標の種別を高精度で認識することは困難であることから、従来の手法により二輪車の判別を行う場合、カメラの撮像画像を利用することが前提となっている。
本発明の目的は、レーダー装置単独で、特定の物標の種別(特に、二輪車)を高精度で認識できるレーダー装置及び物標検出方法を提供することである。
本発明の一態様に係るレーダー装置は、
送信信号に基づく送信波を物標に向けて送信する送信部と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する受信部と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する物標検出部と、を備え、
前記物標検出部は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定することを特徴とする。
送信信号に基づく送信波を物標に向けて送信する送信部と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する受信部と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する物標検出部と、を備え、
前記物標検出部は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定することを特徴とする。
本発明の一態様に係る物標検出方法は、
レーダー装置を用いて物標を検出する物標検出方法であって、
送信信号に基づく送信波を物標に向けて送信する第1工程と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する第2工程と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する第3工程と、を備え、
前記第3工程は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定することを特徴とする。
レーダー装置を用いて物標を検出する物標検出方法であって、
送信信号に基づく送信波を物標に向けて送信する第1工程と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する第2工程と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する第3工程と、を備え、
前記第3工程は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定することを特徴とする。
本発明によれば、レーダー装置単独で、特定の物標の種別を高精度で認識することができる。
以下、本発明の実施の形態を、図面を参照して詳細に説明する。本実施の形態では、本発明に係るレーダー装置として、車両に搭載される車載用のレーダー装置を例に挙げて説明する。
図1は、本発明の一実施の形態に係るレーダー装置1の構成を示す図である。
レーダー装置1は、例えば79GHz帯のミリ波を利用するFMCW方式のミリ波レーダーである。レーダー装置1は、例えば、車両の前バンパーや後バンパーに配置される。
レーダー装置1は、例えば79GHz帯のミリ波を利用するFMCW方式のミリ波レーダーである。レーダー装置1は、例えば、車両の前バンパーや後バンパーに配置される。
レーダー装置1は、車両の周囲環境(例えば、周囲の車両や歩行者、障害物等)を検出し、周囲環境に関する情報を、例えば、車両の電子制御ユニット(ECU:Electronic Control Unit)に出力する。ECUは、レーダー装置1から出力された周囲環境に関する情報に基づいて、例えば、危険を回避又は軽減するための運転支援動作を行う。周囲環境に関する情報は、物標の位置(距離及び方位)及び相対速度を含む。
図1に示すように、レーダー装置1は、送信部10、受信部20及び信号処理部30等を備える。レーダー装置1には、送信部10、受信部20及び信号処理部30が一枚の基板上に配置されたワンチップICを適用できる。
送信部10は、信号源11、方向性結合器12及び送信アンテナ13を含む。送信部10は、送信信号に基づく送信波を物標に向けて送信する。
信号源11は、電圧制御発振器(VCO:Voltage Controlled Oscillator)の制御電圧に三角波の変調信号を加えることにより、周波数変調(FM:frequency modulation)された送信信号を生成する。
方向性結合器12は、送信信号を送信アンテナ13に出力するとともに、送信信号の一部をミキサー22に分配する。
送信アンテナ13は、送信信号を車両の周囲に送信波として放射する。送信波は物標に到達すると、物標の反射率に応じて反射する。
信号源11は、電圧制御発振器(VCO:Voltage Controlled Oscillator)の制御電圧に三角波の変調信号を加えることにより、周波数変調(FM:frequency modulation)された送信信号を生成する。
方向性結合器12は、送信信号を送信アンテナ13に出力するとともに、送信信号の一部をミキサー22に分配する。
送信アンテナ13は、送信信号を車両の周囲に送信波として放射する。送信波は物標に到達すると、物標の反射率に応じて反射する。
受信部20は、受信アンテナ21及びミキサー22を含む。受信部20は、送信波が物標で反射することにより生じる反射波を受信して受信信号を生成する。
受信アンテナ21は、物標で反射してきた反射波を受信し、受信信号として出力する。
ミキサー22は、受信アンテナ21から出力された受信信号と、方向性結合器12から出力された送信信号とを混合して、ビート信号を生成する。ミキサー22は、受信信号及びビート信号を信号処理部30に出力する。
受信アンテナ21は、物標で反射してきた反射波を受信し、受信信号として出力する。
ミキサー22は、受信アンテナ21から出力された受信信号と、方向性結合器12から出力された送信信号とを混合して、ビート信号を生成する。ミキサー22は、受信信号及びビート信号を信号処理部30に出力する。
信号処理部30は、物標検出部31を含む。物標検出部31は、受信信号及びビート信号に対して高速フーリエ変換(FFT:Fast Fourier Transform)等の処理を実行して周波数解析を行うことにより、物標に関する情報を検出する。物標検出部31は、例えば、受信信号及びビート信号の周波数分布に基づいて、物標の存在を検出するとともに、検出された物標の位置(距離及び方位)及び相対速度を検出することができる。物標検出部31で検出された物標に関する情報は、外部インターフェース(図示略)を介して、例えば、運転支援装置として機能する車両のECUに出力される。
近年では、レーダー装置の高分解能化が進んでおり、同一物標内の複数の検出点における特徴を個別に検出できるようになっている。本実施の形態において、レーダー装置1は、車両(自転車を含む)等の物標を検出する場合に、同一物標内に複数の検出点が含まれるような距離分解能及び方位分解能を有する。
図2は、信号処理部30(物標検出部31)における物標検出処理の一例を示すフローチャートである。図2に示す物標検出処理は、例えば、レーダー装置1の電源投入に伴い、信号処理部30のCPUが所定の物標検出プログラムを実行することにより開始される。
ここでは、図3に示すように、相対速度Aで移動する物標Tの種別、具体的には物標Tが二輪車であるか否かを判定する場合について説明する。図3に示すように、レーダー装置1の観測範囲に車両等の物標Tが存在する場合、複数の検出点Pについて特徴が検出される。また、物標Tが二輪車である場合、速度成分を生じさせる回転体が物標内にあるため、物標内の検出点によって観測される相対速度に違いが生じる。本実施の形態では、検出点間の相対速度の違い(以下、「相対速度の拡がり」と称する)を利用して、物標Tが二輪車であるか否かを判定する。
図2のステップS101において、信号処理部30(物標検出部31)は、受信部20から出力された受信信号及びビート信号を受信する。
ステップS102において、信号処理部30は、検出点Pの位置(距離及び方位)を算出する。検出点Pの距離及び方位は、ビート信号及び受信信号の周波数解析により求めることができる。
ステップS103において、信号処理部30は、検出点Pごとに相対速度を算出する。なお、ステップS102及びステップS103における検出点Pの位置及び相対速度の演算には、従来のレーダー装置による公知の方法を適用することができるので、詳細な説明は省略する。
ステップS104において、信号処理部30は、同一物標内の検出点Pを特定する。例えば、検出点Pの特徴が所定の範囲内にある一群の検出点Pを、同一物標内の検出点であるとみなすことができる。なお、検出点Pの特徴とは、検出点Pの位置及び相対速度を含む概念である。
ステップS105において、信号処理部30は、検出点Pの特徴に基づいて、相対速度の拡がり(分布)を算出する。
具体的には、同一物標内の検出点Pを、検出点Pの特徴(位置)に基づいてクラスタリングし、XY座標上にプロットする(図4参照)。図4において、物標Tの固有ベクトルを演算し、クラスタの傾きを求める。そして、クラスタの傾きが0となるように全点を回転させる(図5参照)。回転後のX方向は物標Tの車長を示し、Y方向は物標Tの車幅を示すことになる。
次いで、横軸を回転後のX座標、縦軸を検出点Pの相対速度として、プロットする(図6参照)。そして、横軸方向を複数の区間に分割し、それぞれの区間における相対速度の拡がりを求める。レーダー装置1において、図5に示すような特徴が得られた場合、相対速度の拡がりの形状は、図7に示す形状となる。
図2のステップS106において、信号処理部30は、物標Tの種別を判定する。具体的には、ステップS105で得られた相対速度の拡がりの形状と、物標Tの種別に応じて予め用意された相対速度の拡がりの基準形状とを比較することにより、物標Tの種別を判定する。
図8に示すように、物標Tが二輪車である場合、前後輪が回転しているため、前後輪の上部における検出点の相対速度は、理論的には物標Tの相対速度の2倍になる。一方、前後輪の下部(接地点)における検出点の相対速度は、理論的には0となる。また、フレーム等の前後輪以外の部分における検出点の相対速度は、物標Tの相対速度と同等となる。したがって、車長方向において、前後輪に対応する位置では、相対速度の拡がりが大きくなり、フレーム等の前後輪以外の部分に対応する位置では、相対速度の拡がりが小さくなる(図6参照)。
これより、車長方向における前後輪に対応する位置にピークを有する基準形状を参照することにより、物標Tが二輪車であるか否かを判定することができる。基準形状は、二輪車の大きさやタイプに応じて複数用意されてもよい。この場合、検出点を2次元平面にプロットした形状から物標の特徴(車輪径、車輪間隔など)を推定することにより、最適な基準形状を選択することができる。
このように、レーダー装置1は、送信信号に基づく送信波を物標Tに向けて送信する送信部10と、送信波が物標Tで反射して生じる反射波を受信して受信信号を生成する受信部20と、送信信号及び受信信号に基づいて物標Tに関する情報を取得する物標検出部31(信号処理部30)と、を備える。物標検出部31は、同一物標内の複数の検出点Pの相対速度を算出し、相対速度の拡がりに基づいて、物標の種別を判定する。
また、レーダー装置1における物標検出方法は、送信信号に基づく送信波を物標Tに向けて送信する第1工程と、送信波が物標Tで反射して生じる反射波を受信して受信信号を生成する第2工程と、送信信号及び受信信号に基づいて物標Tに関する情報を取得する第3工程と、を備える。第3工程は、同一物標内の複数の検出点Pの相対速度を算出し、相対速度の拡がりに基づいて、物標の種別を判定する。
レーダー装置1によれば、レーダー装置1単独で、特定の物標Tの種別、具体的には物標Tが二輪車であるか否かを高精度で認識することができる。
一例として、レーダー装置1で得られた物標Tの種別は、物標Tの位置及び相対速度とともに、周囲環境に関する情報として、車両の運転支援装置(ECU)に出力される。運転支援装置は、周囲環境に関する情報に基づいて、危険を回避又は軽減するための運転支援動作を行う。
ここで、運転支援動作は、車両のブレーキ動作を制御して、車両を自動的に減速又は停止させる動作、ハンドル動作を制御して、車両の走行方向を自動的に変更する動作、搭乗者又は外部に対して警告(例えば、音声及び/又は情報表示による警告)を行う動作を含む。
車両においては、周囲環境に関する情報に基づいて、運転支援動作が行われるので、自車の安全性はもちろん、他車及び歩行者の安全性も格段に向上する。本実施の形態では、車両の周囲を二輪車が走行していることを把握できるので、例えば、車両の運転者に注意喚起を促すこともできる。
以上、本発明者によってなされた発明を実施の形態に基づいて具体的に説明したが、本発明は上記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で変更可能である。
例えば、相対速度の拡がりに加えて、相対速度の拡がりの形状から推定される物標Tの特徴(二輪車の車輪間隔など)やレーダー装置1で検出された物標Tの特徴(相対速度など)を考慮して、物標の種別を判定することが好ましい。これにより、物標Tの種別の判定制度が向上し、自転車と自動二輪車とを判別することも可能となる。
さらには、自転車の場合は前後輪間にペダルが配置されており、この部分にもペダルの回転による速度成分が生じるのに対して、自動二輪車の場合はペダルがない。したがって、相対速度の拡がりの自転車用の基準形状と自動二輪車用の基準形状とを異なる形状とし、自転車と自動二輪車とを判別できるようにしてもよい。具体的には、自転車用の基準形状は、前後輪に対応するピークの間に、ペダルに対応するピークを有するものとなる。
また例えば、レーダー装置1は、パルス方式、FSK(Frequency Shift Keying)等、FMCW方式以外の方式を適用したものであってもよい。
また、本発明に係るレーダー装置1は、車両の他、鉄道車両、船舶、飛行機等の輸送機器、又は道路に設置される路側機に搭載することができる。輸送機器には、その他のレーダー装置(例えば76GHzミリ波レーダー)やステレオカメラ等のセンサーを組み合わせて搭載してもよい。複数のセンサーを搭載することにより、輸送機器の周囲環境をさらに的確に把握することができる。
また、本発明に係るレーダー装置1は、車両の他、鉄道車両、船舶、飛行機等の輸送機器、又は道路に設置される路側機に搭載することができる。輸送機器には、その他のレーダー装置(例えば76GHzミリ波レーダー)やステレオカメラ等のセンサーを組み合わせて搭載してもよい。複数のセンサーを搭載することにより、輸送機器の周囲環境をさらに的確に把握することができる。
また、物標検出部31によって実行される物標Tの種別を判定する処理(図2のステップS105、S106)は、車両のECUに物標検出プログラムを実行させることにより、実現してもよい。すなわち、本発明の物標検出方法は、レーダー装置だけでなく、レーダー装置からの出力を利用するECU等の外部装置に適用することもできる。この場合、既設のレーダー装置を有効利用することができる。
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
2017年9月29日出願の特願2017-191207の日本出願に含まれる明細書、図面および要約書の開示内容は、すべて本願に援用される。
1 レーダー装置
10 送信部
11 信号源
12 方向性結合器
13 送信アンテナ
20 受信部
21 受信アンテナ
22 ミキサー
30 信号処理部
31 物標検出部
10 送信部
11 信号源
12 方向性結合器
13 送信アンテナ
20 受信部
21 受信アンテナ
22 ミキサー
30 信号処理部
31 物標検出部
Claims (5)
- 送信信号に基づく送信波を物標に向けて送信する送信部と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する受信部と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する物標検出部と、を備え、
前記物標検出部は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定する、
レーダー装置。 - 前記物標検出部は、前記相対速度の拡がりに加えて、前記物標に関する情報から推定される前記物標の特徴に基づいて、前記物標の種別を判定する、
請求項1に記載のレーダー装置。 - 前記物標検出部は、前記物標の種別に応じて予め用意された相対速度の拡がりの基準形状と、算出された前記相対速度の拡がりの形状を比較することにより、前記物標の種別を判定する、
請求項1に記載のレーダー装置。 - 前記基準形状は、車長方向における前後輪に対応する位置にピークを有する形状であり、
前記物標検出部は、前記物標が二輪車であるか否かを判定する、
請求項3に記載のレーダー装置。 - レーダー装置を用いて物標を検出する物標検出方法であって、
送信信号に基づく送信波を物標に向けて送信する第1工程と、
前記送信波が前記物標で反射して生じる反射波を受信して受信信号を生成する第2工程と、
前記送信信号及び前記受信信号に基づいて物標に関する情報を取得する第3工程と、を備え、
前記第3工程は、
同一物標内の複数の検出点の相対速度を算出し、
前記相対速度の拡がりに基づいて、前記物標の種別を判定する、
物標検出方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP18860724.6A EP3690484B1 (en) | 2017-09-29 | 2018-09-20 | Radar device and target detection method |
| CN201880052982.5A CN111033311B (zh) | 2017-09-29 | 2018-09-20 | 雷达装置及目标检测方法 |
| US16/640,752 US11467253B2 (en) | 2017-09-29 | 2018-09-20 | Radar device and target detection method |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017191207A JP6989766B2 (ja) | 2017-09-29 | 2017-09-29 | レーダー装置及び物標検出方法 |
| JP2017-191207 | 2017-09-29 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2019065439A1 true WO2019065439A1 (ja) | 2019-04-04 |
Family
ID=65901012
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2018/034783 Ceased WO2019065439A1 (ja) | 2017-09-29 | 2018-09-20 | レーダー装置及び物標検出方法 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11467253B2 (ja) |
| EP (1) | EP3690484B1 (ja) |
| JP (1) | JP6989766B2 (ja) |
| CN (1) | CN111033311B (ja) |
| WO (1) | WO2019065439A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020234962A1 (ja) * | 2019-05-20 | 2020-11-26 | 三菱電機株式会社 | 障害物検出装置 |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111208501B (zh) * | 2019-12-30 | 2022-06-03 | 广州市番禺奥莱照明电器有限公司 | 基于雷达探测的多目标聚合方法、装置、设备和存储介质 |
| US11235785B2 (en) * | 2020-02-21 | 2022-02-01 | BlueSpace.ai, Inc. | Method for object avoidance during autonomous navigation |
| CN111580060B (zh) * | 2020-04-21 | 2022-12-13 | 北京航空航天大学 | 目标姿态识别的方法、装置和电子设备 |
| JP7572920B2 (ja) * | 2021-07-21 | 2024-10-24 | 京セラ株式会社 | 電子機器、電子機器の制御方法、及びプログラム |
| CN116359913A (zh) * | 2021-12-22 | 2023-06-30 | 比亚迪股份有限公司 | 目标车辆类型识别方法、装置、车辆及介质 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0527018A (ja) * | 1991-07-18 | 1993-02-05 | Fujitsu Ltd | レーダ信号処理装置 |
| JPH1172557A (ja) * | 1997-08-29 | 1999-03-16 | Mitsubishi Electric Corp | 車載用レーダ装置 |
| JP2007139650A (ja) | 2005-11-21 | 2007-06-07 | Fujitsu Ltd | 移動方向検知レーダシステム |
| JP2009211212A (ja) | 2008-03-01 | 2009-09-17 | Nissan Motor Co Ltd | 先行車検出装置およびこれを用いた車速制御装置 |
| JP4992367B2 (ja) | 2006-09-28 | 2012-08-08 | トヨタ自動車株式会社 | 物体検出装置、物体検出方法、およびコンピュータが実行するためのプログラム |
| JP2012229948A (ja) * | 2011-04-25 | 2012-11-22 | Denso Corp | 歩行者検出装置、歩行者検出方法およびプログラム |
| JP2014153256A (ja) | 2013-02-12 | 2014-08-25 | Denso Corp | 車載レーダ装置 |
| JP2015075388A (ja) * | 2013-10-09 | 2015-04-20 | 住友電気工業株式会社 | 電波センサおよび検知方法 |
| JP5959581B2 (ja) | 2010-03-17 | 2016-08-02 | 本田技研工業株式会社 | 車両周辺監視装置 |
| US20160307418A1 (en) * | 2013-12-13 | 2016-10-20 | Utc Fire & Security Americas Corporation, Inc. | Selective intrusion detection systems |
| JP2017191207A (ja) | 2016-04-13 | 2017-10-19 | パナソニック デバイスSunx株式会社 | 表示装置 |
Family Cites Families (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5959581A (ja) | 1982-09-29 | 1984-04-05 | 本田技研工業株式会社 | 自動二輪車の車体フレ−ム |
| US6035951A (en) * | 1997-04-16 | 2000-03-14 | Digital Control Incorporated | System for tracking and/or guiding an underground boring tool |
| CN1186936C (zh) * | 2000-05-22 | 2005-01-26 | 松下电器产业株式会社 | 图像通信终端 |
| JP5098675B2 (ja) * | 2008-01-31 | 2012-12-12 | トヨタ自動車株式会社 | 車両用物体認識装置 |
| JP5434854B2 (ja) * | 2010-09-13 | 2014-03-05 | ミツミ電機株式会社 | 電子機器、検出データの補正方法及びセンサ装置 |
| JP2012189338A (ja) * | 2011-03-08 | 2012-10-04 | Panasonic Corp | レーダ装置及び移動機器用レーダシステム |
| JP2013036978A (ja) * | 2011-07-12 | 2013-02-21 | Denso Corp | 物標検出装置,壁判定方法 |
| DE102011121560A1 (de) * | 2011-12-20 | 2013-06-20 | Daimler Ag | Verfahren zur Detektion und Klassifikation von Objekten |
| US9247896B2 (en) * | 2012-01-04 | 2016-02-02 | Nellcor Puritan Bennett Ireland | Systems and methods for determining respiration information using phase locked loop |
| KR20140011148A (ko) * | 2012-07-17 | 2014-01-28 | (주)아이티에스뱅크 | 협의의 구간단속 시스템 |
| DE102012021461A1 (de) | 2012-10-31 | 2013-05-08 | Daimler Ag | Verfahren und Vorrichtung zur Klassifikation von Fahrzeugen |
| CN103065151B (zh) * | 2012-11-04 | 2017-02-22 | 北京工业大学 | 一种基于深度信息的车辆识别方法 |
| US10013477B2 (en) * | 2012-11-19 | 2018-07-03 | The Penn State Research Foundation | Accelerated discrete distribution clustering under wasserstein distance |
| JP6092596B2 (ja) * | 2012-11-28 | 2017-03-08 | 富士通テン株式会社 | レーダ装置、および、信号処理方法 |
| KR101449604B1 (ko) * | 2013-02-07 | 2014-10-13 | 경희대학교 산학협력단 | 비모수적 베이지언 모션 인식 방법 및 그 장치 |
| WO2014147980A1 (ja) * | 2013-03-18 | 2014-09-25 | パナソニック株式会社 | レーダ装置 |
| JP5897517B2 (ja) * | 2013-08-21 | 2016-03-30 | シャープ株式会社 | 自律移動体 |
| KR102144668B1 (ko) * | 2013-11-05 | 2020-08-14 | 현대모비스 주식회사 | 가변 파형을 이용하여 허위 타켓 판별하는 차량용 레이더 및 이를 이용한 허위 타겟 판별 방법 |
| CN203981598U (zh) * | 2014-05-27 | 2014-12-03 | 上海美诺福科技股份有限公司 | 试样缺陷识别装置 |
| JP6375744B2 (ja) | 2014-07-16 | 2018-08-22 | 株式会社デンソー | 車載レーダ装置および報知システム |
| US20170312574A1 (en) * | 2015-01-05 | 2017-11-02 | Sony Corporation | Information processing device, information processing method, and program |
| JP6392152B2 (ja) | 2015-03-24 | 2018-09-19 | パナソニック株式会社 | レーダ装置および走行車両検知方法 |
| US9599706B2 (en) * | 2015-04-06 | 2017-03-21 | GM Global Technology Operations LLC | Fusion method for cross traffic application using radars and camera |
| US9784829B2 (en) * | 2015-04-06 | 2017-10-10 | GM Global Technology Operations LLC | Wheel detection and its application in object tracking and sensor registration |
| JP6411942B2 (ja) * | 2015-04-23 | 2018-10-24 | 株式会社デンソー | 物体認識装置 |
| CN105912977B (zh) * | 2016-03-31 | 2021-03-30 | 电子科技大学 | 基于点聚类的车道线检测方法 |
| CN106482700B (zh) * | 2016-10-12 | 2019-06-04 | 东南大学 | 一种草图直接成图的数字化房产面积测量方法 |
| CN106991401A (zh) * | 2017-04-06 | 2017-07-28 | 大连理工大学 | 一种基于K‑means聚类算法的车道线检测方法 |
-
2017
- 2017-09-29 JP JP2017191207A patent/JP6989766B2/ja active Active
-
2018
- 2018-09-20 EP EP18860724.6A patent/EP3690484B1/en active Active
- 2018-09-20 CN CN201880052982.5A patent/CN111033311B/zh active Active
- 2018-09-20 WO PCT/JP2018/034783 patent/WO2019065439A1/ja not_active Ceased
- 2018-09-20 US US16/640,752 patent/US11467253B2/en active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0527018A (ja) * | 1991-07-18 | 1993-02-05 | Fujitsu Ltd | レーダ信号処理装置 |
| JPH1172557A (ja) * | 1997-08-29 | 1999-03-16 | Mitsubishi Electric Corp | 車載用レーダ装置 |
| JP2007139650A (ja) | 2005-11-21 | 2007-06-07 | Fujitsu Ltd | 移動方向検知レーダシステム |
| JP4992367B2 (ja) | 2006-09-28 | 2012-08-08 | トヨタ自動車株式会社 | 物体検出装置、物体検出方法、およびコンピュータが実行するためのプログラム |
| JP2009211212A (ja) | 2008-03-01 | 2009-09-17 | Nissan Motor Co Ltd | 先行車検出装置およびこれを用いた車速制御装置 |
| JP5959581B2 (ja) | 2010-03-17 | 2016-08-02 | 本田技研工業株式会社 | 車両周辺監視装置 |
| JP2012229948A (ja) * | 2011-04-25 | 2012-11-22 | Denso Corp | 歩行者検出装置、歩行者検出方法およびプログラム |
| JP2014153256A (ja) | 2013-02-12 | 2014-08-25 | Denso Corp | 車載レーダ装置 |
| JP2015075388A (ja) * | 2013-10-09 | 2015-04-20 | 住友電気工業株式会社 | 電波センサおよび検知方法 |
| US20160307418A1 (en) * | 2013-12-13 | 2016-10-20 | Utc Fire & Security Americas Corporation, Inc. | Selective intrusion detection systems |
| JP2017191207A (ja) | 2016-04-13 | 2017-10-19 | パナソニック デバイスSunx株式会社 | 表示装置 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020234962A1 (ja) * | 2019-05-20 | 2020-11-26 | 三菱電機株式会社 | 障害物検出装置 |
| JPWO2020234962A1 (ja) * | 2019-05-20 | 2021-10-28 | 三菱電機株式会社 | 障害物検出装置 |
| JP7134344B2 (ja) | 2019-05-20 | 2022-09-09 | 三菱電機株式会社 | 障害物検出装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111033311A (zh) | 2020-04-17 |
| US11467253B2 (en) | 2022-10-11 |
| EP3690484A4 (en) | 2021-06-16 |
| JP2019066287A (ja) | 2019-04-25 |
| EP3690484B1 (en) | 2024-04-10 |
| JP6989766B2 (ja) | 2022-01-12 |
| EP3690484A1 (en) | 2020-08-05 |
| US20210132191A1 (en) | 2021-05-06 |
| CN111033311B (zh) | 2023-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6989766B2 (ja) | レーダー装置及び物標検出方法 | |
| US10429502B2 (en) | Target detecting device for avoiding collision between vehicle and target captured by sensor mounted to the vehicle | |
| US10371815B2 (en) | Radar module, transport apparatus, and object detection method | |
| JPWO2007111130A1 (ja) | レーダ装置および移動体 | |
| JP2017538183A (ja) | 車線変更検出 | |
| JP6927132B2 (ja) | 運転支援システムおよび方法 | |
| WO2016009945A1 (ja) | 車載レーダ装置、報知システムおよび車載レーダ装置の走行車両検出方法 | |
| JP3733914B2 (ja) | 車両の物体検出装置,車両の安全制御方法,自動車 | |
| US6943727B2 (en) | Length measurement with radar | |
| JP2010038841A (ja) | レーダ装置及び物標検出方法 | |
| JP4992367B2 (ja) | 物体検出装置、物体検出方法、およびコンピュータが実行するためのプログラム | |
| JP2014115119A (ja) | 物体検出装置 | |
| JP5659587B2 (ja) | レーダ装置、路側器及び車載装置 | |
| KR20200040154A (ko) | 대형 차량 접근 경보 장치 및 그의 제어 방법 | |
| JP2004295620A (ja) | 車両衝突可能性検出装置 | |
| JP2010181257A (ja) | 障害物検出装置 | |
| JP2020012702A (ja) | 車両用レーダ装置 | |
| WO2019065442A1 (ja) | レーダー装置及び物標検出方法 | |
| WO2020241235A1 (ja) | 電子機器、電子機器の制御方法、及びプログラム | |
| JP2014211332A (ja) | レーダ装置、レーダ装置の制御方法 | |
| JP7328863B2 (ja) | 制御装置 | |
| US12187271B2 (en) | Control device for controlling safety device in vehicle |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18860724 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| ENP | Entry into the national phase |
Ref document number: 2018860724 Country of ref document: EP Effective date: 20200429 |