[go: up one dir, main page]

WO2012039004A1 - 運転支援装置 - Google Patents

運転支援装置 Download PDF

Info

Publication number
WO2012039004A1
WO2012039004A1 PCT/JP2010/005735 JP2010005735W WO2012039004A1 WO 2012039004 A1 WO2012039004 A1 WO 2012039004A1 JP 2010005735 W JP2010005735 W JP 2010005735W WO 2012039004 A1 WO2012039004 A1 WO 2012039004A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
recommended route
obstacle
calculation unit
host vehicle
Prior art date
Application number
PCT/JP2010/005735
Other languages
English (en)
French (fr)
Inventor
涼太郎 鈴木
達也 三次
信太郎 渡邉
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to PCT/JP2010/005735 priority Critical patent/WO2012039004A1/ja
Priority to JP2012534829A priority patent/JPWO2012039004A1/ja
Publication of WO2012039004A1 publication Critical patent/WO2012039004A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/165—Anti-collision systems for passive traffic, e.g. including static obstacles, trees

Definitions

  • the present invention relates to a driving support apparatus that provides driving support to a driver of a vehicle.
  • the distance to the obstacle is detected by scanning with a sonar while driving next to the parking space, and the size of the parking space is calculated by estimating the true obstacle shape from the detected points. Accordingly, a driving support device that notifies the driver of whether or not parking is possible has been put into practical use.
  • a so-called around view monitor that provides a driver with a bird's-eye view image including the entire host vehicle has also been put into practical use (for example, see Patent Document 1).
  • the conventional driving support device is configured as described above, providing the driver with a bird's-eye view image including information on whether or not parking and the entire host vehicle can greatly help to recognize the vehicle surroundings.
  • an appropriate travel route and driving operation for performing narrow road traffic, parking in a parking space, and the like are not known, and the driver cannot intuitively grasp. For this reason, it is necessary for the driver to perform a driving operation while considering the traveling route and the approach method while viewing the bird's-eye view image.
  • the present invention has been made to solve the above-described problems, and it is an object of the present invention to assist the driver not only in recognizing the situation around the vehicle but also in intuitively grasping the driving operation.
  • the driving support device is installed in the host vehicle and acquires an image capturing unit that captures at least a vehicle peripheral image in the traveling direction, a display unit that displays the vehicle peripheral image, and position information of at least an obstacle in the traveling direction.
  • An obstacle position calculation unit a host vehicle position calculation unit that acquires position information of the host vehicle, a memory unit that stores vehicle information related to the host vehicle, and an obstacle position information acquired by the obstacle position calculation unit
  • the recommended route that the vehicle at the position acquired by the vehicle position calculation unit can travel without touching the obstacle is calculated from the vehicle information stored in the memory unit, and the vehicle periphery image captured by the imaging unit is calculated.
  • a travel locus calculation unit that displays the recommended route on the display unit in a superimposed manner.
  • the driver can intuitively grasp not only the vehicle surrounding situation but also the driving operation by displaying the recommended route on which the host vehicle can travel without touching the obstacle on the vehicle surrounding image. I can help you.
  • FIG. 6 is a diagram illustrating an operation according to a situation of the driving support device according to the first embodiment. It is a figure which shows the example of a screen display of the driving assistance device which concerns on Embodiment 1, and makes the display color of a driveable line variable according to the difficulty of a recommended route. It is a figure showing the operation
  • FIG.7 (a) is only a driveable line
  • FIG.7 (b) is only an ideal line
  • FIG.7 (c) is a display example of both a driveable line and an ideal line. It is.
  • FIG. 1 includes an ECU (Electronic Control Unit) 1, an imaging unit 7 that is installed in the front of the vehicle and images the front of the vehicle, and an obstacle that is installed in the front of the vehicle and detects an obstacle in front of the vehicle. It includes a detection unit 8, a vehicle state detection unit 9 that detects the amount and direction of movement of the vehicle, a display unit 10 that displays an image, and an alarm output unit 11 that generates an alarm.
  • a camera that is installed in the front part of the vehicle and captures an image in front of the vehicle is used as the imaging unit 7.
  • a sonar ultrasonic sensor
  • vehicle state detection unit 9 a wheel speed sensor or the like that detects the rotation speed of the wheel is used.
  • display unit 10 a monitor such as a car navigation mounted on a vehicle is used.
  • alarm output unit 11 a speaker or buzzer such as car navigation and car audio mounted on the vehicle is used.
  • the ECU 1 executes the processing contents of the obstacle position calculation unit 4, the vehicle position calculation unit 5, and the travel locus calculation unit 6 by executing a memory 2 that stores data and a program stored in a program memory (not shown). CPU3 to perform.
  • the program includes an obstacle position calculation unit 4 that calculates the position and shape of an obstacle from information of the imaging unit 7 and the obstacle detection unit 8, and an automatic calculation of the position of the host vehicle from information of the vehicle state detection unit 9.
  • the vehicle position calculation unit 5 and a travel locus calculation unit that calculates a recommended route that allows the vehicle to travel without touching an obstacle and displays the recommended route on the display unit 10 by superimposing the recommended route on the vehicle front image captured by the imaging unit 7. 6 is described.
  • FIG. 2 is a flowchart showing the operation of the driving support apparatus.
  • FIG. 3 is a diagram showing the operation according to the situation, and shows the situation of the own vehicles 21a and 21b traveling on the road 20, the data processing performed by the driving support device, and the screen display of the display unit 10 along the timeline. . It is assumed that vehicle information such as the size, wheel width, and turning performance of the host vehicle is registered in the memory 2 in advance.
  • the imaging unit 7 captures a vehicle front image that is the traveling direction during traveling of the host vehicle, and accumulates it in the memory 2 (step ST1).
  • the vehicle position calculation unit 5 calculates the vehicle position at this time (step ST2).
  • the own vehicle position calculation unit 5 sets virtual two-dimensional coordinates, and on the two-dimensional coordinates, the vehicle front image captured in step ST1 and the own vehicle position (imaging position) when the vehicle front image is captured. And set.
  • the own vehicle position calculation unit 5 adds the moving distance based on the wheel speed pulse input from the vehicle state detection unit 9 to the previous imaging position to obtain the current imaging position, and sets this as the own vehicle position. Good.
  • the travel locus calculation unit 6 selects a frame in which the entire vehicle at the current vehicle position fits from the vehicle front images captured in the past and stored in the memory 2, and the vehicle of the selected frame is selected.
  • the own vehicle icon and the recommended route are overlaid on the vehicle position coordinates (step ST3). This own vehicle icon may be registered in the memory 2 in advance. If the recommended route calculated by the traveling locus calculation unit 6 in the past exists in the memory 2, the traveling locus calculation unit 6 overlays the recommended route. In the example of FIG. 3, at the current position of the host vehicle 21b, an image 31 in which the host vehicle icon 26 is overlaid on the vehicle front image 30 captured at the position of the previous host vehicle 21a is generated.
  • the traveling locus calculation unit 6 determines whether the recommended route does not exist in the memory 2 and is not displayed on the display unit 10 or whether the host vehicle deviates from the recommended route already displayed (step ST4).
  • the recommended route is not displayed (step ST4 “YES”), and in step ST5, the obstacle detection unit 8 detects the presence or absence of an obstacle ahead of the vehicle.
  • the sonar constituting the obstacle detection unit 8 outputs the distance and direction from the vehicle to the obstacle to the obstacle position calculation unit 4 (step ST5 “YES”), and the obstacle position.
  • the calculation unit 4 identifies the obstacle on the vehicle front image (step ST6).
  • Step ST4 “NO”) returns to Step ST1. If there is no obstacle (step ST5 “NO”), in step ST11, the travel route calculation unit 6 deletes the recommended route overlaid on the vehicle front image.
  • a known method may be used as the obstacle identification method in step ST6.
  • two methods will be described: (1) when a camera and sonar are used in combination, and (2) when only a camera is used.
  • the sonar that constitutes the obstacle detection unit 8 may have the following measurement error factors. Need to be eliminated. -Obstacle distance measurement error: temperature / humidity, wind, signal processing circuit variation, other disturbances-Error by estimation logic: Reflection surface identification, shape curve approximation method-Error due to obstacle shape
  • sonar serves as an auxiliary role for identifying an obstacle on an image captured by a camera, and distance measurement is performed on the image, thereby eliminating the influence of the error factors described above. Improve repeatability and absolute accuracy.
  • the obstacle position calculation unit 4 calculates the vehicle front stored in the memory 2 based on the distance and direction from the vehicle position to the obstacle and the information of the sonar detectable area. The contour is detected by identifying the obstacle on the image.
  • the obstacle position calculation unit 4 calculates the closest point of the obstacle outline with the vehicle icon coordinates and sets it as an obstacle on the two-dimensional coordinates. There is no depth information for the set obstacle.
  • an image processing method for extracting an outline from an image is a known technique, and thus description thereof is omitted.
  • the obstacle position calculation unit 4 recognizes the three-dimensional shape of the obstacle by the motion stereo method using the plurality of frames of the vehicle front image stored in the memory 2. Project as an obstacle on two-dimensional coordinates. Since the motion stereo method is a known technique, description thereof is omitted.
  • the obstacle position calculation unit 4 identifies the position coordinates of the obstacle on the vehicle front image by the method (1) or (2), and subsequently calculates the distance from the own vehicle position to the obstacle. If there are a plurality of obstacles, the interval between the obstacles is also calculated. Further, the obstacle position calculation unit 4 sets the coordinates of the target position to be reached while avoiding the obstacle, or recognizes the road from the image. Information such as the distance to the obstacle, the distance between obstacles, the target position, and the road area calculated by the obstacle position calculation unit 4 is output to the memory 2. In the example of FIG. 3, when the obstacle detection unit 8 detects the obstacles 22 and 23 at the position of the host vehicle 21 b traveling on the road 20, the obstacle position calculation unit 4 displays the obstacles 22 and 23 on the image. The position and shape, the distance between the obstacles 22 and 23, the distance to the host vehicle 21b, and the area of the road 20 are calculated.
  • the target position 25 is determined.
  • the position may be adjusted as long as the target position 25 deviates from the road 20 in a situation such as a corner at the front. Note that this target position setting method is an example, and the present invention is not limited to this method.
  • the vehicle width, turning performance, etc. which are registered in advance in the memory 2 by the travel locus calculation unit 6 are subsequently determined.
  • the travel locus calculation unit 6 calculates one or both of the ideal line 27 and the travelable line 28 as a recommended route.
  • the ideal line 27 has the same width as the vehicle width, and is the shortest route that follows the vehicle position to the target position 25 without contacting the obstacles 22 and 23.
  • the travelable line 28 is an area having a width that allows the vehicle to go around as much as possible without going backward from the vehicle position to the target position 25 to bypass an obstacle.
  • a calculation condition may be set such that the recommended route does not protrude from the road area, or the recommended route does not approach the obstacle more than a predetermined distance (for example, 50 cm).
  • the travel locus calculation unit 6 overlays the recommended route on the vehicle front image and displays it on the display unit 10. Displayed (step ST9).
  • the recommended route to be displayed on the screen is one or both of the ideal line 27 and the travelable line 28 calculated in step ST7. In the image 31 of FIG. 3, both the ideal line 27 and the travelable line 28 are displayed. If the vehicle travels within the range of the recommended route displayed on the screen, the vehicle can pass without touching the obstacle, so that the driver does not need to think about the travel route and can intuitively operate the vehicle.
  • the travel locus calculation unit 6 stores the calculated recommended route in the memory 2.
  • the travel locus calculation unit 6 may determine the difficulty level of the driving operation necessary to follow the recommended route from the calculated width and shape of the recommended route, and change the display color according to the difficulty level. .
  • the difficulty level is determined based on, for example, the width of the recommended route. If the width of the recommended route is wider than the allowable range, the difficulty level is “low”. If the recommended route width is within the allowable range, the difficulty level is “medium”. The difficulty level is “High”. In addition to this, the determination may be made in any manner such as determining the degree of difficulty according to the steering angle of the steering wheel for following the recommended route.
  • FIG. 4 shows a screen display example in which the display color of the travelable line is variable according to the degree of difficulty determined based on the recommended route width.
  • the distance between the obstacles 22 and 23 is the widest in FIG. 4 (a) and the narrowest in FIG. 4 (c).
  • the ideal line 27 has a constant vehicle width, but the widths of the travelable lines 28a, 28b, and 28c become narrower as the distance between the obstacles 22 and 23 becomes narrower. Therefore, in FIG. 4A, the travel locus calculation unit 6 determines that the travelable line 28a has the difficulty level “low” and sets the display color to “blue”.
  • the difficulty level 28b is set to “medium” difficulty and the display color is set to “yellow”.
  • FIG. 4A the travel locus calculation unit 6 determines that the travelable line 28a has the difficulty level “low” and sets the display color to “blue”.
  • the difficulty level 28b is set to “medium” difficulty and the display color is set to “yellow”.
  • the difficulty level 28c is set to “high” difficulty and the display color is set to “red”.
  • the display color of the ideal line 27 is “green” in common in FIGS.
  • the display color of the recommended route is changed according to the difficulty level of the driving operation, and the driver is alerted.
  • step ST8 “NO” if the recommended route does not exist as a result of the calculation (step ST8 “NO”), the traveling locus calculation unit 6 displays the warning screen on the display unit 10 or causes the alarm output unit 11 to output an alarm sound. The driver is informed that obstacle avoidance is impossible and there is a risk of collision (step ST10). Next, if there is a recommended route being displayed, the travel locus calculation unit 6 deletes it from the vehicle front image and also deletes it from the memory 2 (step ST11).
  • Step ST9 When the recommended route is displayed on the screen in step ST9, the process starts again from step ST1, and the recommended route registered in the memory 2 is also overlaid when the own vehicle icon is overlaid on the vehicle forward image in step ST3 (step ST3). ST1 to ST3).
  • step ST4 it is determined whether or not the own vehicle position newly acquired by the own vehicle position calculation unit 5 is on the recommended route being displayed, and if the own vehicle position exists on the recommended route. (Step ST4 “NO”), Steps ST1 to ST3 are repeated to update the display screen in accordance with the traveling of the host vehicle.
  • step ST5 Perform the following processing. Note that when the vehicle position deviates from the recommended route, the display unit 10 may display a warning screen, or the warning output unit 11 may output a warning sound to alert the driver.
  • the driving support device is installed in the front portion of the host vehicle and captures the vehicle forward image in the forward direction, the display unit 10 that displays the vehicle forward image, the obstacle detection unit 8 that is installed in the front part of the host vehicle and detects an obstacle in the forward direction, the detection information of the obstacle detection unit 8 and the vehicle front image captured by the imaging unit 7 in the forward direction.
  • An obstacle position calculation unit 4 that calculates position information of a certain obstacle
  • a host vehicle position calculation unit 5 that calculates position information of the host vehicle using detection information of the vehicle state detection unit 9, and the size and turning of the host vehicle
  • the vehicle position calculation unit 5 calculates the position.
  • a recommended route that allows a vehicle to travel without touching obstacles Calculated by the imaging unit 7 has a configuration and a traveling locus calculating section 6 to be displayed on the display unit 10 superimposes the recommended route to the vehicle front image taken.
  • the driver can recognize the situation around the vehicle from the display screen, and can also know from the display of the recommended route whether the passage is possible, so that the driving support device can intuitively grasp the driving operation. Therefore, it is possible to provide a driving support device that supports the driving operation so that it can be intuitively grasped.
  • the own vehicle position calculation unit 5 determines whether or not the own vehicle has deviated from the recommended route using the calculated position information of the own vehicle, and the traveling locus calculation unit 6 Since the recommended route is recalculated and displayed again when the vehicle deviates from the recommended route, it is possible to support the driving operation by displaying the recommended route according to the movement of the host vehicle. Further, since the recommended route is recalculated when the vehicle departs (when the vehicle deviates or the recommended route is not displayed in step ST4 in the flowchart of FIG. 2), the calculation load on the CPU 3 can be reduced.
  • the recommended route can be recalculated every time by omitting the process of step ST4. Specifically, each time the own vehicle position calculation unit 5 calculates the own vehicle position along with the movement of the own vehicle, the travel locus calculation unit 6 recalculates the recommended route and redisplays when the recommended route changes. Configure as follows. Even in this configuration, it is possible to support the driving operation by displaying a recommended route according to the movement of the host vehicle.
  • the alarm output unit 11 that issues an alarm is provided, and when the travel locus calculation unit 6 recalculates the recommended route, there is a recommended route that the host vehicle can travel without touching an obstacle.
  • the alarm output unit 11 is configured to issue an alarm when it does not exist. For this reason, the driver can be warned that it will contact the obstacle in the future regardless of the positional relationship between the actual vehicle and the obstacle.
  • the warning method for the driver may be an alarm sound output, a warning screen display, or both a sound and a screen display.
  • the travel locus calculation unit 6 is configured to change the display color of the recommended route according to the difficulty level of the driving operation that follows the recommended route. For this reason, the driver can intuitively grasp the difficulty level of the driving operation.
  • Embodiment 2 Since the driving support apparatus of the second embodiment has the same configuration as that of the driving support apparatus shown in FIG. 1, the following description will be given with reference to FIG. However, in the first embodiment, the imaging unit 7 and the obstacle detection unit 8 are installed in the front part of the vehicle, and the driving support is performed when the host vehicle is traveling forward. In the mode 2, the imaging unit 7 and the obstacle detection unit 8 are installed in the rear part of the vehicle, and the traveling support is performed when the host vehicle is traveling backward.
  • FIG. 5 is a diagram showing the operation according to the situation of the driving support device, along the timeline, the situation of the own vehicles 41a and 41b traveling on the road 40, the data processing performed by the driving support device, and the display unit 10 screen displays are shown.
  • the imaging unit 7 captures a vehicle rear image in the traveling direction while the host vehicle is traveling, and stores the image in the memory 2 (step). ST1).
  • the own vehicle position calculation unit 5 acquires information on the movement amount and the direction from the vehicle state detection unit 9, and calculates the own vehicle position at the time of imaging (step ST2).
  • the travel locus calculation unit 6 selects a frame in which the entire vehicle at the current vehicle position is contained from the vehicle rear images captured in the past and stored in the memory 2, and the vehicle of the selected frame is selected.
  • the own vehicle icon is overlaid on the vehicle position coordinates (step ST3).
  • step ST5 an image 51 obtained by overlaying the vehicle icon 45 on the vehicle rear image 50 captured at the position of the host vehicle 41a is displayed on the screen at the position of the host vehicle 41b.
  • the traveling locus calculation unit 6 also overlays the recommended route.
  • the travel locus calculation unit 6 determines whether the recommended route is not displayed on the display unit 10 or whether the host vehicle has deviated from the recommended route already displayed (step ST4), and the obstacle detection unit 8 detects the vehicle.
  • the presence / absence of an obstacle behind the vehicle is detected (step ST5), and the obstacle position calculation unit 4 is based on the detection result of the obstacle detection unit 8 and the captured image of the imaging unit 7, or based only on the captured image of the imaging unit 7.
  • the obstacle is specified (step ST6).
  • the obstacle position calculation unit 4 identifies the other vehicles 42 and 43 parked in the parking space behind the host vehicle 41 b as obstacles, and further from the host vehicle 41 b to the other vehicles 42 and 43. , The distance between the other vehicles 42 and 43, the road area, etc. are obtained and output to the memory 2. Subsequently, the obstacle position calculation unit 4 receives the target position from the driver and sets the target position.
  • the display unit 10 is a touch panel type, and the driver designates the target position 44 on the image 51 displayed on the display unit 10.
  • the traveling locus calculation unit 6 uses the vehicle information registered in the memory 2 in advance, A recommended route in which the host vehicle 41b can park without contacting the other vehicles 42 and 43 parked on the road 40 is calculated (step ST7).
  • the recommended route may be calculated in the same manner as in the first embodiment, and one or both of the ideal line 46 and the travelable line 47 are calculated. If the recommended route exists (step ST8 “YES”), the travel locus calculation unit 6 overlays the recommended route on the image 51 and outputs it to the memory 2 (step ST9). Furthermore, the travel locus calculation unit 6 may determine the difficulty level of the driving operation necessary for following the recommended route, and may change the display color according to the difficulty level.
  • step ST8 “NO” the traveling locus calculation unit 6 displays a warning screen on the display unit 10 or outputs a warning sound on the warning output unit 11, thereby Is informed that parking in the designated parking space (target position) is impossible (step ST10).
  • step ST10 the travel locus calculation unit 6 deletes it from the vehicle rear image and also deletes it from the memory 2 (step ST11).
  • FIG. 6A is a plan view showing the positional relationship between the host vehicle and the recommended route
  • FIG. 6B is a display screen at this time.
  • a travelable line 47 is displayed on the screen as a recommended route.
  • the travel locus calculation unit 6 receives the determination. Displays “STOP” on the display unit 10 to warn that the vehicle has deviated from the travelable line.
  • the warning method for the driver may be an alarm sound output.
  • the driving support device is installed at the rear part of the host vehicle and captures the rear vehicle image in the reverse direction
  • the display unit 10 that displays the rear vehicle image, Parking in the reverse direction using the obstacle detection unit 8 installed at the rear of the vehicle and detecting a parked vehicle in the reverse direction, the detection information of the obstacle detection unit 8 and the vehicle rear image captured by the imaging unit 7
  • An obstacle position calculation unit 4 that calculates vehicle position information
  • a host vehicle position calculation unit 5 that calculates position information of the host vehicle using detection information of the vehicle state detection unit 9, and the size and turning performance of the host vehicle Proceeding to the rear of the vehicle without touching the obstacle from the position of the host vehicle to the target position when the memory 2 storing the vehicle information and the designation of an arbitrary target position on the vehicle rear image are received from the driver
  • the recommended recommended route is calculated and applied to the rear image of the vehicle.
  • the driver can recognize the vehicle surrounding situation from the display screen, and can also know whether or not parking is possible from the display of the recommended route, so that the driving operation can be intuitively grasped. Therefore, it is possible to provide a driving support device that supports the driving operation so that it can be intuitively grasped.
  • the recommended route is recalculated and displayed again, or the position of the own vehicle is calculated. It is also possible to recalculate the recommended route each time, and to display again when the recommended route changes with the movement of the host vehicle. According to this configuration, it is possible to support the driving operation by displaying the recommended route according to the movement of the host vehicle. Further, when the travel locus calculation unit 6 recalculates the recommended route, the alarm output unit 11 is configured to issue an alarm when there is no recommended route that allows the vehicle to travel without contacting an obstacle. Thus, it is possible to warn the driver that the obstacle will be contacted in the future regardless of the actual positional relationship between the host vehicle and the obstacle. Further, by configuring the display color to change according to the difficulty level of the driving operation that follows the recommended route, the driver can intuitively grasp the difficulty level of the driving operation.
  • the imaging unit 7 and the obstacle detection unit 8 are installed at the front of the vehicle, and in the second embodiment, the imaging unit 7 and the obstacle detection unit 8 are installed at the rear of the vehicle. 7 and the obstacle detection unit 8 may be installed in the front part and the rear part of the vehicle, respectively, and may be used properly according to the traveling direction of the vehicle.
  • the driving support apparatus is configured to display only the ideal line, only the travelable line, or both the ideal line and the travelable line as the recommended route, but preferably the ideal line. It is preferable to display both the vehicle and the travelable line on the screen.
  • the travelingable line is displayed as shown in FIG. 7 (a)
  • the ideal line is the shortest route on which the host vehicle can travel to a target position without touching an obstacle, and is not necessarily the center of the travelable line. For example, if the user simply tries to follow the center line 62 of the travelable line 61, it will protrude like a broken line 63 with a slight steering delay.
  • the driver is forced to correct the rudder frequently in order to follow the own vehicle 60 along the ideal line 64, or travel at a lower speed than necessary. This can make the driver feel difficult. However, since there is actually a margin, it is not necessary to travel along the line so strictly.
  • any combination of each embodiment, any component of each embodiment can be modified, or any component in each embodiment can be omitted. .
  • the driving support device calculates a recommended route that can travel while avoiding contact with an obstacle and displays the recommended route on the vehicle periphery image. It is also suitable for use in a driving support device that supports driving operation of parking.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

　障害物位置計算部４が障害物の位置を計算し、自車位置計算部５が自車両の位置を計算する。走行軌跡計算部６は自車両が障害物への接触を回避して走行できる推奨ルートを計算して、撮像部７が撮像した車両周辺画像に推奨ルートを重ねて表示部１０に表示させる。推奨ルートが存在しない場合は警報出力部１１が警報を発して、将来的に障害物に接触する恐れがあることを警告する。

Description

運転支援装置
　この発明は、車両の運転者に対して運転支援を行う運転支援装置に関する。
　従来、駐車スペース横を走行しながらソナーでスキャンして障害物までの距離を検出し、検出点群から真の障害物形状を推定することで駐車スペースの大きさを計算して、大きさに応じて駐車可否を運転者に通知する運転支援装置が実用化されている。また、自車両全体を含む鳥瞰画像を運転者に提供する、いわゆるアラウンドビューモニタも実用化されている（例えば、特許文献１参照）。
特開２００７－１０２７９８号公報
　従来の運転支援装置は以上のように構成されているので、駐車可否の情報および自車両全体を含む鳥瞰画像を運転者に提供すれば、車両周辺状況の認識に大きな助けとなる。しかしながら、狭路の通行、駐車スペースへの駐車等を行うための適切な走行経路および運転操作は分からず、運転者が直感的に把握できないという課題があった。そのため、鳥瞰画像を見ながら運転者自身が走行経路およびアプローチの仕方を考えて運転操作を行う必要があった。
　この発明は、上記のような課題を解決するためになされたもので、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することを目的とする。
　この発明の運転支援装置は、自車両に設置され、少なくとも進行方向の車両周辺画像を撮像する撮像部と、車両周辺画像を表示する表示部と、少なくとも進行方向にある障害物の位置情報を取得する障害物位置計算部と、自車両の位置情報を取得する自車位置計算部と、自車両に関する車両情報を記憶しているメモリ部と、障害物位置計算部が取得した障害物の位置情報およびメモリ部の記憶している車両情報より、自車位置計算部が取得した位置にある自車両が障害物に接触せず走行できる推奨ルートを計算し、撮像部が撮像した車両周辺画像に当該推奨ルートを重ねて表示部に表示させる走行軌跡計算部とを備えるものである。
　この発明によれば、自車両が障害物に接触せず走行できる推奨ルートを車両周辺画像に重ねて表示することにより、運転者が車両周辺状況の認識だけでなく、運転操作を直感的に把握できるように支援することができる。
この発明の実施の形態１に係る運転支援装置の構成を示すブロック図である。 実施の形態１に係る運転支援装置の動作を示すフローチャートである。 実施の形態１に係る運転支援装置の状況に応じた動作を表す図である。 実施の形態１に係る運転支援装置の画面表示例を示す図であり、推奨ルートの難易度に応じて走行可能ラインの表示色を可変にする。 この発明の実施の形態２に係る運転支援装置の、状況に応じた動作を表す図である。 実施の形態２に係る運転支援装置の状況に応じた動作を表す図であり、自車逸脱の警告画面を示す。 推奨ルートの画面表示例を示す図であり、図７（ａ）は走行可能ラインのみ、図７（ｂ）は理想ラインのみ、図７（ｃ）は走行可能ラインおよび理想ラインの両方の表示例である。
　以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
　図１に示す運転支援装置は、ＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ　Ｃｏｎｔｒｏｌ　Ｕｎｉｔ）１と、車両前部に設置され車両前方を撮像する撮像部７と、車両前部に設置され車両前方に障害物を検出する障害物検出部８と、車両の移動量および向き等を検出する車両状態検出部９と、画像を表示する表示部１０と、警報を発生する警報出力部１１とを備える。本実施の形態１では、撮像部７として、車両前部に設置され車両前方の画像を撮像するカメラを用いる。また、障害物検出部８として、車両前部に設置され車両前方に存在する障害物までの距離を検知するソナー（超音波センサ）を用いる。車両状態検出部９として、車輪の回転数を検知する車輪速センサ等を用いる。表示部１０として、車両に搭載されたカーナビゲーション等のモニタを用いる。警報出力部１１として、車両に搭載されたカーナビゲーション、カーオーディオ等のスピーカまたはブザーを用いる。
　ＥＣＵ１は、データを記憶するメモリ２と、不図示のプログラムメモリに格納されたプログラムを実行して障害物位置計算部４、自車位置計算部５、および走行軌跡計算部６の処理内容を実行するＣＰＵ３とを有する。このプログラムには、撮像部７と障害物検出部８の情報から障害物の位置および形状を計算する障害物位置計算部４と、車両状態検出部９の情報から自車両の位置を計算する自車位置計算部５と、障害物に自車両が接触せず走行できる推奨ルートを計算し、撮像部７が撮像した車両前方画像に当該推奨ルートを重ねて表示部１０に表示させる走行軌跡計算部６の処理内容が記述されている。
　次に、運転支援装置の動作を説明する。
　図２は運転支援装置の動作を示すフローチャートである。図３は状況に応じた動作を表す図であり、タイムラインに沿って、道路２０を走行中の自車両２１ａ，２１ｂの状況、運転支援装置が行うデータ処理、表示部１０の画面表示を表す。
　メモリ２には、予め自車両の寸法、車輪幅、旋回性能等の車両情報が登録されているものとする。
　撮像部７は、自車両の走行中に進行方向である車両前方画像を撮像し、メモリ２に蓄積する（ステップＳＴ１）。また、このときの自車位置を自車位置計算部５が計算する（ステップＳＴ２）。自車位置計算部５は仮想の２次元座標を設定して、この２次元座標上に、ステップＳＴ１で撮像した車両前方画像と、その車両前方画像を撮像したときの自車位置（撮像位置）とを設定する。自車位置計算部５は、前回の撮像位置に、車両状態検出部９から入力される車輪速パルスに基づく移動距離を加算して、今回の撮像位置を求め、これを自車位置とすればよい。
　続いて、走行軌跡計算部６は、過去に撮像してメモリ２に蓄積してある車両前方画像の中から、今回の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンおよび推奨ルートをオーバーレイする（ステップＳＴ３）。この自車アイコンは予めメモリ２に登録しておけばよい。また、過去に走行軌跡計算部６が計算した推奨ルートがメモリ２に存在していれば、走行軌跡計算部６はその推奨ルートをオーバーレイする。図３の例では、今回の自車両２１ｂの位置において、過去の自車両２１ａの位置で撮像した車両前方画像３０に自車アイコン２６をオーバーレイした画像３１が生成される。
　続いて、走行軌跡計算部６は、メモリ２に推奨ルートが存在せず表示部１０に未表示か、既に表示している推奨ルートから自車両が逸脱したかを判定する（ステップＳＴ４）。ここでは、推奨ルート未表示とし（ステップＳＴ４“ＹＥＳ”）、続くステップＳＴ５にて障害物検出部８が車両前方の障害物の有無を検知する。障害物検出部８を構成するソナーは、車両前方の障害物を検知すると、車両から障害物までの距離および方向を障害物位置計算部４へ出力し（ステップＳＴ５“ＹＥＳ”）、障害物位置計算部４がその障害物を車両前方画像上に特定する（ステップＳＴ６）。
　一方、走行軌跡計算部６が推奨ルートを表示部１０に表示させている場合、または、自車位置が表示中の推奨ルート上に存在しており逸脱せず走行中と判断できる場合には（ステップＳＴ４“ＮＯ”）、ステップＳＴ１に戻る。また、障害物が存在しない場合には（ステップＳＴ５“ＮＯ”）、ステップＳＴ１１にて、走行軌跡計算部６が車両前方画像にオーバーレイしていた推奨ルートを消去する。
　ステップＳＴ６の障害物特定の方法としては公知の方法を用いればよい。ここでは（１）カメラとソナーを併用する場合、（２）カメラのみ使用する場合の２つの方法を説明する。
（１）カメラとソナーを併用する場合
　障害物検出部８を構成するソナーは、以下のような計測誤差要因が考えられ、障害物をより正確に特定するためには繰り返し精度の誤差の影響を排除する必要がある。
　・障害物の距離計測誤差：温湿度、風、信号処理回路のばらつき、その他外乱
　・推定ロジックによる誤差：反射面の特定、形状の曲線近似方法
　・障害物の形状による誤差
　そこで、本実施の形態１では、ソナーはカメラで撮像した画像上で障害物を特定するための補助的な役割とし、距離計測は画像上で行うことで、上記の誤差要因の影響をなくし、繰り返し精度および絶対精度の向上を図る。具体的には、ステップＳＴ６にて障害物位置計算部４が、自車位置から障害物までの距離および方向と、ソナーの検知可能エリアの情報とに基づいて、メモリ２に蓄積された車両前方画像上で当該障害物を特定して輪郭を検出する。次いで障害物位置計算部４は、障害物の輪郭のうち自車アイコン座標との最接近点を計算して、２次元座標上に障害物として設定する。設定された障害物に奥行き情報はない。なお、画像上から輪郭を抽出する画像処理方法は公知の技術であるため説明は省略する。
（２）カメラのみ使用する場合
　ステップＳＴ６にて、障害物位置計算部４がメモリ２に蓄積された複数フレームの車両前方画像を用い、モーションステレオ法により障害物の立体的な形状を認識して、２次元座標上に障害物として投影する。モーションステレオ法は公知の技術であるため説明は省略する。
　障害物位置計算部４は、上記（１）または（２）の方法により障害物の位置座標を車両前方画像上に特定し、続けて自車位置から障害物までの距離を計算する。また、障害物が複数ある場合には、障害物同士の間隔も計算する。さらに、障害物位置計算部４は障害物を回避して到達する目標位置の座標を設定したり、画像上から道路を認識したりする。障害物位置計算部４が算出した障害物までの距離、障害物同士の間隔、目標位置、道路エリア等の情報はメモリ２へ出力する。図３の例では、道路２０を走行中の自車両２１ｂの位置にて障害物検出部８が障害物２２，２３を検知すると、障害物位置計算部４が画像上で障害物２２，２３の位置および形状、障害物２２，２３同士の間隔、自車両２１ｂまでの距離を計算すると共に、道路２０のエリアを計算する。
　障害物位置計算部４による目標位置の設定方法としては、例えば障害物２２，２３の中点２４を決定し、中点２４を中心にした自車両２１ｂの点対照の位置を求めて目標位置２５に設定する。また、前方が曲がり角などの状況で、目標位置２５が道路２０から外れるようであれば位置を調整してもよい。なお、この目標位置設定方法は一例であり、この方法に限定されるものではない。
　このようにして仮想の２次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部６がメモリ２に予め登録されている車幅、旋回性能等の車両情報を用いて、自車両２１ｂが道路２０上を障害物２２，２３に接触せずに走行可能な推奨ルートを計算する（ステップＳＴ７）。走行軌跡計算部６は推奨ルートとして理想ライン２７および走行可能ライン２８のいずれか一方、または両方を計算する。理想ライン２７は、車幅と同じ幅を持ち、障害物２２，２３に接触せずに自車位置から目標位置２５までを辿る最短経路とする。また、走行可能ライン２８は、自車位置から目標位置２５まで後戻りせず最大限大回りして障害物を迂回することのできる幅を持ったエリアとする。また、推奨ルートが道路エリアからはみ出さないようにしたり、推奨ルートが障害物へ所定距離（例えば、５０ｃｍ）以上接近しないようにしたりといった計算条件を設定してもよい。
　計算の結果、障害物２２，２３を回避走行可能な推奨ルートが存在する場合（ステップＳＴ８“ＹＥＳ”）、走行軌跡計算部６はその推奨ルートを車両前方画像にオーバーレイして、表示部１０に表示する（ステップＳＴ９）。画面表示する推奨ルートは、ステップＳＴ７で計算した理想ライン２７および走行可能ライン２８のいずれか一方、または両方とする。図３の画像３１では、理想ライン２７と走行可能ライン２８の両方が表示されている。画面表示された推奨ルートの範囲内で自車両を走行させれば障害物に接触することなく通行できるので、運転者自身が走行経路を考える必要がなくなり、直感的に運転操作できるようになる。
　また、走行軌跡計算部６は計算した推奨ルートをメモリ２に記憶させる。
　なお、走行軌跡計算部６は、計算した推奨ルートの幅および形状より、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。難易度は例えば推奨ルートの幅を基準に判定することとし、推奨ルートの幅が許容範囲より広ければ難易度「低」、許容範囲内であれば難易度「中」、許容範囲より狭ければ難易度「高」となる。この他にも、推奨ルートを辿るためのハンドルの操舵角の大きさに応じて難易度を判定するなど、どのように判定してもよい。
　図４は、推奨ルート幅を基準に判定した難易度に応じて走行可能ラインの表示色を可変にした画面表示例を示す。障害物２２，２３の間隔が図４（ａ）で最も広く、図４（ｃ）で最も狭い。この場合、理想ライン２７は車幅で一定であるが、走行可能ライン２８ａ，２８ｂ，２８ｃの幅は障害物２２，２３の間隔が狭まるに応じて狭くなる。そのため、図４（ａ）では走行軌跡計算部６が走行可能ライン２８ａを難易度「低」と判定して表示色を「青」に設定する。図４（ｂ）では走行可能ライン２８ｂを難易度「中」、表示色を「黄」に設定する。図４（ｃ）では走行可能ライン２８ｃを難易度「高」、表示色を「赤」に設定する。理想ライン２７の表示色は、図４（ａ）～（ｃ）共通で「緑」とする。このように、運転操作の難易度に応じて推奨ルートの表示色を変更し、運転者に注意喚起する。
　一方、計算の結果、推奨ルートが存在しない場合（ステップＳＴ８“ＮＯ”）、走行軌跡計算部６は表示部１０に警告画面を表示させるか、警報出力部１１に警報音を出力させるかして、障害物回避が不可能であり衝突の恐れがあることを運転者に知らせる（ステップＳＴ１０）。次いで走行軌跡計算部６は、表示中の推奨ルートがあれば車両前方画像から消去し、メモリ２からも消去する（ステップＳＴ１１）。
　ステップＳＴ９で推奨ルートを画面表示させた場合、再びステップＳＴ１から処理を開始し、ステップＳＴ３で車両前方画像に自車アイコンをオーバーレイする際にメモリ２に登録されている推奨ルートもオーバーレイさせる（ステップＳＴ１～ＳＴ３）。続くステップＳＴ４では、自車位置計算部５が新たに取得した自車位置が、表示中の推奨ルート上に存在するか否かを判定し、自車位置が推奨ルート上に存在していれば（ステップＳＴ４“ＮＯ”）、ステップＳＴ１～ＳＴ３を繰り返し行って表示画面を自車両の走行に合わせて更新する。
　一方、自車位置が推奨ルートから逸脱した場合、または、推奨ルートが表示されていないか既に消去された場合は（ステップＳＴ４“ＹＥＳ”）、推奨ルートの再計算を行う必要があるのでステップＳＴ５以降の処理を行う。なお、自車位置が推奨ルートから逸脱した場合に表示部１０が警告画面を表示したり、警報出力部１１が警報音を出力したりして、運転者に注意喚起してもよい。
　以上より、実施の形態１によれば、運転支援装置は、自車両の前部に設置されて前進方向の車両前方画像を撮像する撮像部７と、車両前方画像を表示する表示部１０と、自車両の前部に設置されて前進方向にある障害物を検知する障害物検出部８と、障害物検出部８の検知情報と撮像部７の撮像した車両前方画像とを用いて前進方向にある障害物の位置情報を計算する障害物位置計算部４と、車両状態検出部９の検知情報を用いて自車両の位置情報を計算する自車位置計算部５と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ２と、障害物位置計算部４が計算した障害物の位置情報およびメモリ２の記憶している車両情報より、自車位置計算部５が計算した位置にある自車両が障害物に接触せず走行できる推奨ルートを計算し、撮像部７が撮像した車両前方画像に当該推奨ルートを重ねて表示部１０に表示させる走行軌跡計算部６とを備える構成にした。これによって運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から通行が可能かどうかが分かるようになるので、運転支援装置が運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
　また、実施の形態１によれば、自車位置計算部５は、計算した自車両の位置情報を用いて推奨ルートから自車両が逸脱したか否かを判定し、走行軌跡計算部６は自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したので、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。また、自車逸脱の場合（図２のフローチャートではステップＳＴ４にて自車逸脱または推奨ルート未表示の場合）に推奨ルートの再計算をするようにしたので、ＣＰＵ３の演算負荷を軽減できる。
　なお、ステップＳＴ４の処理を省略して、毎回推奨ルートの再計算を行うことも可能である。具体的には、自車位置計算部５が自車両の移動に伴い自車位置を計算する都度、走行軌跡計算部６が推奨ルートを再計算し、当該推奨ルートが変化した場合に表示し直すように構成する。この構成の場合にも、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。
　また、実施の形態１によれば、警報を発する警報出力部１１を備え、走行軌跡計算部６は、推奨ルートを再計算する際、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部１１に警報を発させるように構成した。このため、実際の自車両と障害物との位置関係にかかわらず、将来的に障害物に接触することを運転者に警告できる。なお、運転者への警告方法は、警報音の出力でも、警告画面の表示でもよく、あるいは音と画面表示の両方でもよい。
　また、実施の形態１によれば、走行軌跡計算部６は、推奨ルートを辿る運転操作の難易度に応じて、当該推奨ルートの表示色を変化させるように構成した。このため、運転者が運転操作の難易度を直感的に把握できる。
実施の形態２．
　本実施の形態２の運転支援装置は、図１に示す運転支援装置と図面上では同様の構成であるため、以下では図１を援用して説明する。ただし、上記実施の形態１では車両前部に撮像部７および障害物検出部８を設置して、自車両が前方へ走行している際の走行支援を行う構成であったが、本実施の形態２では車両後部に撮像部７および障害物検出部８を設置して、自車両が後方へ走行している際の走行支援を行う構成にする。
　以下では、駐車時に後退する場合を例に用いて、本実施の形態２に係る運転支援装置のパーキングモードの動作を説明する。図５は、運転支援装置の状況に応じた動作を表した図であり、タイムラインに沿って、道路４０を走行中の自車両４１ａ，４１ｂの状況、運転支援装置が行うデータ処理、表示部１０の画面表示を表す。
　運転支援装置の動作は、上記実施の形態１の図２と同じフローであり、先ず撮像部７が自車両の走行中に進行方向である車両後方画像を撮像し、メモリ２に蓄積する（ステップＳＴ１）。また、自車位置計算部５が車両状態検出部９から移動量および向きの情報を取得し、撮像時の自車位置を計算する（ステップＳＴ２）。続いて、走行軌跡計算部６は、過去に撮像してメモリ２に蓄積してある車両後方画像の中から、現在の自車位置の自車両全体が収まるフレームを選択し、選択したフレームの自車位置座標に自車アイコンをオーバーレイする（ステップＳＴ３）。図５の例では、自車両４１ａの位置で撮像した車両後方画像５０に自車アイコン４５をオーバーレイした画像５１が、自車両４１ｂの位置で画面表示される。また、メモリ２に推奨ルートが記憶されていれば、走行軌跡計算部６はその推奨ルートもオーバーレイする。続いて走行軌跡計算部６は、推奨ルートが表示部１０に未表示か、または既に表示している推奨ルートから自車両が逸脱したかを判定し（ステップＳＴ４）、障害物検出部８が車両後方の障害物の有無を検知し（ステップＳＴ５）、障害物位置計算部４が障害物検出部８の検知結果および撮像部７の撮像画像に基づいて、または撮像部７の撮像画像のみに基づいて障害物を特定する（ステップＳＴ６）。
　図５の例では、障害物位置計算部４が、自車両４１ｂの後方の駐車スペースに駐車してある他車両４２，４３を障害物として特定し、さらに自車両４１ｂから他車両４２，４３までの距離、他車両４２，４３同士の間隔、道路エリア等を求めてメモリ２へ出力する。続けて障害物位置計算部４は運転者から目標位置を受け付けて、目標位置を設定する。例えば表示部１０をタッチパネル式にして、運転者が表示部１０に表示された画像５１上に目標位置４４を指定する。
　このようにして仮想の２次元座標上に自車位置、障害物位置、目標位置および道路エリアが決まると、続いて走行軌跡計算部６がメモリ２に予め登録されている車両情報を用いて、自車両４１ｂが道路４０上を駐車中の他車両４２，４３に接触せずに駐車可能な推奨ルートを計算する（ステップＳＴ７）。推奨ルートの計算は上記実施の形態１と同様に行えばよく、理想ライン４６および走行可能ライン４７のいずれか一方、または両方を計算する。そして、走行軌跡計算部６は推奨ルートが存在すれば（ステップＳＴ８“ＹＥＳ”）、その推奨ルートを画像５１にオーバーレイすると共にメモリ２に出力する（ステップＳＴ９）。さらに、走行軌跡計算部６は、推奨ルートを辿るために必要な運転操作の難易度を判定して、難易度に応じて表示色を可変にしてもよい。
　一方、推奨ルートが存在しなければ（ステップＳＴ８“ＮＯ”）、走行軌跡計算部６は表示部１０に警告画面を表示させるか、警報出力部１１に警報音を出力させるかして、運転者が指定した駐車スペース（目標位置）への駐車が不可能であることを知らせる（ステップＳＴ１０）。次いで走行軌跡計算部６は、表示中の推奨ルートがあれば車両後方画像から消去し、メモリ２からも消去する（ステップＳＴ１１）。
　さらに、ステップＳＴ４にて自車両が推奨ルート上から逸脱した場合に、運転者に注意喚起する構成にしてもよい。図６（ａ）は、自車両と推奨ルートの位置関係を示す平面図であり、図６（ｂ）はこのときの表示画面である。この例では推奨ルートとして走行可能ライン４７が画面表示されており、自車位置計算部５が走行可能ライン４７から自車両４１が逸脱したことを判定すると、その判定を受けて走行軌跡計算部６が表示部１０に「ＳＴＯＰ」の文字を表示させて、自車両が走行可能ラインから逸脱したことを警告する。なお、運転者への警告方法は、警告画面の表示に加え（または警告画面の表示に代えて）、警報音の出力でもよい。
　以上より、実施の形態２によれば、運転支援装置は、自車両の後部に設置されて後退方向の車両後方画像を撮像する撮像部７と、車両後方画像を表示する表示部１０と、自車両の後部に設置されて後退方向にある駐車車両を検知する障害物検出部８と、障害物検出部８の検知情報と撮像部７の撮像した車両後方画像とを用いて後退方向にある駐車車両の位置情報を計算する障害物位置計算部４と、車両状態検出部９の検知情報を用いて自車両の位置情報を計算する自車位置計算部５と、自車両の寸法、旋回性能といった車両情報を記憶しているメモリ２と、運転者から車両後方画像上の任意の目標位置の指定を受けた場合に、自車両の位置から目標位置まで障害物に接触せずに車両後方へ進行できる推奨ルートを計算し、車両後方画像に当該推奨ルートを重ねて表示させる走行軌跡計算部６とを備える構成にした。このため、運転者は表示画面から車両周辺状況が認識できる上に、推奨ルートの表示から駐車が可能かどうかが分かるようになるので、運転操作を直感的に把握できる。よって、運転操作を直感的に把握できるように支援する運転支援装置を提供することができる。
　また、実施の形態２でも上記実施の形態１と同様に、自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すように構成したり、または、自車両の位置を計算する都度推奨ルートを再計算し、自車両の移動に伴い推奨ルートが変化した場合に表示し直すように構成したりしてもよい。この構成によれば、自車両の移動に合わせた推奨ルートを表示して運転操作を支援できる。さらに、走行軌跡計算部６が推奨ルートを再計算する際に、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に警報出力部１１に警報を発させるように構成することにより、実際の自車両と障害物との位置関係にかかわらず将来的に障害物に接触することを運転者に警告できる。また、推奨ルートを辿る運転操作の難易度に応じて表示色を変化させるように構成することにより、運転者が運転操作の難易度を直感的に把握できる。
　上記実施の形態１では撮像部７および障害物検出部８を車両前部に設置し、上記実施の形態２では車両後部に設置する構成としたが、これに限定されるものではなく、撮像部７および障害物検出部８を車両前部および後部にそれぞれ設置して、車両の進行方向に応じて使い分ける構成であってもよい。
　また、上記実施の形態１，２に係る運転支援装置は、推奨ルートとして理想ラインのみ、走行可能ラインのみ、または理想ラインと走行可能ラインの両方を画面表示する構成としたが、好ましくは理想ラインと走行可能ラインの両方を画面表示する構成がよい。
　走行可能ラインのみ画像表示する場合、図７（ａ）に示すように、自車両６０を走行可能ライン６１内で走行中、どのくらい余裕があるのか直感的に分からないため、少しの操作ミス等で突然範囲外に出てしまう場合がある。これは、走行可能ライン６１のみでは適切な走行軌跡が示されていないので、余裕のない位置を走行していても運転者には分からないためである。適切な走行軌跡は理想ラインで示されるが、理想ラインは自車両が障害物に接触せず目標位置まで走行できる最短経路であり、走行可能ラインの中央とは限らない。例えば、単純に走行可能ライン６１の中央ライン６２を辿ろうとすると、わずかな舵遅れで破線６３のようにはみ出してしまう。
　一方、理想ラインのみ画面表示する場合、図７（ｂ）に示すように、自車両６０を理想ライン６４に沿わせるために頻繁な舵の修正を強いられたり、必要以上に低速で走行するようになったりと、運転者に難しさを感じさせてしまう可能性がある。しかし、実際には余裕があるので、それほど厳密にラインに沿って走行する必要はない。
　そこで、図７（ｃ）に示すように、走行可能ライン６１と理想ライン６４の両方を画面表示すれば、上記の各デメリットを解消できる。即ち、運転者は理想ライン６４を目標にして適切な走行軌跡に近い部分を辿りながら、理想ライン６４と走行可能ライン６１の比較により余裕を認識して運転操作ができる。
　なお、本願発明はその発明の範囲内において、各実施の形態の自由な組合せ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
　以上のように、この発明に係る運転支援装置は、障害物への接触を回避して走行できる推奨ルートを計算して車両周辺画像に重ねて表示するようにしたので、車両に搭載して通行および駐車の運転操作を支援する運転支援装置などに用いるのに適している。

Claims (8)

  1. 　自車両に設置され、少なくとも進行方向の車両周辺画像を撮像する撮像部と、
    　前記車両周辺画像を表示する表示部と、
    　少なくとも進行方向にある障害物の位置情報を取得する障害物位置計算部と、
    　前記自車両の位置情報を取得する自車位置計算部と、
    　前記自車両に関する車両情報を記憶しているメモリ部と、
    　前記障害物位置計算部が取得した障害物の位置情報および前記メモリ部の記憶している車両情報より、前記自車位置計算部が取得した位置にある自車両が前記障害物に接触せず走行できる推奨ルートを計算し、前記撮像部が撮像した車両周辺画像に当該推奨ルートを重ねて前記表示部に表示させる走行軌跡計算部とを備える運転支援装置。
  2. 　前記推奨ルートは、自車両が障害物に接触せず所定の目標位置まで走行できる最短経路、および前記自車両が前記障害物を後戻りせず迂回して前記目標位置まで走行できる走行可能範囲のいずれか一方、または両方であることを特徴とする請求項１記載の運転支援装置。
  3. 　前記走行軌跡計算部は、前記撮像部が撮像した車両周辺画像より認識した道路からはみ出さない推奨ルートを計算することを特徴とする請求項１記載の運転支援装置。
  4. 　前記走行軌跡計算部は、前記自車位置計算部が自車両の移動に伴い位置情報を取得する都度推奨ルートを再計算し、当該推奨ルートが変化した場合に表示し直すことを特徴とする請求項１記載の運転支援装置。
  5. 　前記走行軌跡計算部は、前記自車位置計算部が取得した自車両の位置情報を用いて推奨ルートから自車両が逸脱したか否かを判定し、当該自車両が推奨ルートを外れた場合に推奨ルートを再計算して表示し直すことを特徴とする請求項１記載の運転支援装置。
  6. 　警報を発する警報出力部を備え、
    　前記走行軌跡計算部は、自車両が障害物に接触せずに走行できる推奨ルートが存在しない場合に前記警報出力部に警報を発させることを特徴とする請求項１記載の運転支援装置。
  7. 　前記走行軌跡計算部は、推奨ルートを辿る運転操作の難易度に応じて、当該推奨ルートの表示色を変化させることを特徴とする請求項１記載の運転支援装置。
  8. 　前記走行軌跡計算部は、運転者から車両周辺画像上の任意の目標位置の指定を受けた場合に、自車両の位置から当該目標位置まで障害物に接触せずに車両後方へ進行できる推奨ルートを計算し、車両周辺画像に当該推奨ルートを重ねて前記表示部に表示させるパーキングモードを有することを特徴とする請求項１記載の運転支援装置。
PCT/JP2010/005735 2010-09-22 2010-09-22 運転支援装置 WO2012039004A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2010/005735 WO2012039004A1 (ja) 2010-09-22 2010-09-22 運転支援装置
JP2012534829A JPWO2012039004A1 (ja) 2010-09-22 2010-09-22 運転支援装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2010/005735 WO2012039004A1 (ja) 2010-09-22 2010-09-22 運転支援装置

Publications (1)

Publication Number Publication Date
WO2012039004A1 true WO2012039004A1 (ja) 2012-03-29

Family

ID=45873524

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/005735 WO2012039004A1 (ja) 2010-09-22 2010-09-22 運転支援装置

Country Status (2)

Country Link
JP (1) JPWO2012039004A1 (ja)
WO (1) WO2012039004A1 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015064786A (ja) * 2013-09-25 2015-04-09 株式会社日立製作所 車線誘導装置、車線誘導システムおよび車線誘導方法
WO2016129301A1 (ja) * 2015-02-10 2016-08-18 クラリオン株式会社 車両用進入可否判定装置
WO2017018192A1 (ja) * 2015-07-29 2017-02-02 株式会社デンソー 情報表示装置
JP2017033542A (ja) * 2015-07-29 2017-02-09 株式会社デンソー 情報表示装置
JP2019218198A (ja) * 2018-06-21 2019-12-26 鹿島建設株式会社 操作支援システム
JP2020117146A (ja) * 2019-01-25 2020-08-06 株式会社デンソー 車両の周辺監視装置
WO2020208989A1 (ja) * 2019-04-09 2020-10-15 株式会社デンソー 表示制御装置及び表示制御プログラム
JP2020172251A (ja) * 2019-04-09 2020-10-22 株式会社デンソー 表示制御装置及び表示制御プログラム
CN112035452A (zh) * 2020-08-26 2020-12-04 重庆长安汽车股份有限公司 基于大数据的网联车用户出游分析方法
JP2021154803A (ja) * 2020-03-26 2021-10-07 株式会社Ｊｖｃケンウッド 駐車支援制御装置、駐車支援装置、駐車支援方法およびプログラム
US11705007B2 (en) * 2021-02-18 2023-07-18 Toyota Jidosha Kabushiki Kaisha Vehicle display device
WO2023154938A1 (en) * 2022-02-14 2023-08-17 Continental Autonomous Mobility US, LLC Method and system for avoiding vehicle undercarriage collisions
JP2023119757A (ja) * 2022-02-17 2023-08-29 三菱ロジスネクスト株式会社 遠隔操作システム
WO2024000616A1 (zh) * 2022-06-30 2024-01-04 魔门塔(苏州)科技有限公司 行驶路径边界确定方法及装置、车辆、存储介质、终端

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1123305A (ja) * 1997-07-03 1999-01-29 Toyota Motor Corp 車両用走行案内装置
JP2002352397A (ja) * 2001-05-29 2002-12-06 Fuji Heavy Ind Ltd 車両用運転支援装置
JP2008003880A (ja) * 2006-06-23 2008-01-10 Honda Motor Co Ltd 車両周辺監視システム、車両周辺監視プログラム、車両周辺監視システムの構築方法およびサーバ
JP2008171114A (ja) * 2007-01-10 2008-07-24 Japan Science & Technology Agency 車両走行ライン演算装置及び方法並びにプログラム
JP2009015547A (ja) * 2007-07-04 2009-01-22 Omron Corp 運転支援装置および方法、並びに、プログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000118334A (ja) * 1998-10-15 2000-04-25 Toyota Motor Corp 駐車支援装置
JPWO2006064544A1 (ja) * 2004-12-14 2008-06-12 株式会社日立製作所 自動車庫入れ装置
DE102005062151B4 (de) * 2005-12-22 2007-09-13 Daimlerchrysler Ag Verfahren und Vorrichtung zur Unterstützung eines Fahrzeugführers bei der Passage von Fahrwegverengungen
JP2009208742A (ja) * 2008-03-06 2009-09-17 Aisin Seiki Co Ltd 駐車支援装置
JP5282590B2 (ja) * 2009-01-30 2013-09-04 日産自動車株式会社 車両用運転支援装置および車両用運転支援方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1123305A (ja) * 1997-07-03 1999-01-29 Toyota Motor Corp 車両用走行案内装置
JP2002352397A (ja) * 2001-05-29 2002-12-06 Fuji Heavy Ind Ltd 車両用運転支援装置
JP2008003880A (ja) * 2006-06-23 2008-01-10 Honda Motor Co Ltd 車両周辺監視システム、車両周辺監視プログラム、車両周辺監視システムの構築方法およびサーバ
JP2008171114A (ja) * 2007-01-10 2008-07-24 Japan Science & Technology Agency 車両走行ライン演算装置及び方法並びにプログラム
JP2009015547A (ja) * 2007-07-04 2009-01-22 Omron Corp 運転支援装置および方法、並びに、プログラム

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015064786A (ja) * 2013-09-25 2015-04-09 株式会社日立製作所 車線誘導装置、車線誘導システムおよび車線誘導方法
WO2016129301A1 (ja) * 2015-02-10 2016-08-18 クラリオン株式会社 車両用進入可否判定装置
US10339396B2 (en) 2015-02-10 2019-07-02 Clarion Co., Ltd. Vehicle accessibility determination device
WO2017018192A1 (ja) * 2015-07-29 2017-02-02 株式会社デンソー 情報表示装置
JP2017033542A (ja) * 2015-07-29 2017-02-09 株式会社デンソー 情報表示装置
JP2019218198A (ja) * 2018-06-21 2019-12-26 鹿島建設株式会社 操作支援システム
JP7064977B2 (ja) 2018-06-21 2022-05-11 鹿島建設株式会社 操作支援システム
JP2020117146A (ja) * 2019-01-25 2020-08-06 株式会社デンソー 車両の周辺監視装置
JP7151511B2 (ja) 2019-01-25 2022-10-12 株式会社デンソー 車両の周辺監視装置
JP7111121B2 (ja) 2019-04-09 2022-08-02 株式会社デンソー 表示制御装置及び表示制御プログラム
WO2020208989A1 (ja) * 2019-04-09 2020-10-15 株式会社デンソー 表示制御装置及び表示制御プログラム
JP2020172251A (ja) * 2019-04-09 2020-10-22 株式会社デンソー 表示制御装置及び表示制御プログラム
JP2021154803A (ja) * 2020-03-26 2021-10-07 株式会社Ｊｖｃケンウッド 駐車支援制御装置、駐車支援装置、駐車支援方法およびプログラム
JP7419918B2 (ja) 2020-03-26 2024-01-23 株式会社Ｊｖｃケンウッド 駐車支援制御装置、駐車支援装置、駐車支援方法およびプログラム
CN112035452B (zh) * 2020-08-26 2022-09-06 重庆长安汽车股份有限公司 基于大数据的网联车用户出游分析方法
CN112035452A (zh) * 2020-08-26 2020-12-04 重庆长安汽车股份有限公司 基于大数据的网联车用户出游分析方法
US11705007B2 (en) * 2021-02-18 2023-07-18 Toyota Jidosha Kabushiki Kaisha Vehicle display device
WO2023154938A1 (en) * 2022-02-14 2023-08-17 Continental Autonomous Mobility US, LLC Method and system for avoiding vehicle undercarriage collisions
JP2023119757A (ja) * 2022-02-17 2023-08-29 三菱ロジスネクスト株式会社 遠隔操作システム
WO2024000616A1 (zh) * 2022-06-30 2024-01-04 魔门塔(苏州)科技有限公司 行驶路径边界确定方法及装置、车辆、存储介质、终端
US12391242B2 (en) 2022-06-30 2025-08-19 Momenta (suzhou) Technology Co., Ltd. Method and apparatus for determining travel path bound, vehicle, storage medium, and terminal

Also Published As

Publication number Publication date
JPWO2012039004A1 (ja) 2014-02-03

Similar Documents

Publication Publication Date Title
WO2012039004A1 (ja) 運転支援装置
JP5713623B2 (ja) ドライバーアシスト方法
US10474911B2 (en) Smart parking assist apparatus and method
KR101503418B1 (ko) 반자동 주차 기계
US8319614B2 (en) Parking assistance apparatus and parking assistance method
JP7443705B2 (ja) 周辺監視装置
US9475492B2 (en) Parking assist device
US10268905B2 (en) Parking assistance apparatus
US20140163862A1 (en) Apparatus and method for controlling parking assistance
CN107298096B (zh) 驾驶协助装置
CN111201558A (zh) 用于示出车辆的周围环境的方法
US10632803B2 (en) Hitch assist system
JP5446139B2 (ja) 駐車支援装置及び駐車支援方法
JP2001180405A (ja) 操舵支援装置
CN113386783B (zh) 用于机动车辆中的自动拖车倒车系统的方法和设备
US12322291B2 (en) Parking assist apparatus, parking assist system, and parking assist method
US20200189653A1 (en) Parking support apparatus
WO2006016433A1 (ja) 運転支援装置及び運転支援方法
CN109677492B (zh) 用于沿用户指定的目标行进方向自主操纵车辆的挂接辅助系统和方法
JP5282730B2 (ja) 運転支援装置
JP2022133230A (ja) 駐車支援方法および駐車支援装置
JP4825062B2 (ja) 運転支援装置およびプログラム
JP4576772B2 (ja) 駐車支援装置
JP5113539B2 (ja) 車両の接触回避支援装置
JP6385991B2 (ja) 出庫支援装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10857501

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012534829

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10857501

Country of ref document: EP

Kind code of ref document: A1