[go: up one dir, main page]

KR20070066663A - Vehicle accident information storage device and lane tracking device - Google Patents

Vehicle accident information storage device and lane tracking device Download PDF

Info

Publication number
KR20070066663A
KR20070066663A KR1020050128092A KR20050128092A KR20070066663A KR 20070066663 A KR20070066663 A KR 20070066663A KR 1020050128092 A KR1020050128092 A KR 1020050128092A KR 20050128092 A KR20050128092 A KR 20050128092A KR 20070066663 A KR20070066663 A KR 20070066663A
Authority
KR
South Korea
Prior art keywords
lane
vehicle
image
cameras
lane tracking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
KR1020050128092A
Other languages
Korean (ko)
Inventor
서성하
강균호
최종태
박병진
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020050128092A priority Critical patent/KR20070066663A/en
Publication of KR20070066663A publication Critical patent/KR20070066663A/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/52Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking for indicating emergencies
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2720/00Output or target parameters relating to overall vehicle dynamics
    • B60W2720/10Longitudinal speed

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은, 차선 추적 장치에 관한 것으로, 예를 들어 차량의 전방과 하방에 복수의 카메라들을 소정 이격 거리로 설치하고, 상기 복수의 카메라들에 의해 각각 촬영되는 영상 내에서 차선 이미지를 추출하여, 차량 이동에 따른 도로 상의 차선 이미지 패턴을 검출한 후, 상기 차선 이미지 패턴에 근거하여, 차선 이탈 등이 판별되면, 경고음 또는 경고 메시지를 출력하거나 주행 속도를 자동으로 감속시킴으로써, 운전자가 보다 안전하게 운전할 수 있게 되며, 또한 졸음 운전 등에 의한 차량 충돌 사고를 미연에 예방할 수 있게 되는 매우 유용한 발명인 것이다. The present invention relates to a lane tracking device, for example, a plurality of cameras are installed at a predetermined distance from the front and the bottom of a vehicle, and the lane image is extracted from an image photographed by each of the plurality of cameras, After detecting the lane image pattern on the road according to the movement of the vehicle, if the lane departure is determined based on the lane image pattern, the driver may drive safely by outputting a warning sound or warning message or automatically decelerating the driving speed. In addition, it is a very useful invention that can prevent the vehicle crash accident due to drowsy driving in advance.

Description

차량 사고 정보 저장장치 및 차선 추적 장치 {Apparatus for recording car accident information and apparatus for line tracking} Apparatus for recording car accident information and apparatus for line tracking}

도 1은 본 발명에 따른 차량 사고 정보 저장장치에 대한 구성을 도시한 것이고,1 illustrates a configuration of a vehicle accident information storage device according to the present invention,

도 2는 본 발명에 따른 카메라 모듈에 적용되는 도우넛 형상의 어안 렌즈와 다수의 씨씨디들이 조합 구성된 실시예를 도시한 것이고,2 illustrates an embodiment in which a donut-shaped fisheye lens and a plurality of CDs are applied to the camera module according to the present invention.

도 3은 본 발명에 따른 카메라 모듈에 대한 회로 구성을 도시한 것이고,3 shows a circuit configuration for the camera module according to the present invention,

도 4는 본 발명에 따른 차량 사고 정보 저장장치에 전원이 공급되는 실시예를 도시한 것이고,4 illustrates an embodiment in which power is supplied to a vehicle accident information storage device according to the present invention;

도 5 및 도 6은 본 발명에 따른 차선 추적 장치에 대한 구성을 도시한 것이고,5 and 6 show the configuration of the lane tracking device according to the present invention,

도 7은 본 발명에 따른 차선 추적 과정에 대한 실시예를 도시한 것이다. 7 illustrates an embodiment of a lane tracking process according to the present invention.

※ 도면의 주요부분에 대한 부호의 설명※ Explanation of code for main part of drawing

10 : 스토리지 11 : 블랙 박스 컨트롤러10: storage 11: black box controller

12 : 캔 모듈 13 : 정보 처리부12: can module 13: information processing unit

14 : 비디오 표시부 15,61,62,63 : 카메라 모듈14: video display unit 15,61,62,63: camera module

20,70 : 전자 컨트롤 유니트 100 : 차량용 블랙 박스20,70: Electronic control unit 100: Car black box

60 : 차선 추적 모듈 600 : 4 채널 비디오 디코더부60: lane tracking module 600: 4 channel video decoder

601 : 차선 추출부 602 : 2D 스페이스 구성부601: lane extraction unit 602: 2D space configuration unit

603 : 차선 추적 제어부 603: lane tracking control unit

본 발명은, 차선 추적 장치에 관한 것으로, 예를 들어 졸음 운전 등을 미연에 예방할 수 있도록 하기 위한 차선 추적 장치에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a lane tracking device and, for example, to a lane tracking device for preventing drowsy driving and the like.

최근에 개발 출시되고 있는 일부 차량에는, 안전한 주차 등을 위하여, 차량의 뒤범퍼 또는 사이드 미러 등에 소형 카메라가 설치되고 있는 데, 상기 소형 카메라에 의해 촬영되는 영상 신호는, 예를 들어 차량 내부에 설치된 카 네비게이션 단말기 등의 엘씨디(LCD) 화면을 통해 표시된다. In some vehicles recently developed and released, a small camera is installed in a rear bumper or a side mirror of a vehicle for safe parking and the like, and an image signal photographed by the small camera is installed inside, for example, a vehicle. It is displayed through an LCD screen of a car navigation terminal.

그리고, 상기 차량의 운전자는, 차량의 후방 또는 측방에 존재하는 장애물들을, 상기 엘씨디 화면을 통해 눈으로 확인한 후, 보다 안전하게 후진 주차를 하게 되며, 상기 차량이 도로 상에서 정차하고 있는 동안에는, 차량의 후방 또는 측방에 위치하고 있는 다른 차량들을, 상기 엘씨디 화면을 통해 눈으로 확인하여, 보다 안전하게 차량을 운전하게 된다. In addition, the driver of the vehicle visually checks obstacles existing at the rear or the side of the vehicle through the LCD screen to back up more safely, and while the vehicle is stopped on the road, the rear of the vehicle Alternatively, other vehicles located on the side may be visually checked through the LCD screen to drive the vehicle more safely.

그러나, 상기와 같이 차량의 뒤범퍼 또는 사이드 미러 등에 설치된 소형 카메라에 의해 촬영되는 영상 신호는, 운전자가 차량의 후방 또는 측방 시야를 확보하기 위해, 상기 엘씨디 화면에 표시되지만, 차량 사고 발생시, 그 발생 원인을 분석하기 위한 영상 자료로는 사용되고 있지 않다. However, the video signal photographed by a small camera installed in the rear bumper or side mirror of the vehicle as described above is displayed on the LCD screen in order for the driver to secure the rear or side view of the vehicle. It is not used as video data to analyze the cause.

한편, 차량 사고 발생시, 그 발생 원인을 보다 객관적으로 정확하게 분석할 수 있도록 하기 위한 차량용 블랙 박스(Car Black Box)의 개발이 요구되고 있는 데, 이에 대한 효율적인 해결 방안이 마련되어 있지 않아, 그 해결 방안 마련이 시급히 요구되고 있는 실정이다. Meanwhile, when a vehicle accident occurs, the development of a car black box is required to more accurately and objectively analyze the cause of the occurrence of a vehicle accident, and an effective solution is not provided. This is urgently required.

또한, 운전자가 졸음 운전을 하는 경우, 도로 상의 차선을 촬영 및 추적하여 차선 이탈 여부를 판별한 후, 그에 상응하는 경고음 또는 경고 메시지를 출력하여, 운전자가 보다 안전하게 차량을 운전할 수 있도록 하기 위한 해결 방안이 마련되어 있지 않아, 그 해결 방안 마련이 시급히 요구되고 있는 실정이다. In addition, when the driver is drowsy driving, after shooting and tracking the lane on the road to determine whether the lane departure, and outputs a corresponding warning sound or warning message, so that the driver can drive the vehicle more safely This situation is urgently required to provide a solution.

따라서, 본 발명은 상기와 같은 실정을 감안하여 창작된 것으로서, 예를 들어 차량의 외부 상황 이미지를 촬영함과 아울러, 차량의 상태 정보를 검출하여, 비휘발성 저장매체에 기록 저장함으로써, 차량 사고 발생시, 그 발생 원인을 객관적으로 정확하게 분석할 수 있도록 하기 위한 차량용 블랙 박스인 차량 사고 정보 저장장치를 제공하는 데, 그 목적이 있는 것이다. Therefore, the present invention was created in view of the above situation, for example, by taking an image of an external situation of the vehicle, detecting the state information of the vehicle, and storing the information on a nonvolatile storage medium, so that a vehicle accident occurs. To provide a vehicle accident information storage device, which is a black box for a vehicle, to enable an objective and accurate analysis of the cause of the occurrence thereof, an object thereof is provided.

또한, 본 발명은 차량의 전방과 하방에 복수의 카메라들을 소정 이격 거리로 설치하고, 상기 복수의 카메라들에 의해 각각 촬영되는 영상 내에서 차선 이미지를 추출하여, 차량 이동에 따른 도로 상의 차선 이미지 패턴을 검출한 후, 상기 차선 이미지 패턴에 근거하여, 차선 이탈 등이 판별되면, 경고음 또는 경고 메시지를 출력하거나 주행 속도를 자동으로 감속시킴으로써, 운전자가 보다 안전하게 운전할 수 있도록 하기 위한 차선 추적 장치를 제공하는 데, 그 목적이 있는 것이다. In addition, the present invention provides a plurality of cameras at a predetermined distance from the front and the bottom of the vehicle, and extracts the lane image in the image taken by each of the plurality of cameras, the lane image pattern on the road according to the movement of the vehicle And detecting a lane departure based on the lane image pattern, and outputting a warning sound or warning message or automatically decelerating the driving speed, thereby providing a lane tracking device for driving more safely. There is a purpose.

상기와 같은 목적을 달성하기 위한 본 발명에 따른 차선 추적 장치는, 도로 상의 차선을 촬영하기 위한 복수의 촬영수단; 상기 복수의 촬영수단에 의해 각각 촬영되는 영상 내의 차선 이미지 패턴을 검출하기 위한 검출수단; 및 상기 검출되는 차선 이미지 패턴에 근거하여, 차선 추적 동작을 제어하기 위한 제어수단을 포함하여 구성되는 것을 특징으로 하며,Lane tracking apparatus according to the present invention for achieving the above object, a plurality of photographing means for photographing the lane on the road; Detection means for detecting a lane image pattern in an image photographed by the plurality of photographing means, respectively; And control means for controlling a lane tracking operation based on the detected lane image pattern.

또한, 상기 복수의 촬영수단은, 차량의 전방과 하방에 소정의 이격 거리를 두고 설치되는 복수 개의 카메라이고, 상기 검출수단은, 상기 복수개의 카메라에 의해 각각 촬영되는 영상의 비디오 프레임 내에서, 차선 이미지들을 각각 추출한 후, 그 차선 이미지들에 대한 패턴을 검출하는 것을 특징으로 하며,The plurality of photographing means may be a plurality of cameras provided at predetermined distances in front of and below the vehicle, and the detecting means may be lanes within a video frame of an image photographed by the plurality of cameras, respectively. After extracting each image, characterized in that for detecting the pattern for the lane image,

또한, 상기 제어수단은, 상기 검출되는 차선 이미지 패턴에 근거하여, 차선 이탈로 판별되면, 그에 상응하는 경고음 또는 경고 메시지가 출력되도록 제어하고, 차량에 탑재된 전자 컨트롤 유니트와의 인터페이스를 통해 주행 속도를 감소시키거나, 또는 비상등을 자동으로 온시키는 것을 특징으로 한다. The control means may be further configured to output a warning sound or a warning message corresponding to the lane departure based on the detected lane image pattern, and to drive a driving speed through an interface with the electronic control unit mounted on the vehicle. Reduce or, or turn on the emergency light automatically.

이하, 본 발명에 따른 차량 사고 정보 저장장치 및 차선 추적 장치에 대한 바람직한 실시예에 대해, 첨부된 도면을 참조하여 상세히 설명한다. Hereinafter, exemplary embodiments of a vehicle accident information storage device and a lane tracking device according to the present invention will be described in detail with reference to the accompanying drawings.

우선, 본 발명에 따른 차량 사고 정보 저장장치에는, 도 1에 도시한 바와 같이, 스토리지(10), 블랙 박스 컨트롤러(11), 캔 모듈(12), 정보 처리부(13), 비디 오 표시부(14), 그리고 카메라 모듈(15) 등이 포함 구성될 수 있으며, 상기 스토리지(10)는, 치명적인 사고 등으로 인해 차량이 파손되더라도, 그 직전까지 저장된 정보를 안전하게 영구적으로 저장할 수 있는 대용량의 비휘발성 저장매체가 사용된다. First, in the vehicle accident information storage device according to the present invention, as shown in FIG. 1, the storage 10, the black box controller 11, the can module 12, the information processing unit 13, and the video display unit 14. And a camera module 15, and the like, and the storage 10 is a large-capacity non-volatile storage that can safely and permanently store information stored until just before the vehicle is damaged due to a fatal accident or the like. Medium is used.

한편, 상기 블랙 박스 컨트롤러(11)는, 상기 캔(CAN: Car Area Network) 모듈(12)을 통해, 차량에 탑재된 전자 컨트롤 유니트(ECU: Electronic Control Unit)(20)와 통신하여, 차량 상태, 예를 들어 엔진 회전수(RPM) 등과 같은 차량 상태 정보들을 수신하게 된다.Meanwhile, the black box controller 11 communicates with an electronic control unit (ECU) 20 mounted in a vehicle through the CAN (Car Area Network) module 12 to communicate with the vehicle. For example, vehicle state information such as an engine speed (RPM) may be received.

또한, 상기 블랙 박스 컨트롤러(11)는, 상기 정보 처리부(13)를 통해 신호 처리되는 다양한 센서(Sensor 1∼k)들의 검출 정보를 수신하여, 차량 사고 발생 여부를 판별함과 아울러, 상기 검출 정보들을 비휘발성 저장매체인 스토리지(10)에 저장하게 되는데, 예를 들어, 상기 다수의 센서들에 의해 검출되는 검출 정보에는, 차량의 엔진 상태, 페달 상태, 충격 상태 중 적어도 어느 하나 이상의 상태 정보가 포함된다.In addition, the black box controller 11 receives detection information of various sensors 1 to k signal-processed through the information processor 13 to determine whether a vehicle accident occurs, and to detect the detection information. To the storage 10 which is a non-volatile storage medium. For example, the detection information detected by the plurality of sensors includes at least one state information of an engine state, a pedal state, and an impact state of the vehicle. Included.

그리고, 상기 블랙 박스 컨트롤러(11)는, 상기 카메라 모듈(15)을 동작 제어함과 아울러, 상기 카메라 모듈(15)에 의해 촬영되는 영상 신호를, 상기 비휘발성 저장매체에 저장하게 되는 데, 예를 들어, 도 2에 도시한 바와 같이, 상기 카메라 모듈(15)에는, 4 개의 씨씨디(CCD)(151∼154)들이 사각형 모양으로 배치됨과 아울러, 수평 방향으로 360도 광각 촬영이 가능한 도우넛 형상의 어안(魚眼) 렌즈(150)가 사용될 수 있다. In addition, the black box controller 11 controls the camera module 15 and stores the image signal photographed by the camera module 15 in the nonvolatile storage medium. For example, as illustrated in FIG. 2, four CDDs 151 to 154 are arranged in a quadrangular shape in the camera module 15, and a donut shape capable of 360-degree wide-angle photographing in a horizontal direction. The fisheye lens 150 may be used.

한편, 상기 카메라 모듈(15)에는, 도 3에 도시한 바와 같이, 4 개의 씨씨디(151∼154)와, 4 채널 비디오 디코더(155), 그리고 이미지 정정부(156), 3 차원 파노라마 이미지 복원부(157), 그리고 2 차원 이미지 영상부(158)가 포함 구성될 수 있는 데, 상기 4 개의 씨씨디(151∼154)에서는, 도 2에 도시한 도우넛 형상의 어안렌즈(150)를 통해 각각 입사되는 소정 각도(예: 90도 이상) 범위의 피사체 이미지를 전기신호로 변환하여 출력하게 된다.Meanwhile, as illustrated in FIG. 3, the camera module 15 includes four CDs 151 to 154, a four channel video decoder 155, an image correcting unit 156, and a three-dimensional panoramic image reconstruction. The unit 157 and the two-dimensional image imaging unit 158 may be included. In the four CDs 151 to 154, the donut-shaped fisheye lens 150 shown in FIG. The object image of a predetermined angle (eg, 90 degrees or more) that is incident is converted into an electrical signal and output.

또한, 상기 4 채널 비디오 디코더(155)에서는, 상기 4 개의 씨씨디(151∼154)에서 출력되는 전기신호, 즉 4 채널의 씨씨디 출력 신호들을 순차적으로 디코딩하여, 4 개의 피사체 이미지를 하나의 이미지로 출력하게 되며, 상기 이미지 정정부(156)에서는, 상기 출력되는 하나의 이미지에 존재하는 왜곡 성분, 예를 들어 4 개의 피사체 이미지가 하나로 합쳐지면서 왜곡된 일부 영역에 대한 이미지 정정 동작을 수행하게 된다.In addition, the four-channel video decoder 155 sequentially decodes the electric signals output from the four CDs 151 to 154, that is, the four channel CD output signals, to decode four subject images into one image. The image correction unit 156 performs an image correction operation on a part of the distorted region by combining the distortion components existing in the output image, for example, four subject images. .

그리고, 상기 3 차원 파노라마 이미지 복원부(157)에서는, 상기와 같이 이미지 정정 동작이 완료된 하나의 이미지에 대해, 3 차원 파노라마 이미지 복원 동작을 수행하게 되며, 상기 2 차원 이미지 영상부(158)에서는, 상기 3 차원 파노라마 이미지를 2 차원 이미지 영상으로 신호 처리하게 된다.The 3D panoramic image reconstruction unit 157 performs a 3D panoramic image reconstruction operation on one image on which the image correction operation is completed as described above, and in the 2D image imager 158, The 3D panoramic image is signal processed into a 2D image.

한편, 상기 2 차원 이미지 영상부(158)를 통해 출력되는 피사체 이미지는, 상기 블랙 박스 컨트롤러(11)를 통해, 상기 스토리지(10)에 기록 저장되는 데, 이때 상기 블랙 박스 컨트롤러(11)에서는, 상기 정보 처리부(13)를 통해 수신되는 각 센서(Sensor 1∼k)들의 검출 정보와, 상기 캔 모듈(12)을 통해 전자 컨트롤 유니트 (20)로부터 수신되는 차량 상태 정보들을 수신하여, 상기 피사체 이미지와 함께, 상기 스토리지(10) 내에 갱신 저장하는 일련의 동작을 수행하게 된다.Meanwhile, the subject image output through the 2D image imager 158 is recorded and stored in the storage 10 through the black box controller 11, in which the black box controller 11, Receive detection information of each sensor (Sensor 1 to k) received through the information processor 13 and vehicle state information received from the electronic control unit 20 through the can module 12, the subject image In addition, a series of operations of updating and storing the storage 10 are performed.

또한, 상기 컨트롤러(11)에서는, 상기 각 센서(Sensor 1∼k)들의 검출 정보와 차량 상태 정보들을 참조하여, 차량 사고 여부를 판별하게 되는 데, 예를 들어 차량 사고 발생으로 판별되면, 그 직전까지 저장된 피사체 이미지와 각종 정보들이, 상기 스토리지(10)에 영구적으로 유지 보전될 수 있도록 갱신 동작을 중지시키게 된다. In addition, the controller 11 determines whether or not a vehicle accident occurs by referring to detection information and vehicle state information of each of the sensors 1 to k. The update operation is stopped so that the stored subject image and various information are permanently maintained in the storage 10.

한편, 도 4에 도시한 바와 같이, 상기 카메라 모듈, 비디오 표시부, 다수의 센서들, 정보 처리부, 그리고 블랙 박스 컨트롤러 등에는, 각각 별도의 소형 배터리들(160∼164)이 설치 사용될 수 있는 데, 예를 들어 감시용으로 항시 동작 상태를 유지해야 하는 차량용 블랙 박스의 전원은, 메인 카 배터리(Car Battery) 전원을 우선적으로 공급 사용한다.Meanwhile, as illustrated in FIG. 4, separate small batteries 160 to 164 may be installed and used in the camera module, the video display unit, the plurality of sensors, the information processing unit, and the black box controller. For example, the power supply of the vehicle black box which should always be operated for monitoring uses the main car battery power supply first.

그리고, 이후 상기 카 배터리 전원이 모두 방전되는 경우, 각각의 소형 배터리에 충전된 전원을 공급 전원으로 사용하여, 감시 동작 상태가, 소정 시간이 이상 더 유지될 수 있도록 함으로써, 장시간 주차로 인해 메인 카 배터리 전원이 모두 방전되거나, 또는 제3자가 고의로 메인 카 배터리를 분리시키더라도, 블랙 박스의 감시 기능을 소정 시간 이상 더 유지시킬 수 있게 된다. Then, when all of the car battery power is discharged, by using the power charged in each small battery as the supply power, the monitoring operation state can be maintained more than a predetermined time, the main car due to long time parking Even if the battery power is exhausted or a third party intentionally disconnects the main car battery, the monitoring function of the black box can be maintained for a predetermined time or more.

한편, 도 5는 본 발명에 따른 차선 추적 장치에 대한 구성을 도시한 것으로, 상기 차선 추적 장치에는, 복수의 카메라들이 포함 구성되는 데, 예를 들어 차량의 전방 범퍼에는, 전방의 차선을 촬영하기 위한 제1 카메라(61)가 설치되고, 차량의 하방에는, 도 5에 도시한 바와 같이, 우측 앞바퀴 부분의 차선을 촬영하기 위한 제2 카메라(62)와, 중앙 부분의 차선을 촬영하기 위한 제3 카메라(63), 그리고 좌측 앞바퀴 부분의 차선을 촬영하기 위한 제4 카메라(64)가, 소정의 이격 거리를 두고 설치될 수 있다.Meanwhile, FIG. 5 illustrates a configuration of a lane tracking apparatus according to the present invention, wherein the lane tracking apparatus includes a plurality of cameras, for example, photographing a front lane in a front bumper of a vehicle. The first camera 61 is provided, and as shown in FIG. 5, under the vehicle, a second camera 62 for photographing the lane of the right front wheel part, and a photograph for photographing the lane of the center part. The third camera 63 and the fourth camera 64 for photographing the lanes of the left front wheel portion may be provided at a predetermined distance.

또한, 상기 차선 추적 장치에는, 차선 추적 모듈(60)이 포함 구성되는 데, 상기 차선 추적 모듈(60)은, 차량에 탑재된 전자 컨트롤 유니트(ECU)(70)와 인터페이스 동작을 수행하게 되며, 도 6에 도시한 바와 같이, 4 채널 비디오 디코더부(600)와, 차선 추출부(601), 2D 스페이스 구성부(602), 그리고 차선 추적 제어부(603)로 구성될 수 있다.In addition, the lane tracking device includes a lane tracking module 60, and the lane tracking module 60 performs an interface operation with an electronic control unit (ECU) 70 mounted in a vehicle. As illustrated in FIG. 6, the 4-channel video decoder 600, the lane extractor 601, the 2D space constructing unit 602, and the lane tracking control unit 603 may be configured.

그리고, 상기 차선 추적 모듈(60)은, 상기 전자 컨트롤 유니트(70)와의 인터페이스 동작을 통해, 현재 차량이 이동하는 경우, 상기 제1 내지 제4 카메라들(61∼64)을 인에이블(Enable)시켜, 차량이 이동되지 않는 상황에서 불필요하게 차선 추적 동작이 수행되지 않도록 한다. The lane tracking module 60 enables the first to fourth cameras 61 to 64 when the current vehicle moves through an interface operation with the electronic control unit 70. This prevents the lane tracking operation from being performed unnecessarily in a situation where the vehicle is not moved.

한편, 상기 차량의 이동으로 인해, 상기 차선 추적 모듈(60)과 제1 내지 제4 카메라들(61∼64)이 동작하게 되면, 각각의 카메라들에 의해 촬영되는 영상들이, 4 채널 비디오 디코더부(600)로 입력되고, 상기 4 채널 비디오 디코더부(600)에서는, 상기 영상들을 디지털 비디오 데이터로 신호 처리하여, 각각 비디오 프레임으로 출력하게 된다.Meanwhile, when the lane tracking module 60 and the first to fourth cameras 61 to 64 are operated due to the movement of the vehicle, the images captured by the respective cameras are 4 channel video decoders. Input to 600, the four-channel video decoder 600, the signals are processed into digital video data, respectively, and output as a video frame.

또한, 상기 차선 추출부(601)에서는, 상기와 같이 각각 출력되는 비디오 프 레임 내에서, 도로 상에 표기된 차선 이미지를 추출하게 되는 데, 예를 들어, 도 7에 도시한 바와 같이, 차량이 도로 상에 표기된 차선 범위를 벗어나지 않고 정상 주행하는 경우, 상기 제1 카메라(Cam 1)에 의해 촬영되는 비디오 프레임에는, 사다리 형상의 전방 차선 이미지가 검출되고, 제2 카메라(Cam 2)에 의해 촬영되는 비디오 프레임에는, 우측 부분에 차선 이미지가 검출된다.In addition, the lane extracting unit 601 extracts a lane image displayed on a road within each of the video frames output as described above. For example, as shown in FIG. When driving normally without departing from the lane range indicated above, a ladder-shaped front lane image is detected in the video frame photographed by the first camera Cam 1, and is captured by the second camera Cam 2. In the video frame, a lane image is detected in the right part.

그리고, 제3 카메라(Cam 3)에 의해 촬영되는 비디오 프레임에는, 차선 이미지가 검출되지 않으며, 제4 카메라(Cam 4)에 의해 촬영되는 비디오 프레임에는, 좌측 부분에 차선 이미지가 검출된다.The lane image is not detected in the video frame photographed by the third camera Cam 3, and the lane image is detected in the left portion of the video frame photographed by the fourth camera Cam 4.

한편, 상기 차량이 도로 상에 표기된 차선 범위를 우측으로 벗어난 경우, 상기 제1 카메라(Cam 1)에 의해 촬영되는 비디오 프레임에는, 오른쪽 사선 형상의 전방 차선 이미지가 검출되고, 제2 카메라(Cam 2)와 제3 카메라(Cam 3)에 의해 각각 촬영되는 비디오 프레임에는, 차선 이미지가 검출되지 않으며, 제4 카메라(Cam 4)에 의해 촬영되는 비디오 프레임에는, 우측 부분에 차선 이미지가 검출된다.On the other hand, when the vehicle is out of the lane range marked on the road to the right, a right diagonal front lane image is detected in the video frame photographed by the first camera Cam 1, and the second camera Cam 2 is detected. ) And a lane image are not detected in the video frames captured by the third camera Cam 3, and the lane image is detected in the right portion of the video frames captured by the fourth camera Cam 4.

또한, 상기 차량이 도로 상에 표기된 차선 범위를 좌측으로 벗어난 경우, 상기 제1 카메라(Cam 1)에 의해 촬영되는 비디오 프레임에는, 왼쪽 사선 형상의 전방 차선 이미지가 검출되고, 제4 카메라(Cam 4)와 제3 카메라(Cam 3)에 의해 각각 촬영되는 비디오 프레임에는, 차선 이미지가 검출되지 않으며, 제2 카메라(Cam 2)에 의해 촬영되는 비디오 프레임에는, 좌측 부분에 차선 이미지가 검출된다.In addition, when the vehicle is outside the lane range marked on the road to the left, a left diagonal front lane image is detected in the video frame photographed by the first camera Cam 1, and the fourth camera Cam 4 is detected. ) And the lane image are not detected in the video frames respectively shot by the third camera Cam 3, and the lane image is detected in the left portion of the video frames captured by the second camera Cam 2.

한편, 상기 차선 검출부(601)와 2D 스페이스 구성부(602)를 거쳐, 상기와 같은 4 개의 차선 이미지가 차선 트랙킹 제어부(603)로 입력되면, 상기 차선 트랙킹 제어부(603)에서는, 상기 4 개의 차선 이미지들을 조합하여, 차량 이동에 따른 차선 이미지 패턴을, 사전에 저장 관리되는 다양한 차선 이미지 패턴들과 비교하여, 차선 이탈 여부를 판별하게 된다.On the other hand, when the four lane images as described above are input to the lane tracking control unit 603 via the lane detection unit 601 and the 2D space configuration unit 602, the lane tracking control unit 603 performs the four lanes. By combining the images, the lane image pattern according to the movement of the vehicle is compared with various lane image patterns stored and managed in advance, thereby determining whether the lane is out of line.

그리고, 상기 판별 결과, 현재 차량이 도로 상의 차선 범위를 벗어난 경우, 상기 차선 트랙킹 제어부(603)에서는, 상기 전자 컨트롤 유니트(ECU)와의 인터페이스 동작을 수행하여, 졸음 운전 상태 등을 경고하는 경고음 또는 경고 메시지 등을 출력 표시함과 아울러, 비상등을 자동으로 온시키고, 차량의 주행 속도를 감소시켜, 차량이 고속 주행되지 않도록 한다.When the current vehicle is out of the lane range on the road as a result of the determination, the lane tracking control unit 603 performs an interface operation with the electronic control unit ECU to warn a drowsy driving state or the like. In addition to outputting a message or the like, the emergency light is automatically turned on and the running speed of the vehicle is reduced to prevent the vehicle from traveling at high speed.

이에 따라, 졸음 운전 중인 운전자는, 차선이 이탈된 사실을 알 수 있게 되므로, 안전 운전을 할 수 있게 되며, 또한 졸음 운전 등에 의한 차량 충돌 사고를 미연에 예방할 수 있게 된다. Accordingly, the driver who is drowsy driving can know that the lane has deviated, so that the driver can safely drive, and can prevent the vehicle crash accident caused by the drowsy driving.

이상, 전술한 본 발명의 바람직한 실시예는, 예시의 목적을 위해 개시된 것으로, 당업자라면, 이하 첨부된 특허청구범위에 개시된 본 발명의 기술적 사상과 그 기술적 범위 내에서, 또 다른 다양한 실시예들을 개량, 변경, 대체 또는 부가 등이 가능할 것이다.As mentioned above, preferred embodiments of the present invention described above are disclosed for the purpose of illustration, and those skilled in the art can improve other various embodiments within the spirit and technical scope of the present invention disclosed in the appended claims below. Changes, substitutions or additions will be possible.

상기와 같이 구성되는 본 발명에 따른 차선 추적 장치는, 예를 들어 차량의 전방과 하방에 복수의 카메라들을 소정 이격 거리로 설치하고, 상기 복수의 카메라 들에 의해 각각 촬영되는 영상 내에서 차선 이미지를 추출하여, 차량 이동에 따른 도로 상의 차선 이미지 패턴을 검출한 후, 상기 차선 이미지 패턴에 근거하여, 차선 이탈 등이 판별되면, 경고음 또는 경고 메시지를 출력하거나 주행 속도를 자동으로 감속시킴으로써, 운전자가 보다 안전하게 운전할 수 있게 되며, 또한 졸음 운전 등에 의한 차량 충돌 사고를 미연에 예방할 수 있게 되는 매우 유용한 발명인 것이다. In the lane tracking apparatus according to the present invention configured as described above, for example, a plurality of cameras are installed at a predetermined distance from the front and the lower side of the vehicle, and the lane image is captured in the images respectively photographed by the plurality of cameras. After detecting the lane image pattern on the road according to the movement of the vehicle, and detecting the lane departure based on the lane image pattern, the driver outputs a warning sound or a warning message or automatically decelerates the driving speed. It is a very useful invention to be able to drive safely, and to prevent vehicle crash accidents due to drowsy driving.

Claims (5)

도로 상의 차선을 촬영하기 위한 복수의 촬영수단; A plurality of photographing means for photographing a lane on a road; 상기 복수의 촬영수단에 의해 각각 촬영되는 영상 내의 차선 이미지 패턴을 검출하기 위한 검출수단; 및 Detection means for detecting a lane image pattern in an image photographed by the plurality of photographing means, respectively; And 상기 검출되는 차선 이미지 패턴에 근거하여, 차선 추적 동작을 제어하기 위한 제어수단을 포함하여 구성되는 것을 특징으로 하는 차선 추적 장치. And a control means for controlling a lane tracking operation based on the detected lane image pattern. 제 1항에 있어서,The method of claim 1, 상기 복수의 촬영수단은, 차량의 전방과 하방에 소정의 이격 거리를 두고 설치되는 복수 개의 카메라인 것을 특징으로 하는 차선 추적 장치. The plurality of photographing means is a lane tracking device, characterized in that the plurality of cameras are provided at a predetermined separation distance in front and below the vehicle. 제 2항에 있어서,The method of claim 2, 상기 검출수단은, 상기 복수개의 카메라에 의해 각각 촬영되는 영상의 비디오 프레임 내에서, 차선 이미지들을 각각 추출한 후, 그 차선 이미지들에 대한 패턴을 검출하는 것을 특징으로 하는 차선 추적 장치. And the detecting means extracts lane images from each other in a video frame of an image photographed by the plurality of cameras, and detects a pattern of the lane images. 제 1항에 있어서,The method of claim 1, 상기 제어수단은, 상기 검출되는 차선 이미지 패턴에 근거하여, 차선 이탈로 판별되면, 그에 상응하는 경고음 또는 경고 메시지가 출력되도록 제어하는 것을 특 징으로 하는 차선 추적 장치. And the control means controls to output a warning sound or a warning message corresponding to the lane departure based on the detected lane image pattern. 제 1항에 있어서,The method of claim 1, 상기 제어수단은, 차량에 탑재된 전자 컨트롤 유니트와의 인터페이스를 통해 주행 속도를 감소시키거나, 또는 비상등을 자동으로 온시키는 것을 특징으로 하는 차선 추적 장치. The control means is a lane tracking device, characterized in that to reduce the running speed or to automatically turn on the emergency light through the interface with the electronic control unit mounted on the vehicle.
KR1020050128092A 2005-12-22 2005-12-22 Vehicle accident information storage device and lane tracking device Withdrawn KR20070066663A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050128092A KR20070066663A (en) 2005-12-22 2005-12-22 Vehicle accident information storage device and lane tracking device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050128092A KR20070066663A (en) 2005-12-22 2005-12-22 Vehicle accident information storage device and lane tracking device

Publications (1)

Publication Number Publication Date
KR20070066663A true KR20070066663A (en) 2007-06-27

Family

ID=38365699

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050128092A Withdrawn KR20070066663A (en) 2005-12-22 2005-12-22 Vehicle accident information storage device and lane tracking device

Country Status (1)

Country Link
KR (1) KR20070066663A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9031774B2 (en) 2009-12-14 2015-05-12 Electronics And Telecommunications Research Institute Apparatus and method for preventing collision of vehicle

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9031774B2 (en) 2009-12-14 2015-05-12 Electronics And Telecommunications Research Institute Apparatus and method for preventing collision of vehicle

Similar Documents

Publication Publication Date Title
JP2010067262A (en) Intelligent driving assistant system
JP2010152873A (en) Approaching object detection system
US20160379066A1 (en) Method and Camera System for Distance Determination of Objects from a Vehicle
JP2009280109A (en) Vehicle vicinity monitoring system
KR20120126152A (en) Divice and method for photographing image and divice for extracting image information
JP2006235732A (en) Drive recorder
JP2016031648A (en) Car equipment
JP2008174028A (en) Object detection system and object detection method
JP2012038229A (en) Drive recorder
KR101601500B1 (en) System and Method for assisting vehicle driving for using smartphone
TW201344648A (en) Driving monitoring system and driving monitoring method
US11120527B2 (en) Vehicular camera and camera system
KR20120046645A (en) Appratus and method for vehicle drive assistance
KR20100057253A (en) Image recording equipment around a vehicle
JP2003116029A (en) Imaging device and image recorder using the same
KR102389728B1 (en) Method and apparatus for processing a plurality of images obtained from vehicle 's cameras
KR102473404B1 (en) Apparatus for providing top view
KR102094405B1 (en) Method and apparatus for determining an accident using an image
KR20070066663A (en) Vehicle accident information storage device and lane tracking device
EP3829155B1 (en) Imaging system for railway vehicle
JP7084253B2 (en) In-vehicle camera setting method and in-vehicle system
KR20070066662A (en) Vehicle accident information storage device
KR20070066660A (en) Vehicle accident information storage device and rear monitoring device
KR102632361B1 (en) System for providing around view image
US11410288B2 (en) Image processing apparatus

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20051222

PG1501 Laying open of application
PC1203 Withdrawal of no request for examination
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid