[go: up one dir, main page]

JP5991842B2 - 車載カメラの取付角度補正装置および取付角度補正方法 - Google Patents

車載カメラの取付角度補正装置および取付角度補正方法 Download PDF

Info

Publication number
JP5991842B2
JP5991842B2 JP2012093350A JP2012093350A JP5991842B2 JP 5991842 B2 JP5991842 B2 JP 5991842B2 JP 2012093350 A JP2012093350 A JP 2012093350A JP 2012093350 A JP2012093350 A JP 2012093350A JP 5991842 B2 JP5991842 B2 JP 5991842B2
Authority
JP
Japan
Prior art keywords
correction
parameter
mounting angle
vehicle
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012093350A
Other languages
English (en)
Other versions
JP2013222302A (ja
Inventor
康介 棟方
康介 棟方
渡辺 隆行
隆行 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2012093350A priority Critical patent/JP5991842B2/ja
Publication of JP2013222302A publication Critical patent/JP2013222302A/ja
Application granted granted Critical
Publication of JP5991842B2 publication Critical patent/JP5991842B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、車載カメラの取付角度補正装置および取付角度補正方法に関し、特に、路上のレーンマークを検出する際の画像処理に用いる画像を撮影するために車両に搭載された車載カメラの取付角度パラメータを補正する装置に関するものである。
従来、走行中の車両が車線から逸脱する恐れがある場合に警報を発する車線逸脱警報装置が提供されている。この種の車線逸脱警報装置では一般的に、車載カメラにより撮影された画像の処理によって路上のレーンマーク(車線境界線)を検出し、検出したレーンマークを跨いで車両が車線から逸脱する恐れがある場合に、警報を発するようになされている。
この車線逸脱警報装置においては、撮影画像内から抽出されたレーンマークを3次元座標の路面(平面)に投影した上で、車両がレーンマークを跨いで車線から逸脱する恐れがあるか否かを判定している。なお、3次元座標の路面への投影とは、車載カメラより入力した撮影画像を、車両上方の仮想視点から見た真上からの画像に視点変換することをいう。
この視点変換を行うために、車載カメラの取り付け時にキャリブレーションを行うことによって、カメラパラメータ(取付位置、取付角度)をあらかじめ算出して記憶しておく必要がある。このカメラパラメータを正確に求めておくことにより、当該カメラパラメータを用いて3次元座標の路面への投影した左右のレーンマークが平行となり、車線逸脱の恐れを精度良く判定することが可能となる。
しかしながら、荷物の積載量や加減速などに起因する車両の姿勢変化により、車載カメラと路面との位置関係(特に、ピッチ角)がキャリブレーション時から変化することがある。この場合、キャリブレーションによって求めたカメラパラメータを用いてレーンマークを検出すると、その検出位置に誤差(ピッチ角1度につき10〜15cm)が生じ、レーンマーク逸脱の警報を適切に行うことできなくなってしまうという問題があった。
このような問題を解決するための手段として、車両の走行状態に応じてカメラパラメータを補正する技術が提案されている(例えば、特許文献1参照)。この特許文献1に記載の技術では、車両が所定速度以上で直進走行中であり、かつ、視点変換された1組のレーンマークが平行でない(挟み角が所定値以上である)場合に、当該1組のレーンマークが平行になるよう車載カメラのピッチ角を補正するように成されている。
特許第3600378号公報
上記特許文献1に記載の技術では、車両が所定速度以上で直進走行中であり、かつ、視点変換された1組のレーンマークが平行でないという条件を付けて、これらの条件を満たす場合に限り、カメラパラメータを補正している。このような条件だと、以下の(1)〜(3)に示すようなケースでも、カメラパラメータの補正を行うことになる。
(1)路面の凹凸により車両に姿勢変化が生じている場合
(2)坂道の上り始め/下り始めの場合
(3)道路幅員の増減によってレーンマークそのものが平行でない場合
しかしながら、上記(1)および(2)のケースは、荷物の積載量や加減速とは全く異なるイレギュラーな要因により、車両の姿勢変化が一時的に生じているに過ぎない。上記(3)のケースに関しては、レーンマークが平行でないことが正しいのであるから、カメラパラメータの補正は本来的に必要でない。そのため、特許文献1に記載の条件を満たしたときに直ちにカメラパラメータの補正を行うと、本来補正すべきでないカメラパラメータが補正されてしまい、誤差が増大してしまう。その結果、レーンマークの位置を正しく検出できなくなってしまうという問題があった。
また、キャリブレーション時に設定されたカメラパラメータと、補正によって算出されたカメラパラメータとの間に大きな差があった場合、補正前のカメラパラメータによって視点変換されたレーンマークの位置と、補正後のカメラパラメータによって視点変換されたレーンマークの位置とが急激に変わってしまう。そのため、レーンマーク検出の位置精度が悪化してしまうことがあった。これは、撮影画像内からレーンマークを検出する際に、前回検出されたレーンマークの位置から今回のレーンマークの位置を推定する処理が行われるのであるが、その推定に前回のレーンマークの位置を利用できない場合が生じるからである。
本発明は、このような問題を解決するために成されたものであり、撮影画像内から検出されるレーンマークを用いたカメラパラメータ(取付角度パラメータ)の補正精度を向上させることにより、レーンマーク検出の位置精度を向上させることができるようにすることを目的とする。
上記した課題を解決するために、本発明では、撮影画像内から検出された1組のレーンマークが平行となるように車載カメラの取付角度パラメータの補正値を所定時間毎に算出し、当該補正値のN回(Nは2以上)分のバラツキが所定値以下のときに、当該補正値に基づいて取付角度パラメータの補正を行うようにしている。
本発明の他の態様では、補正値を用いて取付角度パラメータを補正する際に、現在の取付角度パラメータを補正値に段階的に近づけていくように補正を行うようにしている。
上記のように構成した本発明によれば、路面の凹凸や坂道の上り始め/下り始めなどにより車両の姿勢が一時的に変化している場合や、道路幅員が増減する区間においてレーンマークそのものが一時的に平行でなくなる場合など、イレギュラーなケースで一時的に取付角度パラメータの補正値が算出されたとしても、N回分の補正値のバラツキが所定値より大きくなるため、取付角度パラメータの補正は実施されなくなる。そのため、本来補正すべきでない取付角度パラメータが補正されて誤差が増大してしまうという不都合を防止することができる。その結果、取付角度パラメータの補正精度が向上し、レーンマーク検出の位置精度を向上させることができる。
また、本発明の他の態様によれば、現在の取付角度パラメータと、補正値として算出された取付角度パラメータの間に大きな差がある場合であっても、その補正値によって一気に取付角度パラメータが補正されることはなく、段階的に徐々に補正されていく。そのため、補正前の取付角度パラメータによって視点変換されるレーンマークの位置と、補正後の取付角度パラメータによって視点変換されるレーンマークの位置とが急激に変わってしまうことがなくなる。その結果、前回検出されたレーンマークの位置を今回のレーンマークの位置の推定に有効に利用することができ、レーンマーク検出の位置精度を向上させることができる。
本実施形態による車載カメラの取付角度補正装置の機能構成例を示すブロック図である。 本実施形態のレーンマーク検出部により行われるスライスの抽出処理を説明するための図である。 本実施形態のレーンマーク検出部により行われるスライスのグルーピング処理を説明するための図である。 本実施形態の視点変換部により行われる視点変換処理および直線算出部により行われる近似直線の算出処理を説明するための図である。 本実施形態による直線性判定部の処理を説明するための図である。 本実施形態によるパラメータ補正部の動作を説明するための図である。 本実施形態による取付角度補正装置の動作例を示すフローチャートである。
以下、本発明の一実施形態を図面に基づいて説明する。図1は、本実施形態による車載カメラの取付角度補正装置100の機能構成例を示すブロック図である。図1に示すように、本実施形態の取付角度補正装置100は、車両に搭載された車載機に組み込まれるものであり、車載カメラ200に接続されている。車載カメラ200は、例えば、車両の後方に設置されたリアカメラである。
取付角度補正装置100は、その機能構成として、レーンマーク検出部1、視点変換部2、直線性判定部3、走行速度判定部4、平行性判定部5、直進性判定部6、パラメータ補正部7およびパラメータ記憶部8を備えている。また、レーンマーク検出部1は、具体的な機能構成として、スライス抽出部11を備えている。また、直線性判定部3は、具体的な機能構成として、直線算出部31および誤差判定部32を備えている。
なお、図1に示す各機能ブロック1〜7は、ハードウェア構成、DSP、ソフトウェアの何れによっても実現することが可能である。例えばソフトウェアによって実現する場合、上記各機能ブロック1〜7は、実際にはコンピュータのCPUあるいはMPU、RAM、ROMなどを備えて構成され、RAMやROMに記憶されたプログラムが動作することによって実現できる。
図1において、レーンマーク検出部1は、車載カメラ200より入力される撮影画像内からレーンマークを所定時間毎に検出する。具体的には、レーンマーク検出部1のスライス抽出部11が、撮影画像を水平方向に1ラインずつスキャンしていったときに周囲との輝度差が大きくなる部分をスライスとして抽出し、複数のスライスの集合をレーンマークとして検出する。
図2および図3は、スライス抽出部11の処理を説明するための図である。まず、スライス抽出部11は、車載カメラ200より入力された撮影画像から、グレースケールの輝度画像を生成する。そして、スライス抽出部11は、図2に示すように、輝度画像を水平方向にスキャンして、閾値以上の輝度が一定間隔続く水平部分をラインとして取り出す。これを撮影画像の全体に対して行う。なお、取り出したラインの1つ1つを「スライス」という。
次に、スライス抽出部11は、図3に示すように、取り出した各スライスに対して、垂直方向に隣接するスライスどうしで水平方向の座標値の少なくとも一部が重複している複数のスライスをグルーピングする。図3に示す例では、撮影画像内からスライスの3つのグループ1〜3が抽出されている。スライス抽出部11は、このようにしてグルーピングした複数のスライスの集合をそれぞれレーンマークとして検出する。
視点変換部2は、レーンマーク検出部1により検出された少なくとも1組のレーンマークの画像を、車載カメラ200の取付角度パラメータを含むカメラパラメータに基づいて3次元座標の平面上に投影する。具体的には、視点変換部2は、図4に示すように、各グループ1〜3のスライスを3次元座標の路面(Z=0)に投影する。なお、3次元座標の路面への投影とは、各スライスの集合から成るレーンマークの画像を、車両上方の仮想視点から見た真上からの画像に視点変換することをいう。3次元座標の原点は、車両中心の位置である。また、X軸において車両の前方がプラス、Y軸において車両の左側がプラスで右側がマイナスである。
この視点変換処理で用いるカメラパラメータは、パラメータ記憶部8に記憶されている。このカメラパラメータは、車載カメラ200の取り付け時にキャリブレーションを行うことによって算出されたものであるが、以下に述べるようにパラメータ補正部7によって適宜補正されるようになっている。本実施形態において補正の対象とするパラメータは、車載カメラ200の取付角度パラメータである。より具体的には、ピッチ角のパラメータである。
直線性判定部3は、視点変換部2により平面上に投影されたレーンマークが直線であるか否かを判定する。そして、その判定結果をパラメータ補正部7に通知する。具体的には、まず、直線算出部31において、レーンマーク検出部1のスライス抽出部11により抽出され視点変換部2により平面上に投影された複数のスライスのそれぞれの中点から、最小2乗法でレーンマークの近似直線式Y=aX+b(Z=0)を算出する。ここで、aは近似直線の傾き、bは近似直線のY切片である。
図4に示した例において、スライスのグループ1から抽出される近似直線の直線式はY=a1X+b1、グループ2から抽出される近似直線の直線式はY=a2X+b2、グループ3から抽出される近似直線の直線式はY=a3X+b3である。
ここで、直線算出部31は、各グループ1〜3について算出した近似直線の直線式のうち、傾きaおよびY切片bの値がある範囲内に入る複数の直線式がある場合は、それらの直線式に該当するグループを1つにまとめる。図4の例では、グループ2とグループ3を1つのグループにまとめている。そして、直線算出部31は、1つにまとめたグループについて、その中に含まれる各スライスの情報から1本の近似直線を再度抽出する。その結果、まとめた近似直線の直線式はY=a4X+b4となる。
次に、誤差判定部32は、直線算出部31により算出された近似直線と、視点変換部2により平面上に投影された複数のスライスの中点との誤差の大きさからレーンマークの直線性を判定する。例えば、誤差判定部32は、近似直線と中点との誤差の大きさが所定値以上となるスライスが存在する場合に、レーンマークが直線ではないと判定する。
例えば、図5に示すように、車両がカーブ路の直後を直進走行している場合、撮影画像の奥の方にカーブ形状のレーンマークが写り、手前の方に直線形状のレーンマークが写っている。この場合、直線形状のレーンマーク部分では近似直線とスライスの中点との誤差は所定値より小さくなるが、カーブ形状のレーンマーク部分(一点鎖線)の円で示した部分)では誤差が所定値以上となる。つまり、近似直線と中点との誤差の大きさが所定値以上となるスライスが存在するので、誤差判定部32はレーンマークが直線ではないと判定する。
なお、誤差判定部32による直線性の判定方法は、この例に限定されるものではない。例えば、誤差判定部32は、近似直線の直線式Y=aX+bと各スライスの中点との誤差の大きさから、以下に示す算出式によって直線性評価値MatchingValueを算出し、当該直線性評価値が所定値より小さい場合にレーンマークが直線ではないと判定するようにしてもよい。
MatchingValue=1.0−Diffrence/MaxDiffrence
ただし、
Diffrence:直線式と各スライスの中点との距離の平均値
MaxDiffrence:距離誤差の閾値
走行速度判定部4は、車両の走行速度が所定値以上であるか否かを判定する。具体的には、走行速度判定部4は、図示しない車速センサにより検出された走行速度情報を入力し、当該入力した走行速度情報が所定値(例えば、45[km/h]以上を示しているか否かを判定する。そして、その判定結果をパラメータ補正部7に通知する。
平行性判定部5は、視点変換部2により平面上に投影された1組のレーンマーク(車両の左右のレーンマーク)が平行であるか否かを判定する。具体的には、平行性判定部5は、視点変換部2により平面上に投影された1組のレーンマークについて直線算出部31により算出された直線式に基づいて、1組の直線式の角度差が所定値(例えば、1度)以上の場合に、1組のレーンマークが平行でないと判定する。そして、その判定結果をパラメータ補正部7に通知する。
直進性判定部6は、車両が直進走行しているか否かを判定する。具体的には、直進性判定部6は、視点変換部2により平面上に投影された1組のレーンマークについて直線算出部31により算出された直線式に基づいて、1組の直線式の角度が異符号であるか、角度相対角が所定値(例えば、1.5度)以下の場合に、車両が直進走行していると判定する。そして、その判定結果をパラメータ補正部7に通知する。なお、車両が直進走行しているか否かは、ハンドル操舵角の情報に基づいて判定することも可能である。
パラメータ補正部7は、所定時間毎に以下の4つの条件(1)〜(4)を全て満たすか否かを判定し、満たしたときに、視点変換部2により視点変換された1組のレーンマークが平行となるように、パラメータ記憶部8に記憶されている取付角度パラメータ(ピッチ角)を補正する。
(1)直線性判定部3によりレーンマークが直線であると判定されること
(2)走行速度判定部4により車両の走行速度が所定値以上であると判定されること
(3)平行性判定部5により1組のレーンマークが平行でないと判定されること
(4)直進性判定部6により車両が直進走行していると判定されること
ピッチ角の具体的な補正方法は、本実施形態においては特に限定するものでなく、種々の方法を適用することが可能である。例えば、1組のレーンマークの間隔をΔd[m]、1組の直線式の角度差をΔΦ[deg]、車載カメラ200の路上からの取り付け高さをZc[m]としたとき、ピッチ角補正値ΔPを以下の式により算出する。
ΔP=ΔΦ/(Δd×Zc)
パラメータ補正部7は、所定時間毎にピッチ角補正値ΔPを算出し、N回(Nは2以上の整数。例えば、N=10)の履歴を蓄積する。そして、パラメータ補正部7は、当該N回分の補正値のバラツキを算出し、当該バラツキが所定値以下のときに(例えば、ピッチ角補正値ΔPの標準偏差σが0.5度以下のとき)、取付角度パラメータの補正を行う。この場合に用いる補正値ΔP’は、例えば、N回分のピッチ角補正値ΔPの平均値とする。あるいは、N回分のピッチ角補正値ΔPのうち最新のものとしてもよい。
また、パラメータ補正部7は、取付角度パラメータの補正を行う際に、現在の取付角度パラメータを補正値ΔP’に段階的に近づけていくように補正を行う。例えば、所定時間当たり(つまり、1回の補正当たり)、補正値ΔP’の3%という一定の割合で現在の取付角度パラメータを補正値ΔP’に段階的に近づけていくように補正を行う。すなわち、1回当たりの補正後の取付角度パラメータ=現在値×97%+補正値×3%という式に従って取付角度パラメータの補正を行う。
図6は、本実施形態によるパラメータ補正部7の動作を説明するための図である。図6に示すように、パラメータ補正部7は、所定時間毎に算出されるピッチ角補正値ΔPをN回分蓄積してそのバラツキ(標準偏差σ)を求め、バラツキが所定値以下か否かを最初に判定する。そして、バラツキが所定値以下であると判定された場合に、補正値ΔP’の3%という一定の割合で現在の取付角度パラメータを補正値ΔP’に段階的に近づけていくように補正を行う。ピッチ角が1度以内の補正であれば、レーンマーク検出開始から30秒以内には補正を完了させることが可能である。図6の例では、約0.75度の補正が約18秒で完了している。
次に、上記のように構成した本実施形態による取付角度補正装置100の動作を説明する。図7は、本実施形態による取付角度補正装置100の動作例を示すフローチャートである。なお、図7に示すフローチャートは、取付角度補正装置100の組み込まれた車載機が起動されたときに開始し、所定時間毎に繰り返し実行される。
まず、レーンマーク検出部1のスライス抽出部11は、車載カメラ200より入力された撮影画像をグレースケールの輝度画像に変換する。そして、輝度画像を水平方向にスキャンすることによって複数のスライスを抽出し、その集合をレーンマークとして検出する(ステップS1)。視点変換部2は、レーンマーク検出部1により検出された各レーンマークの画像(複数のスライスの集合)を、パラメータ記憶部8に記憶されたカメラパラメータに基づいて3次元座標の平面上に投影する(ステップS2)。
次に、直線性判定部3の直線算出部31は、視点変換部2により平面上に投影された複数のスライスのそれぞれの中点から、最小2乗法でレーンマークの近似直線式を算出する(ステップS3)。続いて、誤差判定部32は、直線算出部31により算出された近似直線と、複数のスライスの中点との誤差の大きさに基づいて、レーンマークが直線であるか否かを判定する(ステップS4)。
また、走行速度判定部4は、車両の走行速度が所定値以上であるか否かを判定する(ステップS5)。また、平行性判定部5は、視点変換部2により平面上に投影された1組のレーンマークが平行であるか否かを判定する(ステップS6)。さらに、直進性判定部6は、車両が直進走行しているか否かを判定する(ステップS7)。
そして、パラメータ補正部7は、上記ステップS4〜S7における4つの判定結果に基づいて、レーンマークが直線で、車両の走行速度が所定値以上で、1組のレーンマークが平行でなく、かつ、車両が直進走行しているという4つの条件を満たすか否かを判定する(ステップS8)。これら4つの条件を全て満たすと判定したとき、パラメータ補正部7は、視点変換部2により視点変換された1組のレーンマークが平行となるように取付角度パラメータ(ピッチ角)の補正値ΔPを算出し、算出したピッチ角補正値ΔPを記憶させる(ステップS9)。
次に、パラメータ補正部7は、履歴として記憶されたN回分のピッチ角補正値ΔPのバラツキ(標準変化σ)が所定値以下であるか否かを判定し(ステップS10)、所定値以下であるときは、補正値ΔP’に基づいて取付角度パラメータの補正を行う(ステップS11)。このときパラメータ補正部7は、現在の取付角度パラメータを補正値ΔP’の3%だけ補正する。
その後、パラメータ補正部7は、補正が完了したか否かを判定する。例えば、算出された補正値ΔP’と補正後の取付角度パラメータの値との誤差が所定値あるいは所定割合以下になったときに、パラメータ補正部7は補正が完了したと判定する。まだ補正が完了していないとパラメータ補正部7にて判定された場合、処理はステップS1に戻る。
一方、補正が完了したとパラメータ補正部7にて判定された場合、レーンマーク検出部1は、車載機の電源がオフとされたか否かを判定する(ステップS13)。車載機の電源がオフとされていない場合、処理はステップS1に戻る。一方、車載機の電源がオフとされた場合は、図7に示すフローチャートの処理を終了する。
なお、上記ステップS8において、4つの条件のうち1つでも満たさないものがあるとパラメータ補正部7にて判定された場合、および上記ステップS10において、ピッチ角補正値ΔPのバラツキが所定値以下でないとパラメータ補正部7にて判定された場合、処理はステップS13に遷移し、パラメータ補正部7による取付角度パラメータの補正は行わない。
以上詳しく説明したように、本実施形態では、撮影画像内から検出された1組のレーンマークが平行となるように車載カメラ200の取付角度パラメータ(ピッチ角)の補正値を所定時間毎に算出し、当該補正値のN回(Nは2以上)分のバラツキが所定値以下のときに限り、当該補正値に基づいて取付角度パラメータの補正を行うようにしている。
このように構成した本実施形態によれば、路面の凹凸や坂道の上り始め/下り始めなどにより車両の姿勢が一時的に変化している場合や、道路幅員が増減する区間においてレーンマークそのものが一時的に平行でなくなる場合など、イレギュラーなケースで一時的に取付角度パラメータの補正値が算出されたとしても、N回分の補正値のバラツキが所定値より大きくなるため、取付角度パラメータの補正は実施されなくなる。そのため、本来補正すべきでない取付角度パラメータが補正されて誤差が増大してしまうという不都合を防止することができる。その結果、取付角度パラメータの補正精度が向上し、レーンマーク検出の位置精度を向上させることができる。
また、本実施形態では、補正値を用いて取付角度パラメータを補正する際に、現在の取付角度パラメータを補正値に段階的に近づけていくように補正を行うようにしている。このように構成した本実施形態によれば、現在の取付角度パラメータと、補正値として算出された取付角度パラメータの間に大きな差がある場合であっても、その補正値によって一気に取付角度パラメータが補正されることはなく、段階的に徐々に補正されていく。そのため、補正前の取付角度パラメータによって視点変換されるレーンマークの位置と、補正後の取付角度パラメータによって視点変換されるレーンマークの位置とが急激に変わってしまうことがなくなる。その結果、前回検出されたレーンマークの位置を今回のレーンマークの位置の推定に有効に利用することができ、レーンマーク検出の位置精度を向上させることができる。
なお、上記実施形態では、補正値のバラツキ判定と取付角度パラメータの段階的補正との両方を適用する例について説明したが、何れか一方のみを適用するようにしてもよい。もちろん、両方を適用すれば、上述した両方の効果を得ることができるので、その方が好ましい。
また、上記実施形態では、補正値のバラツキを標準偏差σで評価する例について説明したが、本発明はこれに限定されない。例えば、補正値のバラツキを分散またはその他のパラメータで評価するようにしてもよい。
その他、上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
1 レーンマーク検出部
2 視点変換部
3 直線性判定部
4 走行速度判定部
5 平行性判定部
6 直進性判定部
7 パラメータ補正部
8 パラメータ記憶部
11 スライス抽出部
31 直線算出部
32 誤差判定部
100 取付角度補正装置
200 車載カメラ

Claims (4)

  1. 車載カメラより入力される撮影画像内からレーンマークを検出するレーンマーク検出部と、
    上記レーンマーク検出部により検出された少なくとも1組のレーンマークを、上記車載カメラの取付角度パラメータを含むカメラパラメータに基づいて3次元座標の平面上に投影する視点変換部と、
    上記1組のレーンマークが平行となるように上記取付角度パラメータの補正値を算出し、当該補正値に基づいて現在の取付角度パラメータを補正するパラメータ補正部とを備え、
    上記パラメータ補正部は、所定時間毎に算出される上記補正値のN回(Nは2以上)の履歴を蓄積し、当該N回分の補正値のバラツキが所定値以下のときに、上記取付角度パラメータの補正を行うことを特徴とする車載カメラの取付角度補正装置。
  2. 上記パラメータ補正部は、上記現在の取付角度パラメータを上記補正値に段階的に近づけていくように補正を行うことを特徴とする請求項1に記載の車載カメラの取付角度補正装置。
  3. 車載機のレーンマーク検出部が、車載カメラより入力される撮影画像内からレーンマークを所定時間毎に検出する第1のステップと、
    上記車載機の視点変換部が、上記レーンマーク検出部により所定時間毎に検出された少なくとも1組のレーンマークを、上記車載カメラの取付角度パラメータを含むカメラパラメータに基づいて3次元座標の平面上に投影する第2のステップと、
    上記車載機のパラメータ補正部が、上記1組のレーンマークが平行となるように上記取付角度パラメータの補正値を所定時間毎に算出し、算出した補正値を記憶させる第3のステップと、
    上記車載機の上記パラメータ補正部が、上記記憶されたN回(Nは2以上)分の補正値のバラツキが所定値以下であるか否かを判定し、所定値以下であるときに、上記補正値に基づいて現在の取付角度パラメータの補正を行う第4のステップとを有することを特徴とする車載カメラの取付角度補正方法。
  4. 上記第4のステップにおいて、上記パラメータ補正部は、上記現在の取付角度パラメータを上記補正値に段階的に近づけていくように補正を行うことを特徴とする請求項3に記載の車載カメラの取付角度補正方法。
JP2012093350A 2012-04-16 2012-04-16 車載カメラの取付角度補正装置および取付角度補正方法 Active JP5991842B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012093350A JP5991842B2 (ja) 2012-04-16 2012-04-16 車載カメラの取付角度補正装置および取付角度補正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012093350A JP5991842B2 (ja) 2012-04-16 2012-04-16 車載カメラの取付角度補正装置および取付角度補正方法

Publications (2)

Publication Number Publication Date
JP2013222302A JP2013222302A (ja) 2013-10-28
JP5991842B2 true JP5991842B2 (ja) 2016-09-14

Family

ID=49593219

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012093350A Active JP5991842B2 (ja) 2012-04-16 2012-04-16 車載カメラの取付角度補正装置および取付角度補正方法

Country Status (1)

Country Link
JP (1) JP5991842B2 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6379967B2 (ja) 2014-10-09 2018-08-29 株式会社デンソー 画像生成装置および画像生成方法
JP6507590B2 (ja) 2014-11-26 2019-05-08 株式会社デンソー 画像変換装置および画像変換方法
JP2017112566A (ja) * 2015-12-18 2017-06-22 株式会社デンソー パラメータ特定装置
JP6511406B2 (ja) * 2016-02-10 2019-05-15 クラリオン株式会社 キャリブレーションシステム、キャリブレーション装置
JP6565769B2 (ja) 2016-04-03 2019-08-28 株式会社デンソー 車載カメラの取付角度検出装置、取付角度較正装置、取付角度検出方法、取付角度較正方法、およびコンピュータープログラム
CN109859278B (zh) * 2019-01-24 2023-09-01 惠州市德赛西威汽车电子股份有限公司 车载相机系统相机外参的标定方法及标定系统
CN112529966B (zh) * 2020-12-17 2023-09-15 豪威科技(武汉)有限公司 一种车载环视系统的在线标定方法及其车载环视系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3600378B2 (ja) * 1996-07-24 2004-12-15 本田技研工業株式会社 車両の外界認識装置
JP4296076B2 (ja) * 2003-11-13 2009-07-15 三菱電機株式会社 走行車線認識装置
JP5367305B2 (ja) * 2007-10-03 2013-12-11 株式会社東芝 目視検査装置および目視検査方法
JP4760896B2 (ja) * 2008-11-04 2011-08-31 ソニー株式会社 カメラ制御装置及びカメラ制御方法

Also Published As

Publication number Publication date
JP2013222302A (ja) 2013-10-28

Similar Documents

Publication Publication Date Title
JP5991842B2 (ja) 車載カメラの取付角度補正装置および取付角度補正方法
US8417022B2 (en) Stereo-image processing apparatus
JP6233345B2 (ja) 路面勾配検出装置
CN106470877B (zh) 车辆用显示装置以及车辆用显示方法
US9912933B2 (en) Road surface detection device and road surface detection system
EP3418122B1 (en) Position change determination device, overhead view image generation device, overhead view image generation system, position change determination method, and program
JP6189816B2 (ja) 走行区画線認識装置
US11030761B2 (en) Information processing device, imaging device, apparatus control system, movable body, information processing method, and computer program product
JP6936098B2 (ja) 対象物推定装置
JP2018036067A (ja) 自車位置認識装置
JP6822427B2 (ja) 地図変化点検出装置
JPWO2015015939A1 (ja) 車両位置姿勢角推定装置及び車両位置姿勢角推定方法
JP6396729B2 (ja) 立体物検出装置
JP6350082B2 (ja) 画像処理装置
JP2013220729A (ja) 車載カメラの取付角度補正装置および取付角度補正方法
JP2013186718A (ja) 移動物体位置姿勢推定装置及び方法
JP2012159470A (ja) 車両用画像認識装置
WO2019092913A1 (ja) 路面領域検出装置
US20150104072A1 (en) Lane detection method and system using photographing unit
JP6941949B2 (ja) 車両用映像表示装置
JP6521796B2 (ja) ステレオ画像処理装置
JP2014167397A (ja) 車両間距離算出装置およびその動作制御方法
JP5472137B2 (ja) 境界検出装置、および境界検出プログラム
CN107031535A (zh) 车辆控制装置及方法
JP5959245B2 (ja) レーンマーク検出装置およびレーンマークの信頼度算出方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150227

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151215

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160201

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20160426

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160530

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20160628

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160816

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160816

R150 Certificate of patent or registration of utility model

Ref document number: 5991842

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150