[go: up one dir, main page]

JP5261495B2 - 重み行列を用いたリアルタイム自己衝突および障害物回避 - Google Patents

重み行列を用いたリアルタイム自己衝突および障害物回避 Download PDF

Info

Publication number
JP5261495B2
JP5261495B2 JP2010532163A JP2010532163A JP5261495B2 JP 5261495 B2 JP5261495 B2 JP 5261495B2 JP 2010532163 A JP2010532163 A JP 2010532163A JP 2010532163 A JP2010532163 A JP 2010532163A JP 5261495 B2 JP5261495 B2 JP 5261495B2
Authority
JP
Japan
Prior art keywords
collision
body segment
joint
motion
gradient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010532163A
Other languages
English (en)
Other versions
JP2011502801A (ja
Inventor
ダリウッシュ、ベーザド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of JP2011502801A publication Critical patent/JP2011502801A/ja
Application granted granted Critical
Publication of JP5261495B2 publication Critical patent/JP5261495B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/004Artificial life, i.e. computing arrangements simulating life
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • B25J9/1666Avoiding collision or forbidden zones
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/39Robotics, robotics to robotics hand
    • G05B2219/39096Self-collision, internal collison, collision between links of one robot
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/40Robotics, robotics mapping to robotics vision
    • G05B2219/40463Shortest distance in time, or metric, time optimal
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/40Robotics, robotics mapping to robotics vision
    • G05B2219/40497Collision monitor controls planner in real time to replan if collision

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)
  • Control Of Position Or Direction (AREA)

Description

本開示は、一般的にはシステムの運動制御の分野に関し、より具体的にはシステムの運動制御による衝突の回避に関する。
(関連出願)
本願は、米国特許法第119条(e)項に基づき、2007年11月1日付け米国仮特許出願第60/984,639号に対する優先権を主張する。この先行出願の全開示内容は、本明細書中に参考として援用する。
衝突回避は、ロボット技術が始まって以来の重要な課題であって、広範な研究が行われている。この分野における初期の研究は主に、移動ロボットナビゲーションおよび産業用マニピュレーション等への応用が一般的な障害物回避に焦点を当てていた(A.A.MaciejewskiおよびC.A.Klein著、「Obstacle avoidance for kinematically redundant manipulators in dynamically varying environments」、International Journal of Robotics Research、4:109−117ページ(1985年)およびO.Khatib著、「Real−Time Obstacle Avoidance for Manipulators and Mobile Robots」、The International Journal of Robotics Research(IJRR)、5(1):90−98ページ(1986年)参照。これら文献の全開示内容は、本明細書中に参考として援用する)。これらの用途においては、作業空間が静止または徐々に変化するものと予め規定されることが多い。さらに、応用開発者らは一般的に、人との衝突を回避するための安全対策として、ロボットの作業空間と人とを分離する考え方を採用していた。衝突距離の閾値を大きく設定することは、初期の移動ナビゲーションおよび産業用マニピュレーション用途の多くで許容可能なものであった。そして、このような状況下において、人工ポテンシャル場の概念が障害物回避に有効であることが判明した。
今日、ロボット工学の分野は、高自由度で人間のような個人用ロボットの開発に向かっており、人と作業空間を共有するとともに物理的に相互作用するように設計されることが多い。このようなロボットは、基本的には新たな機能(自己運動および副次的作業を行う機能)が追加されているので、冗長度が高くなることが多い。ただし、冗長度が高くなることによって、関節制限および自己衝突を回避するために内部運動を抑制するという新たな課題も生まれている。これらの課題により、上記用途に適応するための堅牢な衝突回避方策の必要性に対する研究者らの認識が非常に高まってきている。
特に、当初の障害物回避方策の開発時には概ね看過されまたは不要とされていた自己衝突回避は、現在では重要な研究テーマとなっている(H.Sugiura、M.Gienger、H.Janssen、およびC.Goerick著、「Real−time collision avoidance with whole body motion control for humanoid robots」、IEEE Int.Conf.on Intelligent Robots and Systems(IROS2007)(2007年)およびO.Stasse、A.Escande、N.Mansard、S.Miossec、P.Evrard、およびA.Kheddar著、「Real−time(self)−collision avoidance task on a hrp−2 humanoid robot」、In Proceedings of ICRA、3200−3205ページ、Pasadena、CA(2008年)参照。これら文献の全開示内容は、本明細書中に参考として援用する)。自己衝突回避は、人間のような作業を行う人型ロボットにおいては特に困難である。この衝突回避方策は、複数の衝突体に同時に対応するのみならず、初期の障害物回避アルゴリズム用に構築した衝突距離よりも短い衝突距離を許容するものである必要がある。また、自己衝突回避方策は、基準運動または最初に計画された運動を大幅に変更するものであってはならない。このことは、人体の運動を観察してロボットの運動を再現する目標動作修正と称する用途等において特に重要である(B.Dariush、M.Gienger、B.Jian、C.Goerick、およびK.Fujimura著、「Whole body humanoid control from human motion descriptors」、Int.Conf.Robotics and Automation(ICRA)、Pasadena、CA(2008年)およびA.Nakazawa、S.Nakaoka、K.Ikeuchi、およびK.Yokoi著、「Imitating human dance motions through motion structure analysis」、Int.Conference on Intelligent Robots and Systems(IROS)、2539−2544ページ、Lausanne、Switzerland(2002年)参照。これら文献の全開示内容は、本明細書中に参考として援用する)。
以上より、自己衝突および障害物をリアルタイムで回避するためにロボットやその他の多関節剛体システムの運動を制御するシステムおよび方法がとりわけ不十分である。
本発明の実施形態は、多関節システムにおける体節とその他の構造体との衝突を回避する方法(ならびに対応するシステムおよびコンピュータプログラム製品)を提供する。一態様によれば、このような衝突を回避するための衝突関数が決定され、上記体節と1つの構造体との間の距離が測定され、この衝突関数および距離に基づいて重み行列が生成され、この重み行列を用いて体節の変向運動が決定される。体節の方向は、この変向運動に基づいて変更され、上記構造体との衝突が回避される。
本発明の別の態様によれば、接続体節間の衝突を回避するために関節制限勾配重み行列が生成され、障害物および非接続体節間の衝突を回避するために衝突勾配重み行列が生成される。そして、これら2つの行列に基づいて重み行列が生成され、この重み行列を用いて体節の変向運動が決定されることにより、障害物および多関節システムにおける体節間の衝突が回避される。
本明細書に記載の特徴および利点は、これらがすべてではなく、図面、明細書、および請求の範囲を考慮すれば、特に当業者にはその他多くの特徴および利点が明らかとなる。さらに、本明細書中で使用する表現は主に、読み易さと説明の容易さを考慮して選択したものであって、開示の主題の範囲を画定または制限するものではないことに注意すべきである。
開示の実施形態は、詳細な説明、添付の請求の範囲、および図面から容易に明らかとなるその他の利点および特徴を有する。図面の簡単な説明は、以下の通りである。
本発明の一実施形態に係る、ターゲットシステムを制御する目標動作修正システムのブロック図である。 本発明の一実施形態に係る、図1に示した目標動作修正システムの構成を示すブロック図である。 本発明の一実施形態に係る、追跡・修正プロセスのフロー図である。 本発明の一実施形態に係る、ロボットシステムを示す図である。 本発明の一実施形態に係る、物体対間の衝突を防止する例示的なプロセスのフローチャートである。 本発明の一実施形態に係る、人体モデルを示す図である。 本発明の一実施形態に係る、体節の自己衝突防止における衝突回避方策の結果を示す図である。 本発明の一実施形態に係る、体節の自己衝突防止における衝突回避方策の結果を示す図である。 本発明の一実施形態に係る、体節の自己衝突防止における衝突回避方策の結果を示す図である。 本発明の一実施形態に係る、体節の自己衝突防止における衝突回避方策の結果を示す図である。
本発明は、自己衝突および障害物を回避しながら、リアルタイムでロボットやその他の多関節剛体システムの運動を制御する目標動作修正システム(ならびに対応する方法およびコンピュータプログラム製品)を提供する。衝突は、衝突対間の距離を監視し、重み行列および監視した距離を用いて決定された変向運動に基づいて体節の方向を変えることにより回避することができる。
図面および以下の説明は、本発明の実施形態に関連するが、ほんの一例に過ぎない。以下、複数の実施形態について詳細に参照するが、これらの例は添付の図面中に図示する。なお、図面においては、可能な限り同様または同種の符号を使用するとともに、同様または同種の機能を示すものとする。図面は、開示のシステム(または方法)の実施形態を示すものであるが、ほんの一例に過ぎない。当業者であれば、以下の説明より、本明細書に示す構造および方法の別の実施形態を発明の本質から逸脱することなく採用可能であることを容易に認識できるであろう。
(目標動作修正システム)
図1は、本発明の一実施形態に係る、ロボット/バイオロボットシステム等のターゲットシステム104を制御することにより、自己衝突および障害物を回避しながら、ソースシステム102で追跡された運動をリアルタイムでシミュレーションする目標動作修正システム100のブロック図である。目標動作修正システム100(動作プランニングシステムまたは動作フィルタリングシステムとしても知られている)は、ソースシステム102の動作記述子108を検出する。ソースシステム102は、たとえば人間や動物等、任意の運動発生源であってもよい。目標動作修正システム100は、動作記述子108に応答して、ターゲットシステム104の運動を制御する関節変数110を生成する。ターゲットシステム104は、たとえばロボット等の一般的な多関節システム、多関節機構(たとえば、人型ロボット等)、アバター、または人間や動物が装着する外骨格装置等であってもよい。
一実施形態において、目標動作修正システム100は、ソースシステム102で生成された運動を取得し、この取得した運動をターゲットシステム104に転送する。このプロセスは通常、目標動作修正と称する。ソースシステム102の運動は、直交座標(またはタスク)空間における1または複数の基本動作を用いることにより、動作記述子108(動作軌跡、所望のタスク記述子、またはタスク変数としても知られている)として追跡(たとえば、マーカー位置や特徴点等の測定による)および表現が行われる。動作記述子108は、目標動作修正システム100によって、関節変数110(関節空間軌跡、関節運動、関節コマンド、または関節動作記述子としても知られている)に変換される。目標動作修正システム100は、関節変数110を用いてターゲットシステム104を制御し、ソースシステム102における運動をシミュレーションする。また、目標動作修正システム100は、ターゲットシステム104における運動に制約を設けることによって、関節制限、筋性トルク制限、自己衝突、障害物等を回避することができる。説明の便宜上、ソースシステム102が人体モデルを表し、ソースの運動が通常は測定により観測または推測される人体の基本動作を表し、ターゲットシステム104が人体モデルの運動を模倣するように制御される人型ロボットを表すこととしても一般性は失われない。当業者であれば、人体姿勢推定、追跡と推定、および生体力学における関節トルク推定等、その他の目的に目標動作修正システム100を利用してもよいことが分かるであろう。
図2は、一実施形態に係る、観測される動作記述子108から関節コマンドを生成する目標動作修正システム100の構成を示すブロック図である。目標動作修正システム100は、ソースシステム102における人体の運動の観察により抽出された動作記述子108および予め生成された関節コマンドに応答して、ロボットシステム214(ターゲットシステム104)に適用する関節コマンドq(関節変数110)を生成する。目標動作修正システム100は、追跡・修正システム202、制約システム204、およびバランス制御システム206を備える。追跡・修正システム202は、観測される動作記述子108から関節コマンドqを生成し、制約システム204から制約動作記述子230および適当な重み行列232を取得し、バランス制御システム206からバランス動作記述子234を取得する。制約システム204は、予め生成された関節コマンドに応答して制約動作記述子230を生成する。バランス制御システム206は、ロボットシステム214から検出した運動情報236に応答してバランス動作記述子234を生成する。なお、別の実施形態においては、目標動作修正システム100、追跡・修正システム202、および/または制約システム204が、予め生成された関節コマンドの代替または追加として、ロボットシステム214から検出した運動情報236を入力として取得する。同様に、バランス制御システム206は、ロボットシステム214から検出した運動情報236の代替または追加として、予め生成された関節コマンドを入力として取得することができる。
一実施形態において、目標動作修正システム100は、タスク空間制御フレームワークを用いて、(たとえば、特徴点等における)測定による観測、合成、またはターゲットシステム104(この場合は、ロボットシステム214)の現在構成から計算により得られる所望の動作記述子108群から、ターゲットシステム104における全自由度の運動を生成する。追跡・修正システム202は、たとえば直交座標追跡誤差の最小化等、所望のタスク記述子を追跡する計算された関節コマンド群において、運動結果を生成する。また、バランス制御システム206は、得られた運動を制御してバランスを図るとともに、ターゲットシステム104を安定に保つ。制約システム204は、ターゲットシステム104が関節制限、速度制限、トルク制限等の物理的制限に違反することを防止するためのコマンドを提供するとともに、追跡・修正システム202と協働して、ターゲットシステム104が特異性に起因する障害物、自己衝突、および計算上の問題を回避できるようにする。これら3つのシステム202、204、206は、階層的なタスク管理方策によって解決可能な多数の相反するタスクを提示するように構成されていてもよい。相反するタスクの解決に関する詳細については、2007年4月12日付け米国特許出願第11/734,758号、発明の名称:「Control Of Robots From Human Motion Descriptors」を参照することができる(この文献の全開示内容は、本明細書中に参考として援用する)。優先度の低い(または重要度の低い)因子の精度については、優先度の高い(または重要度の高い)因子のために犠牲となってもよい。
目標動作修正システム100または後述するその任意の構成要素は、ソフトウェア(たとえば、プロセッサで実行可能な命令を含むモジュール等)、ハードウェア(たとえば、特定用途向け集積回路等)、またはそれらの組み合わせとして構成してもよい。ソフトウェアおよび/またはハードウェアは、プロセッサ、メモリ、コンピュータ可読の記憶媒体(たとえば、ハードディスクドライブ等)、ネットワークインターフェース、適用可能なオペレーティングシステムおよびその他の機能的なソフトウェア(たとえば、ネットワークドライバ、通信プロトコル等)を含むように構築されたコンピュータシステムにおいて動作するものであってもよい。
(軌跡変換プロセス)
追跡・修正システム202は、軌跡変換プロセスにおいて、所望の軌跡(動作記述子108)を直交座標空間から関節空間に変換する。関節(または配置)空間は、ターゲットシステム104の考え得るすべての配置群を参照する。直交座標(またはタスク)空間は、ソースシステム102の空間を参照する。
ロボットの自由度の数はnで表される。また、関節空間全体を特徴付けるこれらの自由度は、ベクトルq=[q1,…,qnTで表される。追跡・修正システム202の目標の1つとして、タスク空間で記述された基準運動に基づいて無衝突関節運動を生成することが挙げられる。一般論として、位置および向きにそれぞれ3次元を割り当てた全6次元タスク空間でタスク変数が作用するものと仮定する。また、タスク変数の数をkと仮定する。さらに、添字i(i=1…k)を、i番目のタスク記述子に対応する空間速度ベクトルのインデックスとする。
Figure 0005261495
そして、関節空間速度とタスク空間速度との間の写像は、式(1)のように2つの空間に関連する微分運動学を考慮することによって求められる。
Figure 0005261495
ここで、Jiは、当該タスクのヤコビアンである。空間速度ベクトルは、式(2)のように定義される。
Figure 0005261495
Figure 0005261495
Figure 0005261495
ヤコビアン行列は、式(5)のように、JoおよびJpで表される回転成分および並進成分に分解してもよい。
Figure 0005261495
Figure 0005261495
(閉ループ逆運動学)
閉ループ逆運動学(CLIK:Closed Loop Inverse Kinematics)は、タスク空間から関節空間への軌跡変換を行う際に有効な方法である。一実施形態においては、追跡・修正システム202がCLIKアルゴリズムを利用して軌跡変換を行う。CLIKアルゴリズムの詳細な説明については、B.Dariush、M.Gienger、B.Jian、C.Goerick、およびK.Fujimura著、「Whole body humanoid control from human motion descriptors」、Int.Conf.Robotics and Automation(ICRA)、Pasadena、CA(2008年)を参照することができる(この文献の全開示内容は、本明細書中に参考として援用する)。
CLIKアルゴリズムは、タスク記述子群を入力として使用し、基準直交座標運動(所望のタスク記述子)と予測直交座標運動との間の追跡誤差を最小化するロボット関節コマンドを推定する。
一実施形態において、CLIKアルゴリズムの調整方針としては、予測ロボットタスク記述子と基準タスク記述子との間の直交座標誤差が最小化されるようにロボット関節コマンドを生成することが挙げられる。追跡性能は、ロボットシステム214の運動学的拘束のほか、相反することが多い複数のタスク記述子要求の実行にも左右される。このような条件付き最適化の構築は、CLIK構成の拡張に基づいている。
タスク空間における基準タスク記述子の速度を式(6)のように記述する。
Figure 0005261495
関節速度は、式(1)を逆変換し、フィードバック誤差項を追加して数値変動を補正することにより計算してもよい。
Figure 0005261495
ここで、J*は、正定値行列Wで重み付けされたJの正規化右擬似逆行列を表す。
Figure 0005261495
パラメータλ>0は減衰項、Iは恒等行列である。λ2I=0の場合、式(8)は単に、Jの重み付け右擬似逆行列となる。さらに、Jが正方正則行列である場合は、Wが恒等行列、λ2I=0であり、行列J*は一般的な行列反転J-1で置き換えられる。
Figure 0005261495
追跡誤差に関する詳細については、Dariush著、「Whole body humanoid control from human motion descriptors」、J.Y.S.Luh、M.W.Walker、およびR.P.C.Paul著、「Resolved−acceleration control of mechanical manipulators」、IEEE Transactions on Automatic Control、25:468−474ページ(1980年)、およびF.Chiaverini、B.Siciliano、およびO.Egeland著、「Review of damped least squares inverse kinematics with experiments on an industrial robot manipulator」、IEEE Trans.Control Systems Tech.、2(2):123−134ページ(1994年)を参照することができる(これら文献の全開示内容は、本明細書中に参考として援用する)。
図3は、CLIKアルゴリズムに基づく追跡・修正プロセスのフロー図である。一実施形態において、このプロセスは追跡・修正システム202中で実現され、CLIKアルゴリズムを用いることにより観測された動作記述子108の位置および方向を追跡可能である。図示のように、追跡・修正システム202は、位置誤差システム307で生成された位置誤差および向き誤差システム304で生成された向き誤差に応答して、時間的に変化するタスク記述子108の所望の位置(pr)および向き(Θr)に追従する関節コマンド(q)を生成する。一実施形態において、追跡・修正システム202は、式(7)を制御則として用いることにより、ロボットシステム214の関節コマンドを生成する。
追跡・修正システム202に関する詳細およびその他の実施形態については、B.Dariush、M.Gienger、A.Arumbakkam、Y.Zhu、K.Fujimura、およびC.Goerick著、「Online Transfer of Human Motion to Humanoids」、International Journal of Humanoid Robotics(2008年10月6日)および2007年4月12日付け米国特許出願第11/734,758号、発明の名称:「Control Of Robots From Human Motion Descriptors」を参照することができる(これら文献の全開示内容は、本明細書中に参考として援用する)。
(衝突回避)
ターゲットシステム104は、自己衝突または他の障害物との衝突を回避することによって、安全に運動を行うことができる。衝突回避は、自己衝突回避または障害物回避として分類してもよい。自己衝突回避とは、ロボットシステム214の2つの体節が接触する状況に関連するものである。一方、障害物回避とは、ロボットシステム214が周囲の物体と接触する状況に関連するものである。自己衝突回避は、接続体節対間の自己衝突回避および非接続体節対間の自己衝突回避として分類してもよい。接続体節対の含意としては、2つの体節が共通の関節で接続され、その関節が回転可能であるものと仮定されている。障害物回避の場合、2つの衝突体は常に非接続状態である。
自己衝突および障害物を回避する方法を以下に詳述する。この方法は、追跡・修正システム202のCLIK構成中に実現することができる。接続体節対間の自己衝突の回避を最初に説明した後、非接続体間の衝突の回避を説明する。これらのアルゴリズムを利用することによって、自己衝突および障害物を回避するための統合的な方法を構築することができる。なお、非接続体節対間の自己衝突および障害物との衝突はいずれも、ロボットシステム214の体節が非接続体と接触することになるため、非接続体間の衝突を回避する上記方法によって回避することができる。
(2つの接続体間の自己衝突の回避)
2つの体節対が共通の回転関節で接続されている場合、すなわち、接続体節対である場合、当該体節対間の自己衝突回避は、関節の可動域を制限することにより対処してもよい。自己衝突回避のための関節制限は、物理的な関節制限に対応する必要はなく、衝突が起こらない限界を手動で確認することにより値を求めた、より安全な仮想関節制限であってもよい。このように、体節対間の衝突回避は、関節の可動域を制限することによって実現することができる。
一実施形態において、接続体節間の自己衝突回避および関節制限の回避は、式(8)における重み行列Wを適当に選択することによって実現される。重み行列の一例は、重み付け最小ノルム(WLN:Weighted Least−Norm)解によって定義される。WLN解は、T.F.ChanおよびR.V.Dubey著、「A weighted least−norm solution based scheme for avoiding joint limits for redundant joint manipulators」、IEEE Transactions on Robotics and Automation、11(2)(1995年)により最初に提案されたものである(この文献の全開示内容は、本明細書中に参考として援用する)。また、WLN解は、減衰最小2乗ヤコビアン反転との関連で構築されたものである。このWLN解を利用し、関節制限関数の勾配に基づいて適切な重み行列を生成することにより、関節が限界に近づくことを抑制する。この解については後述する。
関節がその限界に近いほど大きな値を有し、関節限界で無限大となる関節制限関数の候補は、H(q)で表される。このような関数の候補は、Zghalらによる提案として式(9)で与えられる。
Figure 0005261495
ここで、qiは、i番目の自由度の正規化座標を表し、qi,minおよびqi,maxはそれぞれ、関節限界の下限および上限である(H.ZghalおよびR.V.Dubey著、「Efficient gradient projection optimization for manipulators with multiple degrees of redundancy」、Int.Conf.Robotics and Automation、第2巻、1006−1011ページ(1990年)参照。この文献の全開示内容は、本明細書中に参考として援用する)。関節限界の上限および下限は、物理的な関節制限と衝突回避に使用する仮想関節制限との間のより厳密な限界を表す。なお、H(q)は、正規化により可動域における変化の度合いとなる。∇Hとして表されるHの勾配は、Hの増加速度が最大となる方向を指すn×1ベクトルである関節制限勾配関数を表す。
Figure 0005261495
関節iに対応する要素は、式(11)で与えられる。
Figure 0005261495
Figure 0005261495
JLで表される関節制限勾配重み行列は、対角要素wJLi(i=1…n)を有する式(12)のn×n対角行列で定義される。
Figure 0005261495
式(8)における重み行列Wは、WJLによって構成される(たとえば、W=WJL)。対角要素wJLiは、式(13)のように定義される。
Figure 0005261495
Δ|∂H/∂qi|の項は、関節制限勾配関数の大きさの変化を表す。正数であれば関節がその限界方向に運動していることを表し、負数であればその限界から離れる方向に運動していることを表す。関節がその限界方向に運動している場合、式(13)の第1の条件に関連する重み付け係数は、非常に大きな値となって運動速度が低下する。そして、関節がその限界にほぼ到達すると、重み付け係数は無限大に近づいて、対応する関節は実質的に停止する。関節がその限界から離れる方向に運動している場合は、運動を制限または制約する必要はない。この場合には、式(13)の第2の条件によって、関節の自由な運動が可能になる。このように、WJLを関節制限の回避に使用することができる。
(非接続体間の衝突の回避)
非接続体の衝突回避方策の一実施形態を以下に説明する。非接続体節対間の自己衝突の回避を最初に説明した後、障害物の回避を説明する。
同じ関節を共有しないロボットシステム214の体節対に対して、この衝突回避方策では、2つの衝突体間の最小ユークリッド距離(最短距離)を入力として取得する。2つの物体間の最短距離は、d(d≧0)で表される。また、2つの物体間の最短距離dの座標は、paおよびpbによって表され、関節空間のベースフレームを参照している。aおよびbで表される2つの点は、衝突点(または衝突点対)と称する。P(q,d)は、d=0で最大値を有し、dの増加とともにゼロに向かって指数関数的に減少する衝突関数の候補を表す。別の実施形態において、この衝突関数の候補は、d=0で最小値を有し、距離dの増加とともにたとえば指数関数的に増加するものであってもよい。
∇Pとして表されるPの勾配は、Pの増加速度が最大となる方向を指すn×1ベクトルである衝突勾配関数を表す。
Figure 0005261495
衝突勾配関数∇Pの各要素は、各自由度が衝突距離に影響を及ぼす程度を表す。衝突勾配関数は、式(15)のように計算することができる。
Figure 0005261495
以下では、自己衝突またはロボットシステム214の2つの物体間の衝突についてまず考える。この場合には、式(15)の第2項を式(16)のように表すことができる。
Figure 0005261495
ここで、paおよびpbはベースを基準とする2つの衝突点の座標を表し、JaおよびJbは関連するヤコビアン行列である。座標paおよびpbは、一般的な衝突検出ソフトウェアを用いて求めることができる。図4は、ロボットシステム214の一例を示す図である。図示のように、ロボットシステム214は、その前腕と胴体との間に衝突点群(a1およびb1)を有する。
衝突点対のうちの1つ(たとえば、衝突点b)がロボットシステム214に属さない周囲の障害物上の点を表す場合(たとえば、図4のa2およびb2)、式(16)は式(17)のように簡素化される。
Figure 0005261495
上述の通り、式(14)における衝突勾配関数∇Pの各要素は、各自由度が衝突距離に影響を及ぼす程度を表す。
Figure 0005261495
Figure 0005261495
Figure 0005261495
Figure 0005261495
衝突関数Pは、異なる形式でも表すことができる。たとえば、式(20)は、一実施形態に係る衝突関数Pの候補である。
Figure 0005261495
この衝突関数の候補は、d=0の場合に無限大であり、dの増加に伴って指数関数的に減少する。減少速度は、パラメータαおよびβを調整することによって制御することができる。αを大きくすることによって、関数がより速くゼロに近づくように指数関数的な減少速度を調整することができる。同様に、βを大きくすることによっても減少速度は大きくなる。パラメータρは、大きさを調整するためのものである。Pのqに関する偏導関数は、式(21)の通りである。
Figure 0005261495
Figure 0005261495
(統合的な衝突回避方法)
上述の通り、接続体節対間の衝突は、関節制限勾配重み行列WJLを適用することによって回避することができ、非接続体間の衝突は、衝突勾配重み行列WCOLにより回避することができる。また、これらの行列を組み込んで、接続体節対間または非接続体節対間の自己衝突および障害物との衝突を回避するように、重み行列Wを構築することができる。なお、WJLは、2つの接続体の衝突回避のため、物理的な関節制限だけでなく仮想的な関節制限も強制するように設計してもよいことを前提とする。
統合的な方法の基本的な考え方は、式(8)のように適切な重み行列Wを設計することによって、体節を衝突に至らしめる運動をする関節を制約・抑制することである。この重み行列は、関節制限の勾配および衝突ポテンシャル関数を考慮することによって得られた要素を有する対角行列である。この方策は、衝突回避のための関節制限・衝突勾配重み(JLCGW:Joint Limit and Collision Gradient Weighting)行列とも称する。JLCGW行列Wは、n×n行列WJLおよびn×n行列WCOLの影響を受ける。たとえば、Wは、式(22)のように簡単に定義することができる。
Figure 0005261495
あるいは、合計Nc個の物体対(接続体節対、非接続体節対、体節−障害物対)について、衝突の確認を行うものと仮定する。
Figure 0005261495
各衝突対のポテンシャル関数の候補は式(23)で与えられる。
Figure 0005261495
そして、衝突勾配重み行列は式(24)で与えられる。
Figure 0005261495
Figure 0005261495
Figure 0005261495
重み行列Wは、式(26)のように表される。
Figure 0005261495
ここで、分母(Nc+1)は、衝突対の総数Ncに関節制限回避の効果を加えて解を正規化するものである。
(衝突回避のプロセス)
図5は、本発明の一実施形態に係る、上記アルゴリズムを用いて物体対間の衝突を防止する例示的なプロセス500のフローチャートである。このプロセス500は、図3に示すように、たとえばCLIK軌跡変換システム308により実行または実施することによって、ロボットシステム214における衝突を回避することができる。
プロセス500の1または複数の部分は、ハードウェアおよび/またはソフトウェアまたはそれらの組み合わせの実施形態で実装してもよい。たとえば、本明細書に記載の動作を行う命令によってプロセス500を具現化してもよく、具体的なコンピュータ読み取り可能な媒体(たとえば、フラッシュメモリ、ハードディスクドライブ等)に格納するとともに、コンピュータプロセッサによって実行することができる。また、当業者であれば、別の実施形態により、プロセス500の各ステップを異なる順序で実行可能であることが分かるであろう。さらに、別の実施形態では、本明細書に記載のステップと異なるステップおよび/または追加ステップを含むことができる。CLIK軌跡変換システム308は、プロセス500の各ステップにおける複数のインスタンスを同時および/または並列に実行することができる。
CLIK軌跡変換システム308は、ソースシステム102から受け取った動作記述子に基づいて、ロボットシステム214の運動を制御する。CLIK軌跡変換システム308は、接続体節対間の衝突を回避するための関節制限関数と、障害物および非接続体節対間の衝突を回避するための衝突関数とを決定する(ステップ510)。関節制限関数の一例が式(9)であり、衝突勾配関数の一例が式(20)である。
CLIK軌跡変換システム308は、互いに衝突する可能性がある物体対間の距離を測定する(ステップ520)。このような物体対としては、接続体節対、非接続体節対、および体節−障害物対等が挙げられる。一実施形態において、CLIK軌跡変換システム308は、衝突対間の距離を一覧にした距離テーブルを保持しておき、センサを介してリアルタイムで距離を測定し(ステップ520)、その結果により距離テーブルを更新する。
CLIK軌跡変換システム308は、関節制限関数、衝突関数、および測定された距離に基づいて、関節制限・衝突勾配重み(JLCGW)行列を生成する(ステップ530)。このJLCGW行列を生成するプロセス(ステップ530)の例は、式(22)および式(26)に関連して上述した通りである。
CLIK軌跡変換システム308は、JLCGW行列を用いて衝突を防止する(ステップ540)。一実施形態においては、式(8)に示すように、CLIK軌跡変換システム308で使用するCLIKアルゴリズムにおける重み行列としてJLCGW行列を用いることにより、ロボットシステム214における体節の運動の方向を変えて衝突を回避する。その後、CLIK軌跡変換システム308は、変向した衝突対間の距離の測定(ステップ520)を継続して、その後の衝突を防止する。
(実施例)
開示の衝突回避方策の一実施形態を人体からロボットへの目標動作修正に適用した場合についてテストする。まず、人体上半身の所望の動作記述子群を人体モデルと関連付ける。これら人体の動作記述子は、腰関節1つ、肩関節2つ、肘関節2つ、手首関節2つ、および首関節1つに対応した最大8つの上半身直交座標位置から成る。図6は、このような人体モデルを示す図である。
人体の運動データを、低域濾波および補間を行った後、本田技研工業製の人型ロボットASIMOの寸法に変換した。得られた運動は、無衝突ロボット関節運動を生成するCLIK軌跡変換システム308の入力として用いられる基準ロボット動作記述子に対応する。
図7Aおよび図7Bは、接続体節の自己衝突防止における衝突回避方策の結果を示す図である。図7Aは、関節制限回避が不使用の場合の左肩関節の第2オイラー回転(内転/外転)を示す。図7Bは、関節制限を強制した後の結果を示す。破線は、関節制限の上限および下限を示す。関節制限回避が不使用の場合は、肩関節が急速に回転して限界を大きく超え、腕と胴体が衝突する。関節制限回避を使用する場合、関節の角度がその限界に近づくことが徐々に抑制され、非常に滑らかで自然に見える運動となる。
図8Aおよび図8Bは、非接続体節の自己衝突防止における衝突回避方策の結果を示す図である。これらの図は、左手および胴体上の衝突点対間の最短距離を示す。衝突回避アルゴリズムを用いずに生成した最短距離は、実線でプロットしている。また、衝突回避アルゴリズムを用いて生成した最短距離は、破線でプロットしている。図示のように、衝突回避を行わない場合は、図8Bにより詳しく示すように、左手および胴体上の衝突点がフレーム470とフレーム505との間で衝突する。なお、負の距離は、2つの物体の衝突および進入を意味する。衝突回避を行うと、2つの体節間の接触は起こらない。
このテストの詳細については、B.Dariush、M.Gienger、B.Jian、C.Goerick、およびK.Fujimura著、「Whole body humanoid control from human motion descriptors」、Int.Conf.Robotics and Automation(ICRA)、Pasadena、CA(2008年)を参照(この文献の全開示内容は、本明細書中に参考として援用する)。
(その他の実施形態)
上述の実施形態では、リアルタイムでロボットシステムの運動を制御することによって、目標動作修正における自己衝突および障害物を回避する目標動作修正システムを説明している。当業者であれば、実環境または仮想環境(たとえば、人物のアニメーション等)におけるその他の多関節剛体システムの制御、および目標動作修正以外の目的(たとえば、ロボット運動の生成と制御、人体姿勢推定、追跡と推定、および生体力学における関節トルク推定等)にこの目標動作修正システムを利用可能であることが分かる。
上記説明の一部では、たとえば図6で説明したプロセスや動作のようなアルゴリズム的なプロセスまたは動作の観点で実施形態を説明している。これらアルゴリズム的な説明および表現は通常、データ処理の熟練者が当業他者に対して仕事の内容を効果的に伝達する際に用いられている。これらの動作は、機能的、計算的、または論理的に説明しているが、プロセッサまたは同等の電気回路、マイクロコード等で実行する命令を含むコンピュータプログラムによって実装されるものと理解される。さらに、一般性を失わずに、これら機能的動作の構成をモジュールとして参照することが場合によっては都合が良いことも判明した。上記説明した動作および関連するモジュールは、ソフトウェア、ファームウェア、ハードウェア、またはそれらの任意の組み合わせとして具現化してもよい。
本明細書で使用する「一実施形態」または「実施形態」という表現はいずれも、その実施形態と関連して説明した特定の要素、特徴、構造、または特性が少なくとも1つの実施形態に含まれることを意味する。また、本明細書の様々な箇所に登場する「一実施形態において」という表現は、必ずしも同じ実施形態を参照しているわけではない。
一部の実施形態は、「結合(coupled)」および「接続(connected)」という表現をそれぞれの派生語とともに用いて記述してもよいが、これらの用語は、互いの同義語をなすものではないことを理解すべきである。たとえば、一部の実施形態は、2つ以上の要素が互いに直接物理的または電気的に接触していることを示すために、「接続(connected)」という用語を用いて記述してもよい。別の例として、一部の実施形態は、2つ以上の要素が直接物理的または電気的に接触していることを示すために、「結合(coupled)」という用語を用いて記述してもよい。ただし、「結合(coupled)」という用語は、2つ以上の要素が互いに直接接触はしていないが、互いに協働または相互作用するということを意味していてもよい。なお、実施形態は、これに関連する制約を受けない。
本明細書で使用する「備える(comprises)」、「備えている(comprising)」、「含む(includes)」、「含んでいる(including)」、「有する(has)」、「有している(having)」という用語、またはこれらのその他任意の変形は、非排他的な包含を網羅することを意図している。たとえば、一連の要素を備えたプロセス、方法、物品、または装置は、必ずしもこれら要素にのみ限定されず、明確に記載されていないその他の要素またはこれらプロセス、方法、物品、または装置に固有のその他要素を含んでいてもよい。さらに、明確に反対のことが記載されていない場合、「または(or)」は、包含的論理和の意味を有し、排他的論理和の含意はない。たとえば、「条件AまたはB」は、Aが真(または存在)でBが偽(または存在しない)、Aが偽(または存在しない)でBが真(または存在)、AおよびBともに真(または存在)、のいずれかによって満足される。
また、本明細書中における実施形態の要素および構成要素の記述に不定冠詞(aまたはan)を使用しているが、これは、単に便宜上のことであって、本発明の一般的な意味を与えるためである。このような記述は、1つまたは少なくとも1つの要素を含むものと解釈されるべきである。また、単数形は、その他の意味が明確に記載されていない場合は複数形も含む。
当業者が本開示内容を読めば、自己衝突および障害物を回避するためにロボットやその他の多関節剛体システムの運動をリアルタイムで制御するシステムおよびプロセスのさらに別の構造設計および機能設計が想到されるであろう。したがって、特定の実施形態および用途を例示・説明したが、本発明は、本明細書に開示の構成および構成要素にのみ限定されるものではなく、本明細書に開示した方法および装置の構成、動作、および詳細に対して、添付の請求の範囲に規定する本発明の精神および範囲から逸脱することなく、当業者には明白な種々の改良、変更、および変形を行ってもよいものと理解すべきである。

Claims (20)

  1. 多関節システムにおける複数の自由度を有する体節の衝突を回避するコンピュータを用いた方法であって、
    前記コンピュータは、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突勾配関数を決定し、
    前記衝突勾配関数に含まれる複数の勾配は、
    前記体節の各自由度の動きが、前記体節と前記その他の複数の構造体のうちの1つである第1構造体との間の距離に対して影響を及ぼす程度を表し、
    前記コンピュータは、
    記距離を測定し、
    前記衝突勾配関数および前記距離に基づいて、前記体節と前記第1構造体との衝突を回避するための重み行列を生成し、
    前記重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する、
    ことを含む方法。
  2. 前記第1構造体が、前記体節と直接接続されていないことを特徴とする、請求項1に記載の方法。
  3. 前記重み行列が対角要素を有するn×n対角行列を含み、当該対角要素が前記衝突勾配関数の勾配を含むことを特徴とする、請求項に記載の方法。
  4. 導関数としての前記衝突勾配関数を導くもとになる衝突関数が、前記距離がゼロに等しい場合に最大値を有し、当該距離の増加とともにゼロに向かって指数関数的に減少し、減少速度に影響を及ぼす調整可能なパラメータを有することを特徴とする、請求項1に記載の方法。
  5. 導関数としての前記衝突勾配関数を導くもとになる衝突関数の値は、前記体節と前記第1構造体との間の距離に応じて変化することを特徴とする、請求項1に記載の方法。
  6. 記重み行列が、関節制限勾配重み行列および衝突勾配重み行列の影響を受けるn×n行列を含むことを特徴とする、請求項1に記載の方法。
  7. 前記コンピュータは、
    動作記述子を受け取り、
    前記動作記述子に基づいて関節変数を生成し、
    前記関節変数に基づいて前記体節の対象物方向への運動を制御
    前記変向運動の決定が、前記体節が前記第1構造体と衝突することを防止しながら、前記対象物方向へ前記体節の方向を変える変向運動を決定することを含み、
    前記体節の変向が、前記第1構造体と衝突することなく前記対象物方向へ前記体節の方向を変えることをさらに含む、
    ことを特徴とする、請求項1に記載の方法。
  8. 前記動作記述子が人体の運動を記述しており、前記多関節システムが人型ロボットを具備しており、前記関節変数が前記人型ロボットを制御して前記人体の運動をシミュレーションすることを特徴とする、請求項に記載の方法。
  9. 前記体節の変向が、
    前記変向運動に基づいて変向動作記述子を生成し、
    前記変向動作記述子に基づいて変向関節変数を生成し、
    前記変向関節変数に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する、
    ことをさらに含む、請求項1に記載の方法。
  10. 前記重み行列が、前記多関節システムにおける衝突対の総数によって正規化されていることを特徴とする、請求項1に記載の方法。
  11. 前記変向運動が、閉ループ逆運動学(CLIK:Closed Loop Inverse Kinematics)アルゴリズムを用いて算出されることを特徴とする、請求項1に記載の方法。
  12. 多関節システムにおける複数の自由度を有する体節の衝突を回避するコンピュータを機能させるコンピュータプログラムであって、
    前記コンピュータプログラムは、前記コンピュータに対し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突勾配関数を決定する処理を実行させ
    前記衝突勾配関数に含まれる複数の勾配は、
    前記体節の各自由度の動きが、前記体節と前記その他の複数の構造体のうちの1つである第1構造体との間の距離に対して影響を及ぼす程度を表し、
    前記コンピュータプログラムは、前記コンピュータに対し、
    記距離を測定し、
    前記衝突勾配関数および前記距離に基づいて、前記体節と前記第1構造体との衝突を回避するための重み行列を生成し、
    前記重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する処理を実行させること、
    を特徴とするコンピュータプログラム。
  13. 前記重み行列が対角要素を有するn×n対角行列を含み、当該対角要素が前記衝突勾配関数の勾配を含むことを特徴とする、請求項12に記載のコンピュータプログラム。
  14. 前記コンピュータプログラムは、前記コンピュータに対し、
    動作記述子を受け取り、
    前記動作記述子に基づいて関節変数を生成し、
    前記関節変数に基づいて前記体節の対象物方向への運動を制御する処理を実行させ、
    前記変向運動の決定が、前記体節が前記第1構造体と衝突することを防止しながら、前記対象物方向へ前記体節の方向を変える変向運動を決定することを含み、
    前記体節の変向が、前記第1構造体と衝突することなく前記対象物方向へ前記体節の方向を変えることをさらに含む、
    ことを特徴とする、請求項1に記載のコンピュータプログラム。
  15. 多関節システムにおける複数の自由度を有する体節の衝突を回避するシステムであって、
    前記システムは、
    実行可能なコンピュータプログラムコードを実行するコンピュータプロセッサと、
    前記コンピュータプロセッサを機能させる前記コンピュータプログラムコードを格納するコンピュータ可読の記憶媒体と、
    を有し、
    前記コンピュータプログラムコードは、前記コンピュータプロセッサに対し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突勾配関数を決定する処理を実行させ、
    前記衝突勾配関数に含まれる複数の勾配は、
    前記体節の各自由度の動きが、前記体節と前記その他の複数の構造体のうちの1つである第1構造体との間の距離に対して影響を及ぼす程度を表し、
    前記コンピュータプログラムコードは、前記コンピュータプロセッサに対し、
    記距離を測定し、
    前記衝突勾配関数および前記距離に基づいて、前記体節と前記第1構造体との衝突を回避するための重み行列を生成し、
    前記重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する処理を実行させること、
    を特徴とするシステム。
  16. 前記重み行列が対角要素を有するn×n対角行列を含み、当該対角要素が前記衝突勾配関数の勾配を含むことを特徴とする、請求項15に記載のシステム。
  17. 前記コンピュータプロッセッサは、
    動作記述子を受け取り、
    前記動作記述子に基づいて関節変数を生成し、
    前記関節変数に基づいて前記体節の対象物方向への運動を制御し、
    前記変向運動の決定が、前記体節が前記第1構造体と衝突することを防止しながら、前記対象物方向へ前記体節の方向を変える変向運動を決定することを含み、
    前記体節の変向が、前記第1構造体と衝突することなく前記対象物方向へ前記体節の方向を変えることをさらに含む、
    ことを特徴とする、請求項15に記載のシステム。
  18. 多関節システムにおける体節の衝突を回避するコンピュータを用いた方法であって、
    前記コンピュータは、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第1構造体との間の距離を測定し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との自己衝突を回避するための関節制限関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第2構造体との間の関節ベクトルを測定し、
    前記衝突関数及び前記測定された距離に基づいて衝突勾配重み行列を生成し、
    前記関節制限関数及び前記測定された関節ベクトルに基づいて関節制限勾配重み行列を生成し、
    前記衝突勾配重み行列及び前記関節制限勾配重み行列に基づいて合成重み行列を生成し、
    前記合成重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避すること、
    を特徴とする方法。
  19. 多関節システムにおける体節の衝突を回避するコンピュータを機能させるコンピュータプログラムであって、
    前記コンピュータプログラムは、前記コンピュータに対し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第1構造体との間の距離を測定し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との自己衝突を回避するための関節制限関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第2構造体との間の関節ベクトルを測定し、
    前記衝突関数及び前記測定された距離に基づいて衝突勾配重み行列を生成し、
    前記関節制限関数及び前記測定された関節ベクトルに基づいて関節制限勾配重み行列を生成し、
    前記衝突勾配重み行列及び前記関節制限勾配重み行列に基づいて合成重み行列を生成し、
    前記合成重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する処理を実行させること、
    を特徴とするコンピュータプログラム。
  20. 多関節システムにおける体節の衝突を回避するシステムであって、
    前記システムは、
    実行可能なコンピュータプログラムコードを実行するコンピュータプロセッサと、
    前記コンピュータプロセッサを機能させる前記コンピュータプログラムコードを格納するコンピュータ可読の記憶媒体と、
    を有し、
    前記コンピュータプログラムコードは、前記コンピュータプロセッサに対し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との衝突を回避するための衝突関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第1構造体との間の距離を測定し、
    前記体節と前記多関節システムにおけるその他の複数の構造体との自己衝突を回避するための関節制限関数を決定し、
    前記体節と前記その他の複数の構造体の1つである第2構造体との間の関節ベクトルを測定し、
    前記衝突関数及び前記測定された距離に基づいて衝突勾配重み行列を生成し、
    前記関節制限関数及び前記測定された関節ベクトルに基づいて関節制限勾配重み行列を生成し、
    前記衝突勾配重み行列及び前記関節制限勾配重み行列に基づいて合成重み行列を生成し、
    前記合成重み行列に基づいて、前記体節が前記第1構造体と衝突することを防止する変向運動を決定し、
    前記変向運動に基づいて前記体節の方向を変えることにより前記第1構造体との衝突を回避する処理を実行させること、
    を特徴とするシステム。
JP2010532163A 2007-11-01 2008-10-24 重み行列を用いたリアルタイム自己衝突および障害物回避 Expired - Fee Related JP5261495B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US98463907P 2007-11-01 2007-11-01
US60/984,639 2007-11-01
PCT/US2008/081201 WO2009058693A1 (en) 2007-11-01 2008-10-24 Real-time self collision and obstacle avoidance using weighting matrix

Publications (2)

Publication Number Publication Date
JP2011502801A JP2011502801A (ja) 2011-01-27
JP5261495B2 true JP5261495B2 (ja) 2013-08-14

Family

ID=40588943

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010532163A Expired - Fee Related JP5261495B2 (ja) 2007-11-01 2008-10-24 重み行列を用いたリアルタイム自己衝突および障害物回避

Country Status (3)

Country Link
US (1) US8396595B2 (ja)
JP (1) JP5261495B2 (ja)
WO (1) WO2009058693A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020161910A1 (ja) 2019-02-08 2020-08-13 日本電気株式会社 制御装置、制御方法、記録媒体
US11312011B2 (en) 2018-02-28 2022-04-26 Kabushiki Kaisha Toshiba Manipulator system, control device, control method, and computer program product
US11396101B2 (en) 2018-11-08 2022-07-26 Kabushiki Kaisha Toshiba Operating system, control device, and computer program product

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9165199B2 (en) * 2007-12-21 2015-10-20 Honda Motor Co., Ltd. Controlled human pose estimation from depth image streams
JP5836565B2 (ja) * 2009-03-24 2015-12-24 ディズニー エンタープライゼス インコーポレイテッド モーションキャプチャデータを模倣するロボットの追跡及びバランス維持システム及び方法
US20110054870A1 (en) * 2009-09-02 2011-03-03 Honda Motor Co., Ltd. Vision Based Human Activity Recognition and Monitoring System for Guided Virtual Rehabilitation
US8386080B2 (en) * 2009-09-15 2013-02-26 Harris Corporation Robotic apparatus implementing collision avoidance scheme and associated methods
KR101098834B1 (ko) * 2009-12-02 2011-12-26 한국전자통신연구원 동역학 기반 동작 생성 장치 및 방법
JP6321905B2 (ja) * 2010-02-25 2018-05-09 本田技研工業株式会社 関節システムの制御方法、記憶媒体、制御システム
CN102375416B (zh) * 2010-08-13 2013-10-23 同济大学 基于快速搜索树的人型机器人踢球动作信息处理方法
WO2012039280A1 (ja) * 2010-09-21 2012-03-29 トヨタ自動車株式会社 移動体
WO2013027250A1 (ja) * 2011-08-19 2013-02-28 株式会社安川電機 ロボットシステム、ロボット及びロボット制御装置
US20130303944A1 (en) 2012-05-14 2013-11-14 Intuitive Surgical Operations, Inc. Off-axis electromagnetic sensor
US9452276B2 (en) 2011-10-14 2016-09-27 Intuitive Surgical Operations, Inc. Catheter with removable vision probe
US9387048B2 (en) 2011-10-14 2016-07-12 Intuitive Surgical Operations, Inc. Catheter sensor systems
US10238837B2 (en) 2011-10-14 2019-03-26 Intuitive Surgical Operations, Inc. Catheters with control modes for interchangeable probes
US9135392B2 (en) 2012-01-31 2015-09-15 Siemens Product Lifecycle Management Software Inc. Semi-autonomous digital human posturing
US9342632B2 (en) * 2012-03-02 2016-05-17 Massachusetts Institute Of Technology Methods and apparatus for handheld tool
EP2845065B1 (en) * 2012-05-04 2019-09-18 Leoni Cia Cable Systems SAS Imitation learning method for a multi-axis manipulator
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
JP6512216B2 (ja) * 2014-03-14 2019-05-15 ソニー株式会社 ロボットアーム装置、ロボットアーム制御方法及びプログラム
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
WO2015155833A1 (ja) * 2014-04-08 2015-10-15 三菱電機株式会社 衝突防止装置
JP6689832B2 (ja) 2014-09-30 2020-04-28 オーリス ヘルス インコーポレイテッド 仮軌道および可撓性内視鏡を有する構成可能なロボット手術システム
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
CN104965517B (zh) * 2015-07-07 2018-01-26 张耀伦 一种机器人笛卡尔空间轨迹的规划方法
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
WO2017120680A1 (en) 2016-01-17 2017-07-20 Siamak Arzanpour System and device for guiding and detecting motions of 3-dof rotational target joint
US9870622B1 (en) * 2016-07-18 2018-01-16 Dyaco International, Inc. Systems and methods for analyzing a motion based on images
US10807233B2 (en) * 2016-07-26 2020-10-20 The University Of Connecticut Skill transfer from a person to a robot
JP6633209B2 (ja) * 2016-08-26 2020-01-22 シャープ株式会社 ロボット、ロボットの制御方法、および制御プログラム
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
EP3621520B1 (en) 2017-05-12 2025-09-24 Auris Health, Inc. Biopsy apparatus and system
EP4437999A3 (en) 2017-06-28 2024-12-04 Auris Health, Inc. Instrument insertion compensation
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
US10899017B1 (en) * 2017-08-03 2021-01-26 Hrl Laboratories, Llc System for co-adaptation of robot control to human biomechanics
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
JP7362610B2 (ja) 2017-12-06 2023-10-17 オーリス ヘルス インコーポレイテッド コマンド指示されていない器具の回動を修正するシステムおよび方法
CN110869173B (zh) 2017-12-14 2023-11-17 奥瑞斯健康公司 用于估计器械定位的系统与方法
JP7301884B2 (ja) 2018-02-13 2023-07-03 オーリス ヘルス インコーポレイテッド 医療用器具を駆動するためのシステム及び方法
CN119924988A (zh) 2018-09-28 2025-05-06 奥瑞斯健康公司 用于伴随内窥镜和经皮医学规程的机器人系统和方法
EP3856064B1 (en) 2018-09-28 2025-10-01 Auris Health, Inc. Systems and methods for docking medical instruments
JP7646675B2 (ja) 2019-12-31 2025-03-17 オーリス ヘルス インコーポレイテッド 経皮的アクセスのための位置合わせ技術
CN114929148B (zh) 2019-12-31 2024-05-10 奥瑞斯健康公司 用于经皮进入的对准界面
CN119055360A (zh) 2019-12-31 2024-12-03 奥瑞斯健康公司 解剖特征识别和瞄准
CN111230888A (zh) * 2020-03-23 2020-06-05 江苏科技大学 一种基于rgbd相机的上肢外骨骼机器人避障方法
US11737663B2 (en) 2020-03-30 2023-08-29 Auris Health, Inc. Target anatomical feature localization
US11919175B2 (en) 2020-04-15 2024-03-05 Mujin, Inc. Robotic system with collision avoidance mechanism and method of operation thereof
CN111729311B (zh) * 2020-06-22 2024-05-10 苏州幻塔网络科技有限公司 攀爬跳跃方法、装置、计算机设备及计算机可读存储介质
CN113618739B (zh) * 2021-08-24 2022-07-29 深圳市优必选科技股份有限公司 一种机器人动态避障方法、装置和机器人
US12350842B2 (en) * 2022-06-03 2025-07-08 Southwest Research Institute Collaborative robotic system

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US293792A (en) * 1884-02-19 Necktie-supporter
US269145A (en) * 1882-12-12 John s
US162164A (en) * 1875-04-20 Improvement in coivlbination-locks
US4831549A (en) * 1987-07-28 1989-05-16 Brigham Young University Device and method for correction of robot inaccuracy
US5159249A (en) * 1989-05-16 1992-10-27 Dalila Megherbi Method and apparatus for controlling robot motion at and near singularities and for robot mechanical design
US5586224A (en) * 1990-12-25 1996-12-17 Shukyohojin, Kongo Zen Sohonzan Shorinji Robot or numerical control programming method
US5625577A (en) * 1990-12-25 1997-04-29 Shukyohojin, Kongo Zen Sohonzan Shorinji Computer-implemented motion analysis method using dynamics
US5293461A (en) 1991-11-20 1994-03-08 The University Of British Columbia System for determining manipulator coordinates
US5430643A (en) * 1992-03-11 1995-07-04 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Configuration control of seven degree of freedom arms
US5550953A (en) * 1994-04-20 1996-08-27 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration On-line method and apparatus for coordinated mobility and manipulation of mobile robots
US5737500A (en) * 1992-03-11 1998-04-07 California Institute Of Technology Mobile dexterous siren degree of freedom robot arm with real-time control system
US5675720A (en) * 1993-09-14 1997-10-07 Fujitsu Limited Method of searching for points of closest approach, and preprocessing method therefor
JPH08108383A (ja) 1994-10-05 1996-04-30 Fujitsu Ltd マニピュレータ制御装置
US5808433A (en) * 1995-09-29 1998-09-15 Honda Giken Kogyo Kabushiki Kaisha Method of generating gait of legged walking robot and system for controlling its locomotion
US6699177B1 (en) * 1996-02-20 2004-03-02 Computer Motion, Inc. Method and apparatus for performing minimally invasive surgical procedures
US6004016A (en) * 1996-08-06 1999-12-21 Trw Inc. Motion planning and control for systems with multiple mobile objects
US6331181B1 (en) * 1998-12-08 2001-12-18 Intuitive Surgical, Inc. Surgical robotic tools, data architecture, and use
US6236737B1 (en) * 1997-03-26 2001-05-22 Dalhousie University Dynamic target addressing system
EP1015944B1 (en) * 1997-09-19 2013-02-27 Massachusetts Institute Of Technology Surgical robotic apparatus
US6493608B1 (en) * 1999-04-07 2002-12-10 Intuitive Surgical, Inc. Aspects of a control system of a minimally invasive surgical apparatus
US6708142B1 (en) * 1999-01-14 2004-03-16 University Of Central Florida Automatic motion modeling of rigid bodies using collision detection
US6341246B1 (en) * 1999-03-26 2002-01-22 Kuka Development Laboratories, Inc. Object oriented motion system
US6424885B1 (en) * 1999-04-07 2002-07-23 Intuitive Surgical, Inc. Camera referenced control in a minimally invasive surgical apparatus
US8004229B2 (en) * 2005-05-19 2011-08-23 Intuitive Surgical Operations, Inc. Software center and highly configurable robotic systems for surgery and other uses
US6293461B1 (en) * 1999-10-01 2001-09-25 Albert A. Rivers, Sr. Mailbox with automatic flags
US6674877B1 (en) * 2000-02-03 2004-01-06 Microsoft Corporation System and method for visually tracking occluded objects in real time
EP1297691A2 (en) * 2000-03-07 2003-04-02 Sarnoff Corporation Camera pose estimation
US6853964B1 (en) * 2000-06-30 2005-02-08 Alyn Rockwood System for encoding and manipulating models of objects
US6456901B1 (en) * 2001-04-20 2002-09-24 Univ Michigan Hybrid robot motion task level control system
US7469166B2 (en) * 2001-06-29 2008-12-23 Honda Motor Co., Ltd. System and method of predicting novel motion in a serial chain system
US7274800B2 (en) * 2001-07-18 2007-09-25 Intel Corporation Dynamic gesture recognition from stereo sequences
US8745541B2 (en) * 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
GB0308943D0 (en) * 2003-04-17 2003-05-28 Univ Dundee A system for determining the body pose of a person from images
US20050001842A1 (en) * 2003-05-23 2005-01-06 Woojin Park Method, system and computer program product for predicting an output motion from a database of motion data
FR2861858B1 (fr) * 2003-10-29 2014-09-05 Snecma Moteurs Deplacement d'un objet articule virtuel dans un environnement virtuel en evitant les collisions entre l'objet articule et l'environnement
US7308112B2 (en) * 2004-05-14 2007-12-11 Honda Motor Co., Ltd. Sign based human-machine interaction
EP1779344A4 (en) * 2004-07-29 2009-08-19 Motiva Llc SYSTEM FOR MEASURING HUMAN MOVEMENT
JP4241673B2 (ja) 2005-06-17 2009-03-18 本田技研工業株式会社 移動体の経路生成装置
US7688016B2 (en) * 2005-09-28 2010-03-30 Canadian Space Agency Robust impedance-matching of manipulators interacting with unknown environments
US7689320B2 (en) * 2005-12-20 2010-03-30 Intuitive Surgical Operations, Inc. Robotic surgical system with joint motion controller adapted to reduce instrument tip vibrations
US8280169B2 (en) * 2005-12-21 2012-10-02 Michael Linderman Recordation of handwriting and hand movement using electromyography
US8467904B2 (en) * 2005-12-22 2013-06-18 Honda Motor Co., Ltd. Reconstruction, retargetting, tracking, and estimation of pose of articulated systems
US7859540B2 (en) * 2005-12-22 2010-12-28 Honda Motor Co., Ltd. Reconstruction, retargetting, tracking, and estimation of motion for articulated systems
US8301421B2 (en) * 2006-03-31 2012-10-30 Energid Technologies Automatic control system generation for robot design validation
US8924021B2 (en) * 2006-04-27 2014-12-30 Honda Motor Co., Ltd. Control of robots from human motion descriptors
KR100776801B1 (ko) * 2006-07-19 2007-11-19 한국전자통신연구원 화상 처리 시스템에서의 제스처 인식 장치 및 방법
FR2911983B1 (fr) * 2007-01-25 2009-05-29 St Microelectronics Sa Procede de suivi automatique des mouvements de la mains dans une sequence d'images.
EP1972415B1 (en) * 2007-03-23 2019-01-02 Honda Research Institute Europe GmbH Robots with collision avoidance functionality
US8103109B2 (en) * 2007-06-19 2012-01-24 Microsoft Corporation Recognizing hand poses and/or object classes
US8170287B2 (en) * 2007-10-26 2012-05-01 Honda Motor Co., Ltd. Real-time self collision and obstacle avoidance

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11312011B2 (en) 2018-02-28 2022-04-26 Kabushiki Kaisha Toshiba Manipulator system, control device, control method, and computer program product
US11396101B2 (en) 2018-11-08 2022-07-26 Kabushiki Kaisha Toshiba Operating system, control device, and computer program product
WO2020161910A1 (ja) 2019-02-08 2020-08-13 日本電気株式会社 制御装置、制御方法、記録媒体

Also Published As

Publication number Publication date
WO2009058693A1 (en) 2009-05-07
JP2011502801A (ja) 2011-01-27
US8396595B2 (en) 2013-03-12
US20090118863A1 (en) 2009-05-07

Similar Documents

Publication Publication Date Title
JP5261495B2 (ja) 重み行列を用いたリアルタイム自己衝突および障害物回避
JP5156836B2 (ja) リアルタイム自己衝突および障害物回避
US8170287B2 (en) Real-time self collision and obstacle avoidance
CN110370256B (zh) 机器人及其路径规划方法、装置和控制器
CN110653805B (zh) 笛卡尔空间下的七自由度冗余机械臂任务约束路径规划方法
Ding et al. Collision avoidance with proximity servoing for redundant serial robot manipulators
Gong et al. Analytical inverse kinematics and self-motion application for 7-DOF redundant manipulator
JP4243309B2 (ja) ロボットアームの制御装置
US9193072B2 (en) Robot and control method thereof
Števo et al. Optimization of robotic arm trajectory using genetic algorithm
US20080234864A1 (en) Robots with Collision Avoidance Functionality
WO2018107851A1 (zh) 冗余机械臂的控制方法及装置
JP6321905B2 (ja) 関節システムの制御方法、記憶媒体、制御システム
Gómez-Bravo et al. Collision free trajectory planning for hybrid manipulators
CN111712356A (zh) 机器人系统和操作方法
WO2017132905A1 (zh) 控制运动系统的方法和装置
Luo et al. Analytical inverse kinematic solution for modularized 7-DoF redundant manipulators with offsets at shoulder and wrist
CN117182932B (zh) 机械臂避障动作规划方法、装置和计算机设备
Lin et al. Human guidance programming on a 6-dof robot with collision avoidance
Walker et al. Robot-human handovers based on trust
Chembuly et al. An optimization based inverse kinematics of redundant robots avoiding obstacles and singularities
US20110264265A1 (en) Robot, control system, and recording medium for control program
Li et al. Human-robot collaborative manipulation with the suppression of human-caused disturbance
Sadeghian et al. Visual servoing with safe interaction using image moments
CN114274145B (zh) 一种腹腔镜手术中多机械臂的实时避障方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110809

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130416

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130426

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5261495

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees