JP2017168058A - 無人走行作業車 - Google Patents
無人走行作業車 Download PDFInfo
- Publication number
- JP2017168058A JP2017168058A JP2016055478A JP2016055478A JP2017168058A JP 2017168058 A JP2017168058 A JP 2017168058A JP 2016055478 A JP2016055478 A JP 2016055478A JP 2016055478 A JP2016055478 A JP 2016055478A JP 2017168058 A JP2017168058 A JP 2017168058A
- Authority
- JP
- Japan
- Prior art keywords
- work vehicle
- sign
- point
- angle
- unmanned traveling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01D—HARVESTING; MOWING
- A01D34/00—Mowers; Mowing apparatus of harvesters
- A01D34/006—Control or measuring arrangements
- A01D34/008—Control or measuring arrangements for automated or remotely controlled operation
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0234—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01D—HARVESTING; MOWING
- A01D2101/00—Lawn-mowers
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Automation & Control Theory (AREA)
- Remote Sensing (AREA)
- Aviation & Aerospace Engineering (AREA)
- Electromagnetism (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Environmental Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Signal Processing (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Traffic Control Systems (AREA)
- Guiding Agricultural Machines (AREA)
- Business, Economics & Management (AREA)
- Harvester Elements (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【課題】無人走行作業車が作業を行うエリアの設定にかかるユーザーの労力を軽減可能な無人走行作業車を提供する。【解決手段】所定の作業エリア内で自動的に作業を行う無人走行作業車は、移動した距離及び方向を含む挙動情報を取得する挙動取得部と、無人走行作業車10に設けられているカメラが撮像する画像に含まれる標識71を抽出する画像解析部と、画像解析部が抽出した標識の位置情報を三角測量法によって取得する測量部とを備え、測量部は、無人走行作業車が一定の移動方向に移動する間に通る、第1地点から標識を指す方向と移動方向との角度差である第1角度と、第2地点から標識を指す方向と移動方向との角度差である第2角度と、第1地点と第2地点との距離とを用いて標識の位置情報を取得し、測量部は、無人走行作業車が移動方向に移動する間に、第1角度と第2角度との角度差が90degに近づくように、第1地点及び/又は第2地点を決定する。【選択図】図5
Description
本発明は、無人走行作業車に関する。本発明は、特に、無人走行作業車が作業を行う作業エリアの設定にかかるユーザーの労力を軽減可能な無人走行作業車に関する。
従来から、例えば芝刈り作業用ブレード等の作業装置を搭載し、設定された作業エリアを無人走行する間に作業装置を作動させる無人走行作業車が提案されている。無人走行作業車が無人走行する作業エリアは、例えばワイヤ等の物理的な障壁をユーザーが設置することによって設定される。そのため、無人走行作業車は、物理的な障壁に接触したときに例えば旋回して方向転換することによって、作業エリアの外を走行することがない。
ところで、物理的な障壁によって作業エリアを設定するためには、ユーザーが、作業エリアの内と外との境界の全体にわたって例えばワイヤ等の物理的な障壁を、無人走行作業車と接触する高さに設置する必要がある。ここで、特許文献1には、作業エリアの内と外との境界の位置情報を記憶すること可能な物理的な障壁を必要としないロボット芝刈機(無人走行作業車)が開示されている。
特許文献1に開示されている無人走行作業車には、ユーザーが把持可能なハンドルが設けられており、ユーザーがこのハンドルを把持して無人走行作業車の走行を案内することができる。特許文献1に開示されている無人走行作業車は、ユーザーが無人走行作業車の走行を作業エリアの内と外との境界に沿って案内する間に、自身の現在位置を取得して記憶することによってこの境界の位置を記憶することができる。
特許文献1に開示されている無人走行作業車は、作業エリアの内と外との境界の位置を記憶した後は、作業エリアの内と外との境界の位置と自身の現在位置とを比較することによって、作業エリア内のみの走行を実現することができる。そのため、特許文献1に開示されている無人走行作業車では、ユーザーがワイヤ等の物理的な障壁を作業エリアの内と外との境界の全体にわたって設置する必要がない。
しかしながら、特許文献1に開示されている無人走行作業車では、作業エリアの設定をするために、ユーザーが無人走行作業車の走行を作業エリアの内と外との境界に沿って案内する必要がある。そのため、特許文献1に開示されている無人走行作業車では、作業エリアの設定にかかるユーザーの労力を軽減するためには改良の余地があることを本発明者らは認識した。
本発明の1つの目的は、無人走行作業車が作業を行う作業エリアの設定にかかるユーザーの労力を軽減可能な無人走行作業車を提供することにある。本発明の他の目的は、以下に例示する態様及び好ましい実施形態、並びに添付の図面を参照することによって、当業者に明らかになるであろう。
本発明に従う第1の態様は、所定の作業エリア内で自動的に作業を行う無人走行作業車であって、
前記無人走行作業車が移動した距離及び移動した方向を含む挙動情報を取得する挙動取得部と、
前記無人走行作業車に設けられているカメラが撮像する画像に含まれる標識を抽出する画像解析部と、
前記画像解析部が抽出した前記標識の位置情報を三角測量法によって取得する測量部と、
を備え、
前記測量部は、前記無人走行作業車が一定の移動方向に移動する間に通る任意の地点である第1地点から前記標識を指す方向と前記移動方向との角度差である第1角度と、前記無人走行作業車が前記移動方向に移動する間に通る前記第1地点とは異なる任意の地点である第2地点から前記標識を指す方向と前記移動方向との角度差である第2角度と、前記第1地点と前記第2地点との距離と、を用いて前記標識の前記位置情報を取得し、
前記測量部は、前記無人走行作業車が前記移動方向に移動する間に、前記第1角度と前記第2角度との角度差が90degに近づくように、前記第1地点及び/又は前記第2地点を決定する無人走行作業車に関係する。
前記無人走行作業車が移動した距離及び移動した方向を含む挙動情報を取得する挙動取得部と、
前記無人走行作業車に設けられているカメラが撮像する画像に含まれる標識を抽出する画像解析部と、
前記画像解析部が抽出した前記標識の位置情報を三角測量法によって取得する測量部と、
を備え、
前記測量部は、前記無人走行作業車が一定の移動方向に移動する間に通る任意の地点である第1地点から前記標識を指す方向と前記移動方向との角度差である第1角度と、前記無人走行作業車が前記移動方向に移動する間に通る前記第1地点とは異なる任意の地点である第2地点から前記標識を指す方向と前記移動方向との角度差である第2角度と、前記第1地点と前記第2地点との距離と、を用いて前記標識の前記位置情報を取得し、
前記測量部は、前記無人走行作業車が前記移動方向に移動する間に、前記第1角度と前記第2角度との角度差が90degに近づくように、前記第1地点及び/又は前記第2地点を決定する無人走行作業車に関係する。
一般的にデジタル形式の画像を生成可能なカメラでは、被写体の像を撮像センサの撮像面に形成するときに、撮像センサの分解能、撮像レンズの焦点距離等に起因した誤差が生じる。測量部が、無人走行作業車が一定の移動方向に移動している間に、第1角度と第2角度との角度差が90[deg]に近づくように、第1地点及び/又は第2地点を決定することによって、上記誤差の影響を軽減することができる。その結果、ユーザーが、標識の位置情報の取得の精度を担保するために、第1地点及び第2地点を決定する必要がない。
本発明に従う第2の態様では、第1の態様において、前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記第1角度が45degに近づくように前記第1地点を決定すると共に、前記第2角度が135degに近づくように前記第2地点を決定してもよい。
カメラと標識との距離が長くなることに応じて上記誤差の影響が大きくなる。第2の態様において、測量部は、第1地点と標識との距離及び第2地点と標識との距離の双方を短くすることができる。
本発明に従う第3の態様では、第1又は2の態様において、前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第1地点における第1角度よりも45degに近いときは前記既に決定されている前記第1地点の代わりに前記現在位置を前記第1地点として決定する一方で、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第1地点における第1角度よりも45degに近くないときは既に決定されている前記第1地点における前記第1角度を前記標識の前記位置情報の取得に用いてもよい。
第3の態様において、無人走行作業車が移動方向に移動している間に、第1角度が45[deg]に近づくように第1地点を決定することができる。
本発明に従う第4の態様では、第1から3の態様において、前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第2地点における第2角度よりも135degに近いときは既に決定されている前記第2地点の代わりに前記現在位置を前記第2地点として決定する一方で、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第2地点における第2角度よりも135degに近くないときは既に決定されている前記第2地点における前記第2角度を前記標識の前記位置情報の取得に用いてもよい。
第4の態様において、無人走行作業車が移動方向に移動している間に、第2角度が135[deg]に近づくように第2地点を決定することができる。
以下に説明する好ましい実施形態は、本発明を容易に理解するために用いられている。従って、当業者は、本発明が、以下に説明される実施形態によって不当に限定されないことを留意すべきである。
《1.無人走行作業車の構成例》
図1及び図2を参照して、無人走行作業車10の全体の構成の例を説明する。以下、無人走行作業車10を、作業車10とも呼ぶ。図1には、作業車10の一例として、芝草を刈るように自主的に走行可能なロボット式芝刈機10が示されている。作業車10は、ハウジング11と、ハウジング11の前部に備えた左右の前輪12と、ハウジング11の後部に備えた左右の後輪13と、ハウジング11の中央の下部に備えた作業部14と、を含む。図1に示される例においては、作業部14の一例として、ロボット式芝刈機10の芝刈ブレード14が示されている。
図1及び図2を参照して、無人走行作業車10の全体の構成の例を説明する。以下、無人走行作業車10を、作業車10とも呼ぶ。図1には、作業車10の一例として、芝草を刈るように自主的に走行可能なロボット式芝刈機10が示されている。作業車10は、ハウジング11と、ハウジング11の前部に備えた左右の前輪12と、ハウジング11の後部に備えた左右の後輪13と、ハウジング11の中央の下部に備えた作業部14と、を含む。図1に示される例においては、作業部14の一例として、ロボット式芝刈機10の芝刈ブレード14が示されている。
作業車10は、左右の後輪13を個別に駆動する左右の走行用モータ15と、作業部14を駆動する作業部駆動用モータ16と、バッテリ17と、車輪速センサ18と、電子制御装置(ECU;Electronic Control Unit)31、角速度センサ32及び加速度センサ33を搭載する基板30と、をハウジング11内に備える。また、作業車10は、作業車10の外部を撮像可能なカメラ21をハウジング11上に有する。カメラ21は、例えば、CCD、CMOS等の撮像センサと、被写体の像を撮像センサの撮像面に形成する撮像レンズとを有し、デジタル形式の画像を生成することができる。
走行用モータ15、作業部駆動用モータ16、車輪速センサ18、ECU31、角速度センサ32、加速度センサ33及びカメラ21は、バッテリ17から電力が供給される。例えば、走行用モータ15、作業部駆動用モータ16、車輪速センサ18、角速度センサ32、加速度センサ33及びカメラ21は、ECU31を経由してバッテリ17から電力が供給されてもよい。
ECU31は、車輪速センサ18、角速度センサ32、加速度センサ33及びカメラ21から信号(又はデータ)を受け取り、走行用モータ15と作業部駆動用モータ16との動作を制御する。また、ECU31は、左右の走行用モータ15を個別に制御することによって、作業車10の移動を制御することができる。
すなわち、図2に示されているように、左の走行用モータ15は左の後輪13を、右の走行用モータ15は右の後輪13を、個別に駆動する。例えば、左右の走行用モータ15の双方が等速で正転することによって、作業車10は前方向に直進走行(前進)をする。同様に、左右の走行用モータ15の双方が等速で逆転することによって、作業車10は後方向に直進走行(後進)をする。
また、左側の走行用モータ15と右側の走行用モータ15とが異なる速度で正転することによって、作業車10は左右の走行用モータ15の回転速度の遅い側の方向に、旋回する。さらに、左右の走行用モータ15の一方が正転すると共に他方が同じ回転速度で逆転することによって、作業車10は、作業車10の位置が変わることなく、左右の走行用モータ15の逆転している側の方向に旋回可能である。
図3を参照して、基板30及び基板30に接続される装置等の構成の例を説明する。図3に示されているように、基板30は、ECU31と、角速度センサ32と、加速度センサ33と、左右の走行用モータ15の回転を個別に制御するドライバ36と、作業部駆動用モータ16の回転を制御するドライバ37と、を備える。また、基板30は、カメラ21、バッテリ17及び車輪速センサ18と電気的に接続されている。
角速度センサ32は、作業車10の図示されていない重心位置の鉛直軸回りの回転角速度であるヨーレートを表す信号をECU31に対して出力する。すなわち、ECU31は、角速度センサ32からヨーレートを表す信号を受け取ることによって、作業車10の正面方向(進行方向)を演算等して取得することができる。
加速度センサ33は、作業車10の例えば前後方向、左右方向及び上下方向の3方向に作用する加速度を表す信号をECU31に対して出力する。加速度センサ33は、必ずしも3方向に作用する加速度を表す信号を出力する必要はなく、例えば上記3方向のうちの1方向又は2方向に作用する加速度を表す信号を出力してもよい。
ドライバ36は、ECU31から受け取る信号に応じて、左右の走行用モータ15の回転を個別に制御する。ドライバ37は、ECU31から受け取る信号に応じて、作業部駆動用モータ16の回転を制御する。ここで、図3に示される例においては、角速度センサ32、加速度センサ33、ドライバ36及びドライバ37は、ECU31とは別の構成要素として基板30上に備えられているが、例えば、これらの少なくとも1つ以上をECU31が備えてもよい。
車輪速センサ18は、後輪13の回転速度を検出可能に作業車10に備えられており、後輪13の回転速度を表す信号を基板30、具体的にはECU31に対して出力する。すなわち、ECU31は、車輪速センサ18から後輪13の回転速度を表す信号を受け取ることによって、作業車10が移動した距離を演算等して取得することができる。
カメラ21は、作業車10の外部を撮像可能に作業車10に備えられており、撮像した画像のデータを基板30、具体的にはECU31に対して出力する。ここで、図3に示される例においては、1つのカメラ21が基板30と電気的に接続されているが、2以上のカメラ21が基板30に接続されていてもよい。
また、作業車10の外部を周囲全体にわたって撮像可能に、適切な個数のカメラ21が作業車10の適切な位置に備えられていることが好ましい。例えば、作業車10のハウジング11の前側と後側と左側と右側とに1つずつ、合計4つのカメラ21が備えられることが好ましい。代替的に、例えば、作業車10の外部を周囲全体にわたって撮像可能な画角を有する1つのカメラ21が、作業車10のハウジング11の上位部に備えられてもよい。
図4を参照して、ECU31の構成の例を説明する。ECU31は、例えば、CPU(Central Processing Unit)等の処理部40と、RAM(Random Access Memory)、ROM(Read Only Memory)等の記憶部50と、を含むマイクロコンピュータで構成される。記憶部50には、作業車10が作業を行う範囲である作業エリアに関するマップデータ(マップ)51が記憶されている。
処理部40は、例えば、記憶部50に記憶されている図示されていないプログラムを実行することによって、移動方向決定部41、画像解析部43、挙動取得部44及び測量部45として機能する。代替的に、移動方向決定部41、画像解析部43、挙動取得部44及び測量部45の少なくとも1つは、例えばアナログ回路等のハードウェアで実現されてもよい。
移動方向決定部41は、作業車10が移動する方向(移動方向)を決定する。画像解析部43は、カメラ21が作業車10の外部を撮像した画像を受け取り、例えば、公知の画像処理、パターンマッチング手法等を用いて画像を解析する。作業車10が複数のカメラ21を備えるときは、画像解析部43は、例えば、複数のカメラ21から受け取る作業車10の外部を撮像した画像を結合して得られる、作業車10の周囲全体にわたる画像を解析してもよい。画像解析部43は、受け取った画像に後述する標識が含まれているときには、標識を抽出する。そして、画像解析部43は、作業車10の正面方向(進行方向)と、作業車10の現在位置から抽出した標識を指す方向との角度差を演算等することによって取得する。
挙動取得部44は、作業車10が移動した距離及び方向を含む挙動情報を取得する。挙動取得部44は、車輪速センサ18から受け取る信号に応じて作業車10が移動した距離を演算等して取得する。また、挙動取得部44は、角速度センサ32から受け取る信号に応じて作業車10が移動した方向を演算等して取得する。挙動取得部44は、例えば、加速度センサ33から受け取る信号に応じて演算等して取得した情報を、さらに挙動情報に含んでもよい。
測量部45は、画像解析部43による解析結果及び挙動取得部44による挙動情報を用いて、画像解析部43が抽出した標識の位置情報を後述する三角測量法によって取得する。測量部45は、例えば、取得した標識の位置情報を、マップ51に反映させる。
作業車10は、作業車10の動作モードとして、例えば、作業モードと測量モードとを有している。作業車10は、作業モードで動作するときは、作業エリア内を自主的に走行し、例えば芝草を刈る等の作業を行う。また、作業車10は、測量モードで動作するときは、自主的に走行している間に標識の位置情報を取得してマップ51を更新する。
《2.無人走行作業車の動作の例》
《2−1.作業エリアと無人走行作業車の動作との関係》
図5を参照して、作業エリア70と作業車10の動作との関係について説明する。図5には、作業エリア70を上から見た例が示されている。図5に示されている例では、作業エリア70が破線で囲まれた範囲として示されている。また、図5に示されている例では、作業車10を収容可能なステーション60が示されている。作業車10は、ステーション60に収容されることによってバッテリ17の充電が可能となる。また、作業車10は、作業モード又は測量モードでの動作を終えたときに、ステーション60まで移動して収容されてもよい。なお、図5に示されている例においては、ステーション60は作業エリア70の内側と外側とをまたがっているような状態で配置されているが、ステーション60は、作業エリア70の内側に配置されていてもよく、作業エリア70の外側に配置されていてもよい。
《2−1.作業エリアと無人走行作業車の動作との関係》
図5を参照して、作業エリア70と作業車10の動作との関係について説明する。図5には、作業エリア70を上から見た例が示されている。図5に示されている例では、作業エリア70が破線で囲まれた範囲として示されている。また、図5に示されている例では、作業車10を収容可能なステーション60が示されている。作業車10は、ステーション60に収容されることによってバッテリ17の充電が可能となる。また、作業車10は、作業モード又は測量モードでの動作を終えたときに、ステーション60まで移動して収容されてもよい。なお、図5に示されている例においては、ステーション60は作業エリア70の内側と外側とをまたがっているような状態で配置されているが、ステーション60は、作業エリア70の内側に配置されていてもよく、作業エリア70の外側に配置されていてもよい。
作業車10は、ECU31の記憶部50が記憶しているマップ51上に作業エリア70を設定(又は記憶)することができる。マップ51は、例えば、地面と同一平面を表す二次元マップであり、マップ51上の位置情報(二次元座標)と実空間上の位置情報(二次元座標)とは対応関係にある。実空間上の位置情報(二次元座標)は、例えば、地面と同一平面上の座標平面で表され、この座標平面は、ステーション60が配置されている位置又は予め設定された位置を原点としてX軸及びX軸と直角に交差するY軸の2つの座標軸で構成される。なお、図5に示される例においては、原点、X軸及びY軸の図示が省略されており、X軸正方向及びY軸正方向の例が表されている。
図5に示されている例では、長方形の作業エリア70が示されており、この長方形の4つの頂点には標識71(71−1,71−2,71−3,71−4)が存在している。すなわち、図5に示されている例においては、マップ51上では、実空間上で4つの標識71(71−1,71−2,71−3,71−4)の位置に対応する4つの座標点によって規定される長方形の内側の範囲が作業エリア70として設定されている。
作業車10は、上述したように、ECU31の挙動取得部44によって、作業車10が移動した距離及び作業車10が移動した方向を含む挙動情報を取得することができる。そのため、作業車10は、マップ51上において、作業車10の現在位置を把握することができる。
このように、作業車10は、マップ51上に作業エリア70を設定した後は、作業エリア70の内側のみを走行することができる。その結果、作業車10は、例えば、作業モードで動作するときに、作業エリア70の内側のみを自主的に走行し、芝草を刈る等の作業を行うことが実現できる。
マップ51上で作業エリア70を設定するためには、実空間上の作業エリア70の内側と外側との境界に関する位置情報(二次元座標)を把握する必要がある。作業車10では、測量部45が、実空間上の作業エリア70の内側と外側との境界に関する位置情報として、実空間上の標識71の位置情報(二次元座標)を三角測量法によって取得する。なお、ユーザーはマップ51を編集可能であり、例えば、マップ51上に反映された標識71の位置情報から任意の距離だけ離れた位置を作業エリア70の内側と外側との境界に設定してもよい。
また、標識71は、画像解析部43がカメラ21から受け取った画像から抽出可能な物であり、例えば地面に自立可能な棒状の物であってもよい。また、画像解析部43がカメラ21から受け取った画像から抽出可能である限り、木、石等が標識71として使用されてもよい。さらに、標識71は、例えば、カメラ21が撮像対象とする特定の周波数領域の光を発光可能に構成されていてもよい。
《2−2.三角測量法による標識の位置情報の取得》
図6を参照して、測量部45が三角測量法を用いて、標識71の位置情報(二次元座標)を取得する方法の一例を説明する。図6には、一定方向に移動する作業車10と、標識71とを上から見た例が示されている。
図6を参照して、測量部45が三角測量法を用いて、標識71の位置情報(二次元座標)を取得する方法の一例を説明する。図6には、一定方向に移動する作業車10と、標識71とを上から見た例が示されている。
作業車10が一定方向に移動するときに通る、位置10−Aと位置10−Bとの距離をLとする。位置10−Aと標識71の位置とを結ぶ直線の距離をHAとする。位置10−Aと標識71の位置とを結ぶ直線と、作業車10が移動した方向と、がなす角をθAとする。位置10−Bと標識71の位置とを結ぶ直線と、作業車10が移動した方向と、がなす角をθBとする。位置10−Aと標識71の位置とを通る直線と、位置10−Bと標識71の位置とを通る直線と、がなす角をθαとする。このとき、正弦定理から次の式(1)が得られる。
HA/sin(π−θB)=L/sinθα
HA/sinθB=L/sin(θB−θA) (1)
(∵ sin(π−θB)=sinθB, θα=θB−θA)
HA/sin(π−θB)=L/sinθα
HA/sinθB=L/sin(θB−θA) (1)
(∵ sin(π−θB)=sinθB, θα=θB−θA)
また、式(1)を変形することによって、次の式(2)が得られる。
HA=L・sinθB/sin(θB−θA) (2)
HA=L・sinθB/sin(θB−θA) (2)
このように、LとθAとθBとを得ることによって、式(2)を演算してHAを決定することができる。ここで、測量部45は、作業車10が位置10−Aから位置10−Bまで一定方向に移動することによって、LとθAとθBとを得ることができる。すなわち、Lは挙動取得部44が取得し、θAとθBとは画像解析部43が取得する。したがって、測量部45は、標識71が、位置10−Aにおいて作業車10の正面方向(進行方向)との角度差がθAの方向であって、位置10−AからHAだけ離れた位置に配置されていることを取得することができる。以上のように、測量部45は、三角測量法を用いて、標識71の位置情報(二次元座標)を取得する。
以下、測量部45が三角測量法を用いて標識71の位置情報を取得するときに、作業車10が一定の移動方向に移動する間に通る2つの位置(図6において位置10−A及び位置10−Bに相当)のうち、一方を第1地点(図6において位置10−Aに相当)とも呼び、他方を第2地点(図6において位置10−Bに相当)とも呼ぶ。また、第1地点から標識71を指す方向と移動方向との角度差を第1角度(図6において角度θAに相当)とも呼び、第2地点から標識71を指す方向と移動方向との角度差を第2角度(図6において角度θBに相当)とも呼ぶ。
《2−3.測量モードにおける無人走行作業車の動作の例》
図7及び図8を参照して、測量モードにおける作業車10の動作の例を説明する。図7には、作業車10と4つの標識71(71−1,71−2,71−3,71−4)とを上から見た例が示されている。図7に示される例おいて、作業車10は位置10−1で測量モードの実行を開始したとする。
図7及び図8を参照して、測量モードにおける作業車10の動作の例を説明する。図7には、作業車10と4つの標識71(71−1,71−2,71−3,71−4)とを上から見た例が示されている。図7に示される例おいて、作業車10は位置10−1で測量モードの実行を開始したとする。
測量モードの実行を開始した作業車10は、位置10−1で作業車10の外部をカメラ21によって撮像する。画像解析部43は、カメラ21が撮像した画像を受け取って解析する。画像解析部43は、解析した画像に標識71−1が含まれているときに、標識71−1を抽出する。測量部45は、画像解析部43が抽出した標識71−1の位置情報の取得を開始する。
移動方向決定部41は、測量部45が位置情報の取得を開始する標識71−1について、位置情報を取得するために作業車10が移動する移動方向を決定する。すなわち、移動方向決定部41は、作業車10が標識71(標識71−1)と接触しない方向であって、且つ、作業車10の現在位置(位置10−1)から標識71(標識71−1)を指す方向との角度差θg(θg1)が90degよりも小さくなる方向を、作業車10の移動方向として決定する。
移動方向決定部41によって作業車10の移動方向が決定されると、作業車10は正面方向(進行方向)と移動方向決定部41が決定した移動方向とが一致するまで旋回する。正面方向(進行方向)と移動方向決定部41が決定した移動方向とが一致した後に、作業車10が正面方向(進行方向)に移動(前進)する。作業車10が移動している間に、測量部45が上述した三角測量法によって標識71(標識71−1)の位置情報を取得する。
以上のように、測量部45が標識71の位置情報の取得を開始するときに、移動方向決定部41が作業車10の移動方向を決定することによって、ユーザーが標識71の位置情報を自身で取得すること及び作業車10の移動方向を案内することなく、標識71の位置情報を取得することができる。また、移動方向決定部41が決定する移動方向が、作業車10が標識71と接触しない方向であって、且つ、作業車10の現在位置から標識71を指す方向との角度差θgが90degよりも小さくなる方向であることによって、作業車10が決定された移動方向に移動している間に、作業車10と標識71との距離が近づくタイミングが発生する。すなわち、作業車10と標識71との距離が近づくタイミングが発生しない、作業車10の現在位置から標識71を指す方向との角度差θgが90deg以上となる方向に作業車10が移動する場合と比較して、標識71との距離が近いときに撮像された画像に基づいて標識71の位置情報を取得することができる。
移動方向決定部41が決定する移動方向は、作業車10が標識71と接触しない方向であって、且つ、作業車10の現在位置から標識71を指す方向との角度差θgが45degよりも小さくなる方向であることが好ましい。この場合、作業車10が決定された移動方向に移動している間に、作業車10と標識71との距離が近づくタイミングが十分に発生する。
また、測量部45は、画像解析部43が抽出した標識71(71−1)の位置情報の取得が完了しているか否かを判定してもよい。そして、標識71(71−1)の位置情報の取得が完了していないと判定したときに、測量部45は標識71(71−1)の位置情報の取得を開始してもよい。例えば、測量部45は、マップ51を参照して、位置情報が記憶されている標識71を、位置情報の取得が完了した標識71と判定してもよい。代替的に、測量部45は、位置情報の取得が所定の回数実行された標識71を、位置情報の取得が完了した標識71と判定してもよい。
測量部45が、位置情報の取得が完了していない標識71の位置情報の取得を開始することによって、すでに位置情報の取得が完了している標識71について、再度位置情報の取得を実行されることを防ぐことができる。その結果、例えば、測量モードにおける動作にかかるバッテリ17の電力消費を軽減することができる。
また、画像解析部43は、受け取った画像に複数の標識71が含まれているときには、これら全ての標識71を抽出する。測量部45は、画像解析部43が抽出した複数の標識71のなかに位置情報の取得が完了していない標識71が含まれているか判定する。位置情報の取得が完了していない標識71が含まれているときは、測量部45は、位置情報の取得が完了していない標識71のうち作業車10の現在位置からの視認性の最も良い標識71の位置情報の取得を開始する。作業車10の現在位置からの視認性の最も良い標識71とは、例えば、受け取った画像上での大きさが最も大きい標識71であってもよい。例えば、標識71の位置情報の取得が完了した位置でカメラ21が撮像する画像に、位置情報の取得が完了していない標識71が含まれなくなるまで、同様の手順が繰り返される。
具体的に、図7に示される例において、作業車10が位置10−1のときにカメラ21が撮像する画像に位置情報の取得が完了していない4つの標識71(71−1,71−2,71−3,71−4)が含まれたとする。このとき、画像解析部43は受け取った画像に含まれる4つの標識71(71−1,71−2,71−3,71−4)を抽出し、測量部45は4つの標識71(71−1,71−2,71−3,71−4)の位置情報の取得が完了していないと判定する。測量部45は、位置情報の取得が完了していない4つの標識71(71−1,71−2,71−3,71−4)のうち作業車10の現在位置(位置10−1)からの視認性の最も良い標識71−1の位置情報の取得を開始する。そして、移動方向決定部41によって作業車10の移動方向が決定され、決定された移動方向に作業車10が移動している間に測量部45が標識71−1の位置情報を取得する。
その後、標識71−1の位置情報の取得が完了した位置(例えば位置10−2)でカメラ21が撮像する画像に、4つの標識71(71−1,71−2,71−3,71−4)が含まれたとする。このとき、画像解析部43は受け取った画像に含まれる4つの標識71(71−1,71−2,71−3,71−4)を抽出し、測量部45は3つの標識71(71−2,71−3,71−4)の位置情報の取得が完了していないと判定する。測量部45は、位置情報の取得が完了していない3つの標識71(71−2,71−3,71−4)のうち作業車10の現在位置(位置10−2)からの視認性の最も良い標識71−2の位置情報の取得を開始する。
標識71−2の位置情報の取得が完了した位置(例えば位置10−3)において同様の手順によって標識71−3の位置情報の取得が開始され、さらに標識71−3の位置情報の取得が完了した位置(例えば位置10−4)において同様の手順によって標識71−4の位置情報の取得が開始される。ここで、いずれの標識71の位置情報の取得が開始されるときも、移動方向決定部41が決定する移動方向は、作業車10が標識71と接触しない方向であって、且つ、作業車10の現在位置から標識71を指す方向との角度差θg(θg1,θg2,θg3,θg4)が90degよりも小さくなる方向である。
標識71−4の位置情報の取得が完了した位置(図示されていない)でカメラ21が撮像する画像に、位置情報の取得が完了していない標識71が含まれていない(全ての標識71の位置情報の取得が完了した)と測量部45が判定すると、作業車10は測量モードでの動作を終了してもよい。しかしながら、代替的に、例えば、全ての標識71の位置情報の取得が3回完了されたときに、作業車10が測量モードでの動作を終了してもよい。
このように、カメラ21が撮像した画像に複数の標識71が含まれるときに、測量部45が位置情報の取得する標識71を決定することによって、ユーザーが位置情報の取得する標識71を決定する必要がない。また、測量部45は、位置情報の取得が完了していない標識71のなかから作業車10の現在位置からの視認性の最も良い標識71の位置情報の取得を開始することによって、例えば現在位置からの距離が最も遠い標識71の位置情報の取得を開始する場合と比較して、全ての標識71の位置情報の取得が完了するまでに必要とする移動距離が短くなる。その結果、測量モードにおける動作にかかるバッテリ17の電力消費を軽減することができる。
図8に示されるフローチャートを参照して、測量モードにおける作業車10の動作の一連の流れの例を説明する。ステップS101では、作業車10のカメラ21が作業車10の外部を撮像する。ステップS102では、画像解析部43が、カメラ21が撮像した画像を分析し、画像に含まれる標識71を抽出する。ステップS103では、測量部45が、画像解析部43が抽出した標識71のなかに位置情報の取得が完了していない標識71が含まれているか否かを判定する。
ステップS103の判定がYESのときにフローはステップS104に進み、ステップS103の判定がNOのときにフローは終了する。ステップS104では、測量部45が位置情報を取得する標識71を決定し、移動方向決定部41が作業車10の移動方向を決定する。ステップS105では、作業車10は移動方向決定部41が決定した移動方向に移動を開始し、作業車10がこの移動方向に移動している間に測量部45が標識71の位置情報を上述した三角測量法によって取得する。
ステップS106では、測量部45は、取得した標識71の位置情報をマップ51に反映させて、マップ51を更新する。マップ51の更新が終了すると、フローは再度ステップS101に進む。すなわち、ステップS103のステップで、画像解析部43が抽出した標識71のなかに位置情報の取得が完了していない標識71が含まれていないと判定されるまで、ステップS101からステップS106の処理が繰り返される。
《2−4.位置情報の取得の精度》
図9、図10及び図11を参照して、測量部45による標識71の位置情報の取得の精度について説明する。図9には、作業車10と標識71とを上から見た例が示されている。また、図9に示される例においては、作業車10と標識71とは距離Hだけ離れている。
図9、図10及び図11を参照して、測量部45による標識71の位置情報の取得の精度について説明する。図9には、作業車10と標識71とを上から見た例が示されている。また、図9に示される例においては、作業車10と標識71とは距離Hだけ離れている。
ここで、一般的にデジタル形式の画像を生成可能なカメラでは、被写体の像を撮像センサの撮像面に形成するときに、撮像センサの分解能、撮像レンズの焦点距離等に起因した誤差が生じる。この誤差が影響して、カメラ21が撮像するときに所定の角度の撮像誤差±θp(撮像誤差の範囲は2θp)が生じる。撮像誤差±θpが生じることによって、作業車10から距離Hだけ離れる標識71は、実空間上の2Htanθpの範囲の誤差を含んだ状態で撮像される。すなわち、カメラ21と標識71との距離が遠くなることに応じて撮像誤差の影響が大きくなる。
図10及び図11を参照して、三角測量法による標識71の位置情報の取得における撮像誤差の影響を説明する。図10の(A)及び(B)に示される領域76は、三角測量法を用いて標識71の位置情報が取得される誤差の範囲を表す。領域76は、第1地点の例である位置Aで標識71を撮像するときの撮像誤差と、第2地点の例である位置Bで標識71を撮像するときの撮像誤差と、が重なって形成される領域である。
図10に示される(A)の例と(B)の例と間で、位置A(第1地点)と標識71との距離及び位置B(第2地点)と標識71との距離は概ね同じである。しかしながら、位置A(第1地点)、標識71、位置B(第2地点)からなる角度が図10の(A)に示される例よりも90[deg]に近い図10の(B)の方が、領域76が小さくなっている。なお、位置A(第1地点)、標識71、位置B(第2地点)からなる角度は、第1角度と第2角度との角度差と同じである。
このように、撮像誤差を考慮すると、三角測量法に用いる第1角度と第2角度との角度差が90[deg]に近い程、標識71の位置情報の取得の精度が向上する。すなわち、測量部45は、作業車10が移動方向に移動している間に、第1角度と第2角度との角度差が90[deg]に近づくように、第1地点及び/又は第2地点を決定することによって、撮像誤差を軽減することができる。その結果、ユーザーが、標識71の位置情報の取得の精度を担保するために、第1地点及び第2地点を決定する必要がない。
また、図11には、第1角度と第2角度との角度差が略90[deg]であるときの三角測量法を用いた標識71の位置情報の取得の精度を表す2つの例として、図11の(A)及び(B)が示されている。図11の(A)の領域76と(B)の領域76とでは、図11の(A)の方が大きくなっている。これは、図11の(A)における位置A(第1地点)と標識71との距離が図11の(B)のにおける位置A(第1地点)と標識71との距離よりも長くなっていることにより、撮像誤差が大きく影響しているためである。
第1角度と第2角度との角度差が略90[deg]であるときに、第1地点と標識71との距離及び第2地点と標識71との距離の双方が最も短くなる条件は、図11の(B)に示されるように第1角度θAが略45[deg]及び第2角度θBが略135[deg]が成立するときである。すなわち、測量部45は、作業車10が移動方向に移動している間に、第1角度が45[deg]に近づくように第1地点を決定すると共に、第2角度が135[deg]に近づくように第2地点を決定することによって、標識71の位置情報の取得の精度が向上する。
ここで、標識71の位置情報の取得の精度の観点からも、測量部45が標識71の位置情報の取得を開始するときに移動方向決定部41が決定する移動方向は、作業車10が標識71と接触しない方向であって、且つ、作業車10の現在位置から標識71を指す方向との角度差θgが45degよりも小さくなる方向であることが好ましい。すなわち、作業車10の移動方向が作業車10の現在位置から標識71を指す方向との角度差θgが45degよりも小さくなる方向であるときには、作業車10が移動している間に、第1角度が45[deg]となる第1地点を必ず通る。
《2−5.標識の位置情報の取得に係る処理》
図12に示されるフローチャートを参照して、測量部45が標識71の位置情報の取得するときの詳細の処理の例を説明する。図12に示されるフローチャートは、図8に示されるフローチャートにおけるステップS105の詳細な処理の例である。
図12に示されるフローチャートを参照して、測量部45が標識71の位置情報の取得するときの詳細の処理の例を説明する。図12に示されるフローチャートは、図8に示されるフローチャートにおけるステップS105の詳細な処理の例である。
ステップS201では、測量部45は、標識71検出フラグがONであるか否かを判定する。ステップS201の判定がYESのときにフローはステップS205に進み、ステップS201の判定がNOのときにフローはステップS202に進む。なお、図8に示されるフローチャートにおけるステップS104からステップS105に進んだ直後は、標識71検出フラグはOFFである。
ステップS202では、測量部45は、現在位置でカメラ21が撮像した画像に標識71が含まれているか否かを判定する。ステップS202の判定がYESのときにフローはステップS203に進み、ステップS202の判定がNOのときにフローはSTARTに戻る。
ステップS203では、測量部45は、ステップS202で判定した画像を撮像した位置における作業車10の移動方向と作業車10から標識71を指す方向との角度差を、第1角度として記憶する。以下、画像を撮像した位置における作業車10の移動方向と作業車10から標識71を指す方向との角度差を、標識71検出角度とも呼ぶ。測量部45は、例えば、標識71検出角度を画像解析部43から受け取る。また、ステップS203では、測量部45は、ステップS202で判定した画像を撮像した位置を第1地点として記憶する。以下、画像を撮像した位置を、標識71検出位置とも呼ぶ。測量部45は、例えば、標識71検出位置を挙動取得部44から受け取る。
ステップS204では、測量部45は、標識71検出フラグをONにする。ステップS204の処理が終了すると、フローはSTARTへ戻る。ステップS205では、測量部45は、第1角度が確定されているか否かを判定する。ステップS205の判定がYESのときにフローはステップS211に進み、ステップS205の判定がNOのときにフローはステップS206に進む。
ステップS206では、現在位置でカメラ21が撮像した画像に標識71が含まれているか否かを判定する。ステップS206の判定がYESのときにフローはステップS207に進み、ステップS206の判定がNOのときにフローは終了する。なお、ステップS206の判定がNOでフローは終了するときは、検出できていた標識71が何かしらの原因で検出できない(画像解析部43が標識71を抽出できない)状況が発生しているため、例えば、図8のフローチャートのステップS101に戻る。
ステップS207では、ステップS206で判定した画像を撮像した位置における標識71検出角度が、第1角度よりも45[deg]に近いか否かを判定する。ステップS207の判定がYESのときにフローはステップS208に進み、ステップS207の判定がNOのときにフローはステップS209に進む。
ステップS208では、測量部45は、現在記憶されている第1角度に代えて、ステップS206で判定した画像を撮像した位置における標識71検出角度を新たに第1角度として記憶(上書き)する。また、ステップS208では、測量部45は、現在記憶されている第1地点に代えて、ステップS206で判定した画像を撮像した位置を新たに第1地点として記憶(上書き)する。
ステップS209では、測量部45は、現在記憶されている第1角度及び現在記憶されている第1地点を、三角測量法に用いる第1角度及び第1地点として確定する。ステップS210では、測量部45は、ステップS206で判定した画像を撮像した位置における標識71検出角度を第2角度として記憶し、画像を撮像した位置を第2地点として記憶する。ステップS208又はステップS210の処理が終了すると、フローはSTARTへ戻る。
測量部45は、ステップS207、ステップS208、ステップS209の処理を有することによって、作業車10が移動方向に移動している間に、第1角度が45[deg]に近づくように第1地点を決定することができる。その結果、標識71の位置情報の取得の精度が向上する。
ステップS211では、現在位置でカメラ21が撮像した画像に標識71が含まれているか否かを判定する。ステップS211の判定がYESのときにフローはステップS212に進み、ステップS211の判定がNOのときにフローはステップS214に進む。
ステップS212では、ステップS211で判定した画像を撮像した位置における標識71検出角度と確定された第1角度との角度差が、現在記憶されている第2角度と確定された第1角度との角度差よりも、90[deg]に近いか否かを判定する。ステップS212の判定がYESのときにフローはステップS213に進み、ステップS212の判定がNOのときにフローはステップS214に進む。
ステップS213では、測量部45は、現在記憶されている第2角度に代えて、ステップS211で判定した画像を撮像した位置における標識71検出角度を新たに第2角度として記憶する。また、ステップS213では、測量部45は、現在記憶されている第2地点に代えて、ステップS211で判定した画像を撮像した位置を新たに第2地点として記憶する。ステップS213の処理が終了すると、フローはSTARTへ戻る。
ステップS214では、測量部45は、現在記憶されている第2角度及び現在記憶されている第2地点を、三角測量法に用いる第2角度及び第2地点として確定する。ステップS215では、測量部45は、確定された第1角度、確定された第2角度、確定された第1地点と確定された第2地点との距離を用いて、三角測量法によって標識71の位置情報を演算して取得する。ステップS215の処理が終了すると、フローは終了する。すなわち、ステップS215の処理が終了すると、図8に示されるフローチャートのステップS106に進む。
測量部45は、ステップS212、ステップS213、ステップS214の処理を有することによって、作業車10が移動方向に移動している間に、第2角度が135[deg]に近づくように第2地点を決定することができる。その結果、標識71の位置情報の取得の精度が向上する。
図12に示されているフローチャートは一例であって、測量部45は、全てのステップの処理を実行する必要はない。測量部45は、例えば、第1地点を確定するための処理、すなわち、図12に示されているフローチャートのステップS201からステップS209までに相当する処理を、実行してもよい。また、測量部45は、例えば、第2地点を確定するための処理、すなわち、図12に示されているフローチャートのステップS211からステップS215までに相当する処理を、実行してもよい。
《2−6.特別な場合における動作》
図13及び図14を参照して、特別な場合の例として、作業車10が移動している間に、画像解析部43が、カメラ21が撮像する画像から抽出できていた標識71を、カメラ21が撮像する画像から抽出できない状況が発生したときの動作の例を説明する。以下、この「画像解析部43が、カメラ21が撮像する画像から抽出できていた標識71を、カメラ21が撮像する画像から抽出できない状況」を、ロストとも呼ぶ。ロストは、例えば、位置が固定されている木、岩等又は位置が固定されていない人、動物等が障害物78となってカメラ21と標識71との間を遮るときに発生し得る。また、ロストは、例えば、逆光等によっても発生し得る。
図13及び図14を参照して、特別な場合の例として、作業車10が移動している間に、画像解析部43が、カメラ21が撮像する画像から抽出できていた標識71を、カメラ21が撮像する画像から抽出できない状況が発生したときの動作の例を説明する。以下、この「画像解析部43が、カメラ21が撮像する画像から抽出できていた標識71を、カメラ21が撮像する画像から抽出できない状況」を、ロストとも呼ぶ。ロストは、例えば、位置が固定されている木、岩等又は位置が固定されていない人、動物等が障害物78となってカメラ21と標識71との間を遮るときに発生し得る。また、ロストは、例えば、逆光等によっても発生し得る。
図13には、一定の移動方向に移動する作業車10と標識71とを上から見た例が示されている。また、図13には、障害物78が示されている。図13に示されているように、位置10−A、位置10−B、位置10−E及び位置10−Fからは、障害物78と干渉することなく、作業車10と標識71とを直線でつなぐことができる。その一方で、図13に示されているように、位置10−C及び10−Dからは、障害物78と干渉することなく、作業車10と標識71とを直線でつなぐことができない。
すなわち、例えば作業車10がカメラ21で外部を撮像しながら図13に示される移動方向に移動する間に、位置10−A及び位置10−Bにおいて撮像する画像から画像解析部43が抽出していた標識71を、位置10−Cにおいて撮像する画像から画像解析部43が抽出できなくなる状況(ロスト)が発生する。その後、位置10−Eまで作業車10が移動したときに、撮像する画像から画像解析部43が再度標識71を抽出可能になり、ロストが解消される。
例えば、何かしらの対策もなされないとすると、画像解析部43は、ロスト発生前に抽出した標識71と、ロスト解消後に抽出する標識71とを異なる標識71として認識することが想定される。例えば、測量部45が標識71の位置情報を取得するために作業車10が移動している間に、このようなロストが発生したとすると、測量部45が標識71の位置情報を精度良く取得できないこと又は標識71の位置情報を取得することができないことが想定される。すなわち、測量部45が標識71の位置情報を取得するための情報は、作業車10が位置10−Cに到達するまで(ロスト発生前)に得た情報(標識71検出角度及び標識71検出位置)又は、作業車10が位置10−Eに到達した後(ロスト解消後)に得た情報(標識71検出角度及び標識71検出位置)のいずれか一方に限られることが想定される。
例えば、図12に示されるフローチャートに従うと、ステップS211の判定でNO又はステップS206の判定でNOとなる。例えばステップS211の判定でNOとなるときは、作業車10が位置10−Cまで移動する間に記憶された第2角度及び第2地点が三角測量法に用いる第2角度及び第2地点として確定され(ステップS214)、すでに確定している第1角度及び第1地点とともに三角測量法によって標識71の位置情報が取得される(ステップS215)。この場合には、標識71の位置情報を精度良く取得できない可能性がある。また、例えばステップS206の判定でNOとなるときは、標識71の位置情報が取得されることなくフローが終了する。
ここで、図13に示されている例では、位置10−Eまで作業車10が移動したときに、撮像する画像から画像解析部43が再度標識71を抽出可能になるため、画像解析部43は、ロスト発生前に抽出していた標識71とロスト解消後に抽出する標識71とが同一の標識71であるか否かを判定してもよい。画像解析部43がロスト発生前に抽出していた標識71とロスト解消後に抽出する標識71とが同一の標識71であるときは、測量部45は、ロスト発生前に得た情報(標識71検出角度及び標識71検出位置)と、ロスト解消後に得た情報(標識71検出角度及び標識71検出位置)との双方を用いて標識71の位置情報を取得してもよい。
そうすると、測量部45が、例えば、ロスト発生前に得た情報又は、ロスト解消後に得た情報の一方のみを用いて標識71の位置情報を取得する場合と比較して、標識71の位置情報を精度良く取得することができる。また、例えば、ユーザーが、作業車10が移動する間に障害物78の影響がない位置まで作業車10を案内する必要がない。
図14を参照して、ロストが発生した後に解消したときに、画像解析部43が、ロスト解消後に抽出する標識71と、ロスト発生前に抽出していた標識71とが同一の標識71であるか否かを判定する方法の例を説明する。
図14の(A)は、ロスト発生前にカメラ21が撮像した画像の例として、図13の例の位置10−Bで撮像された画像80Bを示す。図14の(B)は、ロスト解消後にカメラ21が撮像した画像の例として、図13の例の位置10−Eで撮像された画像89Eを示す。図14の(C)は、画像解析部43が画像80Bのなかから標識71以外を取り除く画像処理を施した画像の例として、加工画像80Biを示す。図14の(D)は、画像解析部43が画像80Eのなかから標識71以外を取り除く画像処理を施した画像の例として、加工画像80Eiを示す。なお、図14では、障害物78の図示を省略している。
1つの方法の例として、画像解析部43は、画像80B上における標識71の近傍の風景の形状特徴と、画像80E上における標識71の近傍の風景の形状特徴とを比較してもよい。画像解析部43は、この比較結果に応じて、画像80Bに含まれる標識71と画像80Eに含まれる標識71とが同一の標識71であるか否かを判定してもよい。この方法の例によると、標識71の近傍の風景の形状特徴を判定に用いることができる。例えば、標識71の近傍の風景に特徴的なもの(例えば木等)が含まれている場合等に効果がある。また、例えば、ロスト解消後に撮像された画像に複数の同一形状の標識71が含まれている場合等、標識71の形状特徴のみで同一性を判定することが困難な場合にも判定の精度を担保する効果がある。
他の方法の例として、画像解析部43は、図13の例の位置10−Bと図13の例の位置10−Eとの距離を用いて、画像80Bに含まれる標識71が画像80Eにおいて含まれる位置を予測して、予測された画像80E上での標識71の位置と、実際の画像80E上での標識71の位置とを比較してもよい。画像解析部43は、この比較結果に応じて、画像80Bに含まれる標識71と画像80Eに含まれる標識71とが同一の標識71であるか否かを判定してもよい。この方法の例によると、作業車10が移動した距離を判定に用いることができる。例えば、例えば、ロスト解消後に撮像された画像に複数の同一形状の標識71が含まれている場合等、標識71の形状特徴のみで同一性を判定することが困難な場合にも判定の精度を担保する効果がある。
また、他の方法の例として、加工画像80Bi上における標識71の形状特徴と、加工画像80Ei上における標識71の形状特徴とを比較してもよい。画像解析部43は、この比較結果に応じて、画像80Bに含まれる標識71と画像80Eに含まれる標識71とが同一の標識71であるか否かを判定してもよい。この方法の例によると、標識71の形状特徴を判定に用いることができる。例えば、標識71の形状が特徴的な形状を有している場合等に特に効果がある。
また、さらなる他の方法の例として、画像解析部43は、図13の例の位置10−Bと図13の例の位置10−Eとの距離を用いて、加工画像80Biに含まれる標識71が加工画像80Eiにおいて含まれる位置を予測して、予測された加工画像80Ei上での標識71の位置と、実際の加工画像80Ei上での標識71の位置とを比較してもよい。画像解析部43は、この比較結果に応じて、画像80Bに含まれる標識71と画像80Eに含まれる標識71とが同一の標識71であるか否かを判定してもよい。この方法の例によると、作業車10が移動した距離を判定に用いることができる。例えば、例えば、ロスト解消後に撮像された画像に複数の同一形状の標識71が含まれている場合等、標識71の形状特徴のみで同一性を判定することが困難な場合にも判定の精度を担保する効果がある。
ロストが発生した後に解消したときに、画像解析部43が、ロスト解消後に抽出する標識71と、ロスト発生前に抽出していた標識71とが同一の標識71であるか否かを判定する方法の例をいくつか挙げた。画像解析部43は、これらの方法の1つを単独で実行した結果を用いて判定してもよいし、これらの方法の2つ以上の方法を実行した結果を用いて総合的に判定してもよい。また、画像解析部43は、ここで挙げられていない他の方法を併せて実行して、その結果も考慮して総合的に判定してもよい。
ここまで説明した作業車10の動作は、全てが実施される必要はない。すなわち、作業車10は、ここまで説明した動作の例のうちの一部を実施してもよい。
本発明は、上述の例示的な実施形態に限定されず、また、当業者は、上述の例示的な実施形態を特許請求の範囲に含まれる範囲まで、容易に変更することができるであろう。
10・・・無人走行作業車、18・・・車輪速センサ、21・・・カメラ、30・・・基板、31・・・電子制御装置(ECU)、32・・・角速度センサ、33・・・加速度センサ、41・・・移動方向決定部、43・・・画像解析部、44・・・挙動検出部、45・・・測量部、51・・・マップ、70・・・作業エリア、71・・・標識。
Claims (4)
- 所定の作業エリア内で自動的に作業を行う無人走行作業車であって、
前記無人走行作業車が移動した距離及び移動した方向を含む挙動情報を取得する挙動取得部と、
前記無人走行作業車に設けられているカメラが撮像する画像に含まれる標識を抽出する画像解析部と、
前記画像解析部が抽出した前記標識の位置情報を三角測量法によって取得する測量部と、
を備え、
前記測量部は、前記無人走行作業車が一定の移動方向に移動する間に通る任意の地点である第1地点から前記標識を指す方向と前記移動方向との角度差である第1角度と、前記無人走行作業車が前記移動方向に移動する間に通る前記第1地点とは異なる任意の地点である第2地点から前記標識を指す方向と前記移動方向との角度差である第2角度と、前記第1地点と前記第2地点との距離と、を用いて前記標識の前記位置情報を取得し、
前記測量部は、前記無人走行作業車が前記移動方向に移動する間に、前記第1角度と前記第2角度との角度差が90degに近づくように、前記第1地点及び/又は前記第2地点を決定する無人走行作業車。 - 前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記第1角度が45degに近づくように前記第1地点を決定すると共に、前記第2角度が135degに近づくように前記第2地点を決定する、請求項1に記載の無人走行作業車。
- 前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第1地点における第1角度よりも45degに近いときは前記既に決定されている前記第1地点の代わりに前記現在位置を前記第1地点として決定する一方で、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第1地点における第1角度よりも45degに近くないときは既に決定されている前記第1地点における前記第1角度を前記標識の前記位置情報の取得に用いる、請求項1又は2に記載の無人走行作業車。
- 前記測量部は、前記無人走行作業車が前記移動方向に移動している間に、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第2地点における第2角度よりも135degに近いときは既に決定されている前記第2地点の代わりに前記現在位置を前記第2地点として決定する一方で、前記無人走行作業車の現在位置から前記標識を指す方向と前記移動方向との角度差が、既に決定されている前記第2地点における第2角度よりも135degに近くないときは既に決定されている前記第2地点における前記第2角度を前記標識の前記位置情報の取得に用いる、請求項1から3のいずれか1項に記載の無人走行作業車。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016055478A JP6243944B2 (ja) | 2016-03-18 | 2016-03-18 | 無人走行作業車 |
| EP17160851.6A EP3223101B1 (en) | 2016-03-18 | 2017-03-14 | Automatic operation vehicle |
| CN201710156408.1A CN107203207B (zh) | 2016-03-18 | 2017-03-16 | 无人行驶作业车 |
| US15/460,524 US10067511B2 (en) | 2016-03-18 | 2017-03-16 | Automatic operation vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016055478A JP6243944B2 (ja) | 2016-03-18 | 2016-03-18 | 無人走行作業車 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017168058A true JP2017168058A (ja) | 2017-09-21 |
| JP6243944B2 JP6243944B2 (ja) | 2017-12-06 |
Family
ID=58398017
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016055478A Expired - Fee Related JP6243944B2 (ja) | 2016-03-18 | 2016-03-18 | 無人走行作業車 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10067511B2 (ja) |
| EP (1) | EP3223101B1 (ja) |
| JP (1) | JP6243944B2 (ja) |
| CN (1) | CN107203207B (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019159278A1 (ja) * | 2018-02-15 | 2019-08-22 | 本田技研工業株式会社 | 作業機 |
| KR20230105063A (ko) * | 2022-01-03 | 2023-07-11 | 금오공과대학교 산학협력단 | 마커를 이용하여 야외에서 작업 영역을 설정할 수 있는 잔디 깎기 시스템 |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6639979B2 (ja) * | 2016-03-23 | 2020-02-05 | オリンパス株式会社 | 撮影機器及び撮影用移動体 |
| CN108427409A (zh) * | 2017-02-15 | 2018-08-21 | 苏州宝时得电动工具有限公司 | 自动工作系统,自移动设备及其控制方法 |
| US10831211B1 (en) * | 2018-06-11 | 2020-11-10 | United Services Automobile Association (Usaa) | Marker based navigation system for robotic vehicle |
| WO2020262737A1 (ko) * | 2019-06-28 | 2020-12-30 | 엘지전자 주식회사 | 지능형 로봇 청소기 |
| KR102877692B1 (ko) * | 2019-09-04 | 2025-10-30 | 엘지전자 주식회사 | 이동 로봇 및 그의 구동 방법 |
| CN110825083B (zh) * | 2019-11-12 | 2023-02-28 | 深圳创维数字技术有限公司 | 车辆的控制方法、设备及计算机可读存储介质 |
| SE543950C2 (en) * | 2019-12-04 | 2021-10-05 | Husqvarna Ab | Robotic work tool being configured to switch between at least two offset settings |
| CN116724748B (zh) * | 2023-06-01 | 2025-08-26 | 深圳纵贯创新有限公司 | 行走设备 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007249735A (ja) * | 2006-03-17 | 2007-09-27 | Fujitsu Ltd | ロボット位置制御装置およびロボット自己位置回復方法 |
| JP2012003706A (ja) * | 2010-06-21 | 2012-01-05 | Mitsubishi Heavy Ind Ltd | 無人走行車両の誘導装置及び無人走行車両の誘導方法 |
| JP2014183841A (ja) * | 2013-02-19 | 2014-10-02 | Muroran Institute Of Technology | 植物自動収穫機、植物自動収穫プログラムおよび植物自動収穫方法 |
Family Cites Families (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4905151A (en) * | 1988-03-07 | 1990-02-27 | Transitions Research Corporation | One dimensional image visual system for a moving vehicle |
| EP0366350A3 (en) * | 1988-10-25 | 1991-05-22 | Tennant Company | Guiding an unmanned vehicle by reference to overhead features |
| JP2802560B2 (ja) * | 1992-02-24 | 1998-09-24 | 本田技研工業株式会社 | 移動体の操向制御装置 |
| US7145478B2 (en) * | 2002-12-17 | 2006-12-05 | Evolution Robotics, Inc. | Systems and methods for controlling a density of visual landmarks in a visual simultaneous localization and mapping system |
| JP2009180536A (ja) * | 2008-01-29 | 2009-08-13 | Omron Corp | 画像処理装置、画像処理方法、およびプログラム |
| EP2256572B1 (en) * | 2009-05-15 | 2013-01-16 | Samsung Electronics Co., Ltd. | Mobile robot system and improved method of working space confinement |
| CN102039595B (zh) * | 2009-10-09 | 2013-02-27 | 泰怡凯电器(苏州)有限公司 | 自移动地面处理机器人及其贴边地面处理的控制方法 |
| EP4529755A3 (en) * | 2011-04-28 | 2025-05-07 | Positec Power Tools (Suzhou) Co., Ltd. | Automatic working system, automatic walking device and steering method thereof |
| CN103324192A (zh) * | 2012-03-23 | 2013-09-25 | 苏州宝时得电动工具有限公司 | 边界设置方法及边界设置系统 |
| KR20140032113A (ko) * | 2012-09-06 | 2014-03-14 | (주)하기소닉 | 자연랜드마크 및 인공랜드마크와 엔코더를 이용한 지능형 이동로봇의 위치인식 방법 |
| CN103076802B (zh) * | 2012-10-09 | 2016-01-20 | 江苏大学 | 机器人虚拟边界建立与识别方法及系统 |
| CN111273666B (zh) | 2014-03-31 | 2023-10-24 | 美国iRobot公司 | 一种用于机器人草坪割草的操作者反馈单元及方法 |
| TWI505801B (zh) * | 2014-05-09 | 2015-11-01 | Kinpo Elect Inc | 室內機器人與其定位方法 |
| CN105334848A (zh) * | 2014-07-02 | 2016-02-17 | 苏州宝时得电动工具有限公司 | 自动行走设备控制方法及自动工作系统 |
| CN105403859B (zh) * | 2015-11-09 | 2018-05-15 | 深圳市中科鸥鹏智能科技有限公司 | 机器人定位方法和装置 |
-
2016
- 2016-03-18 JP JP2016055478A patent/JP6243944B2/ja not_active Expired - Fee Related
-
2017
- 2017-03-14 EP EP17160851.6A patent/EP3223101B1/en active Active
- 2017-03-16 CN CN201710156408.1A patent/CN107203207B/zh not_active Expired - Fee Related
- 2017-03-16 US US15/460,524 patent/US10067511B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007249735A (ja) * | 2006-03-17 | 2007-09-27 | Fujitsu Ltd | ロボット位置制御装置およびロボット自己位置回復方法 |
| JP2012003706A (ja) * | 2010-06-21 | 2012-01-05 | Mitsubishi Heavy Ind Ltd | 無人走行車両の誘導装置及び無人走行車両の誘導方法 |
| JP2014183841A (ja) * | 2013-02-19 | 2014-10-02 | Muroran Institute Of Technology | 植物自動収穫機、植物自動収穫プログラムおよび植物自動収穫方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019159278A1 (ja) * | 2018-02-15 | 2019-08-22 | 本田技研工業株式会社 | 作業機 |
| EP3739416A4 (en) * | 2018-02-15 | 2020-12-30 | Honda Motor Co., Ltd. | WORKING MACHINE |
| JPWO2019159278A1 (ja) * | 2018-02-15 | 2021-01-07 | 本田技研工業株式会社 | 作業機 |
| KR20230105063A (ko) * | 2022-01-03 | 2023-07-11 | 금오공과대학교 산학협력단 | 마커를 이용하여 야외에서 작업 영역을 설정할 수 있는 잔디 깎기 시스템 |
| KR102770165B1 (ko) * | 2022-01-03 | 2025-02-18 | 국립금오공과대학교 산학협력단 | 마커를 이용하여 야외에서 작업 영역을 설정할 수 있는 잔디 깎기 시스템 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3223101B1 (en) | 2021-07-21 |
| JP6243944B2 (ja) | 2017-12-06 |
| US20170269604A1 (en) | 2017-09-21 |
| CN107203207B (zh) | 2020-07-28 |
| CN107203207A (zh) | 2017-09-26 |
| US10067511B2 (en) | 2018-09-04 |
| EP3223101A1 (en) | 2017-09-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6243944B2 (ja) | 無人走行作業車 | |
| JP6280147B2 (ja) | 無人走行作業車 | |
| JP6235640B2 (ja) | 無人走行作業車 | |
| CN104714547B (zh) | 带有相机的自主园林车辆 | |
| US20190344803A1 (en) | Travel assistance device and computer program | |
| KR100901311B1 (ko) | 자율이동 플랫폼 | |
| US20100053593A1 (en) | Apparatus, systems, and methods for rotating a lidar device to map objects in an environment in three dimensions | |
| KR102056147B1 (ko) | 자율주행차량을 위한 거리 데이터와 3차원 스캔 데이터의 정합 방법 및 그 장치 | |
| CN111213153A (zh) | 目标物体运动状态检测方法、设备及存储介质 | |
| JP4154980B2 (ja) | 移動体周辺監視装置 | |
| US20200366815A1 (en) | Environment acquisition system | |
| CN114322980A (zh) | 获取位置坐标及绘制电子地图的方法、计算机可读存储介质和自主作业设备 | |
| JP2004203068A (ja) | 移動体周辺監視装置 | |
| CN112513931A (zh) | 用于创建单视角合成图像的系统和方法 | |
| KR101040528B1 (ko) | 지형감지 센서조립체 및 이를 구비하는 자율이동 플랫폼 | |
| US11892850B2 (en) | Autonomous work machine, method of controlling the same, and storage medium | |
| EP3796257A1 (en) | Estimation device, estimation method, and computer program product | |
| JP2020064029A (ja) | 移動体制御装置 | |
| CN111897337A (zh) | 一种机器人沿边行走时的避障控制方法及其控制系统 | |
| KR101487681B1 (ko) | 로봇 주행경로 가이드장치 | |
| EP4478298A1 (en) | Object position detection device | |
| JP2024075351A (ja) | 障害物マップ作成システム、障害物マップ作成方法及び障害物検知システム | |
| JP2025054923A (ja) | 除雪機用表示装置、表示方法およびプログラム | |
| CN116804876A (zh) | 位置确定系统和搭载有位置确定系统的移动体 | |
| CN116841284A (zh) | 关于栅格地图的拟合线段修正方法、机器人及芯片 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171013 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171110 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6243944 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |