(57)【要約】  自律走行作業車両１の制御装置３０と通信装置１１０を介して通信可能な遠隔操作装置１１２に、通信装置１１１と制御装置１１９と表示装置１１３と前方と後方を撮影するカメラ４２Ｆ・４２Ｒとを備え、該表示装置１１３には、少なくとも前記自律走行作業車両１を操作する遠隔操作領域１１３Ａと、前記カメラ４２Ｆ・４２Ｒにより撮影した映像を表示する周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃが設けられ、前記周辺画像領域１１３Ｂには前方画面と後方画面とが設けられる。
2016017367.tif 000002
【特許請求の範囲】
【請求項１】
衛星測位システムを利用して、設定した走行経路に沿って自動的に走行及び作業を可能とする自律走行作業車両の制御装置と、無線により前記制御装置に接続される通信装置を介して通信可能な遠隔操作装置において、該遠隔操作装置には通信装置と制御装置と表示装置を備え、該表示装置には、少なくとも前記自律走行作業車両を操作する遠隔操作領域と、前記自律走行作業車両に取り付けたカメラにより撮影した映像を表示する周辺画像領域とを備えることを特徴とする遠隔操作装置。
【請求項２】
前記表示装置には、前記遠隔操作領域と前記周辺画像領域とに加えて、自律走行作業車両が作業を行う圃場マップや走行経路や現在の位置や作業済位置を表示する作業状態表示領域とを表示可能とすることを特徴とする請求項１に記載の遠隔操作装置。
【請求項３】
前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域とは左右または上下に分割して同時に表示可能とされることを特徴とする請求項１または請求項２に記載の遠隔操作装置。
【請求項４】
前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域の表示位置、及び、複数表示または全画面表示の選択は任意に変更可能とされることを特徴とする請求項２または請求項３に記載の遠隔操作装置。
【請求項５】
前記自律走行作業車両には、前方と後方を撮影するカメラが取り付けられ、前記遠隔操作装置の表示装置には、前記カメラで撮影した自律走行作業車両の前方の映像を表示する前方画面と、後方の映像を表示する後方画面が設けられ、前記表示装置は、前方画面と後方画面の二つ表示と、進行方向のみ表示する一つ表示とに切替可能に構成されることを特徴とする請求項１に記載の遠隔操作装置。
【請求項６】
前記表示装置を一つ表示に切り替えた場合、および、前記上下の二つ表示の場合、自律走行作業車両が設定走行経路に沿って走行し、進行方向が前後切り換わる設定時間前に、表示装置の画面が予定進行方向に合わせて切り替えられることを特徴とする請求項５に記載の遠隔操作装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自律走行する無人の自律走行作業車両の遠隔操作装置に関し、遠隔操作装置に備える表示装置の表示技術に関する。
【背景技術】
【０００２】
従来、トラクタに装着して作業を行う作業機と、携帯電話とを備え、作業機には携帯電話からの無線操作信号を受信する受信部と、受信した操作信号に基づき出力器を制御する制御部とを有し、携帯電話には操作ボタンと操作画面が設けられ、操作ボタンにより操作可能とした技術が公知となっている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１２０５３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
前記技術においては、携帯電話で操作できるのは、トラクタに装着された作業機のみ遠隔操作可能であり、トラクタを遠隔操作できるものではなかった。近年、トラクタを無人で走行させ、遠隔操作できるようになってきている。しかし、遠隔操作装置の表示される画面はエンジンの回転数や作業時間等であり、前方や作業の状態の映像等は表示できず、操作しながら確認もできず、作業に必要な情報を表示できるものではなかった。【０００５】
本発明は以上の如き状況に鑑みてなされたものであり、遠隔操作装置に備える表示装置に、周辺の映像や作業状態や操作ボタン等を表示できる遠隔操作装置を提供しようとする。
【課題を解決するための手段】
【０００６】
本発明の解決しようとする課題は以上の如くであり、次にこの課題を解決するための手段を説明する。
即ち、本発明は、衛星測位システムを利用して、設定した走行経路に沿って自動的に走行及び作業を可能とする自律走行作業車両の制御装置と、無線により前記制御装置に接続される通信装置を介して通信可能な遠隔操作装置において、該遠隔操作装置には通信装置と制御装置と表示装置を備え、該表示装置には、少なくとも前記自律走行作業車両を操作する遠隔操作領域と、前記自律走行作業車両に取り付けたカメラにより撮影した映像を表示する周辺画像領域とを備えるものである。【０００７】
本発明は、前記表示装置には、前記遠隔操作領域と前記周辺画像領域とに加えて、自律走行作業車両が作業を行う圃場マップや走行経路や現在の位置や作業済位置を表示する作業状態表示領域とを表示可能とするものである。
本発明は、前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域とは左右または上下に分割して同時に表示可能とされるものである。
本発明は、前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域の表示位置、及び、複数表示または全画面表示の選択は任意に変更可能とされるものである。【０００８】
本発明は、前記自律走行作業車両には、前方と後方を撮影するカメラが取り付けられ、前記遠隔操作装置の表示装置には、前記カメラで撮影した自律走行作業車両の前方の映像を表示する前方画面と、後方の映像を表示する後方画面が設けられ、前記表示装置は、前方画面と後方画面の二つ表示と、進行方向のみ表示する一つ表示とに切替可能に構成されるものである。
本発明は、前記表示装置を一つ表示に切り替えた場合、および、前記上下の二つ表示の場合、自律走行作業車両が設定走行経路に沿って走行し、進行方向が前後切り換わる設定時間前に、表示装置の画面が予定進行方向に合わせて切り替えられるものである。
【発明の効果】
【０００９】
以上のような手段を用いることにより、一つの遠隔操作装置（操作端末）により、必要な画面を一つまたは複数表示でき、遠隔操作装置により自律走行作業車両を容易に操作でき、遠隔操作装置の表示装置は見やすい位置に画面を選択して配置して表示することができる。
【図面の簡単な説明】
【００１０】
【図１】自律走行作業車両を遠隔操作装置で操作する概略側面図。
【図２】制御ブロック図。
【図３】自律走行作業車両と随伴走行作業車両とによる併走作業時の状態を示す図。
【図４】遠隔操作装置の表示装置を示す図。
【図５】表示装置の表示画面を入れ替えた状態を示す図。
【図６】周辺画像領域に一つの画面を表示した状態を示す図。
【図７】周辺画像領域の前方画面と後方画面を上下入れ替えた状態を示す図。
【図８】遠隔操作装置の他の表示装置を示す図。
【図９】自動走行開始ボタンを押した後の第二操作画面を示す図。
【図１０】走行速度変更ボタンを押した後の第二操作画面を示す図。
【図１１】エンジン回転数変更ボタンを押した後の第二操作画面を示す図。
【図１２】作業機高さ変更ボタンを押した後の第二操作画面を示す図。
【発明を実施するための形態】
【００１１】
無人で自動走行可能な自律走行作業車両１、及び、この自律走行作業車両１に随伴してオペレータが搭乗して操向操作する随伴走行作業車両１００をトラクタとし、自律走行作業車両１及び随伴走行作業車両１００に装着される作業機としてロータリ耕耘装置２４が装着された実施形態について説明する。但し、作業車両はトラクタに限定するものではなく、コンバイン等でもよく、また、作業機はロータリ耕耘装置２４に限定するものではなく、施肥播種機や草刈機や薬剤散布機や消毒機や収穫機等であってもよい。
【００１２】
図１、図２において、自律走行作業車両１となるトラクタの全体構成について説明する。ボンネット２内にエンジン３が内設され、該ボンネット２の後部のキャビン１１内にダッシュボード１４が設けられ、ダッシュボード１４上に操向操作手段となるステアリングハンドル４が設けられている。該ステアリングハンドル４の回動により操舵装置を介して前輪９・９の向きが回動される。自律走行作業車両１の操舵方向は操向センサ２０により検知される。操向センサ２０はロータリエンコーダ等の角度センサからなり、前輪９の回動基部に配置される。但し、操向センサ２０の検知構成は限定するものではなく操舵方向が認識されるものであればよく、ステアリングハンドル４の回動を検知したり、パワーステアリングの作動量を検知してもよい。操向センサ２０により得られた検出値は制御装置３０に入力される。制御装置３０はＣＰＵ（中央演算処理装置）やＲＡＭやＲＯＭ等の記憶装置３０ｍやインターフェース等を備え、記憶装置３０ｍには自律走行作業車両１を動作させるためのプログラムやデータ等が記憶される。
【００１３】
前記ステアリングハンドル４の後方に運転席５が配設され、運転席５下方にミッションケース６が配置される。ミッションケース６の左右両側にリアアクスルケース８・８が連設され、該リアアクスルケース８・８には車軸を介して後輪１０・１０が支承される。エンジン３からの動力はミッションケース６内の変速装置（主変速装置や副変速装置）により変速されて、後輪１０・１０を駆動可能としている。変速装置は例えば油圧式無段変速装置で構成して、可変容量型の油圧ポンプの可動斜板をモータ等の変速手段４４により作動させて変速可能としている。変速手段４４は制御装置３０と接続されている。後輪１０の回転数は車速センサ２７により検知され、走行速度として制御装置３０に入力される。但し、車速の検知方法や車速センサ２７の配置位置は限定するものではない。
【００１４】
ミッションケース６内にはＰＴＯクラッチやＰＴＯ変速装置が収納され、ＰＴＯクラッチはＰＴＯ入切手段４５により入り切りされ、ＰＴＯ入切手段４５は制御装置３０と接続され、ＰＴＯ軸への動力の断接を制御可能としている。
【００１５】
前記エンジン３を支持するフロントフレーム１３にはフロントアクスルケース７が支持され、該フロントアクスルケース７の両側に前輪９・９が支承され、前記ミッションケース６からの動力が前輪９・９に伝達可能に構成している。前記前輪９・９は操舵輪となっており、ステアリングハンドル４の回動操作により回動可能とするとともに、操舵装置の駆動手段となるパワステシリンダからなる操舵アクチュエータ４０により前輪９・９が左右操舵回動可能となっている。操舵アクチュエータ４０は制御装置３０と接続され、自動走行手段により制御されて駆動される。
【００１６】
制御装置３０にはエンジン回転制御手段となるエンジンコントローラ６０が接続され、エンジンコントローラ６０にはエンジン回転数センサ６１や水温センサや油圧センサ等が接続され、エンジンの状態を検知できるようにしている。エンジンコントローラ６０では設定回転数と実回転数から負荷を検出し、過負荷とならないように制御するとともに、後述する遠隔操作装置１１２にエンジン３の状態を送信して表示装置１１３で表示できるようにしている。
【００１７】
また、ステップ下方に配置した燃料タンク１５には燃料の液面を検知するレベルセンサ２９が配置されて制御装置３０と接続され、自律走行作業車両１のダッシュボードに設ける表示手段４９には燃料の残量を表示する燃料計が設けられ制御装置３０と接続されている。そして、制御装置３０から遠隔操作装置１１２に燃料残量に関する情報が送信されて、遠隔操作装置１１２の表示装置１１３に燃料残量と作業可能時間が表示可能とされる。
【００１８】
前記ダッシュボード１４上にはエンジンの回転計や燃料計や油圧等や異常を示すモニタや設定値等を表示する表示手段４９が配置されている。
【００１９】
また、トラクタ機体後方に作業機装着装置２３を介して作業機としてロータリ耕耘装置２４が昇降自在に装設させている。前記ミッションケース６上に昇降シリンダ２６が設けられ、該昇降シリンダ２６を伸縮させることにより、作業機装着装置２３を構成する昇降アームを回動させてロータリ耕耘装置２４を昇降できるようにしている。昇降シリンダ２６は昇降アクチュエータ２５の作動により伸縮され、昇降アクチュエータ２５は制御装置３０と接続されている。
【００２０】
制御装置３０には衛星測位システムを構成する移動通信機３３が接続されている。移動通信機３３には移動ＧＰＳアンテナ３４とデータ受信アンテナ３８が接続され、移動ＧＰＳアンテナ３４とデータ受信アンテナ３８は前記キャビン１１上に設けられる。該移動通信機３３には、位置算出手段を備えて緯度と経度を制御装置３０に送信し、現在位置を把握できるようにしている。なお、ＧＰＳ（米国）に加えて準天頂衛星(日本)やグロナス衛星（ロシア）等の衛星測位システム（ＧＮＳＳ）を利用することで精度の高い測位ができるが、本実施形態ではＧＰＳを用いて説明する。
【００２１】
自律走行作業車両１は、機体の姿勢変化情報を得るためにジャイロセンサ３１、および進行方向を検知するために方位センサ３２を具備し制御装置３０と接続されている。但し、ＧＰＳの位置計測から進行方向を算出できるので、方位センサ３２を省くことができる。
ジャイロセンサ３１は自律走行作業車両１の機体前後方向の傾斜（ピッチ）の角速度、機体左右方向の傾斜（ロール）の角速度、および旋回（ヨー）の角速度、を検出するものである。該三つの角速度を積分計算することにより、自律走行作業車両１の機体の前後方向および左右方向への傾斜角度、および旋回角度を求めることが可能である。ジャイロセンサ３１の具体例としては、機械式ジャイロセンサ、光学式ジャイロセンサ、流体式ジャイロセンサ、振動式ジャイロセンサ等が挙げられる。ジャイロセンサ３１は制御装置３０に接続され、当該三つの角速度に係る情報を制御装置３０に入力する。
【００２２】
方位センサ３２は自律走行作業車両１の向き（進行方向）を検出するものである。方位センサ３２の具体例としては磁気方位センサ等が挙げられる。方位センサ３２は制御装置３０に接続され、機体の向きに係る情報を制御装置３０に入力する。
【００２３】
こうして制御装置３０は、上記ジャイロセンサ３１、方位センサ３２から取得した信号を姿勢・方位演算手段により演算し、自律走行作業車両１の姿勢（向き、機体前後方向及び機体左右方向の傾斜、旋回方向）を求める。
【００２４】
次に、自律走行作業車両１の位置情報をＧＰＳ（グローバル・ポジショニング・システム）を用いて取得する方法について説明する。
ＧＰＳは、元来航空機・船舶等の航法支援用として開発されたシステムであって、上空約二万キロメートルを周回する二十四個のＧＰＳ衛星（六軌道面に四個ずつ配置）、ＧＰＳ衛星の追跡と管制を行う管制局、測位を行うための利用者の通信機で構成される。
ＧＰＳを用いた測位方法としては、単独測位、相対測位、ＤＧＰＳ（ディファレンシャルＧＰＳ）測位、ＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位など種々の方法が挙げられ、これらいずれの方法を用いることも可能であるが、本実施形態では測定精度の高いＲＴＫ−ＧＰＳ測位方式を採用し、この方法について図１、図２より説明する。
【００２５】
ＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位は、位置が判っている基準局と、位置を求めようとする移動局とで同時にＧＰＳ観測を行い、基準局で観測したデータを無線等の方法で移動局にリアルタイムで送信し、基準局の位置成果に基づいて移動局の位置をリアルタイムに求める方法である。
【００２６】
本実施形態においては、自律走行作業車両１に移動局となる移動通信機３３と移動ＧＰＳアンテナ３４とデータ受信アンテナ３８が配置され、基準局となる固定通信機３５と固定ＧＰＳアンテナ３６とデータ送信アンテナ３９が圃場の作業の邪魔にならない所定位置に配設される。本実施形態のＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位は、基準局および移動局の両方で位相の測定（相対測位）を行い、基準局の固定通信機３５で測位したデータをデータ送信アンテナ３９からデータ受信アンテナ３８に送信する。
【００２７】
自律走行作業車両１に配置された移動ＧＰＳアンテナ３４はＧＰＳ衛星３７・３７・・・からの信号を受信する。この信号は移動通信機３３に送信され測位される。そして、同時に基準局となる固定ＧＰＳアンテナ３６でＧＰＳ衛星３７・３７・・・からの信号を受信し、固定通信機３５で測位し移動通信機３３に送信し、観測されたデータを解析して移動局の位置を決定する。こうして得られた位置情報は制御装置３０に送信される。
【００２８】
こうして、この自律走行作業車両１における制御装置３０は自動走行させる自動走行手段を備えて、自動走行手段はＧＰＳ衛星３７・３７・・・から送信される電波を受信して移動通信機３３において設定時間間隔で機体の位置情報を求め、ジャイロセンサ３１及び方位センサ３２から機体の変位情報および方位情報を求め、これら位置情報と変位情報と方位情報に基づいて機体が予め設定した設定経路Ｒに沿って走行するように、操舵アクチュエータ４０、変速手段４４、昇降アクチュエータ２５、ＰＴＯ入切手段４５、エンジンコントローラ６０等を制御して自動走行し自動で作業できるようにしている。なお、作業範囲となる圃場Ｈの外周の位置情報も周知の方法によって予め設定され、記憶装置３０ｍに記憶されている。
【００２９】
また、自律走行作業車両１には障害物センサ４１が配置されて制御装置３０と接続され、障害物に当接しないようにしている。例えば、障害物センサ４１はレーザセンサや超音波センサで構成して機体の前部や側部や後部に配置して制御装置３０と接続し、機体の前方や側方や後方に障害物があるかどうかを検出し、障害物が設定距離以内に近づくと走行を停止させるように制御する。
【００３０】
また、自律走行作業車両１には前方を撮影するカメラ４２Ｆや後方の作業機や作業後の状態を撮影するカメラ４２Ｒが搭載され制御装置３０と接続されている。カメラ４２Ｆ・４２Ｒは本実施形態ではキャビン１１のルーフの前部上と後部上に配置しているが、配置位置は限定するものではなく、キャビン１１内の前部上と後部上や一つのカメラ４２を機体中心に配置して鉛直軸を中心に回転させて周囲を撮影しても、複数のカメラ４２を機体の四隅に配置して機体周囲を撮影する構成であってもよい。カメラ４２Ｆ・４２Ｒで撮影された映像は随伴走行作業車両１００に備えられた遠隔操作装置１１２の表示装置１１３に表示され、その画面については後述する。
【００３１】
遠隔操作装置１１２は前記自律走行作業車両１の走行経路Ｒを設定したり、自律走行作業車両１を遠隔操作したり、自律走行作業車両１の走行状態や作業機の作動状態を監視したり、作業データを記憶したりするものであり、制御装置（ＣＰＵやメモリ）１１９や通信装置１１１や表示装置１１３等を備える。
【００３２】
有人走行車両となる随伴走行作業車両１００はオペレータが乗車して運転操作するとともに、随伴走行作業車両１００に遠隔操作装置１１２を搭載して自律走行作業車両１を操作可能としている。随伴走行作業車両１００の基本構成は自律走行作業車両１と略同じ構成であるので詳細な説明は省略する。なお、随伴走行作業車両１００にはＧＰＳ用の移動通信機３３や移動ＧＰＳアンテナ３４を備える構成とすることも可能である。
【００３３】
遠隔操作装置１１２は、随伴走行作業車両１００及び自律走行作業車両１のダッシュボード等の操作部に着脱可能としている。遠隔操作装置１１２は随伴走行作業車両１００のダッシュボードに取り付けたまま操作することも、随伴走行作業車両１００の外に持ち出して携帯して操作することも、自律走行作業車両１のダッシュボードに取り付けて操作可能としている。遠隔操作装置１１２は例えばノート型やタブレット型のパーソナルコンピュータで構成することができる。本実施形態ではタブレット型のコンピュータで構成している。
【００３４】
さらに、遠隔操作装置１１２と自律走行作業車両１は無線で相互に通信可能に構成しており、自律走行作業車両１と遠隔操作装置１１２には通信するための通信装置１１０・１１１がそれぞれ設けられている。更に、遠隔操作装置１１２は随伴走行作業車両１００の制御装置１３０と通信装置１３３・１１１を介して通信可能としている。通信装置１１１は遠隔操作装置１１２に一体的に構成されている。通信手段は例えばＷｉＦｉ等の無線ＬＡＮで相互に通信可能に構成されている。遠隔操作装置１１２は画面に触れることで操作可能なタッチパネル式の操作画面とした表示装置１１３を筐体表面に設け、筐体内に通信装置１１１やＣＰＵや記憶装置やバッテリ等を収納している。
【００３５】
このような構成において、図３に示すような圃場Ｈに設定走行経路Ｒを予め設定して記憶装置３０ｍに記憶し、自律走行作業車両１が設定走行経路Ｒに沿って走行させることができる。なお、前記圃場Ｈの位置を定めたり、衛星測位システムを利用して走行したり、走行経路Ｒを設定したりするために地図データ（情報）が参照されるが、この地図データは、インターネットに公開されている地図データや地図メーカ等が配信している地図データやカーナビ地図データ等が用いられる。
そして、自律走行作業車両１と随伴走行作業車両１００のロータリ耕耘装置の作業幅を一部重複させて、随伴走行作業車両１００が自律走行作業車両１の斜め後方を走行して併走しながら作業を行う。但し、随伴走行作業車両１００は自律走行作業車両１の後方を走行して別の作業を行う作業形態とすることもでき、作業形態は限定するものではない。
【００３６】
前記遠隔操作装置１１２の表示装置１１３には、前記カメラ４２Ｆ・４２Ｒで撮影した映像や自律走行作業車両１の状態や作業の状態やＧＰＳに関する情報を通信装置１１０・１１１を介して制御装置１１９に送信し、その映像や情報や操作画面等を表示できるようにしており、オペレータは自律走行作業車両１を監視しながら遠隔操作装置１１２を操作できるようにしている。
即ち、表示装置１１３は、タッチ操作式の画面としており、表示方法や表示位置やタッチ操作に対する出力等は制御装置１１９で制御される。表示装置１１３の表示画面は、図４に示すように、縦（上下）方向、または、横（左右）方向に複数の領域に分割可能としており、その領域には、少なくとも前記自律走行作業車両１を操作する遠隔操作領域１１３Ａと、前記自律走行作業車両１に取り付けたカメラ４２Ｆ・４２Ｒにより撮影した映像を表示する周辺画像領域１１３Ｂとが設けられている。
【００３７】
遠隔操作領域１１３Ａは、自律走行作業車両１の走行や操舵や作業機を操作するための操作部材(ボタン)を配置する画面であり、本実施形態では、走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄ、エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄ、自動走行開始ボタン２０３、自動走行停止ボタン２０４、非常停止ボタン２０５、インターネット接続ボタン２０６、作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄ、ＰＴＯオン／オフボタン２０８が配置される。但し、前記操作ボタンの種類は限定するものではなく、ブレーキボタンやＰＴＯ変速ボタンや操舵ボタンやホーンボタンや設定ボタン等を設けることも可能である。また、操作しない（不要）ならばそのボタンを削除することも可能である。また、燃料残量やエンジンの回転数などを表示するメータを配置することもできる。そして、遠隔操作領域１１３Ａ内でのこれらのボタンの配置位置や形状も限定するものではなく、任意形状に変更したり、選択したり、位置変更したりすることもできる。
【００３８】
前記走行速度上げボタン２０１Ｕはタッチすることで変速手段４４を作動させて１段階増速させるものであり、走行速度下げボタン２０１Ｄはタッチすることで変速手段４４を作動させて１段階減速させるものである。なお、この操作時に変速段の名前と数字をポップアップで表示したり、画面を変速用画面に切り換えて、他の画面は閉じるようにしてもよい。
【００３９】
前記エンジン回転数上げボタン２０２Ｕはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を増加させてエンジン回転数を増加させるものであり、エンジン回転数下げボタン２０２Ｄはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を減少させてエンジン回転数を減少させるものである。なお、この操作でエンジン回転数をポップアップでデジタルまたはアナログで表示したり、画面をエンジン回転数用画面に切り換えてもよい。また、前記走行速度上げボタン２０１Ｕと前記走行速度下げボタン２０１Ｄと前記エンジン回転数上げボタン２０２Ｕと前記エンジン回転数下げボタン２０２Ｄはタッチし続けることで、上げ量または下げ量を連続的に速く増減することができる。
【００４０】
自動走行開始ボタン２０３はタッチすることで予め設定しておいた走行経路Ｒを自動走行しながら作業を開始し、自動走行停止ボタン２０４をタッチすることで自動走行及び作業を停止する。非常停止ボタン２０５はタッチすることでエンジンを停止し走行や作業を停止して危険な状態に陥ることを防止する。非常停止ボタン２０５は認識しやすく容易に操作できるように画面中央で比較的大きく、目立つ色で表示される。インターネット接続ボタン２０６はタッチすることでインターネットに接続し予め設定したサイトに入り表示する。
【００４１】
作業機上昇ボタン２０７Ｕはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を上昇でき、作業機下降ボタン２０７Ｄはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を下降する。なお、この操作で作業機（ロータリ耕耘装置２４）の高さをポップアップでデジタルまたはアナログで表示したり、画面を作業機昇降用に切り換えてもよい。ＰＴＯオン／オフボタン２０８はタッチすることでＰＴＯ入切手段４５を作動させて、ＰＴＯ入り、または、ＰＴＯ切りに切り換える。こうして、画面を見ながら指でタッチするだけで離れた位置で容易に自律走行作業車両１を操作することができる。なお、走行速度やエンジン回転数や作業機高さの設定は図示しない別の画面で設定される。
【００４２】
前記遠隔操作領域１１３Ａに配置される複数のボタンのうち、緊急時に即座に応答してほしい非常停止ボタン２０５以外の走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄ、エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄ、作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄ、自動走行開始ボタン２０３、自動走行停止ボタン２０４、インターネット接続ボタン２０６、ＰＴＯオン／オフボタン２０８は一回の操作では作動せず、複数回操作しないと次の操作画面に遷移して作動できないようにして、誤操作が生じないように構成することもできる。この場合、初期画面は図８のような画面となる。
【００４３】
つまり、前記遠隔操作領域１１３Ａの略中央に配置される自動走行開始ボタン２０３は、予め設定しておいた走行経路Ｒを自動走行しながら作業を行うために開始するためのボタンであり、自動走行開始ボタン２０３を押す第一操作（タッチする）に加えて、更に第二操作をしないと自動走行制御モードに遷移しないようにしている。第二操作が行われると、自動走行制御モードに移行し、制御装置３０によって、自律走行作業車両１の自動走行制御が行われる。
【００４４】
第二操作としては、自動走行開始ボタン２０３を押す第一操作が行われると、別の確認画面に切り替わり、確認画面でもう一度操作するようにして次のモードに遷移するようにする。例えば、自動走行開始ボタン２０３を押すと図９に示すように、ＳＴＡＲＴボタン２０３ＡとＣＡＮＣＥＬボタン２０３Ｂが現れる。そして、ＳＴＡＲＴボタン２０３Ａをもう一度押すことにより、自動走行制御モードに遷移するようにするのである。自動走行制御モードに遷移すると元の図８の画面に戻る。押す位置を間違えた場合にはＣＡＮＣＥＬボタン２０３Ｂを押すことにより、元の図８の画面に戻る。但し、第二操作の画面は、図９の表示に限定するものではなく、「はい」、「いいえ」等の続行するか、取り消すかを選択して確認できるものであればよい。
【００４５】
また、前記第二操作の操作方法は別の操作に置き換えることができる。つまり、第二実施例として、自動走行開始ボタン２０１を長押しすると、自動走行制御モードに遷移するようにするのである。第二操作の第三実施例として、自動走行開始ボタン２０３を二回連続して押すと自動走行制御モードに遷移するようにしてもよい。第二操作の第四実施例として、自動走行開始ボタン２０３を押すと（第一操作）、自動走行開始ボタン２０３の色が変化し、更にもう一度押すと（第二操作）、自動走行制御モードに遷移するようにしてもよい。第二操作の第五実施例として、自動走行開始ボタン２０３を押し（第一操作）ながらスライドさせる（第二操作）と自動走行制御モードに遷移するようにしてもよい。なお、この第二操作を行い自動走行制御モードに遷移すると、オペレータが認識しやすいように「自動走行制御モードに遷移しました」のような画面が表示されるようにしてもよい。また、第一操作が行われると、全画面表示に切り替わるように制御してもよい。
【００４６】
上記のように、表示装置１１３には前記自律走行作業車両１による自動走行開始ボタン２０３が表示され、該自動走行開始ボタン２０３の第一操作に加えて、更に第二操作をしないと自動走行制御モードに遷移しないようにしたので、意図せず表示装置１１３の画面に触れたり、操作間違いをしたことで、自動走行制御モードに遷移して、自律走行作業車両１が不意に走行を開始することがなく、事故等が発生することを防止できる。
【００４７】
また、前記自動走行が開始された後、前記自動走行停止ボタン２０４は、自動走行停止ボタン２０４をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると自動走行及び作業を停止する。インターネット接続ボタン２０６はインターネット接続ボタン２０６をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとインターネットに接続し予め設定したサイトに入り表示する。ＰＴＯオン／オフボタン２０８は、ＰＴＯオン／オフボタン２０８をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとＰＴＯ入切手段４５を作動させて、ＰＴＯ入りとし、または、ＰＴＯ入りの状態で、ＰＴＯオン／オフボタン２０８をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとＰＴＯ切りに切り換える。
【００４８】
前記自動走行停止ボタン２０４やインターネット接続ボタン２０６やＰＴＯオン／オフボタン２０８も、前記自動走行開始ボタン２０３の操作と同様に、第一操作が行われると別の確認画面（はい、いいえの二者選択画面）に切り替わる代わりに、更に第二実施例〜第五実施例のような第二操作をしないと次のモードに遷移しないように制御することも可能である。
【００４９】
前記自動走行が開始された後において、遠隔操作領域１１３Ａに配置される他のボタンの操作について説明する。
前記走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄは図８に示すように、一つの走行速度変更ボタン２０１とし、該走行速度変更ボタン２０１をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると変速手段４４を作動させて１段階変速させるものである。走行速度変更ボタン２０１をタッチする第一操作が行われると、本実施形態では、図１０に示す、増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二車速変更ボタンとしての走行速度上げボタン２０１Ｕと走行速度下げボタン２０１Ｄが表示されるようにしている。走行速度上げボタン２０１Ｕをタッチすることで変速手段４４を作動させて１段階増速させ、走行速度下げボタン２０１Ｄをタッチすることで変速手段４４を作動させて１段階減速させる。なお、第一操作で全画面表示に切り替わり、第二操作時に変速段の名前と数字をポップアップで表示したり、画面を変速用画面に切り換えてもよい。
【００５０】
前記エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄは図８に示すように、一つのエンジン回転数変更ボタン２０２とし、該エンジン回転数変更ボタン２０２をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとアクセルアクチュエータを作動させて燃料噴射量を変更する。エンジン回転数変更ボタン２０２をタッチする第一操作が行われると、本実施形態では、図１１に示す増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二エンジン回転数変更ボタンとなるエンジン回転数上げボタン２０２Ｕとエンジン回転数下げボタン２０２Ｄが表示される。エンジン回転数上げボタン２０２Ｕをタッチすることでアクセルアクチュエータを作動させて燃料噴射量を増加させてエンジン回転数を増加させ、エンジン回転数下げボタン２０２Ｄはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を減少させてエンジン回転数を減少させる。なお、第一操作で全画面表示に切り替わり、第二操作時にエンジン回転数をポップアップでデジタルまたはアナログで表示したり、画面をエンジン回転数用画面に切り換えてもよい。また、前記走行速度上げボタン２０１Ｕと前記走行速度下げボタン２０１Ｄと前記エンジン回転数上げボタン２０２Ｕと前記エンジン回転数下げボタン２０２Ｄはタッチし続けることで、上げ量または下げ量を速くすることができる。
【００５１】
前記作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄは図８に示すように、一つの作業機高さ変更ボタン２０７とし、該作業機高さ変更ボタン２０７をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると昇降アクチュエータ２５を作動させてロータリ耕耘装置２４を昇降する。作業機高さ変更ボタン２０７をタッチする第一操作が行われると、本実施形態では、図１２に示す増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二作業機高さ変更ボタンとなる作業機上昇ボタン２０７Ｕと作業機下降ボタン２０７Ｄが表示される。作業機上昇ボタン２０７Ｕはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を上昇でき、作業機下降ボタン２０７Ｄはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を下降する。なお、第一操作で全画面表示に切り替わり、第二操作時に作業機（ロータリ耕耘装置２４）の高さをポップアップでデジタルまたはアナログで表示したり、画面を作業機昇降用に切り換えてもよい。
【００５２】
前記周辺画像領域１１３Ｂはカメラ４２Ｆで撮影した機体前方の映像を表示する前方画面２１０と、カメラ４２Ｒで撮影した機体後方の映像を表示する後方画面２１１とからなり、周辺画像領域１１３Ｂにおける上下方向（縦方向）に配置して二つ表示としている。前記後ろ側のカメラ４２Ｒで撮影する映像は、トラクタと作業機の間の装着部分を撮影するものであっても、作業機の作動状態を撮影するものであっても、作業機から後方の作業仕上がり状態を撮影するものであってもよい。この撮影方向を変更するために、カメラ４２Ｆ・４２Ｒの支持部には角度変更手段を設けてもよい。また、アクチュエータで変更できるようにし、遠隔操作装置１１２で調整できるように構成することもできる。また、カメラ４２の台数は限定するものではなく、３台以上配置して、それぞれの映像を周辺画像領域１１３Ｂで表示してもよい。
【００５３】
前記後方画面２１１に写し出される映像は鏡像（左右逆）としており、オペレータが自律走行作業車両１の進行方向と同じ向きで操作しているときに違和感が生じないようにしている。なお、切替手段を設けて、オペレータが随伴走行作業車両１００に乗らず、自律走行作業車両１の前方で対向して監視・操作する場合には、前方画面２１０を鏡像、後方画面２１１を実像とすることも可能である。
【００５４】
また、周辺画像領域１１３Ｂにおいて、前方画面２１０と後方画面２１１の二つを表示させており、自律走行作業車両１が自律走行（自動走行）しているときに、前後の進行方向を変更する場合、前方画面２１０と後方画面２１１の上下表示配置を入れ替えるようにしている。例えば、前進しているときは、図４に示すように、上側に前方画面２１０、下側に後方画面２１１を配置し、前進から後進に切り換えるときには、上側に後方画面２１１、下側に前方画面２１０を表示するのである。
【００５５】
この表示切替は実際に進行方向を変更する少し前に表示が切り替えられる。つまり、制御装置３０の記憶装置３０ｍには、設定走行経路Ｒが記憶されており、その設定走行経路Ｒにおいて前進から後進、または、後進から前進に前後進切換を行うタイミングや位置はプログラムされているので、進行方向が前後切り換わる設定時間前に、表示装置１１３の画面が予定進行方向に合わせて切り替えられる。具体的には、前後進切換命令を発する設定時間前に（または前後進切換位置の設定距離手前で）上下の表示切替を行う。この画面の表示切替は、例えば、自律走行作業車両１の前後進切換アクチュエータを作動させる数秒前に（または走行を停止した時）行う。このように表示装置１１３を制御することによって、遠隔操作装置１１２を操作しているオペレータは、画面が切り替わることで自律走行作業車両１が前後進行方向を変更することを認識でき、もし、進行方向と反対側に障害物が存在するような場合には、進行する前に自律走行作業車両１を停止する操作ができ、事故を未然に防ぐことができるのである。
【００５６】
また、周辺画像領域１１３Ｂにおいて、二つ表示することなく、図６に示すように、進行方向のみ表示する一つ画面とすることもできる。つまり、前進するときは前方画面２１０のみ表示し、後進するときは後方画面２１１のみ表示する。この場合においても、前記同様に、前後進を切り替える少し手前で、前方画面２１０と後方画面２１１の表示切替が行われる。但し、周辺画像領域１１３Ｂで１つの表示とする場合において、通常は進行方向のみ表示するが、作業後の仕上がり状態を確認したい場合があるので、後方画面２１１に切り換えられるように切替ボタンを設けてもよく、または、ダブルタップ等の操作で画面を切り替えるようにしてもよい。
【００５７】
前記表示装置１１３には、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂとに加えて、自律走行作業車両１が作業を行う圃場のマップや設定走行経路Ｒや現在の位置や作業済位置等を表示する作業状態表示領域１１３Ｃを表示可能としている。作業状態表示領域１１３Ｃでは、地図に設定走行経路を重ね合わせた二次元表示としたり、三次元表示したり、俯瞰図で表示したりすることができる。また、これらを切り替えられように切替手段を設けてもよい。
【００５８】
また、周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃに表示される画面は、拡大・縮小可能に構成することもできる。例えば、周辺画像領域１１３Ｂの後方画面２１１で作業後の仕上がりをもっと精密に見たい場合には、画面を指２本の間隔を広げるようなピンチアウトの操作で拡大し、確認するようにしてもよい。また、作業状態表示領域１１３Ｃでは、隣の圃場や周囲の畦を確認したい場合等では、画面を指２本の間隔を狭めるようなピンチインの操作で縮小し、確認するようにしてもよい。また、表示画面をドラッグ操作して表示位置（撮影位置）を移動できるようにすることも可能である。
【００５９】
また、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃとは、左右または上下に分割して同時に表示可能とされるものである。つまり、図４の実施形態では、左側に周辺画像領域１１３Ｂ、中央に遠隔操作領域１１３Ａ、右側に作業状態表示領域１１３Ｃと左右に画面を３つ分割して同時に表示して、複数の表示装置を用意することなく一つの端末に集約して、随伴走行作業車両１００に乗車して操作するときの取付等が容易にでき、自律走行作業車両１の位置の確認や速度調節等の操作が画面を見ながら容易にできるようにしている。
【００６０】
また、中央に遠隔操作領域１１３Ａを配置し両側に周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃを配置することにより、自律走行作業車両１の非常停止や車速調整等安全上重要な操作ボタンが中央に配置され、見やすく操作が迅速に行える。なお、遠隔操作装置１１２を縦長として使用できるようにしている。つまり、表示装置１１３を上下３つに分割できるようにしている。また、この分割された状態で、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃの何れかの領域と領域の境界部分をドラッグして平行移動することで、表示領域を拡大または縮小して、見たい画面を拡大したり、必要でない画面を縮小したりできるようにすることもできるようにしている。
【００６１】
また、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃの表示位置は、任意に変更（入れ替え）可能として、使用者の好みに合わせたり使い易くしたりすることができる。つまり、遠隔操作領域１１３Ａと周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃは、使用者の好みや使いやすさ等を考慮して、自由に配置することができる。例えば、画面上の一部をドラッグして、図４から図５に示すように、遠隔操作領域１１３Ａを中央から左側に移動し、周辺画像領域１１３Ｂを右側に移動できるようにするのである。また、周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃを左側に上下２段に表示して、右側に遠隔操作領域１１３Ａを配置して表示するようにもできる。
【００６２】
また、複数表示または全画面表示の選択も任意に変更可能として、視認性や操作性を向上することができる。つまり、遠隔操作領域１１３Ａのみ全画面で表示して、ボタンを大きく表示させて操作間違いが生じし難くなるようにしたり、遠隔操作領域１１３Ａと作業状態表示領域１１３Ｃの二つを表示して、作業位置を確認しながら自律走行作業車両１を操作できるようにしている。
【産業上の利用可能性】
【００６３】
本発明は、自律走行可能とした建設機械や農用作業車等を遠隔操作可能とする遠隔操作装置に備えられる表示装置に利用可能である。
【符号の説明】
【００６４】
１      自律走行作業車両
３０    制御装置
４２Ｆ・４２Ｒ  カメラ
１１０・１１１  通信装置
１１２  遠隔操作装置
１１３  表示装置
１１３Ａ  遠隔操作領域
１１３Ｂ  周辺画像領域
１１３Ｃ  作業状態表示領域
１１９  制御装置
【図１】
2016017367.tif 000003
【図２】
2016017367.tif 000004
【図３】
2016017367.tif 000005
【図４】
2016017367.tif 000006
【図５】
2016017367.tif 000007
【図６】
2016017367.tif 000008
【図７】
2016017367.tif 000009
【図８】
2016017367.tif 000010
【図９】
2016017367.tif 000011
【図１０】
2016017367.tif 000012
【図１１】
2016017367.tif 000013
【図１２】
2016017367.tif 000014
【手続補正書】
【提出日】平成28年11月2日(2016.11.2)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
衛星測位システムを利用して、設定した走行経路に沿って自動的に走行及び作業を可能とする制御装置を備える自律走行作業車両と通信可能な遠隔操作装置において、
前記遠隔操作装置は、表示装置を備え、
前記表示装置は、少なくとも前記自律走行作業車両を操作する遠隔操作領域と、前記自律走行作業車両に取り付けたカメラにより撮影した映像を表示する周辺画像領域と、を備え、
前記遠隔操作領域には、前記自律走行作業車両のエンジン回転数を変更するエンジン回転数操作部が設けられ、
前記エンジン回転数操作部を長押しした場合、前記エンジン回転数操作部を長押ししていない場合に比べて、上げ量又は下げ量を速くすることができる
ことを特徴とする遠隔操作装置。
【請求項２】
前記自律走行作業車両には、進行方向を撮影する第１カメラと、前記進行方向とは反対方向を撮影する第２カメラとが取り付けられ、
前記周辺画像領域は、第１カメラで撮影した映像を表示する前方画面と第２カメラで撮影した映像を表示する後方画面とが設けられる二つ表示と、前記前方画面のみを表示する一つ表示と、で切替可能であり、
前記走行経路に沿って走行する前記自律走行作業車両の進行方向が切り換わる場合には、前記周辺画像領域における表示態様が予定進行方向に合わせて切り替えられる
ことを特徴とする請求項１に記載の遠隔操作装置。
【請求項３】
前記予定進行方向に合わせた前記周辺画像領域における表示態様の切り替えは、前記自律走行作業車両の進行方向が切り換わる時間よりも設定時間前に行われる
ことを特徴とする請求項２に記載の遠隔操作装置。
【請求項４】
前記遠隔操作領域には、前記自律走行作業車両を非常停止させる非常停止操作部を有し、
前記制御装置は、前記非常停止操作部に対する一回の操作に基づいて前記自律走行作業車両の走行を停止させる一方、前記エンジン回転数操作部に対する一回の操作に基づいて前記自律走行作業車両のエンジン回転数を変更しない
ことを特徴とする請求項１〜請求項３のいずれか一項に記載の遠隔操作装置。
【請求項５】
前記表示装置はさらに、前記走行経路を含む情報を表示する作業状態表示領域を備え、
前記表示装置は、第１領域と、第２領域と、第１領域と第２領域との間に設けられる第３領域に分割され、
前記周辺画像領域及び前記作業状態表示領域の一方は、第１領域に表示される一方、前記周辺画像領域及び前記作業状態表示領域の他方は、第２領域に表示されるとともに、前記遠隔操作領域は、第３領域に表示される
ことを特徴とする請求項１〜請求項４のいずれか一項に記載の遠隔操作装置。
【請求項６】
前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域の表示位置、及び、複数表示または全画面表示の選択は、任意に変更可能とされる
ことを特徴とする請求項５に記載の遠隔操作装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自律走行する無人の自律走行作業車両の遠隔操作装置に関し、遠隔操作装置に備える表示装置の表示技術に関する。
【背景技術】
【０００２】
従来、トラクタに装着して作業を行う作業機と、携帯電話とを備え、作業機には携帯電話からの無線操作信号を受信する受信部と、受信した操作信号に基づき出力器を制御する制御部とを有し、携帯電話には操作ボタンと操作画面が設けられ、操作ボタンにより操作可能とした技術が公知となっている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１２０５３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
前記従来技術においては、携帯電話で操作できるのは、トラクタに装着された作業機のみ遠隔操作可能であり、トラクタを遠隔操作できるものではなかった。近年、トラクタを無人で走行させ、遠隔操作できるようになってきている。しかし、遠隔操作装置の表示される画面はエンジンの回転数や作業時間等であり、前方や作業の状態の映像等は表示できず、操作しながら確認もできず、作業に必要な情報を表示できるものではなかった。
【０００５】
本発明は、以上の如き状況に鑑みてなされたものであり、遠隔操作装置に備える表示装置に、周辺の映像や作業状態や操作ボタン等を表示できる遠隔操作装置を提供しようとする。
【課題を解決するための手段】
【０００６】
本発明の解決しようとする課題は以上の如くであり、次にこの課題を解決するための手段を説明する。
【０００７】
請求項１においては、衛星測位システムを利用して、設定した走行経路に沿って自動的に走行及び作業を可能とする制御装置を備える自律走行作業車両と通信可能な遠隔操作装置において、前記遠隔操作装置は、表示装置を備え、前記表示装置は、少なくとも前記自律走行作業車両を操作する遠隔操作領域と、前記自律走行作業車両に取り付けたカメラにより撮影した映像を表示する周辺画像領域と、を備え、前記遠隔操作領域には、前記自律走行作業車両のエンジン回転数を変更するエンジン回転数操作部が設けられ、前記エンジン回転数操作部を長押しした場合、前記エンジン回転数操作部を長押ししていない場合に比べて、上げ量又は下げ量を速くすることができるものである。
【０００８】
請求項２においては、前記自律走行作業車両には、進行方向を撮影する第１カメラと、前記進行方向とは反対方向を撮影する第２カメラとが取り付けられ、前記周辺画像領域は、第１カメラで撮影した映像を表示する前方画面と第２カメラで撮影した映像を表示する後方画面とが設けられる二つ表示と、前記前方画面のみを表示する一つ表示と、で切替可能であり、前記走行経路に沿って走行する前記自律走行作業車両の進行方向が切り換わる場合には、前記周辺画像領域における表示態様が予定進行方向に合わせて切り替えられるものである。
【０００９】
請求項３においては、前記予定進行方向に合わせた前記周辺画像領域における表示態様の切り替えは、前記自律走行作業車両の進行方向が切り換わる時間よりも設定時間前に行われるものである。
【００１０】
請求項４においては、前記遠隔操作領域には、前記自律走行作業車両を非常停止させる非常停止操作部を有し、前記制御装置は、前記非常停止操作部に対する一回の操作に基づいて前記自律走行作業車両の走行を停止させる一方、前記エンジン回転数操作部に対する一回の操作に基づいて前記自律走行作業車両のエンジン回転数を変更しないものである。
【００１１】
請求項５においては、前記表示装置はさらに、前記走行経路を含む情報を表示する作業状態表示領域を備え、前記表示装置は、第１領域と、第２領域と、第１領域と第２領域との間に設けられる第３領域に分割され、前記周辺画像領域及び前記作業状態表示領域の一方は、第１領域に表示される一方、前記周辺画像領域及び前記作業状態表示領域の他方は、第２領域に表示されるとともに、前記遠隔操作領域は、第３領域に表示されるものである。
【００１２】
請求項６においては、前記遠隔操作領域と前記周辺画像領域と前記作業状態表示領域の表示位置、及び、複数表示または全画面表示の選択は、任意に変更可能とされるものである。
【発明の効果】
【００１３】
以上のような手段を用いることにより、一つの遠隔操作装置（操作端末）により、必要な画面を一つまたは複数表示でき、遠隔操作装置により自律走行作業車両を容易に操作でき、遠隔操作装置の表示装置は見やすい位置に画面を選択して配置して表示することができる。
【図面の簡単な説明】
【００１４】
【図１】自律走行作業車両を遠隔操作装置で操作する概略側面図。
【図２】制御ブロック図。
【図３】自律走行作業車両と随伴走行作業車両とによる併走作業時の状態を示す図。
【図４】遠隔操作装置の表示装置を示す図。
【図５】表示装置の表示画面を入れ替えた状態を示す図。
【図６】周辺画像領域に一つの画面を表示した状態を示す図。
【図７】周辺画像領域の前方画面と後方画面を上下入れ替えた状態を示す図。
【図８】遠隔操作装置の他の表示装置を示す図。
【図９】自動走行開始ボタンを押した後の第二操作画面を示す図。
【図１０】走行速度変更ボタンを押した後の第二操作画面を示す図。
【図１１】エンジン回転数変更ボタンを押した後の第二操作画面を示す図。
【図１２】作業機高さ変更ボタンを押した後の第二操作画面を示す図。
【発明を実施するための形態】
【００１５】
無人で自動走行可能な自律走行作業車両１、及び、この自律走行作業車両１に随伴してオペレータが搭乗して操向操作する随伴走行作業車両１００をトラクタとし、自律走行作業車両１及び随伴走行作業車両１００に装着される作業機としてロータリ耕耘装置２４が装着された実施形態について説明する。但し、作業車両はトラクタに限定するものではなく、コンバイン等でもよく、また、作業機はロータリ耕耘装置２４に限定するものではなく、施肥播種機や草刈機や薬剤散布機や消毒機や収穫機等であってもよい。
【００１６】
図１、図２において、自律走行作業車両１となるトラクタの全体構成について説明する。ボンネット２内にエンジン３が内設され、該ボンネット２の後部のキャビン１１内にダッシュボード１４が設けられ、ダッシュボード１４上に操向操作手段となるステアリングハンドル４が設けられている。該ステアリングハンドル４の回動により操舵装置を介して前輪９・９の向きが回動される。自律走行作業車両１の操舵方向は操向センサ２０により検知される。操向センサ２０はロータリエンコーダ等の角度センサからなり、前輪９の回動基部に配置される。但し、操向センサ２０の検知構成は限定するものではなく操舵方向が認識されるものであればよく、ステアリングハンドル４の回動を検知したり、パワーステアリングの作動量を検知してもよい。操向センサ２０により得られた検出値は制御装置３０に入力される。制御装置３０はＣＰＵ（中央演算処理装置）やＲＡＭやＲＯＭ等の記憶装置３０ｍやインターフェース等を備え、記憶装置３０ｍには自律走行作業車両１を動作させるためのプログラムやデータ等が記憶される。
【００１７】
前記ステアリングハンドル４の後方に運転席５が配設され、運転席５下方にミッションケース６が配置される。ミッションケース６の左右両側にリアアクスルケース８・８が連設され、該リアアクスルケース８・８には車軸を介して後輪１０・１０が支承される。エンジン３からの動力はミッションケース６内の変速装置（主変速装置や副変速装置）により変速されて、後輪１０・１０を駆動可能としている。変速装置は例えば油圧式無段変速装置で構成して、可変容量型の油圧ポンプの可動斜板をモータ等の変速手段４４により作動させて変速可能としている。変速手段４４は制御装置３０と接続されている。後輪１０の回転数は車速センサ２７により検知され、走行速度として制御装置３０に入力される。但し、車速の検知方法や車速センサ２７の配置位置は限定するものではない。
【００１８】
ミッションケース６内にはＰＴＯクラッチやＰＴＯ変速装置が収納され、ＰＴＯクラッチはＰＴＯ入切手段４５により入り切りされ、ＰＴＯ入切手段４５は制御装置３０と接続され、ＰＴＯ軸への動力の断接を制御可能としている。
【００１９】
前記エンジン３を支持するフロントフレーム１３にはフロントアクスルケース７が支持され、該フロントアクスルケース７の両側に前輪９・９が支承され、前記ミッションケース６からの動力が前輪９・９に伝達可能に構成している。前記前輪９・９は操舵輪となっており、ステアリングハンドル４の回動操作により回動可能とするとともに、操舵装置の駆動手段となるパワステシリンダからなる操舵アクチュエータ４０により前輪９・９が左右操舵回動可能となっている。操舵アクチュエータ４０は制御装置３０と接続され、自動走行手段により制御されて駆動される。
【００２０】
制御装置３０にはエンジン回転制御手段となるエンジンコントローラ６０が接続され、エンジンコントローラ６０にはエンジン回転数センサ６１や水温センサや油圧センサ等が接続され、エンジンの状態を検知できるようにしている。エンジンコントローラ６０では設定回転数と実回転数から負荷を検出し、過負荷とならないように制御するとともに、後述する遠隔操作装置１１２にエンジン３の状態を送信して表示装置１１３で表示できるようにしている。
【００２１】
また、ステップ下方に配置した燃料タンク１５には燃料の液面を検知するレベルセンサ２９が配置されて制御装置３０と接続され、自律走行作業車両１のダッシュボードに設ける表示手段４９には燃料の残量を表示する燃料計が設けられ制御装置３０と接続されている。そして、制御装置３０から遠隔操作装置１１２に燃料残量に関する情報が送信されて、遠隔操作装置１１２の表示装置１１３に燃料残量と作業可能時間が表示可能とされる。
【００２２】
前記ダッシュボード１４上にはエンジンの回転計や燃料計や油圧等や異常を示すモニタや設定値等を表示する表示手段４９が配置されている。
【００２３】
また、トラクタ機体後方に作業機装着装置２３を介して作業機としてロータリ耕耘装置２４が昇降自在に装設させている。前記ミッションケース６上に昇降シリンダ２６が設けられ、該昇降シリンダ２６を伸縮させることにより、作業機装着装置２３を構成する昇降アームを回動させてロータリ耕耘装置２４を昇降できるようにしている。昇降シリンダ２６は昇降アクチュエータ２５の作動により伸縮され、昇降アクチュエータ２５は制御装置３０と接続されている。
【００２４】
制御装置３０には衛星測位システムを構成する移動通信機３３が接続されている。移動通信機３３には移動ＧＰＳアンテナ３４とデータ受信アンテナ３８が接続され、移動ＧＰＳアンテナ３４とデータ受信アンテナ３８は前記キャビン１１上に設けられる。該移動通信機３３には、位置算出手段を備えて緯度と経度を制御装置３０に送信し、現在位置を把握できるようにしている。なお、ＧＰＳ（米国）に加えて準天頂衛星（日本) やグロナス衛星（ロシア）等の衛星測位システム（ＧＮＳＳ）を利用することで精度の高い測位ができるが、本実施形態ではＧＰＳを用いて説明する。
【００２５】
自律走行作業車両１は、機体の姿勢変化情報を得るためにジャイロセンサ３１、および進行方向を検知するために方位センサ３２を具備し制御装置３０と接続されている。但し、ＧＰＳの位置計測から進行方向を算出できるので、方位センサ３２を省くことができる。ジャイロセンサ３１は自律走行作業車両１の機体前後方向の傾斜（ピッチ）の角速度、機体左右方向の傾斜（ロール）の角速度、および旋回（ヨー）の角速度、を検出するものである。該三つの角速度を積分計算することにより、自律走行作業車両１の機体の前後方向および左右方向への傾斜角度、および旋回角度を求めることが可能である。ジャイロセンサ３１の具体例としては、機械式ジャイロセンサ、光学式ジャイロセンサ、流体式ジャイロセンサ、振動式ジャイロセンサ等が挙げられる。ジャイロセンサ３１は制御装置３０に接続され、当該三つの角速度に係る情報を制御装置３０に入力する。
【００２６】
方位センサ３２は自律走行作業車両１の向き（進行方向）を検出するものである。方位センサ３２の具体例としては磁気方位センサ等が挙げられる。方位センサ３２は制御装置３０に接続され、機体の向きに係る情報を制御装置３０に入力する。
【００２７】
こうして制御装置３０は、上記ジャイロセンサ３１、方位センサ３２から取得した信号を姿勢・方位演算手段により演算し、自律走行作業車両１の姿勢（向き、機体前後方向及び機体左右方向の傾斜、旋回方向）を求める。
【００２８】
次に、自律走行作業車両１の位置情報をＧＰＳ（グローバル・ポジショニング・システム）を用いて取得する方法について説明する。ＧＰＳは、元来航空機・船舶等の航法支援用として開発されたシステムであって、上空約二万キロメートルを周回する二十四個のＧＰＳ衛星（六軌道面に四個ずつ配置）、ＧＰＳ衛星の追跡と管制を行う管制局、測位を行うための利用者の通信機で構成される。ＧＰＳを用いた測位方法としては、単独測位、相対測位、ＤＧＰＳ（ディファレンシャルＧＰＳ）測位、ＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位など種々の方法が挙げられ、これらいずれの方法を用いることも可能であるが、本実施形態では測定精度の高いＲＴＫ−ＧＰＳ測位方式を採用し、この方法について図１、図２より説明する。
【００２９】
ＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位は、位置が判っている基準局と、位置を求めようとする移動局とで同時にＧＰＳ観測を行い、基準局で観測したデータを無線等の方法で移動局にリアルタイムで送信し、基準局の位置成果に基づいて移動局の位置をリアルタイムに求める方法である。
【００３０】
本実施形態においては、自律走行作業車両１に移動局となる移動通信機３３と移動ＧＰＳアンテナ３４とデータ受信アンテナ３８が配置され、基準局となる固定通信機３５と固定ＧＰＳアンテナ３６とデータ送信アンテナ３９が圃場の作業の邪魔にならない所定位置に配設される。本実施形態のＲＴＫ−ＧＰＳ（リアルタイムキネマティック−ＧＰＳ）測位は、基準局および移動局の両方で位相の測定（相対測位）を行い、基準局の固定通信機３５で測位したデータをデータ送信アンテナ３９からデータ受信アンテナ３８に送信する。
【００３１】
自律走行作業車両１に配置された移動ＧＰＳアンテナ３４はＧＰＳ衛星３７・３７・・・からの信号を受信する。この信号は移動通信機３３に送信され測位される。そして、同時に基準局となる固定ＧＰＳアンテナ３６でＧＰＳ衛星３７・３７・・・からの信号を受信し、固定通信機３５で測位し移動通信機３３に送信し、観測されたデータを解析して移動局の位置を決定する。こうして得られた位置情報は制御装置３０に送信される。
【００３２】
こうして、この自律走行作業車両１における制御装置３０は自動走行させる自動走行手段を備えて、自動走行手段はＧＰＳ衛星３７・３７・・・から送信される電波を受信して移動通信機３３において設定時間間隔で機体の位置情報を求め、ジャイロセンサ３１及び方位センサ３２から機体の変位情報および方位情報を求め、これら位置情報と変位情報と方位情報に基づいて機体が予め設定した設定経路Ｒに沿って走行するように、操舵アクチュエータ４０、変速手段４４、昇降アクチュエータ２５、ＰＴＯ入切手段４５、エンジンコントローラ６０等を制御して自動走行し自動で作業できるようにしている。なお、作業範囲となる圃場Ｈの外周の位置情報も周知の方法によって予め設定され、記憶装置３０ｍに記憶されている。
【００３３】
また、自律走行作業車両１には障害物センサ４１が配置されて制御装置３０と接続され、障害物に当接しないようにしている。例えば、障害物センサ４１はレーザセンサや超音波センサで構成して機体の前部や側部や後部に配置して制御装置３０と接続し、機体の前方や側方や後方に障害物があるかどうかを検出し、障害物が設定距離以内に近づくと走行を停止させるように制御する。
【００３４】
また、自律走行作業車両１には前方を撮影するカメラ４２Ｆや後方の作業機や作業後の状態を撮影するカメラ４２Ｒが搭載され制御装置３０と接続されている。カメラ４２Ｆ・４２Ｒは本実施形態ではキャビン１１のルーフの前部上と後部上に配置しているが、配置位置は限定するものではなく、キャビン１１内の前部上と後部上や一つのカメラ４２を機体中心に配置して鉛直軸を中心に回転させて周囲を撮影しても、複数のカメラ４２を機体の四隅に配置して機体周囲を撮影する構成であってもよい。カメラ４２Ｆ・４２Ｒで撮影された映像は随伴走行作業車両１００に備えられた遠隔操作装置１１２の表示装置１１３に表示され、その画面については後述する。
【００３５】
遠隔操作装置１１２は前記自律走行作業車両１の走行経路Ｒを設定したり、自律走行作業車両１を遠隔操作したり、自律走行作業車両１の走行状態や作業機の作動状態を監視したり、作業データを記憶したりするものであり、制御装置（ＣＰＵやメモリ）１１９や通信装置１１１や表示装置１１３等を備える。
【００３６】
有人走行車両となる随伴走行作業車両１００はオペレータが乗車して運転操作するとともに、随伴走行作業車両１００に遠隔操作装置１１２を搭載して自律走行作業車両１を操作可能としている。随伴走行作業車両１００の基本構成は自律走行作業車両１と略同じ構成であるので詳細な説明は省略する。なお、随伴走行作業車両１００にはＧＰＳ用の移動通信機３３や移動ＧＰＳアンテナ３４を備える構成とすることも可能である。
【００３７】
遠隔操作装置１１２は、随伴走行作業車両１００及び自律走行作業車両１のダッシュボード等の操作部に着脱可能としている。遠隔操作装置１１２は随伴走行作業車両１００のダッシュボードに取り付けたまま操作することも、随伴走行作業車両１００の外に持ち出して携帯して操作することも、自律走行作業車両１のダッシュボードに取り付けて操作可能としている。遠隔操作装置１１２は例えばノート型やタブレット型のパーソナルコンピュータで構成することができる。本実施形態ではタブレット型のコンピュータで構成している。
【００３８】
さらに、遠隔操作装置１１２と自律走行作業車両１は無線で相互に通信可能に構成しており、自律走行作業車両１と遠隔操作装置１１２には通信するための通信装置１１０・１１１がそれぞれ設けられている。更に、遠隔操作装置１１２は随伴走行作業車両１００の制御装置１３０と通信装置１３３・１１１を介して通信可能としている。通信装置１１１は遠隔操作装置１１２に一体的に構成されている。通信手段は例えばＷｉＦｉ等の無線ＬＡＮで相互に通信可能に構成されている。遠隔操作装置１１２は画面に触れることで操作可能なタッチパネル式の操作画面とした表示装置１１３を筐体表面に設け、筐体内に通信装置１１１やＣＰＵや記憶装置やバッテリ等を収納している。
【００３９】
このような構成において、図３に示すような圃場Ｈに設定走行経路Ｒを予め設定して記憶装置３０ｍに記憶し、自律走行作業車両１が設定走行経路Ｒに沿って走行させることができる。なお、前記圃場Ｈの位置を定めたり、衛星測位システムを利用して走行したり、走行経路Ｒを設定したりするために地図データ（情報）が参照されるが、この地図データは、インターネットに公開されている地図データや地図メーカ等が配信している地図データやカーナビ地図データ等が用いられる。そして、自律走行作業車両１と随伴走行作業車両１００のロータリ耕耘装置の作業幅を一部重複させて、随伴走行作業車両１００が自律走行作業車両１の斜め後方を走行して併走しながら作業を行う。但し、随伴走行作業車両１００は自律走行作業車両１の後方を走行して別の作業を行う作業形態とすることもでき、作業形態は限定するものではない。
【００４０】
前記遠隔操作装置１１２の表示装置１１３には、前記カメラ４２Ｆ・４２Ｒで撮影した映像や自律走行作業車両１の状態や作業の状態やＧＰＳに関する情報を通信装置１１０・１１１を介して制御装置１１９に送信し、その映像や情報や操作画面等を表示できるようにしており、オペレータは自律走行作業車両１を監視しながら遠隔操作装置１１２を操作できるようにしている。即ち、表示装置１１３は、タッチ操作式の画面としており、表示方法や表示位置やタッチ操作に対する出力等は制御装置１１９で制御される。表示装置１１３の表示画面は、図４に示すように、縦（上下）方向、または、横（左右）方向に複数の領域に分割可能としており、その領域には、少なくとも前記自律走行作業車両１を操作する遠隔操作領域１１３Ａと、前記自律走行作業車両１に取り付けたカメラ４２Ｆ・４２Ｒにより撮影した映像を表示する周辺画像領域１１３Ｂとが設けられている。
【００４１】
遠隔操作領域１１３Ａは、自律走行作業車両１の走行や操舵や作業機を操作するための操作部材（ボタン）を配置する画面であり、本実施形態では、走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄ、エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄ、自動走行開始ボタン２０３、自動走行停止ボタン２０４、非常停止ボタン２０５、インターネット接続ボタン２０６、作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄ、ＰＴＯオン／オフボタン２０８が配置される。但し、前記操作ボタンの種類は限定するものではなく、ブレーキボタンやＰＴＯ変速ボタンや操舵ボタンやホーンボタンや設定ボタン等を設けることも可能である。また、操作しない（不要）ならばそのボタンを削除することも可能である。また、燃料残量やエンジンの回転数などを表示するメータを配置することもできる。そして、遠隔操作領域１１３Ａ内でのこれらのボタンの配置位置や形状も限定するものではなく、任意形状に変更したり、選択したり、位置変更したりすることもできる。
【００４２】
前記走行速度上げボタン２０１Ｕはタッチすることで変速手段４４を作動させて１段階増速させるものであり、走行速度下げボタン２０１Ｄはタッチすることで変速手段４４を作動させて１段階減速させるものである。なお、この操作時に変速段の名前と数字をポップアップで表示したり、画面を変速用画面に切り換えて、他の画面は閉じるようにしてもよい。
【００４３】
前記エンジン回転数上げボタン２０２Ｕはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を増加させてエンジン回転数を増加させるものであり、エンジン回転数下げボタン２０２Ｄはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を減少させてエンジン回転数を減少させるものである。なお、この操作でエンジン回転数をポップアップでデジタルまたはアナログで表示したり、画面をエンジン回転数用画面に切り換えてもよい。また、前記走行速度上げボタン２０１Ｕと前記走行速度下げボタン２０１Ｄと前記エンジン回転数上げボタン２０２Ｕと前記エンジン回転数下げボタン２０２Ｄはタッチし続けることで、上げ量または下げ量を連続的に速く増減することができる。
【００４４】
自動走行開始ボタン２０３はタッチすることで予め設定しておいた走行経路Ｒを自動走行しながら作業を開始し、自動走行停止ボタン２０４をタッチすることで自動走行及び作業を停止する。非常停止ボタン２０５はタッチすることでエンジンを停止し走行や作業を停止して危険な状態に陥ることを防止する。非常停止ボタン２０５は認識しやすく容易に操作できるように画面中央で比較的大きく、目立つ色で表示される。インターネット接続ボタン２０６はタッチすることでインターネットに接続し予め設定したサイトに入り表示する。
【００４５】
作業機上昇ボタン２０７Ｕはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を上昇でき、作業機下降ボタン２０７Ｄはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を下降する。なお、この操作で作業機（ロータリ耕耘装置２４）の高さをポップアップでデジタルまたはアナログで表示したり、画面を作業機昇降用に切り換えてもよい。ＰＴＯオン／オフボタン２０８はタッチすることでＰＴＯ入切手段４５を作動させて、ＰＴＯ入り、または、ＰＴＯ切りに切り換える。こうして、画面を見ながら指でタッチするだけで離れた位置で容易に自律走行作業車両１を操作することができる。なお、走行速度やエンジン回転数や作業機高さの設定は図示しない別の画面で設定される。
【００４６】
前記遠隔操作領域１１３Ａに配置される複数のボタンのうち、緊急時に即座に応答してほしい非常停止ボタン２０５以外の走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄ、エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄ、作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄ、自動走行開始ボタン２０３、自動走行停止ボタン２０４、インターネット接続ボタン２０６、ＰＴＯオン／オフボタン２０８は一回の操作では作動せず、複数回操作しないと次の操作画面に遷移して作動できないようにして、誤操作が生じないように構成することもできる。この場合、初期画面は図８のような画面となる。
【００４７】
つまり、前記遠隔操作領域１１３Ａの略中央に配置される自動走行開始ボタン２０３は、予め設定しておいた走行経路Ｒを自動走行しながら作業を行うために開始するためのボタンであり、自動走行開始ボタン２０３を押す第一操作（タッチする）に加えて、更に第二操作をしないと自動走行制御モードに遷移しないようにしている。第二操作が行われると、自動走行制御モードに移行し、制御装置３０によって、自律走行作業車両１の自動走行制御が行われる。
【００４８】
第二操作としては、自動走行開始ボタン２０３を押す第一操作が行われると、別の確認画面に切り替わり、確認画面でもう一度操作するようにして次のモードに遷移するようにする。例えば、自動走行開始ボタン２０３を押すと図９に示すように、ＳＴＡＲＴボタン２０３ＡとＣＡＮＣＥＬボタン２０３Ｂが現れる。そして、ＳＴＡＲＴボタン２０３Ａをもう一度押すことにより、自動走行制御モードに遷移するようにするのである。自動走行制御モードに遷移すると元の図８の画面に戻る。押す位置を間違えた場合にはＣＡＮＣＥＬボタン２０３Ｂを押すことにより、元の図８の画面に戻る。但し、第二操作の画面は、図９の表示に限定するものではなく、「はい」、「いいえ」等の続行するか、取り消すかを選択して確認できるものであればよい。
【００４９】
また、前記第二操作の操作方法は別の操作に置き換えることができる。つまり、第二実施例として、自動走行開始ボタン２０１を長押しすると、自動走行制御モードに遷移するようにするのである。第二操作の第三実施例として、自動走行開始ボタン２０３を二回連続して押すと自動走行制御モードに遷移するようにしてもよい。第二操作の第四実施例として、自動走行開始ボタン２０３を押すと（第一操作）、自動走行開始ボタン２０３の色が変化し、更にもう一度押すと（第二操作）、自動走行制御モードに遷移するようにしてもよい。第二操作の第五実施例として、自動走行開始ボタン２０３を押し（第一操作）ながらスライドさせる（第二操作）と自動走行制御モードに遷移するようにしてもよい。なお、この第二操作を行い自動走行制御モードに遷移すると、オペレータが認識しやすいように「自動走行制御モードに遷移しました」のような画面が表示されるようにしてもよい。また、第一操作が行われると、全画面表示に切り替わるように制御してもよい。
【００５０】
上記のように、表示装置１１３には前記自律走行作業車両１による自動走行開始ボタン２０３が表示され、該自動走行開始ボタン２０３の第一操作に加えて、更に第二操作をしないと自動走行制御モードに遷移しないようにしたので、意図せず表示装置１１３の画面に触れたり、操作間違いをしたことで、自動走行制御モードに遷移して、自律走行作業車両１が不意に走行を開始することがなく、事故等が発生することを防止できる。
【００５１】
また、前記自動走行が開始された後、前記自動走行停止ボタン２０４は、自動走行停止ボタン２０４をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると自動走行及び作業を停止する。インターネット接続ボタン２０６はインターネット接続ボタン２０６をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとインターネットに接続し予め設定したサイトに入り表示する。ＰＴＯオン／オフボタン２０８は、ＰＴＯオン／オフボタン２０８をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとＰＴＯ入切手段４５を作動させて、ＰＴＯ入りとし、または、ＰＴＯ入りの状態で、ＰＴＯオン／オフボタン２０８をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとＰＴＯ切りに切り換える。
【００５２】
前記自動走行停止ボタン２０４やインターネット接続ボタン２０６やＰＴＯオン／オフボタン２０８も、前記自動走行開始ボタン２０３の操作と同様に、第一操作が行われると別の確認画面（はい、いいえの二者選択画面）に切り替わる代わりに、更に第二実施例〜第五実施例のような第二操作をしないと次のモードに遷移しないように制御することも可能である。
【００５３】
前記自動走行が開始された後において、遠隔操作領域１１３Ａに配置される他のボタンの操作について説明する。前記走行速度上げボタン２０１Ｕ、走行速度下げボタン２０１Ｄは図８に示すように、一つの走行速度変更ボタン２０１とし、該走行速度変更ボタン２０１をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると変速手段４４を作動させて１段階変速させるものである。走行速度変更ボタン２０１をタッチする第一操作が行われると、本実施形態では、図１０に示す、増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二車速変更ボタンとしての走行速度上げボタン２０１Ｕと走行速度下げボタン２０１Ｄが表示されるようにしている。走行速度上げボタン２０１Ｕをタッチすることで変速手段４４を作動させて１段階増速させ、走行速度下げボタン２０１Ｄをタッチすることで変速手段４４を作動させて１段階減速させる。なお、第一操作で全画面表示に切り替わり、第二操作時に変速段の名前と数字をポップアップで表示したり、画面を変速用画面に切り換えてもよい。
【００５４】
前記エンジン回転数上げボタン２０２Ｕ、エンジン回転数下げボタン２０２Ｄは図８に示すように、一つのエンジン回転数変更ボタン２０２とし、該エンジン回転数変更ボタン２０２をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われるとアクセルアクチュエータを作動させて燃料噴射量を変更する。エンジン回転数変更ボタン２０２をタッチする第一操作が行われると、本実施形態では、図１１に示す増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二エンジン回転数変更ボタンとなるエンジン回転数上げボタン２０２Ｕとエンジン回転数下げボタン２０２Ｄが表示される。エンジン回転数上げボタン２０２Ｕをタッチすることでアクセルアクチュエータを作動させて燃料噴射量を増加させてエンジン回転数を増加させ、エンジン回転数下げボタン２０２Ｄはタッチすることでアクセルアクチュエータを作動させて燃料噴射量を減少させてエンジン回転数を減少させる。なお、第一操作で全画面表示に切り替わり、第二操作時にエンジン回転数をポップアップでデジタルまたはアナログで表示したり、画面をエンジン回転数用画面に切り換えてもよい。また、前記走行速度上げボタン２０１Ｕと前記走行速度下げボタン２０１Ｄと前記エンジン回転数上げボタン２０２Ｕと前記エンジン回転数下げボタン２０２Ｄはタッチし続けることで、上げ量または下げ量を速くすることができる。
【００５５】
前記作業機上昇ボタン２０７Ｕ、作業機下降ボタン２０７Ｄは図８に示すように、一つの作業機高さ変更ボタン２０７とし、該作業機高さ変更ボタン２０７をタッチする第一操作が行われると別の確認画面に切り替わり、第二操作が行われると昇降アクチュエータ２５を作動させてロータリ耕耘装置２４を昇降する。作業機高さ変更ボタン２０７をタッチする第一操作が行われると、本実施形態では、図１２に示す増加または減少を操作する変更確認画面に切り替わり、第二操作をするための第二作業機高さ変更ボタンとなる作業機上昇ボタン２０７Ｕと作業機下降ボタン２０７Ｄが表示される。作業機上昇ボタン２０７Ｕはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を上昇でき、作業機下降ボタン２０７Ｄはタッチすることで昇降アクチュエータ２５を作動させロータリ耕耘装置２４を下降する。なお、第一操作で全画面表示に切り替わり、第二操作時に作業機（ロータリ耕耘装置２４）の高さをポップアップでデジタルまたはアナログで表示したり、画面を作業機昇降用に切り換えてもよい。
【００５６】
前記周辺画像領域１１３Ｂはカメラ４２Ｆで撮影した機体前方の映像を表示する前方画面２１０と、カメラ４２Ｒで撮影した機体後方の映像を表示する後方画面２１１とからなり、周辺画像領域１１３Ｂにおける上下方向（縦方向）に配置して二つ表示としている。前記後ろ側のカメラ４２Ｒで撮影する映像は、トラクタと作業機の間の装着部分を撮影するものであっても、作業機の作動状態を撮影するものであっても、作業機から後方の作業仕上がり状態を撮影するものであってもよい。この撮影方向を変更するために、カメラ４２Ｆ・４２Ｒの支持部には角度変更手段を設けてもよい。また、アクチュエータで変更できるようにし、遠隔操作装置１１２で調整できるように構成することもできる。また、カメラ４２の台数は限定するものではなく、３台以上配置して、それぞれの映像を周辺画像領域１１３Ｂで表示してもよい。
【００５７】
前記後方画面２１１に写し出される映像は鏡像（左右逆）としており、オペレータが自律走行作業車両１の進行方向と同じ向きで操作しているときに違和感が生じないようにしている。なお、切替手段を設けて、オペレータが随伴走行作業車両１００に乗らず、自律走行作業車両１の前方で対向して監視・操作する場合には、前方画面２１０を鏡像、後方画面２１１を実像とすることも可能である。
【００５８】
また、周辺画像領域１１３Ｂにおいて、前方画面２１０と後方画面２１１の二つを表示させており、自律走行作業車両１が自律走行（自動走行）しているときに、前後の進行方向を変更する場合、前方画面２１０と後方画面２１１の上下表示配置を入れ替えるようにしている。例えば、前進しているときは、図４に示すように、上側に前方画面２１０、下側に後方画面２１１を配置し、前進から後進に切り換えるときには、上側に後方画面２１１、下側に前方画面２１０を表示するのである。
【００５９】
この表示切替は実際に進行方向を変更する少し前に表示が切り替えられる。つまり、制御装置３０の記憶装置３０ｍには、設定走行経路Ｒが記憶されており、その設定走行経路Ｒにおいて前進から後進、または、後進から前進に前後進切換を行うタイミングや位置はプログラムされているので、進行方向が前後切り換わる設定時間前に、表示装置１１３の画面が予定進行方向に合わせて切り替えられる。具体的には、前後進切換命令を発する設定時間前に（または前後進切換位置の設定距離手前で）上下の表示切替を行う。この画面の表示切替は、例えば、自律走行作業車両１の前後進切換アクチュエータを作動させる数秒前に（または走行を停止した時）行う。このように表示装置１１３を制御することによって、遠隔操作装置１１２を操作しているオペレータは、画面が切り替わることで自律走行作業車両１が前後進行方向を変更することを認識でき、もし、進行方向と反対側に障害物が存在するような場合には、進行する前に自律走行作業車両１を停止する操作ができ、事故を未然に防ぐことができるのである。
【００６０】
また、周辺画像領域１１３Ｂにおいて、二つ表示することなく、図６に示すように、進行方向のみ表示する一つ画面とすることもできる。つまり、前進するときは前方画面２１０のみ表示し、後進するときは後方画面２１１のみ表示する。この場合においても、前記同様に、前後進を切り替える少し手前で、前方画面２１０と後方画面２１１の表示切替が行われる。但し、周辺画像領域１１３Ｂで１つの表示とする場合において、通常は進行方向のみ表示するが、作業後の仕上がり状態を確認したい場合があるので、後方画面２１１に切り換えられるように切替ボタンを設けてもよく、または、ダブルタップ等の操作で画面を切り替えるようにしてもよい。
【００６１】
前記表示装置１１３には、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂとに加えて、自律走行作業車両１が作業を行う圃場のマップや設定走行経路Ｒや現在の位置や作業済位置等を表示する作業状態表示領域１１３Ｃを表示可能としている。作業状態表示領域１１３Ｃでは、地図に設定走行経路を重ね合わせた二次元表示としたり、三次元表示したり、俯瞰図で表示したりすることができる。また、これらを切り替えられように切替手段を設けてもよい。
【００６２】
また、周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃに表示される画面は、拡大・縮小可能に構成することもできる。例えば、周辺画像領域１１３Ｂの後方画面２１１で作業後の仕上がりをもっと精密に見たい場合には、画面を指２本の間隔を広げるようなピンチアウトの操作で拡大し、確認するようにしてもよい。また、作業状態表示領域１１３Ｃでは、隣の圃場や周囲の畦を確認したい場合等では、画面を指２本の間隔を狭めるようなピンチインの操作で縮小し、確認するようにしてもよい。また、表示画面をドラッグ操作して表示位置（撮影位置）を移動できるようにすることも可能である。
【００６３】
また、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃとは、左右または上下に分割して同時に表示可能とされるものである。つまり、図４の実施形態では、左側に周辺画像領域１１３Ｂ、中央に遠隔操作領域１１３Ａ、右側に作業状態表示領域１１３Ｃと左右に画面を３つ分割して同時に表示して、複数の表示装置を用意することなく一つの端末に集約して、随伴走行作業車両１００に乗車して操作するときの取付等が容易にでき、自律走行作業車両１の位置の確認や速度調節等の操作が画面を見ながら容易にできるようにしている。
【００６４】
また、中央に遠隔操作領域１１３Ａを配置し両側に周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃを配置することにより、自律走行作業車両１の非常停止や車速調整等安全上重要な操作ボタンが中央に配置され、見やすく操作が迅速に行える。なお、遠隔操作装置１１２を縦長として使用できるようにしている。つまり、表示装置１１３を上下３つに分割できるようにしている。また、この分割された状態で、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃの何れかの領域と領域の境界部分をドラッグして平行移動することで、表示領域を拡大または縮小して、見たい画面を拡大したり、必要でない画面を縮小したりできるようにすることもできるようにしている。
【００６５】
また、前記遠隔操作領域１１３Ａと前記周辺画像領域１１３Ｂと前記作業状態表示領域１１３Ｃの表示位置は、任意に変更（入れ替え）可能として、使用者の好みに合わせたり使い易くしたりすることができる。つまり、遠隔操作領域１１３Ａと周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃは、使用者の好みや使いやすさ等を考慮して、自由に配置することができる。例えば、画面上の一部をドラッグして、図４から図５に示すように、遠隔操作領域１１３Ａを中央から左側に移動し、周辺画像領域１１３Ｂを右側に移動できるようにするのである。また、周辺画像領域１１３Ｂと作業状態表示領域１１３Ｃを左側に上下２段に表示して、右側に遠隔操作領域１１３Ａを配置して表示するようにもできる。
【００６６】
また、複数表示または全画面表示の選択も任意に変更可能として、視認性や操作性を向上することができる。つまり、遠隔操作領域１１３Ａのみ全画面で表示して、ボタンを大きく表示させて操作間違いが生じし難くなるようにしたり、遠隔操作領域１１３Ａと作業状態表示領域１１３Ｃの二つを表示して、作業位置を確認しながら自律走行作業車両１を操作できるようにしている。
【産業上の利用可能性】
【００６７】
本発明は、自律走行可能とした建設機械や農用作業車等を遠隔操作可能とする遠隔操作装置に備えられる表示装置に利用可能である。
【符号の説明】
【００６８】
１      自律走行作業車両
３０    制御装置
４２Ｆ・４２Ｒ  カメラ
１１０・１１１  通信装置
１１２  遠隔操作装置
１１３  表示装置
１１３Ａ  遠隔操作領域
１１３Ｂ  周辺画像領域
１１３Ｃ  作業状態表示領域
１１９  制御装置
【国際調査報告】
2016017367.tif 000015
2016017367.tif 000016
2016017367.tif 000017
2016017367.tif 000018