(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022093887
(43)【公開日】2022-06-24
(54)【発明の名称】無人搬送車および無人搬送車システム
(51)【国際特許分類】
G05D 1/02 20200101AFI20220617BHJP
【FI】
G05D1/02 K
【審査請求】未請求
【請求項の数】12
【出願形態】OL
(21)【出願番号】P 2020206609
(22)【出願日】2020-12-14
(71)【出願人】
【識別番号】508049329
【氏名又は名称】シーオス株式会社
(74)【代理人】
【識別番号】100123984
【弁理士】
【氏名又は名称】須藤 晃伸
(74)【代理人】
【識別番号】100102314
【弁理士】
【氏名又は名称】須藤 阿佐子
(74)【代理人】
【識別番号】100159178
【弁理士】
【氏名又は名称】榛葉 貴宏
(72)【発明者】
【氏名】松島 聡
(72)【発明者】
【氏名】今井 義徳
(72)【発明者】
【氏名】ソリバ ジャンポール バナヤット
(72)【発明者】
【氏名】モリーナ デイビット
【テーマコード(参考)】
5H301
【Fターム(参考)】
5H301AA01
5H301AA10
5H301BB05
5H301BB14
5H301CC03
5H301CC06
5H301CC10
5H301DD01
5H301DD07
5H301DD15
5H301GG07
5H301GG08
5H301GG09
5H301GG10
5H301HH01
5H301LL01
5H301LL02
5H301LL03
5H301LL06
5H301LL08
(57)【要約】
【課題】倉庫等の屋内施設において外乱光が入射する環境下においても安価な画像センサを用いて自律走行できる無人搬送車および無人搬送車システムの提供。
【解決手段】進行方向側の物体画像を撮像する画像センサと、複数の車輪の駆動を独立制御する駆動部と、環境地図に基づき走行路に沿って自律走行するための制御指令を駆動部に送信するロボット制御部と、無線通信部と、を備え、前記ロボット制御部が、画像センサからの画像情報に基づき環境地図およびルートを常時更新する機能と、前記走行路に沿って配置された特定の形状または模様の画像ランドマーク画像として環境地図上の座標情報と紐付けて登録する機能と、画像センサからの画像情報および環境地図に基づき現在位置を推定する第1の現在位置推定機能と、画像センサからの画像情報にランドマーク画像が含まれる場合、ランドマーク画像の座標情報および環境地図に基づき現在位置を推定する第2の現在位置推定機能と、を備え、前記ランドマーク画像として、投影画像を含む無人搬送車。
【選択図】
図1
【特許請求の範囲】
【請求項1】
進行方向側の物体画像を撮像する画像センサと、
複数の車輪の駆動を独立制御する駆動部と、
環境地図に基づき走行路に沿って自律走行するための制御指令を駆動部に送信するロボット制御部と、
無線通信部と、を備え、
前記ロボット制御部が、画像センサからの画像情報に基づき環境地図およびルートを常時更新する機能と、
前記走行路に沿って配置された特定の形状または模様の画像をランドマーク画像として環境地図上の座標情報と紐付けて登録する機能と、
画像センサからの画像情報において特徴点認識を行い、環境地図と対照して現在位置を推定する第1の現在位置推定機能と、
画像センサからの画像情報にランドマーク画像が含まれる場合、ランドマーク画像の座標情報に基づき現在位置を推定する第2の現在位置推定機能と、
を備え、
前記ランドマーク画像として、投影画像を含むことを特徴とする無人搬送車。
【請求項2】
前記駆動部が、前記複数の車輪の回転情報をオドメトリ情報としてロボット制御部に送信する機能を備え、
前記ロボット制御部が、前記オドメトリ情報および直前に記憶された現在位置情報に基づき現在位置を推定する第3の現在位置推定機能を備えることを特徴とする請求項1に記載の無人搬送車。
【請求項3】
前記ロボット制御部が、画像センサからの画像情報に仮想画像を付加した合成画像を連続生成する機能と、
合成画像が含む仮想画像に基づき走行制御を行う機能と、を備えることを特徴とする請求項1または2に記載の無人搬送車。
【請求項4】
前記投影画像が、床面、壁面、および/または、天井に投影された、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像であり、
前記ロボット制御部は、前記投影画像に基づき走行制御する機能を備えることを特徴とする請求項1ないし3のいずれかに記載の無人搬送車。
【請求項5】
前記走行路に沿って投影されたラインに沿って走行するラインフォロー機能を備えることを特徴とする請求項1ないし4のいずれかに記載の無人搬送車。
【請求項6】
前記ランドマーク画像が、二次元コードを含む人工コードの画像を含むことを特徴とする請求項1ないし5のいずれかに記載の無人搬送車。
【請求項7】
請求項1ないし6のいずれかに記載の無人搬送車と、
前記走行路に沿って、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影するランドマーク画像投影装置と、
を備える無人搬送車システム。
【請求項8】
前記ランドマーク画像投影装置が、前記走行路に沿って、床面、壁面、および/または、天井に、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影する機能を備えることを特徴とする請求項7に記載の無人搬送車システム。
【請求項9】
前記ランドマーク画像投影装置が、前記走行路と作業区間の境界となる通路部分にライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影する機能を備えることを特徴とする請求項7または8に記載の無人搬送車システム。
【請求項10】
前記ランドマーク画像投影装置に、特定の画像を投影させる投影指令を送信するサーバを備えることを特徴とする請求項7ないし9のいずれかに記載の無人搬送車システム。
【請求項11】
前記投影指令は、前記無人搬送車に第1の走行制御を行わせるための第1の画像および前記無人搬送車に第2の走行制御を行わせるための第2の画像を投影させる投影指令を含むことを特徴とする請求項10に記載の無人搬送車システム。
【請求項12】
前記サーバが、第1の時間帯に前記第1の画像を投影させる投影指令を送信し、第2の時間帯に前記第2の画像を投影させる投影指令を送信することを特徴とする請求項11に記載の無人搬送車システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、例えば、3D-SLAM(3dimension Simultaneous Localization AND Mapping)によるマップ更新機能を備え、自律走行が可能な無人搬送車および当該無人搬送車を含む無人搬送車システムに関する。
【背景技術】
【0002】
従来、有軌道式の無人搬送車(Automatic Guided Vehicle : AGV)の誘導方法としては、例えば、次のような方法が知られている。
(1)走行路に埋設され誘導ケーブルからの電波を無人搬送車が検出する方法
(2)走行路に誘導テープを貼り、磁気や反射光を無人搬送車が検出する方法
(3)走行路に誘導標識を設置し、誘導標識を無人搬送車が画像認識する方法
【0003】
しかしながら、これらの方法では、予め走行路に誘導設備を設置する必要がある。
そこで、近年、無人搬送車が障害物をセンサ等で認識し、自律的に走行する無軌道式の無人搬方法が研究されている。障害物回避経路生成方法としては、ルールベース法、(仮想)ポテンシャル法および探索法が主なものとして知られている。特許文献1には、仮想ポテンシャル法を採用し、レーザレンジファインダから読み込まれた周囲の物体との距離情報・角度情報に基づいて、移動領域の環境地図を構成する複数の部分地図を作成することができる自律移動装置が開示されている。この自律移動装置においては、SLAM(Simultaneous Localization and Mapping)を用いてリアルタイムで自己位置の推定と環境地図の作成することが行われている。
【先行技術文献】
【特許文献】
【0004】
【発明の概要】
【発明が解決しようとする課題】
【0005】
上記(1)の誘導方法においては、誘導ケーブルを埋設するコストが高く、走行路を簡単に変更することもできない。(2)の誘導方法においては、走行路上に設置した誘導テープが損傷すると誘導ができなくなるため、定期的に誘導テープを貼り替える必要がある。倉庫のように、無人搬送車の走行路とフォークリフトの動線が重なる環境においては、誘導テープの貼り替えスパンは通常よりも短くなるという課題がある。
【0006】
上記(3)の誘導方法においては、計測誤差が累積することにより作成された環境地図に不整合が生じること、特に、環状の環境地図を作成する際に、開始部分と終了部分が一致しなくなること(環状経路問題)の課題が指摘されている。また、走行路周辺のレイアウトが変更された場合、環境地図全体を作り直す必要があるという課題が指摘されている。そのため、特許文献1では、環境地図を複数の部分地図に分割して管理することで、計測誤差の範囲を部分地図にとどめ、またレイアウト変更時に再作成が必要な範囲を部分地図単位にとどめることが提案されている。
しかしながら、有人搬送車や作業員が同一スペースで作業を行うような環境においては、作業空間内のレイアウトが定常的に変化するため、想定外の環境変化により自己位置推定の精度が低下するという問題がある。また、倉庫内のレイアウト変更時に必要なシステムの設定変更を最小限にしたいというニーズもある。
【0007】
ところで、周囲の物体を把握する手段として、高価なレーザレンジファインダ(例えば、LiDAR(Light Detection and Ranging ))に代わる廉価なセンサを用いたいとのニーズがある。代替手段としてステレオカメラなどの安価な画像センサを用いることも考えられるが、無人搬送車の視野に外乱光が入射すると、周囲の物体把握が一時的に不能となり、無人搬送車が停止するという問題が生ずる。倉庫のように、屋外と連絡する入荷・出荷場所から常時外乱光が入射する環境下においては、ステレオカメラを用いて無人搬送車を構成することは困難であるという課題が存在している。
【0008】
そこで、本発明は、上記課題を解決することを可能とする無人搬送車および無人搬送車システムを提供することを目的とする。
【課題を解決するための手段】
【0009】
本発明の無人搬送車は、進行方向側の物体画像を撮像する画像センサと、複数の車輪の駆動を独立制御する駆動部と、環境地図に基づき走行路に沿って自律走行するための制御指令を駆動部に送信するロボット制御部と、無線通信部と、を備え、前記ロボット制御部が、画像センサからの画像情報に基づき環境地図およびルートを常時更新する機能と、前記走行路に沿って配置された特定の形状または模様の画像をランドマーク画像として環境地図上の座標情報と紐付けて登録する機能と、画像センサからの画像情報において特徴点認識を行い、環境地図と対照して現在位置を推定する第1の現在位置推定機能と、画像センサからの画像情報にランドマーク画像が含まれる場合、ランドマーク画像の座標情報に基づき現在位置を推定する第2の現在位置推定機能と、を備え、前記ランドマーク画像として、投影画像を含むことを特徴とする。
上記無人搬送車において、前記駆動部が、前記複数の車輪の回転情報をオドメトリ情報としてロボット制御部に送信する機能を備え、前記ロボット制御部が、前記オドメトリ情報および直前に記憶された現在位置情報に基づき現在位置を推定する第3の現在位置推定機能を備えることを特徴としてもよい。
上記無人搬送車において、前記ロボット制御部が、画像センサからの画像情報に仮想画像を付加した合成画像を連続生成する機能と、合成画像が含む仮想画像に基づき走行制御を行う機能と、を備えることを特徴としてもよい。
上記無人搬送車において、前記投影画像が、床面、壁面、および/または、天井に投影された、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像であり、前記ロボット制御部は、前記投影画像に基づき走行制御する機能を備えることを特徴としてもよい。
上記無人搬送車において、前記走行路に沿って投影されたラインに沿って走行するラインフォロー機能を備えることを特徴としてもよい。
上記無人搬送車において、前記ランドマーク画像が、二次元コードを含む人工コードの画像を含むことを特徴としてもよい。
【0010】
本発明の無人搬送車システムは、上記無人搬送車と、前記走行路に沿って、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影するランドマーク画像投影装置と、を備える無人搬送車システムである。
上記無人搬送車システムにおいて、前記ランドマーク画像投影装置が、前記走行路に沿って、床面、壁面、および/または、天井に、ライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影する機能を備えることを特徴としてもよい。
上記無人搬送車システムにおいて、前記ランドマーク画像投影装置が、前記走行路と作業区間の境界となる通路部分にライン、模様、人工コード、文字列、ロゴ、または、キャラクターの画像を投影する機能を備えることを特徴としてもよい。
上記無人搬送車システムにおいて、前記ランドマーク画像投影装置に、特定の画像を投影させる投影指令を送信するサーバを備えることを特徴としてもよい。
上記無人搬送車システムにおいて、前記投影指令は、前記無人搬送車に第1の走行制御を行わせるための第1の画像および前記無人搬送車に第2の走行制御を行わせるための第2の画像を投影させる投影指令を含むことを特徴としてもよい。
上記無人搬送車システムにおいて、前記サーバが、第1の時間帯に前記第1の画像を投影させる投影指令を送信し、第2の時間帯に前記第2の画像を投影させる投影指令を送信することを特徴としてもよい。
【発明の効果】
【0011】
本発明によれば、倉庫等の屋内施設において外乱光が入射する環境下においても安価な画像センサを用いて自律走行できる無人搬送車および無人搬送車システムを提供することが可能となる。また、倉庫内のレイアウト変更にも容易に対応することが可能である。
【図面の簡単な説明】
【0012】
【
図1】実施形態例に係る無人搬送車システムの構成図である。
【
図2】実施形態例に係る無人搬送車の平面図である。
【
図3】実施形態例に係る無人搬送車の側面図である。
【
図4】実施形態例に係る倉庫の走行路を説明するための平面図である。
【
図5】実施形態例に係るARマーカーが付された三角コーンおよび壁に貼られたカラーテープを説明する図である。
【
図6】本実施形態における壁ライン認識領域および床ライン認識領域を説明するための図である。
【
図7】床面に設けられた床誘導ラインを用いた走行制御方法を説明するための図である。
【
図8】壁に設けられた壁誘導ラインを用いた走行制御方法を説明するための図である。
【
図9】天井に設けられた天井誘導ラインを用いた走行制御方法を説明するための図である。
【
図10】走行中におけるルート補正のフローチャートである。
【
図11】補完情報を併用した現在位置取得のフローチャートである。
【
図12】撮像画像に仮想画像を付加した合成画像を動的に生成する合成画像生成機能を説明するための図である。
【発明を実施するための形態】
【0013】
以下では、本発明の実施形態例のシステム構成を説明し、次いで、本発明の搬送作業方法の一例として入出庫作業の手順を説明する。
<システム構成>
実施形態例の無人搬送車システムは、RMサーバ1と、WMSサーバ2と、管理端末3と、ハンディ端末4と、無線LAN親機5と、カゴ車6と、ランドマーク画像投影装置7と、複数台の無人搬送車10とを備えて構成される。ハンディ端末4、無線LAN親機5、カゴ車6、ランドマーク画像投影装置7および複数台の無人搬送車10は、倉庫等の屋内施設の作業場所に設置されている。
【0014】
RMサーバ1は、無人搬送車10の管理を実現可能とするサーバであり、CPUおよび記憶装置を備えたサーバ装置にRMソフトウェアおよびデータベースソフトウェアをインストールして構築されている。このRMソフトウェアは、主要な機能を実現するソフトウェアモジュールとして、搬送車管理部1aと、作業調整部1bと、作業場所管理部1cと、課金情報管理部1dとを備えている。
搬送車管理部1aは、無人搬送車10が配置される作業場所情報や無人搬送車10の稼働情報を管理する。搬送車管理部1aでは、無人搬送車10の車両IDと作業対象となる作業場所IDが紐付けられて管理されている。
作業調整部1bは、複数台の無人搬送車10の稼働時間を管理する。作業調整部1bは、無人搬送車10の車両IDと稼働作業対象となる作業場所IDが紐付けられて管理しており、課金情報算出のインプットデータとなる。なお、同一の建物内の同一スペースで複数台の無人搬送車10が稼働される場合もあれば、一台のみが稼働される場合もある。
作業場所管理部1cは、作業場所ごとの基本マップを管理し、無人搬送車10に基本マップを送信する。基本マップでは、通行可能コースと、禁止区域とが設定されている。なお、作業場所の基本マップの管理をRMサーバ1では行わず、作業場所に設置された無人搬送車10および管理端末にて管理する構成としてもよい。
課金情報管理部1dは、搬送車管理部1aから無人搬送車10の稼働情報を取得し、クライアント毎に料金テーブルを参酌して、課金情報を算出する。
投影装置管理部1eは、特定の画像を特定のランドマーク画像投影装置7に投影させる投影指令を送信する。投影装置管理部1eは、第1の時間帯と第2の時間帯とで異なる画像を投影させる投影指令を送信する機能も備えている。
【0015】
WMSサーバ2は、倉庫管理システム(Warehouse Management System)を実現可能とするサーバであり、CPUおよび記憶装置を備えたサーバ装置にWMSソフトウェアおよびデータベースソフトウェアをインストールして構築されている。このWMSソフトウェアは、主要な機能を実現するソフトウェアモジュールとして、在庫管理部2aと、注文処理部2bとを備えている。
【0016】
在庫管理部2aは、商品ID、保管先の番地、ステータス等を管理する在庫データベースを更新する。また、管理端末3から受信した入庫情報に応じて保管先の番地を割り当てる機能、入庫指示をハンディ端末4および無人搬送車10に送信する機能、入庫される商品の数量や配送状況のステータス等を管理する機能を備えている。
注文処理部2bは、管理端末3から受信した注文情報を管理する注文データベースを更新する。注文処理部2bは、注文情報に基づき出庫指示をハンディ端末4および無人搬送車10に送信し、ハンディ端末4から出庫情報を受信すると当該注文のステータスを完了に更新する。また、注文に応じて在庫を予約する引当機能を備えており、ある注文に応じた在庫の注文数で引当てると、その数量の分は他の注文からは予約ができなくなることで在庫が確保される。
【0017】
ランドマーク画像投影装置7は、例えば、レーザー光線照射装置やプロジェクターであり、倉庫内の走行路に沿って天井、壁面または床面に複数台設置されている。ランドマーク画像投影装置7は、RMサーバ1と通信可能に構成されており、RMサーバ1からの投影指令に基づき、ランドマーク画像として利用可能な特定の形状や模様の画像を床面、壁面または天井などに投影する。ランドマーク画像投影装置7が投影する特定の形状や模様の画像としては、例えば、点線を含むライン、円や楕円、三角形を含む多角形、幾何学模様、人工コード、文字列、企業のロゴ、キャラクターが例示される。時間帯により異なる画像をランドマーク画像投影装置7に投影させてもよい。実施形態例のランドマーク画像投影装置7は、旋回装置を備えており、RMサーバ1からの指令に基づき、投影位置を変えることが可能である。
無人搬送車10は、
図1に示すように、ロボット制御部11と、表示部12と、無線通信部13と、スピーカ14と、電源部15と、駆動系(21~23)と、センサ群(31~33)とを備えて構成される。
【0018】
図2および
図3に示すように、無人搬送車10の駆動系(21~23)はベース16の下面側に配置されており、その他のロボット制御部11等は、ベース16の上面側に配置されている。車輪19は駆動装置を有しない単輪であり、回転台18を介してベース16の下面に配置されている。
ベース16の進行方向側には、門形の枠17が設けられており、枠17の上部柱には表示部12を取り付けるためのアームと、非常停止ボタン24と、画像センサ33を吊り下げ固定するための固定具とが設けられている。
ベース16の進行方向と反対側には、係止柱42が設けられた連結部41が配置されている。図示の例では、コンテナを牽引可能なトレーラー50の係止板53が係止柱42に取り付けられている。トレーラー50は、ブロック状の胴部51と、長板状の支持部52と、一対の車輪54a,54bを備えた自走できない台車である。トレーラー50は、他のトレーラーをさらに連結することが可能である。
【0019】
ロボット制御部11は、ロボット開発用の標準プラットフォームであるROS(Robot Operating System)を用いて構成された搬送用ソフトウェアが稼働するコンピュータであり、マップ管理部111と、運行管理部112と、ルート生成部113と、センサ管理部114と、仮想画像生成部115と、を備えている。
マップ管理部111は、3D-SLAM(3dimension Simultaneous Localization AND Mapping)によるマップ更新機能を備えている。マップ更新機能により更新される環境地図は、フロアー図や基本通路等の変更されることがない部分についての基本マップと、複数の部分マップとから構成されている。マップ管理部111は、カゴ車や荷箱等の常時変更が生じる物体の位置および形状情報をセンサ群(31~33)からの信号に基づき把握し、走行しながら自身の周辺にある部分マップ(周辺マップ)をリアルタイム更新する。
【0020】
運行管理部112は、入出庫指示に基づき無人搬送車10の駆動系(21~23)を制御し、自律走行を可能とする。車軸に設けたエンコーダにより求められる車輪23a,23bの回転量の情報は、オドメトリ情報として記憶される。運行管理部112は、画像情報、オドメトリ情報、環境地図およびセンサ群(31~33)の観測データを用いて、RMサーバ1と通信を行うことなく自己位置を推定する機能を備えている(第1の現在位置推定機能)。ここで、別途6軸センサを設け、6軸センサからの情報も併用するようにしてもよい。自己位置の推定は、公知の推定方法(例えば、モンテカルロ法)を用いることができる。また、後述のラインフォロー機能を備えている。同一走行路で複数台の無人搬送車10を走行させる場合には、相互に自己位置を交換し、一定の車間距離を確保する機能を設けてもよい。運行管理部112は、画像センサからの画像情報に後述のランドマーク画像が含まれる場合、ランドマーク画像の座標情報に基づき現在位置を推定する第2の現在位置推定機能を備えている。
ルート生成部113は、ロボット制御部11の記憶装置に記憶された環境地図を利用して、RMサーバ1と通信を行うことなく、自律走行用のルートを生成する。入出庫位置となる商品の保管先の番地は、商品IDと紐づけて在庫管理部2aにより管理されている。トラック等の搬送車から荷受け・荷渡しをする荷さばき位置は、基本マップ上の番地により管理されている。入出庫指示が出されると、ルート生成部113は、基本マップおよび部分マップに基づき、荷さばき位置から入出庫位置までのルート(グローバルルート)を生成し、走行しながら部分マップが更新されると必要に応じて無人搬送車10の周辺ルート(ローカルルート)を補正する。
【0021】
センサ管理部114は、前方センサ(31a~31c)、側方センサ(32a,32b)および画像センサ33からの観測信号を検知し、マップ管理部111や運行管理部112等に送信する。前方にもうけられた3つの前方センサ(31a~31c)は、距離センサ(例えば超音波センサ)であり、前方に存在する物体を例えば180度以上の範囲で検出する。側方にもうけられた2つの側方センサ(32a,32b)は、距離センサ(例えば超音波センサ)であり、側方に存在する物体を例えば120度以上の範囲で検出する。前方・側方に設けられた5つのセンサ(31a~31c,32a,32b)が障害物(人を含む)を検知すると、センサ管理部114から検知情報を受信した運行管理部112は、障害物を回避するか、回避が難しい場合には走行を一時停止する制御を行う。
【0022】
仮想画像生成部115は、画像センサ33の撮像画像に仮想画像を付加した合成画像を動的に生成する合成画像生成機能を備えている。たとえば、仮想のラインの画像を付加した合成画像を動的に生成することで、当該付加された仮想のラインに基づき後述のラインフォロー機能を実行したり、方向転換位置を示すマークの画像を付加した合成画像を動的に生成することで、当該付加された仮想のマークに基づき方向転換制御をすることが可能となる。また、外乱光の入射する環境においては、仮想のランドマーク画像を付加した合成画像を動的に生成することで、走行制御をすることもできる。これらの場合、運行管理部112が保持している現在位置情報が正しいことが前提となるため、座標が既知のARマーカーやQRコード(登録商標)或いはバーコードなどの人工コード情報による補完情報を併用して現在位置を取得する構成とすることが好ましい。
【0023】
図12(a)は画像センサ33の撮像画像であり、(b)は画像センサ33の撮像画像に仮想画像を付加した合成画像であり、(c)は(b)の平面模式図である。
図12(b)に示す合成画像においては、仮想誘導ライン81と仮想制御標識82が画像センサ33の撮像画像に付加されている。この付加された仮想誘導ライン81と仮想制御標識82に基づき、運行管理部112は走行制御を行う。たとえば、仮想誘導ライン81がベース16の中央に位置するようにラインフォローし、仮想制御標識82で90度右折する走行制御を行うことを開示する。無人搬送車10の走行により撮像画像におけるランドマーク画像が変化するとリアルタイムで無人搬送車10の現在位置は補正されるので、仮に仮想誘導ライン81と仮想制御標識82の描画位置が不正確なものであったとしても、無人搬送車10の走行に伴い描画位置は補正される。
【0024】
画像センサ33は、距離をおいて配置された二次元画像を撮影するステレオカメラにより構成される。ステレオカメラは、独立した2つのカメラを固定して構成してもよいし、二つのレンズ機構およびシャッター機構を一体的に備えるものにより構成してもよい。画像センサ33は、色情報を認識できるようカラーカメラにより構成することが好ましい。画像センサ33は、ベース16の前面側に取り付けられ、無人搬送車10の前方の2次元画像を撮影し、マップ管理部111に送信する。
マップ管理部111は、画像センサ33の撮像画像に基づいて距離情報を有する三次元画像を生成する。また、マップ管理部111は、特定の形状や模様を有する物体の画像または床面や壁面などに投影された特定の形状や模様の画像をランドマーク画像として、座標と関連付けて登録する機能も有している。有体物からなるランドマークとしては、三角コーン(安全コーン)や支柱などの防護標識を登録することもできるし、カラーテープや吊り看板などを登録することもできるし、ARマーカーやQRコード(登録商標)などの二次元コードや非常出口のプレートなどの情報標識を登録することもできる。加えて、ランドマーク画像投影装置7から床面、壁面または天井に投影された特定の形状や模様の画像をランドマークとすることもできる。ランドマーク画像投影装置7からの画像の投影は、指定した座標に行うこともできる。作業場所またクラウド上にランドマーク画像を管理するサーバを設置し、作業場所内に配置された複数の無人搬送車10でランドマーク情報(画像および座標情報)を共有してもよい。防護標識および情報標識は、作業場所の背景とのコントラストが高くなるカラーが付されていることが好ましい。
【0025】
表示部12は、タッチスクリーンにより構成されており、情報入力部を兼ねている。実施形態例では、表示部12を、ロボット制御部11と通信可能なプログラムが稼働するタブレット型端末により構成した。表示部12には、ルート生成部113が作成した推奨ルートが表示される。作業者がルートを承認すると、ルート生成部113は承認ルートを配列データに変換する。推奨ルートが好ましくない場合は、ルート変更指示を出すことができ、ルート生成部113が作成した別のルートが表示される。
無線通信部13は、ハンディ端末4およびRMサーバ1と無線LAN(例えばWi-Fi)により双方向の通信を行うことを可能とする。ハンディ端末4とRMサーバ1の通信モジュールを別モジュールにより構成し、RMサーバ1との通信は、LPWA(Low Power Wide Area Network)により行うように構成してもよい。
スピーカ14は、汎用的なスピーカにより構成されており、無人搬送車10の走行中は走行中であることを知らせるためのメロディが発音される。無人搬送車10が異常により停止した場合には、スピーカ14から異常を知らせる警報が発音される。なお、異常停止時に警報を発音せず、表示部12に異常を知らせる画像を表示させてもよいし、別途設けた表示灯により異常を知らせる構成を採用してもよい。
電源部15は、充電可能な二次電池を備えており、無人搬送車10をケーブルフリーで走行させることを可能とする。電源部15は、接触式の充電装置に加え、充電エリアに無人搬送車10を位置させることで非接触充電を可能とする受電装置を底面部または側面部に備えている。なお、非接触充電は必須の構成ではなく、接触式の充電装置のみを備える構成としてもよい。
【0026】
駆動系(21~23)は、駆動制御装置21と、駆動装置22a,22bと、車輪23a,23bとから構成される。
駆動制御装置21は、ロボット制御部11からの指示に基づき駆動装置22a,22bのそれぞれの駆動を独立制御するコンピュータである。無人搬送車10の方向転換は、右側の駆動装置22aによる車輪23aの回転角速度と、左側の駆動装置22bによる車輪23bの回転速度とを変えることにより行われる。
駆動装置22a,22bは、直流(DC)モータ、交流(AC)モータ、エンコーダ付モータ、ギヤドモータ等などの汎用モータを備えて構成され、車輪23a,23bを任意の回転角速度で回転させることができる。駆動装置22a,22bは、例えば分速50m以下の速度で500kgの積み荷を搬送することが可能である。実施形態例と異なり、車輪23a,23bのかじ取りを行うステアリング装置を駆動装置に別途設けてもよく、この場合、前述のオドメトリ情報には操舵角情報も含まれる。
実施形態例では、車輪23a,23bに、エポキシ樹脂等で塗装された床面の走行に適したタイヤを採用している。車輪23a,23bの直径、幅、トレッドパターンの有無は、搬送する物品の重量や床面の状況に応じて最適なものを採用することができる。
【0027】
管理端末3は、ノートPC、デスクトップPC、タブレットなどの端末であり、RMサーバ1やWMSサーバ2の管理等のために用いられる。管理端末3から直接、ランドマーク画像投影装置7に投影指令を送信可能としてもよい。
ハンディ端末4は、ピッキング作業時のバーコードの読み取り等のために使用する携帯端末である。ハンディ端末4は、液晶画面等からなる表示部と、記憶装置等からなる記憶部と、プロセッサや内蔵時計等からなる制御部と、ボタン等からなる操作部と、バーコードリーダ部と、無線通信部と、二次電池とを備えている。本実施形態例では表示部と別に操作部を設けているが、表示部を情報入力が可能な液晶タッチ画面で構成してもよい。好ましい態様のハンディ端末4は、無人搬送車10のロボット制御部11と無線通信することが可能である。
無線LAN親機5が作業場所のフロアー内に配置されており、フロアー内のどの場所においても無線LAN例えばWi-Fi)へのアクセスが可能な環境が提供されている。
【0028】
図4は、実施形態例に係る倉庫の走行路を説明するための平面図である。図中、網掛けがされている箇所が走行路である。床面の走行路と作業区間の境界には、ランドマーク画像投影装置7により部分的に床ライン71が投影されている。床ライン71を投影することが難しい場所については、カラーテープ(例えば虎模様のテープ)または塗装により床ライン71を形成してよもよい。図中、点線で図示した境界ライン72は、走行路と作業区間の境界であって、人やフォークリフトの通路となる部分を示している。境界ライン72には、床ライン71と異なる色、異なる形状または異なる模様の画像をランドマーク画像投影装置7により投影することが好ましい。実施形態例では、床ライン71と境界ライン72を異なる色の線で形成することで区別可能としている。投影された境界ライン72は、人やフォークリフトが通行しても劣化することがないし、人が作業空間を視認することにも資する。また、境界ライン72をランドマーク画像とすることで、走行路中のランドマーク情報が増えるので、自律走行の精度を高めることが可能となる。また、ランドマーク画像投影装置7により後述の床誘導ライン76を走行路の主要な部分に投影してもよい。
【0029】
図5に示すように、走行路に沿った壁の画像センサ33に映り込む高さ(例えば、人の背よりも低い高さ)には作業者に注意喚起を促すためのカラーテープ(例えば虎模様のテープ)75が部分的に貼られている。カラーテープ75に代えて、塗装によりカラーラインを形成してもよい。走行制御をする上で必要な箇所には、ランドマーク画像投影装置7により後述の壁誘導ライン77および天井誘導ライン78が投影されている。
【0030】
図示の例では、エリアA、BおよびCのいずれかをスタート地点およびゴール地点に設定することができる。符号73で図示するのは腰の高さほどの支柱であり、支柱にはカラーリング(例えば虎模様のテープ)が施されている。符号74で図示するのはカラーコーン(登録商標。以下省略)である。カラーコーン74の一部には、
図5に示すようにARマーカー等の二次元コード79が付されている。走行路に接する柱の角部には、上下方向にわたりカラーテープ75が貼られている。カラーテープ75は塗装で代替することもできるし、ランドマーク画像投影装置7により特定の形状または模様の画像を投影してもよい。支柱73、カラーコーン74およびカラーテープ75は、作業者向けの標識としても機能するものである。このように、無人搬送車10が走行する空間には作業者向けの標識が設置されていることから、無人搬送車10はこれを特徴点情報をとして利用し、現在位置を把握するのに利用している。
【0031】
本実施形態に係る無人搬送車10は、床または壁に設けられた誘導ライン76,77を検出して自律走行する機能も有している。具体的には、無人搬送車10は、まず、画像センサ33により撮像した撮像画像において、床面の走行路に形成されている床誘導ライン76と、壁面に形成されている壁誘導ライン77を認識する。ここで、
図6は、本実施形態において、撮像画像中の領域に検出される誘導ラインが、床面に形成されたラインであるか、壁面に形成されたラインであるかを認識する方法を説明するための図である。
図6に示すように、本実施形態において、無人搬送車10の運行管理部112は、撮像画像の画面中央下側の領域を床誘導ライン認識領域として設定し、撮像画像の画面中央下側および画面上部を除く領域を壁誘導ライン認識領域として設定している。そして、運行管理部112は、床誘導ライン認識領域において特定の色情報を有するライン画像を検出した場合には、当該ラインは床面に形成された床誘導ライン76であると認識し、床誘導ライン76に基づく走行制御を行う。また、運行管理部112は、壁誘導ライン認識領域において特定の色情報を有するライン画像を検出した場合には、当該ラインは壁面に形成された壁誘導ライン77であると認識し、壁誘導ライン77に基づく走行制御を行う。
なお、
図6に示すように、床面の走行路に形成された床誘導ライン76および壁面に形成された壁誘導ライン77の両方を検出した場合には、両方のライン76,77に応じた走行制御を行わせることもできるし、特定の車両には床誘導ライン76に基づく第1の走行制御を行わせ、他の車両には壁誘導ライン77に基づく第2の走行制御を行わせることもできる。
【0032】
図7は、床面に形成した床誘導ライン76を用いた走行制御方法を説明するための図である。たとえば、無人搬送車10は、床面の走行路に床誘導ライン76を検出した場合、たとえば
図7(A)に示すように、検出した床誘導ライン76の長手方向における中心線上を、床誘導ライン76に沿って走行するように、走行制御を行うラインフォロー機能を備えることができる。あるいは、無人搬送車10は、たとえば
図7(B)に示すように、検出した床誘導ライン76を通路の端とみなし、床誘導ライン76を超えないように、あるいは、床誘導ライン76から一定距離離れて走行するように走行制御を行うことができる。ここで床ライン71または境界ライン72を床誘導ライン76として利用してもよい。
図8は、壁面に形成した壁誘導ライン77を用いた走行制御方法を説明するための図である。また、無人搬送車10は、走行路に沿った壁面に壁誘導ライン77を検出した場合には、
図8(A)および
図8(B)に示すように、検出した壁誘導ライン77から一定距離離れた位置を、壁誘導ライン77に沿って走行するように走行制御を行うことができる。ここで壁に貼られたカラーテープ75を壁誘導ライン77として利用してもよい。
【0033】
さらに、本実施形態において、無人搬送車10は、天井に貼り付けたカラーテープや、天井から吊り下げた吊り看板、梁、照明器具などの画像をランドマーク画像として座標と関連付けて登録する機能に加え、天井に設けられた誘導ラインを検出して自律走行する機能も備えている。
図9は、天井に設けられた天井誘導ライン78を用いた走行制御方法を説明するための図である。
図9に示すように、無人搬送車10の運行管理部112は、撮像画像の画面中央上側の領域を天井認識領域として設定する。運行管理部112は、天井認識領域においてライン画像を検出した場合には、当該ラインは天井に形成された天井誘導ライン78であると認識し、天井に形成された天井誘導ライン78に基づく走行制御を行う。たとえば、無人搬送車10は、検出した天井誘導ライン78の長手方向における中心線上を、天井誘導ライン78に沿って走行するように、走行制御を行うラインフォロー機能を備えることができる。天井誘導ライン78に基づく走行と、天井のランドマーク情報(たとえば、天井から吊り下げた吊り看板)を組み合わせて、吊り看板が真上に来る位置まで走行するように、走行制御を行うこともできる。特に、天井が低い病院などの施設では、天井に形成した天井誘導ライン78に基づいて走行制御を行うことは有用である。
【0034】
なお、
図6に示す床ライン認識領域および壁ライン認識領域、および
図9に示す天井認識領域は一例であり、適宜、範囲を変更することができる。また、無人搬送車10は、特徴点情報として各ライン(71,72,76~78)から現在位置を推定する場合にも、上述したように、撮像画像の床ライン認識領域において認識したラインを床面に形成された床ライン71、境界ライン72または床誘導ライン76として認識し、撮像画像の壁ライン認識領域において認識したラインを壁面に形成された壁誘導ライン77として認識し、あるいは、撮像画像の天井認識領域において認識したラインを天井誘導ライン78と認識することで、現在位置を推定することができる。
【0035】
また、上述した例では、狭い通路やカーブなどの走行路において、高精度かつ安定した走行制御を行うために、支柱73、カラーコーン74、カラーテープ75および天井に取り付けた看板(不図示)などを特徴点情報として利用し、現在位置を推定する構成を例示したが、これに限定されず、たとえば、非接触充電機器に近接して充電できるように、非接触充電機器の付近における現在位置を推定する構成とすることもできる。たとえば、
図4において、符号Dは充電エリアであり、符号Eは出入り口であり、符号Fは荷さばき場所である。符号Dの充電エリアでは、非接触で充電を行うための送電装置(図示せす)が配置されている。しかし、充電エリアではcmオーダーの精度で無人搬送車10を誘導しなくては、充電を行うことができない。そのため、無人搬送車10を送電装置に誘導するための床誘導ライン76が付されている。床誘導ライン76は、カラーテープで作成してもよいし、塗装により作成してもよいし、ランドマーク画像投影装置7により投影してもよい。ここで、カラーテープは、視認できるテープであれば足り、透光性のテープや模様が施されたテープも含まれる。また、床誘導ライン76は、点線からなるラインであってもよい。
運行管理部112は、画像センサ33がライン画像を検出すると、ラインに沿って無人搬送車10を誘導するラインフォロー機能を有している。ラインフォロー機能の実装形態としては、たとえば、あらかじめ設定した色情報を抜き出し、線の形状を認識することで、走行制御をすることが開示される。このラインフォロー機能により、無人搬送車10の受電装置が送電装置の上に位置するように、cmオーダーの精度で誘導することが可能である。
荷さばき場所Fは、トラック等の搬送車が発着する場所でもあり、外乱光の入射がある。
【0036】
無人搬送車10は、一定間隔でルート補正を行いながら走行している。
図10は、走行中におけるルート補正のフローチャートである。
STEP601:ロボット制御部11は、画像センサにより進行方向およびその周辺の画像情報を取得し、画像情報において特徴点認識を行う。特徴点認識の詳細については後述する。
STEP602:ロボット制御部11は、現在位置の取得が可能な場合はSTEP603に進み、現在位置の取得が不可能な場合はSTEP606に進む。
【0037】
STEP603:ロボット制御部11は、取得した現在位置に対応する部分マップを、画像情報に基づき更新する。
STEP604:ロボット制御部11は、設定されているルートの補正が必要かを判断し、必要である場合はSTEP605に進み、必要ない場合はSTEP601に戻る。
STEP605:ロボット制御部11は、設定されているルートを補正し、記憶装置に記憶する。
【0038】
STEP606:ロボット制御部11は、記憶装置からオドメトリ情報を取得し、記憶装置に直前に記憶された現在位置情報とオドメトリ情報に基づき現在位置を算出する。
STEP607:ロボット制御部11は、現在位置の取得が可能な場合はSTEP608に進み、現在位置の取得が不可能な場合はSTEP609に進む。
STEP608:ロボット制御部11は、取得した現在位置に対応する部分マップを、画像情報に基づき更新する。
STEP609:無人搬送車10を停止し、表示部12に異常を知らせる画面を表示させ、またはスピーカ14から停止を知らせる警報を発音する。
STEP610:ロボット制御部11は、設定されているルートの補正が必要かを判断し、必要である場合はSTEP605に進み、必要ない場合はSTEP601に戻る。
【0039】
STEP601における特徴点認識について補足の説明をする。周囲に設置されている物体が常時変更する倉庫では、カゴ車、商品箱などの常時移動される物体を含めた形で特徴点が抽出されるため、誤検知が生じやすい。そのため、実施形態例では、画像情報に基づく特徴点抽出により現在位置を取得できない場合には、ランドマーク情報や人工コード情報などの補完情報を併用して現在位置を取得している。
図11は、補完情報を併用した現在位置取得のフローチャートである。
【0040】
STEP701:ロボット制御部11は、画像センサが取得した進行方向およびその周辺の画像情報において特徴点認識を行い、基本マップおよび部分マップと対照し、現在位置の取得を試みる。
STEP702:現在位置の取得が可能な場合はSTEP706に進み、現在位置の取得が不可能な場合はSTEP703に進む。
STEP703:取得した画像情報に対する特徴点認識の結果に基づき、予め座標と関連付けて登録された補完情報を検出する。例えば、画像情報で抽出された特定のARマーカーの座標情報を読み出し、画像中におけるARマーカーの位置や大きさに基づき現在位置を算出する。
STEP704:現在位置の取得が可能な場合はSTEP706に進み、現在位置の取得が不可能な場合はSTEP705に進む。
STEP705:無人搬送車10を停止し、表示部12に異常を知らせる画面を表示させ、またはスピーカ14から停止を知らせる警報を発音する。
STEP706:ロボット制御部11は、取得した現在位置を記憶装置に記憶する。
【0041】
以上に説明した実施形態例の無人搬送車10は、誘導ケーブルや誘導テープを設置することなく、投影画像、周辺画像情報および安価な障害物センサに基づき自律走行を行うことが可能である。そのため、既存の倉庫においても、最小限の設備投資をすることで、無人搬送システムを構築することが可能である。
【0042】
また、ランドマーク画像投影装置7の投影画像の投影位置等を変更することにより、倉庫内のレイアウト変更に容易に対応することが可能である。また、投影した仮想のランドマーク画像を併用することで、外乱光の入射する環境においても、現在位置の取得精度を高めることが可能である。
【0043】
以上、本発明の好ましい実施形態例について説明したが、本発明の技術的範囲は上記実施形態の記載に限定されるものではない。上記実施形態例には様々な変更・改良を加えることが可能であり、そのような変更または改良を加えた形態のものも本発明の技術的範囲に含まれる。
実施形態例では、無人搬送車10がWMSサーバ2から入庫情報や注文情報を受信する構成を説明したが、WMSサーバ2と連携しない無人搬送車システムを構築してもよく、例えば、ハンディ端末4や作業場所に設置された管理端末から入出庫指示を無人搬送車10に送信するようにしてもよい。
また、
図10で説明した優先順序で現在位置取得を行わなくともよく、何の情報に基づき現在位置取得を優先して行うかは、ロボット制御部11により任意の優先度を設定することが可能である。例えば、距離センサやラインフォロー機能の優先度を画像センサ33からの情報に基づく現在位置取得に優先させてもよい。
【0044】
さらに、上述した実施形態では、特に、GPSを利用できない屋内施設として倉庫を例示して説明したが、本発明は倉庫での利用に限定されるものではなく、物品の搬送が行われる倉庫以外の屋内施設(たとえば、GPSが利用できない工場や病院)においても利用することもできる。
また、本発明は、カメラで周囲の物体を適切に認識できない場合において無人搬送車が停止してしまうことを防止する発明であり、このような場面として、外乱光が入射する環境を例示して説明した。しかしながら、周囲の物体を適切に認識できない場面としては、外乱光が入射する環境に限定されず、たとえば、季節や時間帯によりカゴ車などの搬送什器や商品などの荷物の物量・配置が変化した場合や、人やフォークリフトなどが同一環境下に混在する場合など、周囲の物品の配置が時間とともに変化する環境もあり、このような環境においても、本発明は有用である。
【0045】
さらに、本発明に係る無人搬送車を用いた作業は、入出庫作業に限定されず、無人搬送車10により荷物を搬送する必要がある各種作業に適用することができる。
【0046】
また、上述した実施形態では、画像センサ33を有する構成を例示したが、画像センサ33の数は特に限定されず、単一の画像センサ33を有する構成としてもよいし、複数の画像センサ33を有する構成としてもよい。複数の画像センサ33を有する構成の場合、複数の画像センサ33により撮像した複数の方位の撮像画像に基づいて、支柱73、カラーコーン74、カラーテープ75および天井に取り付けた看板(不図示)などの特徴点情報を認識し、現在位置の認識や走行制御を行うことで、現在位置の認識精度および走行制御の精度を高めることができる。
【符号の説明】
【0047】
1 RMサーバ
2 WMSサーバ
3 管理端末
4 ハンディ端末
5 無線LAN親機
6 カゴ車
7 ランドマーク画像投影装置
10 無人搬送車
11 ロボット制御部
12 表示部
16 ベース
21 駆動制御装置
22 駆動装置
23 車輪
31 前方センサ
32 側方センサ
33 画像センサ
71 床ライン
72 通路ライン
73 支柱
74 カラーコーン
75 カラーテープ
76 床誘導ライン
77 壁誘導ライン
78 天井誘導ライン
79 二次元コード
81 仮想誘導ライン
82 仮想制御標識