特開 2024-82203 ロボットの制御システム、情報管理プログラム、情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024082203

(43)【公開日】2024-06-19

(54)【発明の名称】ロボットの制御システム、情報管理プログラム、情報処理プログラム

(51)【国際特許分類】

   B25J 13/08 20060101AFI20240612BHJP

【ＦＩ】

B25J13/08 A

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2023014884

(22)【出願日】2023-02-02

(31)【優先権主張番号】P 2022195944

(32)【優先日】2022-12-07

(33)【優先権主張国・地域又は機関】JP

(71)【出願人】

【識別番号】591280485

【氏名又は名称】ソフトバンクグループ株式会社

(74)【代理人】

【識別番号】110001519

【氏名又は名称】弁理士法人太陽国際特許事務所

(72)【発明者】

【氏名】孫 正義

【テーマコード（参考）】

3C707

【Ｆターム（参考）】

3C707BS26

3C707BS27

3C707CS08

3C707FS01

3C707FT11

3C707KS08

3C707KT01

3C707KT05

3C707WA16

(57)【要約】

【課題】把持部による対象物の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行う。
【解決手段】把持部２０に複数の吸着パッド２４を取り付け、吸着パッド２４は、荷物１００を吸着し、指部２２Ａ、２２Ｂ、２２Ｃを曲げることにより、荷物１００を掴む。掌センサ２６で荷物１００の情報を検出し、荷物把持点設定処理が実行され、荷物１００の把持のための作業を選択する。例えば、荷物把持点設定処理の結果に基づき、「吸着」のみ、「掴み」のみ、「吸着」と「掴み」の併用等から選択し、設定した把持点に応じた、指部２２Ａ、２２Ｂ、２２Ｃの角度（開き度合い）を設定する。掌センサ２６による外観に基づき、把持部２０の指部２２Ａ、２２Ｂ、２２Ｃの角度を調整し、キューブデータに基づき、各指部２２Ａ、２２Ｂ、２２Ｃの把持点を特定することで、荷物１００を安定して把持することが可能である。
【選択図】図４

【特許請求の範囲】

【請求項1】

対象物を把持部により把持する作業を実行するロボットの制御システムであって、
前記ロボットに搭載され前記ロボットの動作を制御する情報処理装置と、複数の前記ロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、を有し、
前記情報管理サーバーが、
前記ロボットによる把持を待機する前記対象物からキューブデータを生成する解析部と、
前記解析部で生成したキューブデータを、前記対象物を識別するＩＤ情報に紐付けて、データベースに格納し、前記情報処理装置からの前記ＩＤ情報に基づく要求に対して前記キューブデータを送出する送出部と、を有し
前記情報処理装置が、
情報管理サーバーに対して、掌センサ部から取得した前記ＩＤ情報に基づき前記データベースから前記キューブデータを取得するキューブデータ取得部と、
前記キューブデータ取得部で取得したキューブデータから前記対象物の把持点を設定する設定部と、を有する、
ロボットの制御システム。

【請求項2】

対象物を把持する把持部と、前記把持部に設けられ前記対象物を吸着する吸着パッドと、前記把持部に設けられ前記対象物の形状及び位置を含む対象物情報を検出する掌センサ部と、を備え、前記対象物を前記把持部により把持する作業を実行するロボットの制御システムであって、
前記ロボットに搭載され前記ロボットの動作を制御する情報処理装置と、複数の前記ロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、を有し、
前記情報管理サーバーが、
前記ロボットによる把持を待機する前記対象物を、互いの相対位置を特定する座標を持った複数のブロックに細分化し、当該複数のブロック毎に前記対象物の内部情報を含む属性情報が記録されたキューブデータを生成する解析部と、
前記解析部で生成したキューブデータを、前記対象物を識別するＩＤ情報に紐付けて、データベースに格納する格納部と、
前記情報処理装置からの前記ＩＤ情報に基づく要求に対して該当する前記キューブデータを検索して、送出する送出部と、を有し
前記情報処理装置が、
前記掌センサ部の検出結果に基づき、前記ＩＤ情報と、当該対象物との対峙状態情報を受け付ける掌センサ情報受付部と、
情報管理サーバーに対して、掌センサ情報受付部で受け付けた前記ＩＤ情報と前記対峙状態情報とに基づき前記キューブデータを要求することで、前記データベースから前記キューブデータを取得するキューブデータ取得部と、
前記キューブデータ取得部で取得したキューブデータから前記対象物の把持点を設定する設定部と、を有する、
ロボットの制御システム。

【請求項3】

前記情報処理装置が、
前記掌センサ部の検出結果に基づいて、前記対象物を把持する機能として、前記吸着パッドで吸着する第１機能、前記把持部で掴む第２機能、前記第１機能及び前記第２機能を併用する第３機能の何れかを選択して、前記対象物を把持する動作を制御する動作制御部をさらに有する、請求項２記載のロボットの制御システム。

【請求項4】

前記掌センサ部が、
前記対象物の画像を撮影して当該対象物の種類を識別するカメラと、前記対象物の位置を特定するモーションプロセシングユニットとを備える、請求項２記載のロボットの制御システム。

【請求項5】

コンピュータを、
請求項１又は請求項２記載の情報管理サーバーの各部として動作させる、情報管理プログラム。

【請求項6】

コンピュータを、
請求項１又は請求項２記載の情報処理装置の各部として動作させる、情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ロボットの制御システム、情報管理プログラム、情報処理プログラムに関する。

【背景技術】

【0002】

工場の生産ラインにおいては作業を自動で行うための人型ロボットが使用されている。特許文献１には、人型ロボットの姿勢制御について記載されている。

【0003】

また、特許文献２には、弾性体アクチュエータで駆動されて複数の関節を有するロボットアームであって、ロボットアームの手先部に配設され支持面と接触することによりロボットアームを支持する手先支持部材と、手先支持部材と支持面との接触する力を制御すると同時にロボットアームの手先部の位置及び姿勢を制御する制御部により制御することが記載されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１９－０９３５０６号公報

【特許文献2】ＷＯ２０１１／００１５６９公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、従来の人型ロボットによる倉庫内でのピッキング作業において、例えば、荷物が陳列されている棚から当該荷物（シャンプーや、コンディショナー、化粧品、歯磨き粉、カップラーメン、菓子袋等の形状や重さ、硬さ、壊れやすさが違うもの）をピックアップし、所定の包装体（箱等）に収容してパッキングするような場面において、現状では人の手に頼っている。

【0006】

また、ロボットの把持部の構造をフィンガータイプとして対応しようとしても、指や腕の動きが遅いため、生産性が低い。

【0007】

本発明上記事実を考慮し、把持部による対象物の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行うことができるロボットの制御システム、情報管理プログラム、情報処理プログラムを得ることが目的である。

【課題を解決するための手段】

【0008】

本発明に係るロボットの制御システムは、対象物を把持部により把持する作業を実行するロボットの制御システムであって、前記ロボットに搭載され前記ロボットの動作を制御する情報処理装置と、複数の前記ロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、を有し、前記情報管理サーバーが、前記ロボットによる把持を待機する前記対象物からキューブデータを生成する解析部と、前記解析部で生成したキューブデータを、前記対象物を識別するＩＤ情報に紐付けて、データベースに格納し、前記情報処理装置からの前記ＩＤ情報に基づく要求に対して前記キューブデータを送出する送出部と、を有し前記情報処理装置が、情報管理サーバーに対して、掌センサ部から取得した前記ＩＤ情報に基づき前記データベースから前記キューブデータを取得するキューブデータ取得部と、前記キューブデータ取得部で取得したキューブデータから前記対象物の把持点を設定する設定部と、を有している。

【0009】

本発明によれば、ロボットに搭載されロボットの動作を制御する情報処理装置と、複数のロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、が連携して、ロボットの動作（特に、対象物の把持動作）が制御される。

【0010】

すなわち、情報管理サーバーでは、ロボットによる把持を待機する対象物からキューブデータを生成し、生成したキューブデータを、対象物を識別するＩＤ情報に紐付けて、データベースに格納し、情報処理装置からのＩＤ情報に基づく要求に対して前記キューブデータを送出する。

【0011】

また、情報処理装置では、掌センサ部の検出結果に基づき、ＩＤ情報と、当該対象物との対峙状態情報を受け付け、情報管理サーバーに対して、ＩＤ情報に基づきキューブデータを要求することで、データベースからキューブデータを取得し、取得したキューブデータから対象物の把持点を設定する。

【0012】

これにより、把持部による対象物の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行うことができる。

【0013】

本発明に係るロボットの制御システムは、対象物を把持する把持部と、前記把持部に設けられ前記対象物を吸着する吸着パッドと、前記把持部に設けられ前記対象物の形状及び位置を含む対象物情報を検出する掌センサ部と、を備え、前記対象物を前記把持部により把持する作業を実行するロボットの制御システムであって、前記ロボットに搭載され前記ロボットの動作を制御する情報処理装置と、複数の前記ロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、を有し、
前記情報管理サーバーが、前記ロボットによる把持を待機する前記対象物を、互いの相対位置を特定する座標を持った複数のブロックに細分化し、当該複数のブロック毎に前記対象物の内部情報を含む属性情報が記録されたキューブデータを生成する解析部と、前記解析部で生成したキューブデータを、前記対象物を識別するＩＤ情報に紐付けて、データベースに格納する格納部と、前記情報処理装置からの前記ＩＤ情報に基づく要求に対して該当する前記キューブデータを検索して、送出する送出部と、を有し、
前記情報処理装置が、前記掌センサ部の検出結果に基づき、前記ＩＤ情報と、当該対象物との対峙状態情報を受け付ける掌センサ情報受付部と、情報管理サーバーに対して、掌センサ情報受付部で受け付けた前記ＩＤ情報と前記対峙状態情報とに基づき前記キューブデータを要求することで、前記データベースから前記キューブデータを取得するキューブデータ取得部と、前記キューブデータ取得部で取得したキューブデータから前記対象物の把持点を設定する設定部と、を有している。

【0014】

本発明によれば、ロボットに搭載されロボットの動作を制御する情報処理装置と、複数のロボットの前記対象物の把持に関する情報を一括管理する情報管理サーバーと、が連携して、ロボットの動作（特に、対象物の把持動作）が制御される。

【0015】

すなわち、情報管理サーバーでは、ロボットによる把持を待機する対象物を、互いの相対位置を特定する座標を持った複数のブロックに細分化し、当該複数のブロック毎に対象物の内部情報を含む属性情報が記録されたキューブデータを生成し、生成したキューブデータを、対象物を識別するＩＤ情報に紐付けて、データベースに格納し、情報処理装置からのＩＤ情報に基づく要求に対して該当するキューブデータを検索して、送出する。

【0016】

また、情報処理装置では、掌センサ部の検出結果に基づき、ＩＤ情報と、当該対象物との対峙状態情報を受け付け、情報管理サーバーに対して、ＩＤ情報と対峙状態情報とに基づきキューブデータを要求することで、データベースからキューブデータを取得し、取得したキューブデータから対象物の把持点を設定する。

【0017】

これにより、把持部による対象物の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行うことができる。

【0018】

本発明において、前記掌センサ部が、前記対象物の画像を撮影して当該対象物の種類を識別するカメラと、前記対象物の位置を特定するモーションプロセシングユニットとを備えることを特徴としている。

【0019】

カメラは、撮影した画像情報に基づき、撮影された対象物を識別する。すなわち、対象物の種類（形状、大きさ、硬さ等）を特定するための情報を取得する役目を有する。

【0020】

モーションプロセシングユニット（ＭｏＰＵ）は、物体の存在位置を示す点の、所定の座標軸に沿った動きのベクトル情報を動き情報として出力する。すなわち、ＭｏＰＵから出力される動き情報には、対象物の中心点（又は重心点）の座標軸（ｘ軸、ｙ軸、ｚ軸）上の動き（移動方向と移動速度）を示す情報のみが含まれている。すなわち、把持部が対象物に接近するときの軌跡を精度よく案内することができる。

【0021】

本発明において、前記情報処理装置が、前記掌センサ部の検出結果に基づいて、前記対象物を把持する機能として、前記吸着パッドで吸着する第１機能、前記把持部で掴む第２機能、前記第１機能及び前記第２機能を併用する第３機能の何れかを選択して、前記対象物を把持する動作を制御する動作制御部をさらに有している。

【0022】

動作制御部が、掌センサの検出結果に基づいて、対象物を把持する機能として、吸着パッドで吸着する第１機能、把持部で掴む第２機能、第１機能及び前記第２機能を併用する第３機能の何れかを選択して、対象物を把持する動作を制御する。

【0023】

これにより、把持部による対象物（以下、荷物という場合がある。）の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行うことができる。

【0024】

本発明に係る情報管理プログラムは、コンピュータを、上記情報管理サーバーの各部として動作させることを特徴としている。

【0025】

本発明に係る情報処理プログラムは、コンピュータを、上記情報処理装置の各部として動作させることを特徴としている。

【0026】

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

【発明の効果】

【0027】

以上説明したように本発明によれば、把持部による荷物の位置の確認、掴み、及び把持の一連の作業を迅速かつ確実に行うことができるという効果を奏する。

【図面の簡単な説明】

【0028】

【図1】本実施の形態に係る人型ロボットの正面図である。

【図2】本実施の形態に係る人型ロボットの側面図である。

【図3】（Ａ）は本実施の形態に係る把持部の掌側の正面図、（Ｂ）は把持部に取り付けた吸着パッドの斜視図である。

【図4】（Ａ）は本実施の形態に係る把持部の斜視図、（Ｂ）は変形例に係る把持部の斜視図である。

【図5】（Ａ）は本実施の形態に係る人型ロボットの機能構成(制御系)のブロック図、（Ｂ）は図５（Ａ）の情報処理装置で実行される処理機能の内、荷物把持点設定機能に特化した機能ブロック図である。

【図6】本実施の形態に係る情報処理装置によって実行される処理ルーチンを示す制御フローチャートである。

【図7】図４の人型ロボットの全体の動作に連動し、把持部によって荷物を把持する際の把持制御の手順を示すフローチャートである。

【図8】図７のステップ１５７における、荷物把持点設定処理サブルーチンの詳細を示す制御フローチャートである。

【図9】本実施の形態に係る荷物集配サイトに設置された解析装置の概略図、及び解析装置から受け付けた情報に基づいて生成されたキューブデータを管理する情報管理サーバーの機能ブロック図である。

【図10】荷物の種類に応じた、可視画像と、Ｘ線センサによる検出画像との対応関係を比較図である。

【図11】情報処理装置として機能するコンピュータハードウェアの一例を概略的に示す図である。

【図12】（Ａ）本実施の形態で適用されるキューブデータの概念を可視化して示した概略構成図、（Ｂ）は各ブロックの座標毎に分類された属性情報を示す図表である。

【発明を実施するための形態】

【0029】

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施の形態は特許請求の範囲に係る発明を限定するものではない。また、実施の形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

【0030】

図１は本実施の形態に係る人型ロボットの正面図である。図１に示すように、本実施の形態に係る人型ロボット１は、上半身部２、脚部３、および上半身部２を脚部３に対して回動可能に連結する連結部４を備え、例えば工場の生産ライン等に配置されて、ピッキング対象物である荷物１００等が陳列されている棚を含むライン上、又は床上の対象物（落下物等）に対して作業を行うものである。なお、作業は、棚から荷物１００を把持するピッキング以外に、把持した荷物１００を所定の筐体（ダンボール等）に収容するパッキングを含む。

【0031】

上半身部２は２本の腕部５、６を有する。腕部５、６は上半身部２の左右に回動自在に取り付けられている。また、腕部５、６の先端には荷物１００を把持するための把持部２０（詳細後述）が取り付けられている。なお、腕部は２本に限定されるものではなく、１本あるいは３本以上であってもよい。

【0032】

脚部２は２つの車輪７、８がその下部に取り付けられており、人型ロボット１が配置される床の上を移動可能とされている。

【0033】

連結部４は、上半身部２と脚部３を回動可能に連結する。このため、上半身部２は、脚部３に対して前傾および後傾が可能となっている。このため、本実施の形態に係る人型ロボット１は、図２に示すように、脚部３に対して上半身部２を前傾させて、棚に置かれた荷物１００や、床に置かれていたり、作業中に床に落ちたりした荷物１００を拾うことが可能である。

【0034】

なお、脚部２は、上半身部２が脚部３に対して前傾または後傾したり、人型ロボット１が移動したりした際に、人型ロボット１が転倒しないようにするためのバランス機能を有する。

【0035】

また、連結部４は、図１に示すように上半身部２と脚部３との距離を変更可能な機能を有する。このため、生産ラインにおける作業台の高さに合うように、脚部３に対する上半身部２の上下方向の位置を矢印Ａに示すように調整することができる。

【0036】

また、本実施の形態に係る人型ロボット１は、人型ロボット１内に実装された制御システム１０によりその駆動が制御される。

【0037】

（把持部２０の構造）
図３（Ａ）に示される如く、腕部５、６の先端に取り付けられた把持部２０は、人間と同様の手の構造とされ、把持部２０は、腕部５、６に対して、回転自在に取り付けられている（Intelligent Hand System）。

【0038】

本実施の形態に示す把持部２０は、各々複数の関節を備えた３本の指部２２Ａ、２２Ｂ、２２Ｃを有している。本実施の形態では、この３本指構造は、図４（Ａ）に示される如く、右手及び左手共に同一としているが、図４（Ｂ）に示される如く、５本指構造であってもよい。

【0039】

把持部２０の掌側２０Ａには、複数（本実施の形態では、３個）の吸盤パッド２４が取り付けられている。

【0040】

また、３本の指部２２Ａ、２２Ｂ、２２Ｃには、関節部を境界として、各々、複数（本実施の形態では２個）の吸盤パッド２４が取り付けられている。

【0041】

さらに、本実施の形態の把持部２０の掌側２０Ａには、掌センサ２６が取り付けられている。掌センサ２６は、荷物１００の種類を識別する高解像度カメラ、及び、荷物１００の位置を特定するＭｏＰＵ（Motion Processing Unit）を備えている。

【0042】

図３（Ｂ）に示される如く、吸盤パッド２４は、荷物１００を把持するときに対峙させるゴム製のパッド部２４Ａと、パッド部２４Ａと荷物１００との密着により形成される密閉空間のエアーを吸引する空気流路を形成するニップル２４Ｂとで構成されている。

【0043】

すなわち、本実施の形態の吸盤パッド２４は、エアー吸着構造であり、ニップル２４Ｂに設けられた孔２４Ｃから、密閉空間内の空気を吸引して真空（ほぼ真空を含む）することで、吸着力を持つ。なお、吸盤パッド２４は、エアー吸着構造に限らず、単純にパッド部２４Ａの変形による密閉空間の容積を変化させて吸着させる構造であってもよい。

【0044】

（掌センサ２６の詳細）
本実施の形態の掌センサ２６を構成する高解像度カメラは、撮影した画像情報に基づき、撮影された荷物１００が何であるかシャンプー、コンディショナー、化粧品、歯磨き粉等のケア商品なのか、又は、カップラーメン、菓子袋等の食品なのかを識別する。

【0045】

言い換えると、高解像度カメラは、荷物１００の種類（形状、大きさ、硬さ等）を特定するための情報を取得する役目を有する。

【0046】

一方、高解像度カメラと共に、本実施の形態の掌センサ２６を構成するＭｏＰＵは、１０００フレーム／秒以上のフレームレートで撮影された荷物１００の画像から、撮影された荷物１００の動き（この場合、腕部５、６との間の相対的な動きとなる。）を示す動き情報を、例えば１０００フレーム／秒以上のフレームレートで出力する。なお、移動中の荷物１００を検知する場合、フレームレートを上げて、固定物（移動しない荷物１００）を検知する場合、フレームレートを下げるようにしてもよい。

【0047】

ＭｏＰＵは、荷物１００の存在位置を示す点の、所定の座標軸に沿った動きのベクトル情報を動き情報として出力する。すなわち、ＭｏＰＵから出力される動き情報には、撮影された荷物１００が何であるか（上記ケア商品、食品）を識別するために必要な情報は含まれておらず、当該荷物１００の中心点（又は重心点）の座標軸（ｘ軸、ｙ軸、ｚ軸）上の動き（移動方向と移動速度）を示す情報のみが含まれている。

【0048】

すなわち、把持部２０が荷物１００に接近するときの軌跡を精度よく案内することができる。

【0049】

高解像度カメラ及びＭｏＰＵを含む掌センサ２６から出力された情報は、情報処理装置１４に供給される。

【0050】

人型ロボット１が搭載する情報処理装置１４（図５（Ａ）参照）は、高解像度カメラ及びＭｏＰＵを含む掌センサ２６からの情報により、高精度に荷物１００の位置を特定し、把持するときの指部２２Ａ、２２Ｂ、２２Ｃの広がり度合い、掴むときの強度、及び吸盤パッド２４による吸着力等を演算し、腕部５、６及び把持部２０の微小な動きを、精度よくコントロールし、様々な荷物１００のピッキング作業に対応することができる。

【0051】

図５（Ａ）は、本実施の形態に係る人型ロボットの制御システム１０の概略図である。制御システム１０は、人型ロボットに搭載されるセンサ１２と、高解像度カメラ及びＭｏＰＵを含む掌センサ２６と、情報処理装置１４とを備えている。

【0052】

センサ１２は、人型ロボット１の周辺にある、人型ロボット１が作業する荷物１００と腕部５、６との距離および角度を少なくとも表す情報を逐次取得することが主体であり、前述した掌センサ２６とは異なり、人型ロボット１自身の動作に関わる情報を取得する。

【0053】

センサ１２としては、最高性能のカメラ、ソリッドステートＬｉＤＡＲ、マルチカラーレーザ同軸変位計、又はその他様々なセンサ群が採用され得る。また他には、センサ１２の機能として、振動計、サーモカメラ、硬度計、レーダー、ＬｉＤＡＲ、高画素・望遠・超広角・３６０度・高性能カメラ等が挙げられ、機能として、ビジョン認識、微細音、超音波、振動、赤外線、紫外線、電磁波、温度、湿度、重量、スポットＡＩ天気予報、高精度マルチチャネルＧＰＳ、低高度衛星情報、又はロングテールインシデントＡＩ ｄａｔａを検出し得るセンサ等が挙げられる。

【0054】

なお、センサ１２は、上記の情報のほかに、画像、距離、振動、熱、匂い、色、音、超音波、紫外線、又は赤外線等を検知する。他にセンサ１２が検知する情報としては、人型ロボット１の重心移動、人型ロボット１が設置される床の材質の検知、外気温度の検知、外気湿度の検知、床の上下横斜め傾き角度の検知、水分量の検知等が挙げられる。

【0055】

センサ１２は、これらの検知を例えばナノ秒毎に実施する。

【0056】

掌センサ２６（高解像度カメラ及びＭｏＰＵ）は、腕部５、６の把持部２０に設けられるセンサであり、センサ１２とは別に、荷物１００を撮影するカメラ機能、及び、荷物１００位置を特定する位置特定機能を有する。

【0057】

なお、１つのＭｏＰＵ１２を用いた場合には、の荷物１００の存在位置を示す点の、三次元直交座標系における２つの座標軸（ｘ軸及びｙ軸）の各々に沿った動きのベクトル情報を取得することが可能である。ステレオカメラの原理を利用して、２つのＭｏＰＵ１２を用いて、の荷物１００の存在位置を示す点の、三次元直交座標系における３つの座標軸（ｘ軸、ｙ軸、ｚ軸）の各々に沿った動きのベクトル情報を出力してもよい。ｚ軸は、奥行方法（車両の走行）に沿った軸である。

【0058】

情報処理装置１４は、情報取得部１４０と、制御部１４２と、情報蓄積部１４４とを備えている。

【0059】

情報取得部１４０は、センサ１２及び掌センサ２６（高解像度カメラ及びＭｏＰＵ）によって検知された荷物１００の情報を取得する。

【0060】

制御部１４２は、情報取得部１４０がセンサ１２から取得した情報とＡＩ（Artificial intelligence）とを用いて、連結部４の回動動作、上下方向の移動動作および腕部５、６の動作等を制御する。

【0061】

また、制御部１４２は、情報取得部１４０が掌センサ２６（高解像度カメラ及びＭｏＰＵ）から取得した情報を用いて、荷物１００の種類（形状、大きさ、硬さ等）及び位置を詳細に把握し、当該外形や位置に応じて、掌側２０Ａを対峙させ、吸着パッド２４により吸着し、かつ、３本の指部２２Ａ、２２Ｂ、２２Ｃで掴むように制御する（把持制御）。なお、外形情報に基づいて、対象物（荷物１００）の種類を把握して把持制御（「吸着」のみ、「掴み」のみ、「吸着」と「掴み」の併用等）を選択してもよい。

【0062】

例えば、制御部１４２は、全体の動作として、以下の各処理を実行する。
（１）棚及び床にある荷物１００を拾い上げることが可能なように連結部４を駆動して、上半身部２を前傾または後傾させる。
（２）荷物１００をつかむことが可能なように腕部５、６および把持部を駆動する。
（３）生産ラインの作業台の高さに合うように、上半身部２を脚部３に対して上下に駆動する。
（４）人型ロボット１の転倒を防ぐために、バランスを取る。
（５）人型ロボット１がカート等を押し進めることができるように、車輪７、８の駆動を制御する。

【0063】

情報処理装置１４は、例えば、床にある荷物１００を拾う場合、図６に示されているフローチャートを繰り返し実行する。

【0064】

ステップＳ１００において、情報取得部１４０は、センサ１２によって検知された荷物１００の情報を取得する。

【0065】

ステップＳ１０２において、制御部１４２は、ステップＳ１００で取得された荷物１００に関する情報とＡＩとを用いて、連結部４および腕部５、６を制御することにより、床にある荷物１００を拾い上げる。

【0066】

ステップＳ１０４において、制御部１４２は、拾った荷物１００を所定位置へ移動する。

【0067】

本実施の形態によれば、人型ロボット１は、上半身部２、脚部３および上半身部２と脚部３とを回動自在に連結する連結部４を備える。また、センサ１２が取得した情報に基づいて連結部４の回動を制御するようにした。このため、人型ロボット１と荷物１００との距離や角度を判断することができ、これにより、床にある荷物１００を拾い上げるような動作を行うことができる。

【0068】

また、連結部４は上半身部２と脚部３との距離を変更可能であるため、生産ラインにおける作業台の高さに合うように、脚部３に対する上半身部２の上下方向の位置を調整することができる。

【0069】

また、脚部２は、上半身部２が脚部３に対して前傾または後継した際に、人型ロボット１が転倒しないようにするためのバランス機能を有する。このため、生産ラインにある荷物１００を押したり引いたりする作業を行った際の人型ロボット１の転倒を防止できる。したがって、転倒による人型ロボット１の故障、あるいは人型ロボット１の周囲にいる人物の怪我等を防止することができる。

【0070】

（荷物１００の把持制御）
ここで、本実施の形態に係る情報処理装置１４では、荷物１００の把持制御において、荷物１００の内部の状況に応じて、最適な把持点を設定し、例えば、把持した後の脱落、滑り、走行中のがたつき等を抑制するようにした。

【0071】

すなわち、荷物１００を把持する前に、荷物１００に関する情報を管理する情報管理サーバー６０（図９参照、詳細後述）から、荷物１００の内部の状況を示すキューブデータを受け取って、当該キューブデータから、荷物１００の内部情報を推定して、把持点を設定するようにした。

【0072】

キューブデータとは、図１２に示される如く、三次元グリッドＧ上に、集合体である荷物１００の形状を、細かいブロック（キューブ）ＣＢで構成したものである(図１２（Ａ）の斜線参照)。１つの集合体（荷物１００）の中で、互いの相対位置を特定する座標を持っており、当該座標に応じて配置すると、荷物１００の外形に基づく三次元形状に組み付けられるものである。また、キューブデータは、それぞれ三次元モデルデータ（例えば、ポリゴンデータ）の外形だけでなく、図１２（Ｂ）に示される如く、各ブロックＣＢの座標を識別情報として、内部構造、使用する材料、接合強度、重さ等の様々な属性情報が記録されている。従って、キューブデータは、単純に外観（輪郭）を示すポリゴンデータとは異なり、内部の状態が認識可能な情報である。なお、ブロックＣＢは、荷物１００の一部を示している。

【0073】

以下に、荷物１００のキューブデータに基づき把持点を設定する場合を例示する。なお、以下の例示以外にキューブデータを用いた把持点設定を否定するものではない。

【0074】

（例示１） 荷物１００の外形を正確に把握する。
例えば、掌センサ２６（高解像度カメラ及びＭｏＰＵ）による画像情報から荷物１００の外形は認識可能であるが、吸着パッド２４で吸着する点の表面について認識できない場合がある。例えば、細かい凹凸があり、吸着パッド２４の吸着力が低下するため、表面が平坦であることが好ましい。この場合、荷物１００の輪郭部分に位置するキューブデータから材質を読み出し、平坦の領域を検索し、把持点とする。

【0075】

（例示２） 荷物１００の重心を正確に把握する。
荷物１００が包装されている場合に、内容部が必ずしも中央に収容されているとは限らず、外形だけで把持点を設定すると、所謂片持ち状態となり、安定した把持ができない場合がある。そこで、キューブデータ全体の重さ分布に基づき重心位置を演算し、バランスのよい把持点を設定する。例えば、当該重心位置が複数の把持点を結ぶ線上となるように把持点を設定する。

【0076】

（例示３） 荷物１００の硬さ（特に、外観の硬さ）を正確に把握する。
荷物１００を把持するとき、比較的硬くて平坦であれば、吸着パッド２４による把持が有効であり、比較的柔らかく凹凸があれば、指２２による掴みが有効である。

【0077】

一方、包装材が薄い場合、吸着パッド２４の吸着であっても、指２２による掴みであっても、その把持力が重要になる。

【0078】

そこで、キューブデータに基づいて、基本的な手順で把持点を設定すると共に、荷物１００の内部の属性情報に基づいて、適正な把持力での把持が可能な把持点を調整（変更）する。

【0079】

なお、キューブデータの各ブロックを、記録された属性情報を含めて、ボクセルという場合がある。

【0080】

ボクセルとは三次元的な画素値である。二次元的な画素値であるピクセルを平面的に配置することで、画像を形成するように、三次元的な画素値であるボクセルを立体的に配置することで、物体を形成する。

【0081】

図５（Ｂ）は、情報処理装置１４で実行される処理機能の内、荷物把持点設定機能に特化した機能ブロック図である。

【0082】

情報処理装置１４は、荷物把持点設定機能として掌センサ情報受付部６２を備える。

【0083】

掌センサ情報受付部６２では、掌センサ２６から把持しようとする荷物１００の外観画像情報を受け付け（図９参照）、荷物ＩＤ読取部６４及び輪郭解析部６６へ送出する。

【0084】

荷物ＩＤ読取部６４では、荷物１００の外観画像から、荷物１００に貼り付けられているラベル等から、荷物１００を識別するためのＩＤ情報である荷物ＩＤを読み取る。荷物ＩＤは、予め情報管理サーバー６０（図９参照）に記憶されている荷物の内容に関する情報（キューブデータ、送り主、送り先等））と紐付けられている。

【0085】

荷物ＩＤ読取部６４は、荷物ＩＤ送信部６８に接続され、読み取った荷物ＩＤを荷物ＩＤ送信部６８へ送出する。

【0086】

荷物ＩＤ送信部６８では、荷物ＩＤを情報管理サーバー６０（図９参照）へ送出する。

【0087】

受信部７０は、当該荷物ＩＤ送信部６８による荷物ＩＤの送信の応答として、キューブデータを受け取り、輪郭照合部７２へ送出する。

【0088】

すなわち、荷物ＩＤ送信部６８及び受信部７０が、荷物ＩＤに基づきキューブデータを取得するためのキューブデータ取得部として機能する。

【0089】

一方、輪郭解析部６６では、掌センサ２６からの荷物１００の外観画像に基づいて、人型ロボット１に対峙している状態の荷物１００の輪郭を解析し、輪郭照合部７２へ送出する。

【0090】

輪郭照合部７２では、荷物１００の外観の向きを、人型ロボット１の対峙状態での向きと、データ上の向きとを考慮した照合が実行され、内部情報推定部７４へ送出される。

【0091】

内部情報推定部７４では、キューブデータの各ボクセルの属性情報に基づいて、荷物１００の重量、材質、重心位置等を推定する。

【0092】

内部情報推定部７４は、把持点設定部７６に接続されており、この把持点設定部７６へ前記荷物１００の重量、材質、重心位置等の推定情報を送出する。

【0093】

把持点設定部７６では、推定情報に基づいて、把持点を設定する。例えば、把持点はなるべく平坦で硬い方が好ましく、重心位置に近い位置が好ましい。

【0094】

把持点設定部７６は、把持実行部７８に接続されており、把持実行部７８では、把持点設定部７６で設定した把持点に基づいて、荷物１００の把持が実行される。

【0095】

（作業実行サイト）
図９に示される如く、荷物１００は、荷物集配サイト及びピッキングサイトによって作業が実行される。

【0096】

荷物集配サイトでは、コンベア装置５０が設けられている。コンベア装置５０のベルト５０Ａは、図示しない駆動力で、図９の矢印Ａ方向に移動しており、荷物１００が順次、図９の左から右へと搬送され、荷物１００を所定の棚に収容する等の集配作業が実行される。

【0097】

一方、ピッキングサイトでは、人型ロボット１が、荷物集配サイトで棚等に収容された荷物１００をピッキングして、搬送や梱包等の作業を実行する。

【0098】

荷物集配サイトのコンベア装置５０には、Ｘ線解析装置５２が設置されている。

【0099】

Ｘ線解析装置５２は、筐体の上部（ベルト５０Ａよりも上側）にＸ線発生装置５４が配置され、筐体の下部（ベルト５０Ａよりも下側にＸ線ラインセンサ５６が配置されている。

【0100】

Ｘ線発生装置５４及びＸ線ラインセンサ５６は、それぞれコントローラ５８に接続され、荷物１００が検査位置に到達すると、コントローラ５８の指示により、Ｘ線発生装置５４からＸ線を照射し、荷物１００を通過したＸ線をＸ線ラインセンサ５６で検出する。

【0101】

コントローラ５８では、Ｘ線ラインセンサ５６による検出情報（Ｘ線画像情報）を、荷物１００を識別するＩＤ（荷物１Ｄ）と紐付けて、一時的に記憶する。

【0102】

図１０は、荷物１００の種類に応じた、可視画像と、Ｘ線センサ２７による検出画像との対応関係を比較図である。

【0103】

図１０では、食品トレイ、スパウトパウチ、真空パック、缶詰、及びＰＴＰ（プレススルーパッケージ）を例示しているが、何れにおいても、質量の大きい（比重の大きい）部分がＸ線画像として表示されるため、可視画像に比べて、重量、材質、重心位置等、キューブデータの各ボクセルに記録するデータの解析が容易となる。

【0104】

なお、図１０において例示した荷物１００以外（例えば、ダンボールで梱包された荷物１００であり、当該ダンボール内部の品物の位置等）でも、Ｘ線センサ２７による画像は、重心位置の解析において有効である。ダンボールを含めて荷物１００であるが、内部の一部に本来の商品が存在し、その他が空間になっている場合がある。このような場合、Ｘ線センサによる画像情報は、内部の商品の位置を把握することができる。

【0105】

また、本実施の形態では、荷物１００の内部を、Ｘ線解析装置５２を用いて解析したが、赤外線解析装置等、他の内部検査デバイスを用いてもよい。

【0106】

（情報管理サーバー６０）
Ｘ線解析装置５２のコントローラ５８は、情報管理サーバー６０と接続されており、コントローラ５８に一時的に記憶した荷物ＩＤとＸ線画像情報とを情報管理サーバー６０へ送信する。

【0107】

情報管理サーバー６０は、情報収集制御部８０と、情報提供制御部８２とを備えている。

【0108】

「情報収集制御部８０」
情報収集制御部８０は、情報受付部８４を備え、前記コントローラ５８に一時的に記憶した荷物ＩＤとＸ線画像情報を受け付ける。

【0109】

情報受付部８４は、解析部８６に接続され、受け付けた荷物ＩＤとＸ線画像情報を解析部８６へ送出する。

【0110】

解析部８６では、Ｘ線画像情報を解析して、キューブデータを生成する。生成したキューブデータは、荷物ＩＤと紐付けられたキューブデータとしてデータベース８８に格納される。

【0111】

データベース８８は、送出部８９に接続され、後述する情報提供制御部８２からの要求に基づいて、荷物ＩＤに紐付けられたキューブデータを送出する。なお、データベース８８は、情報管理サーバー６０に設けることは必須ではなく、外部のストレージを利用してもよい。

【0112】

「情報提供制御部８２」
情報提供制御部８２は、受信部９０を備え、図５（Ｂ）の荷物ＩＤ送信部６８から送信される要求信号を受信する。受信部９０は、荷物ＩＤ抽出部９２に接続され、送信された要求信号から荷物ＩＤを抽出し、キューブデータ読出部９４へ送出する。

【0113】

キューブデータ読出部９４は、情報収集制御部８０の送出部８９を介して、データベース８８から、荷物ＩＤを検索条件としてキューブデータを読み出し、送信部９６へ送出する。

【0114】

送信部９６では、キューブデータを、図５（Ｂ）の受信部７０へ送出する。

【0115】

キューブデータを受け取った、人型ロボット１の情報処理装置１４では、これから把持する荷物１００のＩＤとの照合により、当該荷物１００の把持点を設定する。

【0116】

図７は、図４の人型ロボット１の全体の動作に連動し、情報処理装置１４で実行される、把持部２０によって荷物１００を把持する際の把持制御の手順を示すフローチャートである。

【0117】

ステップ１５０では、荷物１００の把持の指示があったか否かを判断し、肯定判定されると、ステップ１５２へ移行して、人型ロボット１を移動させ（例えば、腕部５、６を動作させ）、対象の荷物１００に掌側２０Ａを対峙させ、ステップ１５４へ移行する。

【0118】

ステップ１５４では、掌側２０Ａを対向させて、荷物１００の情報を検出する。

【0119】

次のステップ１５６では、掌センサ２６（高解像度カメラ及びＭｏＰＵ）による検出情報を解析して、荷物１００の種類（形状、大きさ、硬さ等）及び位置を詳細に把握し、ステップ１５７へ移行する。

【0120】

ステップ１５７では、荷物把持点設定処理（図８参照、詳細後述）が実行され、ステップ１５８へ移行する。

【0121】

ステップ１５８では、荷物１００の把持のための作業を選択する。例えば、ステップ１５７における荷物把持点設定処理の結果に基づき、「吸着」のみ、「掴み」のみ、「吸着」と「掴み」の併用等から選択し、次いで、ステップ１６０へ移行して、設定した把持点に応じた、指部２２Ａ、２２Ｂ、２２Ｃの角度（開き度合い）を設定し、ステップ１６２へ移行する。

【0122】

すなわち、掌センサ２６による外観に基づき、把持部２０の指部２２Ａ、２２Ｂ、２２Ｃの角度を調整し、キューブデータに基づき、各指部２２Ａ、２２Ｂ、２２Ｃの把持点を特定することで、荷物１００を安定して把持することが可能である。

【0123】

なお、Ｘ線センサ２７では、軽いものは検出できないというデメリットがあった。しかし、荷物１００の重量がしきい値以上か否かを判断するというメリットとして活かすことで、「掴む」動作の要否の判定に用いることができる。

【0124】

ステップ１６２では、荷物１００の把持（「吸着」のみ、「掴み」のみ、「吸着」と「掴み」）を実行する。

【0125】

次のステップ１６４では、荷物１００の把持が成功したか否かを判定し、肯定判定された場合は、把持した荷物１００を所定の場所へ運び、ステップ１５０へ移行して、次の荷物１００の把持の指示を待つ。

【0126】

また、ステップ１６４で否定判定された場合は、ステップ１６６へ移行して、エラー処理（例えば、リトライ又はキャンセル等）を実行し、ステップ１５０へ戻る。

【0127】

図８は、図７のステップ１５７における荷物把持点設定処理サブルーチンを示す制御フローチャートである。

【0128】

ステップ１７０では、掌センサ２６の検出情報に基づき、荷物ＩＤを読み取り、次いで、ステップ１７２へ移行して掌センサ２６の検出情報に基づき、荷物１００の輪郭を認識する。

【0129】

次のステップ１７４では、荷物ＩＤを情報管理サーバーへ送信する（キューブデータの要求）。

【0130】

次のステップ１７６では、キューブデータを受信したか否かを判断し、肯定判定されると、ステップ１７８へ移行して、人型ロボット１と対峙している荷物１００の向きと、キューブデータ上の荷物の向きとを照合し、ステップ１８０へ移行する。

【0131】

ステップ１８０では、キューブデータを解析し（各ボクセルに記録された情報を連携し）、内部情報を推定する。例えば、荷物１００の重量、材質、重心位置等を推定する。

【0132】

次のステップ１８２では、荷物１００の把持点を設定する。この設定は、例えば、吸着に適している平坦な場所、吸着力が強い硬い場所、重心位置に近い位置等が設定され、図７のステップ１５８へリターンする。

【0133】

以上、本実施の形態によれば、把持部２０に３本の指部２２Ａ、２２Ｂ、２２Ｃを設け、把持部２０の掌側２０Ａと、指２２Ａ、２２Ｂ、２２Ｃに、複数の吸着パッド２４を取り付け、吸着パッド２４は、例えば、エアー吸着構造で、荷物１００を吸着し、かつ、指部２２Ａ、２２Ｂ、２２Ｃを曲げることにより、荷物１００を掴むことができる。

【0134】

掌側２０Ａには、高解像度カメラ及びＭｏＰＵを含む掌センサ２６を取り付け、上記の構造の把持部２０を人型ロボット１の腕部５、６に装着することにより、吸着面によりモノを確実にピックすることができ、人型ロボット１の動きが早くても荷物１００を把持部２０から落とさずに運ぶことができる。

【0135】

また、掌センサ２６（高解像度カメラ及びＭｏＰＵ）が掌側２０Ａに搭載されているので、高精度に荷物１００を捉えることができ、微小な動きをする作業にも対応することができる。

【0136】

さらに、非常に柔らかく壊れやすいものは、吸着パッド２４を使わずに、指２２Ａ、２２Ｂ、２２Ｃの動きにより掴むこともできるし、掴む力を調整することにより、柔らかい荷物１００の破損等を防止することかできる。

【0137】

なお、本実施の形態では、キューブデータを、荷物集配サイトのＸ線解析装置５２から情報に基づいて情報管理サーバー６０で生成するようにしたが、情報管理サーバー６０のデータベースに予め荷物ＩＤ－キューブデータのデータベースを格納しておいてもよい。

【0138】

図１１は、情報処理装置１４として機能するコンピュータ１２００のハードウェア構成の一例を概略的に示す。コンピュータ１２００にインストールされたプログラムは、コンピュータ１２００を、本実施の形態に係る装置の１又は複数の「部」として機能させ、又はコンピュータ１２００に、本実施の形態に係る装置に関連付けられるオペレーション又は当該１又は複数の「部」を実行させることができ、および／又はコンピュータ１２００に、本実施の形態に係るプロセス又は当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ１２００に、本明細書に記載のフローチャートおよびブロック図のブロックのうちのいくつか又は全てに関連付けられた特定のオペレーションを実行させるべく、ＣＰＵ１２１２によって実行されてよい。

【0139】

本実施の形態によるコンピュータ１２００は、ＣＰＵ１２１２、ＲＡＭ１２１４、およびグラフィックコントローラ１２１６を含み、それらはホストコントローラ１２１０によって相互に接続されている。コンピュータ１２００はまた、通信インタフェース１２２２、記憶装置１２２４、ＤＶＤドライブ、およびＩＣカードドライブのような入出力ユニットを含み、それらは入出力コントローラ１２２０を介してホストコントローラ１２１０に接続されている。ＤＶＤドライブは、ＤＶＤ－ＲＯＭドライブおよびＤＶＤ－ＲＡＭドライブ等であってよい。記憶装置１２２４は、ハードディスクドライブおよびソリッドステートドライブ等であってよい。コンピュータ１２００はまた、ＲＯＭ１２３０およびキーボードのような入出力ユニットを含み、それらは入出力チップ１２４０を介して入出力コントローラ１２２０に接続されている。

【0140】

ＣＰＵ１２１２は、ＲＯＭ１２３０およびＲＡＭ１２１４内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。グラフィックコントローラ１２１６は、ＲＡＭ１２１４内に提供されるフレームバッファ等又はそれ自体の中に、ＣＰＵ１２１２によって生成されるイメージデータを取得し、イメージデータがディスプレイデバイス１２１８上に表示されるようにする。

【0141】

通信インタフェース１２２２は、ネットワークを介して他の電子デバイスと通信する。記憶装置１２２４は、コンピュータ１２００内のＣＰＵ１２１２によって使用されるプログラムおよびデータを格納する。ＤＶＤドライブは、プログラム又はデータをＤＶＤ－ＲＯＭ等から読み取り、記憶装置１２２４に提供する。ＩＣカードドライブは、プログラムおよびデータをＩＣカードから読み取り、および／又はプログラムおよびデータをＩＣカードに書き込む。

【0142】

ＲＯＭ１２３０はその中に、アクティブ化時にコンピュータ１２００によって実行されるブートプログラム等、および／又はコンピュータ１２００のハードウェアに依存するプログラムを格納する。入出力チップ１２４０はまた、様々な入出力ユニットをＵＳＢポート、パラレルポート、シリアルポート、キーボードポート、マウスポート等を介して、入出力コントローラ１２２０に接続してよい。

【0143】

プログラムは、ＤＶＤ－ＲＯＭ又はＩＣカードのようなコンピュータ可読記憶媒体によって提供される。プログラムは、コンピュータ可読記憶媒体から読み取られ、コンピュータ可読記憶媒体の例でもある記憶装置１２２４、ＲＡＭ１２１４、又はＲＯＭ１２３０にインストールされ、ＣＰＵ１２１２によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ１２００に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置又は方法が、コンピュータ１２００の使用に従い情報のオペレーション又は処理を実現することによって構成されてよい。

【0144】

例えば、通信がコンピュータ１２００および外部デバイス間で実行される場合、ＣＰＵ１２１２は、ＲＡＭ１２１４にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース１２２２に対し、通信処理を命令してよい。通信インタフェース１２２２は、ＣＰＵ１２１２の制御の下、ＲＡＭ１２１４、記憶装置１２２４、ＤＶＤ－ＲＯＭ、又はＩＣカードのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、又はネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。

【0145】

また、ＣＰＵ１２１２は、記憶装置１２２４、ＤＶＤドライブ（ＤＶＤ－ＲＯＭ）、ＩＣカード等のような外部記録媒体に格納されたファイル又はデータベースの全部又は必要な部分がＲＡＭ１２１４に読み取られるようにし、ＲＡＭ１２１４上のデータに対し様々なタイプの処理を実行してよい。ＣＰＵ１２１２は次に、処理されたデータを外部記録媒体にライトバックしてよい。

【0146】

様々なタイプのプログラム、データ、テーブル、およびデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。ＣＰＵ１２１２は、ＲＡＭ１２１４から読み取られたデータに対し、本発明の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索／置換等を含む、様々なタイプの処理を実行してよく、結果をＲＡＭ１２１４に対しライトバックする。また、ＣＰＵ１２１２は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第２の属性の属性値に関連付けられた第１の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、ＣＰＵ１２１２は、当該複数のエントリの中から、第１の属性の属性値が指定されている条件に一致するエントリを検索し、当該エントリ内に格納された第２の属性の属性値を読み取り、それにより予め定められた条件を満たす第１の属性に関連付けられた第２の属性の属性値を取得してよい。

【0147】

上で説明したプログラム又はソフトウエアモジュールは、コンピュータ１２００上又はコンピュータ１２００近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワーク又はインターネットに接続されたサーバシステム内に提供されるハードディスク又はＲＡＭのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ１２００に提供する。

【0148】

本実施の形態におけるフローチャートおよびブロック図におけるブロックは、オペレーションが実行されるプロセスの段階又はオペレーションを実行する役割を持つ装置の「部」を表してよい。特定の段階および「部」が、専用回路、コンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプログラマブル回路、および／又はコンピュータ可読記憶媒体上に格納されるコンピュータ可読命令と共に供給されるプロセッサによって実装されてよい。専用回路は、デジタルおよび／又はアナログハードウェア回路を含んでよく、集積回路（ＩＣ）および／又はディスクリート回路を含んでよい。プログラマブル回路は、例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、およびプログラマブルロジックアレイ（ＰＬＡ）等のような、論理積、論理和、排他的論理和、否定論理積、否定論理和、および他の論理演算、フリップフロップ、レジスタ、並びにメモリエレメントを含む、再構成可能なハードウェア回路を含んでよい。

【0149】

コンピュータ可読記憶媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよく、その結果、そこに格納される命令を有するコンピュータ可読記憶媒体は、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読記憶媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読記憶媒体のより具体的な例としては、フロッピー（登録商標）ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、消去可能プログラマブルリードオンリメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、電気的消去可能プログラマブルリードオンリメモリ（ＥＥＰＲＯＭ）、静的ランダムアクセスメモリ（ＳＲＡＭ）、コンパクトディスクリードオンリメモリ（ＣＤ－ＲＯＭ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク、メモリスティック、集積回路カード等が含まれてよい。

【0150】

コンピュータ可読命令は、アセンブラ命令、命令セットアーキテクチャ（ＩＳＡ）命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、又はＳｍａｌｌｔａｌｋ（登録商標）、ＪＡＶＡ（登録商標）、Ｃ＋＋等のようなオブジェクト指向プログラミング言語、および「Ｃ」プログラミング言語又は同様のプログラミング言語のような従来の手続型プログラミング言語を含む、１又は複数のプログラミング言語の任意の組み合わせで記述されたソースコード又はオブジェクトコードのいずれかを含んでよい。

【0151】

コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路が、フローチャート又はブロック図で指定されたオペレーションを実行するための手段を生成するために当該コンピュータ可読命令を実行すべく、ローカルに又はローカルエリアネットワーク（ＬＡＮ）、インターネット等のようなワイドエリアネットワーク（ＷＡＮ）を介して、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサ、又はプログラマブル回路に提供されてよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。また、人型ロボット１の制御は、個々の人型ロボット１が備える情報処理装置１４（図５参照）において、全ての処理プログラムを実行してもよいし、一部又は全部の処理プログラムを、複数の人型ロボット１を一括管理するサーバーで行い、処理結果（命令指示）をそれぞれの人型ロボット１に送信するようにしてもよい。

【0152】

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

【0153】

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

【符号の説明】

【0154】

１ 人型ロボット、２ 上半身部、３ 脚部、４ 連結部、５、６ 腕部、７、８ 車輪、１０ 制御システム、１２ センサ、１４ 情報処理装置、２０ 把持部、２０Ａ 掌側、２２Ａ、２２Ｂ、２２Ｃ 指部、２４ 吸着パッド、２４Ａ パッド部、２４Ｂ ニップル部、２６ 掌センサ、５０ コンベア装置、５０Ａ ベルト、５２ Ｘ線解析装置、５４ Ｘ線発生装置、５３ Ｘ線ラインセンサ、５８ コントローラ、６０ 情報管理サーバー、６２ 掌センサ情報受付部、６４ 荷物ＩＤ読取部、６６ 輪郭解析部、６８ 荷物ＩＤ送信部、７０ 受信部、７２ 輪郭照合部、７４ 内部情報推定部、７６ 把持点設定部、７８ 把持実行部、８０ 情報収集制御部、８２ 情報提供制御部、８４ 情報受付部、８６ 解析部、８８ データベース、８９ 送出部、９０ 受信部、９２ 荷物ＩＤ抽出部、９４ キューブデータ読出部、９６ 送信部、１００ 荷物、１２００ コンピュータ、１２１０ ホストコントローラ、１２１２ ＣＰＵ、１２１４ ＲＡＭ、１２１６ グラフィックコントローラ、１２１８ ディスプレイデバイス、１２２０ 入出力コントローラ、１２２２ 通信インタフェース、１２２４ 記憶装置、１２３０ ＲＯＭ、１２４０ 入出力チップ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】