IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

▶ 群馬県の特許一覧 ▶ ハウス食品グループ本社株式会社の特許一覧

<>
  • 特許-野菜選別システム及び野菜選別方法 図1
  • 特許-野菜選別システム及び野菜選別方法 図2
  • 特許-野菜選別システム及び野菜選別方法 図3
  • 特許-野菜選別システム及び野菜選別方法 図4
  • 特許-野菜選別システム及び野菜選別方法 図5
  • 特許-野菜選別システム及び野菜選別方法 図6
  • 特許-野菜選別システム及び野菜選別方法 図7
  • 特許-野菜選別システム及び野菜選別方法 図8
  • 特許-野菜選別システム及び野菜選別方法 図9
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-06-18
(45)【発行日】2024-06-26
(54)【発明の名称】野菜選別システム及び野菜選別方法
(51)【国際特許分類】
   A23N 15/00 20060101AFI20240619BHJP
   G01N 21/17 20060101ALI20240619BHJP
【FI】
A23N15/00 F
G01N21/17 A
【請求項の数】 8
(21)【出願番号】P 2020143672
(22)【出願日】2020-08-27
(65)【公開番号】P2022038936
(43)【公開日】2022-03-10
【審査請求日】2023-05-26
(73)【特許権者】
【識別番号】591032703
【氏名又は名称】群馬県
(73)【特許権者】
【識別番号】000111487
【氏名又は名称】ハウス食品グループ本社株式会社
(74)【代理人】
【識別番号】100176072
【弁理士】
【氏名又は名称】小林 功
(72)【発明者】
【氏名】細谷 肇
(72)【発明者】
【氏名】石黒 聡
(72)【発明者】
【氏名】町田 晃平
(72)【発明者】
【氏名】加藤 雅博
(72)【発明者】
【氏名】▲羽▼生田 光志
(72)【発明者】
【氏名】吉川 紗代
(72)【発明者】
【氏名】清水 孝晃
【審査官】木村 麻乃
(56)【参考文献】
【文献】特開2017-189748(JP,A)
【文献】特開2007-110961(JP,A)
【文献】特開2013-253823(JP,A)
【文献】特開平11-014315(JP,A)
【文献】実開昭56-033547(JP,U)
【文献】特開2000-050853(JP,A)
【文献】特開2020-047051(JP,A)
【文献】特開平06-091234(JP,A)
(58)【調査した分野】(Int.Cl.,DB名)
A23N 15/00
G01N 21/17
(57)【特許請求の範囲】
【請求項1】
搬送手段により搬送されている野菜を上方から撮影可能に構成され、かつ前記野菜の搬送経路上に配置されている撮影ユニットと、
前記撮影ユニットにより撮影された画像を解析して前記野菜を識別する識別手段と、
を備え、
前記撮影ユニットは、
前記画像の撮影時において前記搬送手段の上方から撮影面が前記搬送手段に向くように設けられる撮影手段と、
前記撮影手段の上方に設けられ、かつ前記撮影手段の上方から下方に向けて送風する送風手段と、
遮光性材料からなり、かつ前記撮影手段の周囲を覆うカバー部材と、
前記カバー部材がなす空間内に設けられて照明光を発する照明手段と、
を備え、
前記カバー部材は、
カバー本体と、
前記カバー本体に設けられ、かつ前記野菜の搬入口及び搬出口をなす一対の切欠部と、
前記カバー本体に取り付けられ、前記一対の切欠部の全体を覆う一対のカーテンと、
を備える、野菜選別システム。
【請求項2】
各々の前記カーテンは、可撓性を有する複数枚の切片部材から構成され、
前記複数の切片部材は、前記カバー本体の上下方向に延び、かつ幅方向に沿って部分的に重なるように並んで配置されている、
請求項1に記載の野菜選別システム。
【請求項3】
前記カバー本体の内側には、前記照明光の散乱を促す加工が施されている、
請求項1に記載の野菜選別システム。
【請求項4】
前記野菜は、外皮が残っている玉ねぎである、
請求項1に記載の野菜選別システム。
【請求項5】
前記識別手段は、前記玉ねぎの品種がスマイルボール(登録商標)であるか否か、又はさらさらレッド(登録商標)であるか否かを識別する、
請求項に記載の野菜選別システム。
【請求項6】
前記送風手段は、
前記カバー部材の外部から内部に空気を引き込んで気流を生成するファンと、
前記ファンの位置に対して気流の上流側に設けられるエアフィルタと、
を備える、
請求項に記載の野菜選別システム。
【請求項7】
前記搬送手段は、前記野菜を個々に載置可能なトレイを搬送方向に搬送し、
複数の野菜を投入可能であり、投入された野菜を落下させて前記トレイに前記野菜を案内する案内手段をさらに備え、
前記識別手段は、前記画像を入力とし、前記画像の認識結果を出力とするニューラルネットワークを構築可能に構成されるコンピュータであり、
前記認識結果には、1つの前記トレイに2個の前記野菜が乗った状態が含まれる、
請求項1に記載の野菜選別システム。
【請求項8】
搬送手段により搬送されている野菜を上方から撮影可能に構成され、かつ前記野菜の搬送経路上に配置されている撮影ユニットを用いた野菜選別方法であって、
前記撮影ユニットは、
前記搬送手段の上方から撮影面が前記搬送手段に向くように設けられる撮影手段と、
前記撮影手段の上方に設けられ、かつ前記撮影手段に向けて送風する送風手段と、
遮光性材料からなり、かつ前記撮影手段の周囲を覆うカバー部材と、
前記カバー部材がなす空間内に設けられて照明光を発する照明手段と、
を備え、
前記カバー部材は、
カバー本体と、
前記カバー本体に設けられ、かつ前記野菜の搬入口及び搬出口をなす一対の切欠部と、
前記カバー本体に取り付けられ、前記一対の切欠部の全体を覆う一対のカーテンと、
を備え、
前記搬送手段を用いて前記野菜を搬送する搬送工程と、
前記搬送手段により搬送されている前記野菜を、前記撮影手段を用いて上方から撮影する撮影工程と、
撮影された画像を解析して前記野菜を識別する識別工程と、
を備え、
前記撮影工程は、前記撮影手段の上方から下方に向けて送風させながら実行される、野菜選別方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、野菜選別システム及び野菜選別方法に関する。
【背景技術】
【0002】
従来から、生産ライン上にある加工中又は加工後の食品をカメラなどの撮影手段を用いて撮影し、得られた画像を解析することで当該食品の状態などを認識する食品検査システムが知られている。
【0003】
例えば、特許文献1には、学習済みの畳み込みニューラルネットワークを用いて、食品に異物が混在しているか否かを識別する検査システムが開示されている。
【先行技術文献】
【特許文献】
【0004】
【文献】特許第6542477号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
ところで、この類のシステムは、加工後の食品のみならず、加工前の食材にも適用することができる。例えば、野菜を搬送させながら野菜の画像を撮影し、その画像を解析することで野菜を識別するシステムが想定される。この場合、搬送に伴う野菜の移動や振動などにより、野菜の外表に付着した塵埃が舞い上がりやすくなる。例えば、撮影手段の撮影面に塵埃が付着して撮像面が汚れた場合、解析対象の画像の写りが悪化することで、野菜の識別精度が低下するおそれがある。
【0006】
しかしながら、特許文献1では、厳しい衛生管理が要求される検査工程を想定しているため、上記した塵埃が発生するような状況が何ら考慮されていない。
【0007】
本発明はこのような課題に鑑みてなされたものであり、その目的は、撮影手段により撮影された画像を解析して野菜を識別する際に、塵埃の発生に伴う野菜の識別精度の低下を抑制可能な野菜選別システム及び野菜選別方法を提供することにある。
【課題を解決するための手段】
【0008】
上記課題を解決するために、本発明の第一態様における野菜選別システムは、搬送手段により搬送されている野菜を上方から撮影可能に構成される撮影ユニットと、前記撮影ユニットにより撮影された画像を解析して前記野菜を識別する識別手段と、を備え、前記撮影ユニットは、前記画像の撮影時において前記搬送手段の上方から撮影面が前記搬送手段に向くように設けられる撮影手段と、前記撮影手段に向けて送風する送風手段と、を備える。
【0009】
本発明の第二態様における野菜選別システムでは、前記野菜は、外皮が残っている玉ねぎである。
【0010】
本発明の第三態様における野菜選別システムでは、前記識別手段は、前記玉ねぎの品種がスマイルボール(登録商標)であるか否か、又はさらさらレッド(登録商標)であるか否かを識別する。
【0011】
本発明の第四態様における野菜選別システムでは、前記送風手段は、前記撮影手段の上方に設けられ、前記撮影手段の上方から下方に向けて送風する。
【0012】
本発明の第五態様における野菜選別システムでは、前記撮影ユニットは、遮光性材料からなり、かつ前記撮影手段の周囲を覆うカバー部材と、前記カバー部材がなす空間内に設けられて照明光を発する照明手段と、をさらに備える。
【0013】
本発明の第六態様における野菜選別システムでは、前記送風手段は、前記カバー部材の外部から内部に空気を引き込んで気流を生成するファンと、前記ファンの位置に対して気流の上流側に設けられるエアフィルタと、を備える、
【0014】
本発明の第七態様における野菜選別システムでは、前記搬送手段は、前記野菜を個々に載置可能なトレイを搬送方向に搬送し、複数の野菜を投入可能であり、投入された野菜を落下させて前記トレイに前記野菜を案内する案内手段をさらに備える、
【0015】
本発明の第八態様における野菜選別システムでは、前記識別手段は、前記画像を入力とし、前記画像の認識結果を出力とするニューラルネットワークを構築可能に構成されるコンピュータである。
【0016】
本発明の第九態様における野菜選別方法は、搬送手段を用いて野菜を搬送する搬送工程と、前記搬送手段により搬送されている前記野菜を、撮影手段を用いて上方から撮影する撮影工程と、撮影された画像を解析して前記野菜を識別する識別工程と、を備え、前記撮影工程は、前記搬送手段の上方から撮影面が前記搬送手段に向くように前記撮影手段が設けられ、かつ、前記撮影手段に向けて送風させながら実行される。
【発明の効果】
【0017】
本発明によれば、撮影手段により撮影された画像を解析して野菜を識別する際に、塵埃の発生に伴う野菜の識別精度の低下が抑制される。
【図面の簡単な説明】
【0018】
図1】本発明の一実施形態における野菜選別システムの全体構成図である。
図2図1に示す野菜選別システムの要部ブロック図である。
図3図1及び図2に示す撮影ユニットの模式的な側面図である。
図4図1及び図2の画像解析装置により構築されるニューラルネットワークの機能ブロック図である。
図5図1の画像解析システムによる動作の一例を示すフローチャートである。
図6】送風機の送風動作による効果を示す図である。
図7図3のカメラにより撮影された画像の一例を示す図である。
図8図1の搬送装置による動作の一例を示すフローチャートである。
図9】変形例におけるカバー部材の部分側面図である。
【発明を実施するための形態】
【0019】
以下、添付図面を参照しながら本発明の実施形態について説明する。説明の理解を容易にするため、各図面において同一の構成要素及びステップに対しては可能な限り同一の符号を付して、重複する説明は省略する。
【0020】
[全体構成]
図1は、本発明の一実施形態における野菜選別システム10の全体構成図である。図2は、図1に示す野菜選別システム10の要部ブロック図である。なお、図示の便宜上、図2は、1組のトレイ20及びアクチュエータ22のみを示している。
【0021】
この野菜選別システム10は、食材としての野菜、例えば、玉ねぎ12を選別可能に構成される。玉ねぎ12には、[1]カット時に目に染みず、生で食べても辛みを感じない「スマイルボール」(登録商標)という品種や、[2]ケルセチンとアントシアニンが多く含まれ、健康効果が期待される「さらさらレッド」(登録商標)という品種がある。通常は、これらの特定の品種とそれ以外の品種が混在しないように管理される。ところが、何らかの理由で、見た目が似通った複数の品種が混在してしまうと、人手による仕分け作業に手間や工数が掛かってしまう。また、普通の玉ねぎが混じったまま流通してしまうと、品質上の問題になり得る。
【0022】
そこで、カメラ54を含む撮影手段を用いて玉ねぎ12を撮影し、得られた画像を解析する機能が追加されたシステムを導入する。具体的には、この野菜選別システム10は、玉ねぎ12を搬送しながら選別する搬送装置14(「搬送手段」に相当)に、画像解析システム16を組み込んで構成される。
【0023】
搬送装置14は、投入器18(「案内手段」に相当)と、複数のトレイ20を搬送する搬送チェーン24と、複数のシュート26と、通信モジュール28と、制御装置30(「仕分手段」に相当)と、を含んで構成される。
【0024】
投入器18は、選別対象の玉ねぎ12を投入可能に構成される。投入された玉ねぎ12は、1個ずつ、トレイ20に向けて案内される。具体的には、投入器18には、玉ねぎ12の1個分の大きさ又は2個分の大きさ程度の開口部が設けられており、当該開口部からトレイ20に向かって1個ずつ玉ねぎ12が落下させて案内するようになっている。
【0025】
各々のトレイ20は、上側が開口して玉ねぎ12を個々に載置(あるいは収容)可能な、平面視にて矩形状の容器である。トレイ20は、玉ねぎ12の保持面をなす凹部と、この凹部を囲む逆U字状の壁部と、を有する。トレイ20は、制御装置30による駆動制御に従って駆動するアクチュエータ22を介して、搬送チェーン24に機械的に接続される。つまり、トレイ20は、アクチュエータ22の駆動によって倒せるように設けられる。
【0026】
搬送チェーン24は、制御装置30による駆動制御に従って、搬送方向Cに沿って回転する無端状のチェーンである。搬送チェーン24には、略等間隔で複数のアクチュエータ22が取り付けられている。つまり、搬送チェーン24は、複数のトレイ20を同時に、搬送方向Cに沿って移動可能に設けられる。なお、搬送チェーン24の移動速度(すなわち、搬送速度)は、例えば、数十~数百[mm/s]の範囲内において様々な値に設定され得る。
【0027】
複数のシュート26は、投入器18の下流側の位置(以下、「仕分位置」)に、搬送チェーン24の外周に沿って並んで配置される。シュート26は、トレイ20の前傾動作により放出された玉ねぎ12を所望の場所に案内する機能を果たす。これにより、玉ねぎ12は、例えば、スマイルボール(登録商標)かそれ以外(非該当品や不良品など)に仕分けされる。
【0028】
通信モジュール28は、有線又は無線により外部装置と通信するための機器である。これにより、搬送装置14は、玉ねぎ12の識別結果を含む制御信号を画像解析装置36から受信可能である。
【0029】
制御装置30は、搬送装置14を構成する各部を統括的に制御するコンピュータである。具体的には、制御装置30は、[1]搬送チェーン24の駆動制御、[2]通信モジュール28の通信制御、及び[3]アクチュエータ22の駆動制御、を実行可能に構成される。また、制御装置30は、画像解析装置36による識別結果に応じて玉ねぎ12を仕分ける仕分処理を行う。
【0030】
一方、画像解析システム16は、撮影ユニット34と、画像解析装置36(「識別手段」に相当)と、を含んで構成される。撮影ユニット34は、投入器18からシュート26までの搬送区間内のいずれかの位置に設けられる。画像解析装置36は、撮影ユニット34と通信可能な範囲内にある任意の場所に設けられる。
【0031】
図3は、図1及び図2に示す撮影ユニット34の模式的な側面図である。本図では、搬送方向C(図1)の上流側から下流側を視た場合の撮影ユニット34の内部構造を示している。また、本図では、搬送装置14と撮影ユニット34の間の相対的位置関係を明示するため、トレイ20上にある玉ねぎ12を併せて表記している。
【0032】
撮影ユニット34は、支持台50と、照明器52(「照明手段」に相当)と、カメラ54(「撮像手段」に相当)と、送風機56(「送風手段」に相当)と、暗幕58(「カバー部材」に相当)と、を含んで構成される。
【0033】
支持台50は、概略直方体状のフレーム構造を有する。このフレーム構造により、下側から順に、照明器52、カメラ54及び送風機56が一直線上に固定配置される。
【0034】
照明器52は、カメラ54による撮影を補助する照明光を発する器具である。照明器52には、下側に向けて露出する環状の照明灯(以下、リング照明53)が設けられている。リング照明53の種類として、例えば、短時間のストロボ発光が可能なLED(Light Emitting Diode)などが挙げられる。
【0035】
カメラ54は、被写体の画像を撮影する光学機器であり、撮影面55が下方を向くように配置される。これにより、カメラ54は、搬送チェーン24によりトレイ20と一緒に搬送されている玉ねぎ12を撮影可能である。
【0036】
送風機56は、空気に運動エネルギーを与えて送り出す装置であり、下方に向けて送風するように配置される。具体的には、送風機56は、暗幕58の外部から内部に空気を引き込んで気流を生成するファン56aと、ファン56aの位置に対して気流の上流側に設けられるエアフィルタ56bと、を含んで構成される。ここで、ファン56aの送風方式は、軸流式あるいは遠心式のいずれであってもよい。
【0037】
暗幕58は、外部の環境光を遮断するための部材であり、例えば、黒色の布を含む遮光性材料からなる。この材料は、ある程度の気密性を確保できればよく、布に限られない。暗幕58は、その下端がトレイ20の高さ位置よりも下方に位置するように設けられる。なお、リング照明53の光像が写り込まないように、暗幕58の内側には、照明光の散乱を促すような加工が施されてもよい。
【0038】
図2に戻って、画像解析装置36は、プロセッサ、メモリや通信I/F(いずれも不図示)を含むコンピュータから構成される。画像解析装置36は、画像解析用プログラム及び学習パラメータ群をメモリから読み出して実行することで、ニューラルネットワーク70を構築可能に構成される。このプログラムは、例えば、市販のディープラーニングソフトウェアであってもよい。なお、学習パラメータ群は、ニューラルネットワーク70の演算規則を特定可能なパラメータの集合体であり、少なくとも一部が機械学習を通じて定められる。
【0039】
図4は、図2の画像解析装置36により構築されるニューラルネットワーク70の機能ブロック図である。このニューラルネットワーク70は、玉ねぎ12が写り込んだ画像80(図7)を示す画像データを入力とし、玉ねぎ12の確率分布を出力する学習モデルに相当する。この学習モデルは、画像80を認識してクラス分類を行う「画像認識モデル」であってもよいし、物体の有無・種類及びその位置を検出する「物体検出モデル」であってもよい。
【0040】
ここでは、画像認識モデルを例に挙げて説明する。画像認識モデルの例として、AlexNet、VGG16、ResNet、ResNeXtなどが挙げられる。この場合、ニューラルネットワーク70は、特徴量生成部71及び種別推定部72として機能する。
【0041】
特徴量生成部71は、画像データに対して畳み込み演算及びプーリング演算(いわゆるCNN演算)を繰り返して実行することで、画像80の形態的特徴を示す特徴マップをチャンネル毎に生成する。
【0042】
種別推定部72は、チャンネル毎の特徴マップを用いて、玉ねぎ12の有無及び種別を推定して識別結果を出力する。識別結果を示すラベル値は、例えば、[1]スマイルボール(登録商標)に該当、[2]非該当、[3]2個乗り、[4]なし、の4種類である。
【0043】
[野菜選別システム10の動作]
この実施形態における野菜選別システム10は、以上のように構成される。続いて、野菜選別システム10の動作について、図5図8を参照しながら説明する。ここでは、玉ねぎ12の選別は、搬送装置14及び画像解析システム16の協働により行われる。
【0044】
図5は、図1の画像解析システム16による動作の一例を示すフローチャートである。以下、搬送装置14が稼働中であり、玉ねぎ12を収容したトレイ20が撮影ユニット34内を逐次通過する場合を想定する。
【0045】
ステップSP10において、撮影ユニット34の照明器52及び送風機56の電源をオンにして、それぞれ利用可能な状態にする。このスイッチ動作は、作業者により手動で行われてもよいし、図示しないセンサによって搬送装置14の作動を検知したことを契機として自動で行われてもよい。
【0046】
ステップSP12において、撮影ユニット34のカメラ54は、画像80の撮影を開始する時点(以下、撮影開始時点)が到来したか否かを確認する。この撮影開始時点は、例えば、図示しないセンサが1個のトレイ20を検出し、当該トレイ20がカメラ54の撮影領域内に収まる位置に到達した時点に相当する。撮影開始時点がまだ到来していない場合(ステップSP12:NO)、当該時点が到来するまでステップSP12に留まる。一方、撮影開始時点が到来した場合(ステップSP12:YES)、次のステップSP14に進む。
【0047】
ステップSP14において、カメラ54は、ステップSP12で到来した撮影開始時点に、搬送チェーン24によりトレイ20と一緒に搬送されている玉ねぎ12を上方から撮影する。また、カメラ54の撮影タイミングと同期しながら、照明器52は、玉ねぎ12がある下方に向けてストロボ発光を行う。ここで、トレイ20の移動に起因する画像80のブレが無いか軽微になるように、撮影条件及び照明条件の最適化設計がなされることが望ましい。例えば、トレイ20の搬送速度が333[mm/s]、カメラ54の露光時間が1.5[ms]である場合、画像80のブレは0.5[mm]となる。
【0048】
図6は、送風機56の送風動作による効果を示す図である。本図は、図3の場合と同一の構成であるが、説明の便宜上、撮影ユニット34の要部(ここでは、カメラ54及び暗幕58のみ)を模式的に示している。
【0049】
トレイ20への収容時に玉ねぎ12が移動し、あるいはトレイ20の搬送時に玉ねぎ12が振動すると、玉ねぎ12の周辺から塵埃DSが舞い上がりやすくなる。塵埃DSの一部は、空間60内を浮遊しながら、カメラ54の撮影面55に向かって移動する。一方、送風機56の作動中は、カメラ54の上方から光軸Aに沿って、つまり、塵埃DSが上昇する方向と対向するように送風される。そうすると、カメラ54の撮影面55に向う塵埃DSは、送風の作用によって撮影面55から遠ざかる方向に逸れていく。特に、暗幕58の下端がトレイ20の高さ位置よりも下方にあるので、暗幕58の案内によって、送風機56からの送風が玉ねぎ12の高さ位置まで伝わりやすくなる。
【0050】
また、遮光性材料からなる暗幕58を設けることで、外部の環境光の影響を受けることなく、撮影時の照明条件を一定に近づけることができる。その反面、既に空間60内にある塵埃DSが暗幕58によって閉じ込められる可能性があるが、上記した送風機56と併用することで、暗幕58による弊害を取り除くことができる。
【0051】
なお、送風機56には、ファン56aの位置に対して気流の上流側(本図の例では、上側)にエアフィルタ56bが設けられるので、ファン56aの送風動作の際に、暗幕58の周囲にて浮遊する塵埃DSが、暗幕58がなす空間60内に導入されることを阻止できる。これにより、塵埃DSが除去された空気が、暗幕58がなす空間60内に供給され続けることになる。
【0052】
図7は、図3のカメラ54により撮影された画像80の一例を示す図である。画像80の前景領域82には、識別対象である玉ねぎ12の投影像が形成される。一方、残りの画像領域である背景領域84には、玉ねぎ12を除く物体(例えば、トレイ20)の投影像が形成される。
【0053】
そして、撮影ユニット34(具体的には、カメラ54及び/又はそのコントローラ)は、画像80を撮影した後、画像80を示す画像データをトレイ20のID情報と併せて画像解析装置36に送信する。これにより、画像データは、画像解析装置36により取得される。
【0054】
ステップSP16において、画像解析装置36は、ステップSP14で撮影された画像80の解析処理を行う。具体的には、ニューラルネットワーク70は、画像データを入力し、ラベル毎の確率の集合体である確率分布を出力する。そして、所与のラベル群(例えば、該当/非該当/2個乗り/なし)のうち、確率が最大となるラベルが、玉ねぎ12の識別結果として選択される。
【0055】
ステップSP18において、画像解析装置36は、ステップSP16で得られた玉ねぎ12の識別結果を搬送装置14に向けて出力する。具体的には、画像解析装置36は、識別結果としてのラベル情報を含む制御信号を制御装置30に送信する。以下、ステップSP12に戻って、図5のステップSP12~SP18を順次繰り返す。
【0056】
図8は、図1の搬送装置14による動作の一例を示すフローチャートである。以下、搬送装置14が稼働中であり、玉ねぎ12を収容したトレイ20が搬送されている場合を想定する。
【0057】
ステップSP22において、制御装置30は、ステップSP18で識別された玉ねぎ12を収容するトレイ20(以下、該当トレイ)を監視対象に設定する。
【0058】
ステップSP24において、制御装置30は、図5のステップSP18にて画像解析装置36が送信した識別結果を取得したか否かを確認する。制御装置30が識別結果をまだ取得していない場合(ステップSP24:NO)、当該結果を取得するまでステップSP24に留まる。一方、識別結果を取得した場合(ステップSP24:YES)、次のステップSP26に進む。
【0059】
ステップSP26において、制御装置30は、該当トレイの駆動を開始する時点(以下、駆動開始時点)を設定する。この設定に先立ち、制御装置30は、ステップSP24で取得された識別結果に応じて玉ねぎ12の仕分けを行う。例えば、識別結果が「該当」である場合、玉ねぎ12が「スマイルボール」(登録商標)であると仕分けされる。一方、識別結果が「該当」以外である場合、玉ねぎ12が「スマイルボール」(登録商標)でないと仕分けされる。そして、制御装置30は、該当トレイが対応する仕分位置に到達する時点を、駆動開始時点として設定する。
【0060】
ステップSP28において、制御装置30は、駆動開始時点が到来したか否かを確認する。駆動開始時点がまだ到来していない場合(ステップSP28:NO)、当該時点が到来するまでステップSP28に留まる。一方、駆動開始時点が到来した場合(ステップSP28:YES)、次のステップSP30に進む。
【0061】
ステップSP30において、制御装置30は、ステップSP28で到来した駆動開始時点から、該当トレイのアクチュエータ22に対して一連の駆動制御を行う。この駆動制御に伴って、該当トレイは、水平位置から一時的に前方に傾いた後、初期の水平位置に戻る。これにより、該当トレイ上の玉ねぎ12は、所望のシュート26に案内される。
【0062】
ステップSP32において、制御装置30は、ステップSP30で一連の動作を終了した該当トレイを監視対象から除外する。このようにして、1個のトレイ20に対するフローチャートの動作を終了する。以下、搬送装置14は、図8のフローチャートを繰り返すことで、トレイ20毎の選果動作を連続的に実行する。
【0063】
[野菜選別システム10による効果]
以上のように、野菜選別システム10は、搬送手段により搬送されている野菜を上方から撮影可能に構成される撮影ユニット34と、撮影ユニット34により撮影された画像80を解析して野菜を識別する識別手段と、を備える。そして、撮影ユニット34は、撮影時においてトレイ20の上方から撮影面55が搬送手段に向くように設けられるカメラ54と、カメラ54に向けて送風する送風機56と、を備える。
【0064】
また、野菜選別システム10を用いた野菜選別方法によれば、搬送手段を用いて野菜を搬送する搬送工程と、搬送されている野菜を、カメラ54を用いて上方から撮影する撮影工程(SP14)と、撮影された画像80を解析して野菜を識別する識別工程(SP16)と、を備える。そして、この撮影工程は、搬送手段の上方から撮影面55が搬送手段に向くようにカメラ54が設けられ、かつ、カメラ54に向けて送風させながら実行される。
【0065】
搬送に伴う野菜の移動や振動などにより、野菜の外表に付着した塵埃DSが舞い上がりやすくなる。そこで、カメラ54に向けて送風する送風機56を設けることで、塵埃DSが上昇する方向に対向又は交差するように送風される。これにより、カメラ54の撮影面55や照射野から塵埃DSを除去可能となり、塵埃DSの発生に伴う野菜の識別精度の低下が抑制される。また、カメラ54の撮影面55及び野菜選別システム10が照明器52を備える場合において、照明器52の照射面への塵埃DSの付着を防ぐことが可能となり、照明光の明るさや画像80の写りの経時変化を抑制する追加的な効果もある。
【0066】
特に、野菜が、外皮が残っている玉ねぎ12である場合、上記した抑制効果がより顕著に現われる。なぜならば、外皮が残っている状態では、外皮に付着した土や外皮自体の剥がれによって、塵埃DSが生じやすいからである。また、概略球体状の玉ねぎ12はトレイ20上で転動しやすく、その分だけ塵埃DSを巻き上げやすいという理由もある。
【0067】
さらに、識別手段が、玉ねぎ12の品種がスマイルボール(登録商標)であるか否か、あるいは、さらさらレッド(登録商標)であるか否かを識別する場合、上記した抑制効果がより顕著に現われる。なぜならば、当該品種と通常の品種とは外観がきわめて似通っており、両者を認識するには高画質の画像80が要求されるからである。
【0068】
また、送風機56は、カメラ54の上方に設けられ、カメラ54の上方から下方に向けて送風してよい。これにより、カメラ54の画像80に送風機56が写り込まずに、しかも塵埃DSが上昇する方向に対向するように送風される。
【0069】
また、撮影ユニット34は、遮光性材料からなり、かつカメラ54の周囲を覆う暗幕58と、暗幕58がなす空間60内に設けられて照明光を発する照明器52と、をさらに備えてもよい。これにより、外部の環境光の影響を受けることなく、撮影時の照明条件を一定に近づけることができ、その結果、野菜の識別精度の低下がさらに抑制される。
【0070】
特に、野菜が、外皮が残っている玉ねぎ12である場合、上記した抑制効果がより顕著に現われる。なぜならば、外皮が残っている状態では、外部の環境光の変動によって、玉ねぎ12の種別毎の特徴となる光沢や色合いが変動しやすいからである。その反面、既に空間60内にある塵埃DSが暗幕58によって閉じ込められる可能性があるが、上記した送風機56と併用することで、暗幕58による弊害を取り除くことができる。
【0071】
また、送風機56は、暗幕58の外部から内部に空気を引き込んで気流を生成するファン56aと、ファン56aの位置に対して気流の上流側に設けられるエアフィルタ56bと、を備えてもよい。これにより、ファン56aの送風動作の際に、暗幕58の周囲にて浮遊する塵埃DSが、暗幕58がなす空間60内に導入されることを阻止できる。
【0072】
また、搬送手段が、野菜を個々に載置可能なトレイ20を搬送方向Cに搬送する搬送装置14である場合、野菜選別システム10は、複数の野菜を投入可能であり、投入された野菜を落下させてトレイ20に野菜を案内する投入器18をさらに備えてもよい。野菜の落下に伴い塵埃DSが発生しやすくなるので、その分だけ上記した抑制効果がより顕著に現われる。
【0073】
また、識別手段は、画像80を入力とし、画像80の認識結果を出力とするニューラルネットワーク70を構築可能に構成されるコンピュータ(つまり、画像解析装置36)であってもよい。
【0074】
[変形例]
なお、本発明は上記の具体例に限定されるものではない。すなわち、上記の具体例に、当業者が適宜設計変更を加えたものも、本発明の特徴を備えている限り、本発明の範囲に包含される。また、前述した実施形態及び後述する変形例が備える各要素は、技術的に可能な限りにおいて組み合わせることができ、これらを組み合わせたものも本発明の特徴を含む限り本発明の範囲に包含される。
【0075】
<カバー部材の改良例>
図9は、変形例におけるカバー部材90の部分側面図である。本図では、搬送方向C(図1)の上流側から下流側、あるいは下流側から上流側を視た場合のカバー部材90の外部構造を示している。このカバー部材90は、カバー本体92と、切欠部94と、複数枚(本図の例では、6枚)の切片部材96と、を含んで構成される。
【0076】
カバー本体92は、外部の環境光を遮断するための部材であり、暗幕58(図3)と同一の又は異なる遮光性材料からなる。カバー本体92の中央下部には、概略矩形状の切欠部94が設けられる。カバー本体92は、使用時に、その切欠部94が玉ねぎ12の搬送経路上に位置するように設置される。
【0077】
各々の切片部材96は、可撓性を有する短冊状の部材である。切片部材96は、カバー本体92の上下方向に延びており、その一端部のみが、切欠部94よりも上方にてカバー本体92に固定される。複数枚の切片部材96は、幅方向に沿って部分的に重なるように並んで配置される。これにより、切欠部94の全体を覆うカーテンが形成される。
【0078】
このように構成することで、カバー部材90の遮光性及び気密性をより高めることができる。なぜならば、玉ねぎ12の出入りの際に、切片部材96が玉ねぎ12の外形にならって変形することで、カバー部材90の隙間が小さくなるからである。
【0079】
<その他の構成>
上記した実施形態では、玉ねぎ12を選別する例を説明したが、これに代えて、ジャガイモ、キャベツ、スイカなどの様々な野菜を選別対象としてもよい。なぜならば、収穫後の野菜には土などの異物が付着しており、選別時に塵埃DSが発生しやすいからである。
【0080】
上記した実施形態では、ニューラルネットワーク70が4種類のラベルに関する確率分布を出力する例を説明したが、ラベルの数や定義はこれに限られない。例えば、ラベルの数が2又は3種類、あるいは5種類以上であってもよい。また、ラベルの定義として、野菜のサイズ(例えば、S/M/Lサイズ)が含まれてもよい。
【0081】
上記した実施形態では、カメラ54と送風機56が同軸的に配置されているが、相対的位置関係がこれに限られない。例えば、送風機56は、その送風方向が光軸Aに対して所定範囲内(概ね、±20度以内)で傾斜するように配置されてもよい。
【0082】
上記した実施形態では、トレイ20を用いて野菜を搬送しているが、これに代えて搬送ベルトを含む様々な搬送手段が用いられてもよい。また、上記した実施形態では、1枚の画像80につき1個の野菜が撮影されているが、2個以上の野菜が同時に撮影されてもよい。この場合には、ニューラルネットワークの学習モデルとして、YOLO(You Only Look Once)、SSD(Single Shot multiBox Detector)を含む物体検出モデルが採用され得る。
【0083】
上記した実施形態では、制御装置30が画像解析装置36による識別結果に応じて野菜を仕分けているが、野菜の仕分方法はこれに限られない。例えば、画像解析装置36は、上記した識別結果及び重量の計測結果の組み合わせに応じて野菜を仕分けてもよい。例えば、識別結果が「該当」である場合、制御装置30は、重量に応じた仕分け(サイズS/M/L)を行う。また、識別結果が「非該当」である場合、制御装置30は、重量にかかわらず「その他」に仕分けを行う。また、識別結果が「2個乗り」である場合、制御装置30は、重量にかかわらず「その他」に仕分けを行う。また、計測結果と識別結果が整合しない場合、制御装置30は、識別結果又は計測結果のうちいずれか一方を優先して仕分けを行う。
【0084】
上記した実施形態では、制御装置30と画像解析装置36が別々の装置である例を説明したが、これに代えて一体の装置で構成されてもよい。この場合、画像解析装置36を設けない代わりに、制御装置30に画像解析機能を付与すればよい。
【0085】
上記した実施形態では、送風機56を備える撮影ユニット34を例に挙げて説明したが、送風手段の設置はこの態様に限られない。例えば、送風手段は、生産工場内に設置された空気調和装置であってもよい。この場合、空気調和装置は、カバー部材との隙間を作らないように、図示しないダクトを介して撮影ユニットに接続される。
【0086】
上記した実施形態では、エアフィルタ56bを備える送風機56を例に挙げて説明したが、エアフィルタの設置はこの態様に限られない。例えば、エアフィルタは、送風機56の外部に設けられてもよいし、部屋自体にエアフィルタが設けられたクリーンルーム内の使用であれば省略されてもよい。
【符号の説明】
【0087】
10…野菜選別システム、12…玉ねぎ(野菜)、14…搬送装置(搬送手段)、20…トレイ、34…撮影ユニット、36…画像解析装置(識別手段)、54…カメラ(撮影手段)、55…撮影面、56…送風機(送風手段)

図1
図2
図3
図4
図5
図6
図7
図8
図9