特許 6042015 オンライン面接評価装置、方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】6042015

(24)【登録日】2016年11月18日

(45)【発行日】2016年12月14日

(54)【発明の名称】オンライン面接評価装置、方法およびプログラム

(51)【国際特許分類】

   G06Q 10/10 20120101AFI20161206BHJP

【ＦＩ】

   G06Q10/10 322

【請求項の数】16

【全頁数】23

(21)【出願番号】特願2016-113270(P2016-113270)

(22)【出願日】2016年6月7日

【審査請求日】2016年6月14日

【早期審査対象出願】

(73)【特許権者】

【識別番号】513129737

【氏名又は名称】株式会社採用と育成研究社

(74)【代理人】

【識別番号】100167667

【弁理士】

【氏名又は名称】安高 史朗

(74)【代理人】

【識別番号】100174436

【弁理士】

【氏名又は名称】熊谷 大介

(72)【発明者】

【氏名】小宮 健実

(72)【発明者】

【氏名】鈴木 洋平

(72)【発明者】

【氏名】菊池 瑞穂

【審査官】 関 博文

(56)【参考文献】

【文献】 特開２００１−３３８１０６（ＪＰ，Ａ）

【文献】 国際公開第２０１１／０４２９８９（ＷＯ，Ａ１）

【文献】 特開２００３−１２２８９０（ＪＰ，Ａ）

【文献】 国際公開第２００４／０７０６３９（ＷＯ，Ａ１）

【文献】 特開２００２−１９９３６４（ＪＰ，Ａ）

【文献】 特開２００７−０９９２４９（ＪＰ，Ａ）

【文献】 特開２００４−１１２５１８（ＪＰ，Ａ）

【文献】 特開２００１−３５０９０４（ＪＰ，Ａ）

【文献】 特開２００６−２６７４６５（ＪＰ，Ａ）

【文献】 国際公開第２０１５／１２２１９５（ＷＯ，Ａ１）

【文献】 特開２０１０−０１５２８９（ＪＰ，Ａ）

【文献】 特開平１０−２２４７３５（ＪＰ，Ａ）

【文献】 特開２００４−０４６４８２（ＪＰ，Ａ）

【文献】 特開２００８−２９４９５２（ＪＰ，Ａ）

【文献】 特開２０１０−１３９６９５（ＪＰ，Ａ）

【文献】 特開２０１５−０６０３８４（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｑ １０／００−９９／００

(57)【特許請求の範囲】

【請求項1】

ネットワークを介してオンライン面接を行い、面接参加者を評価するオンライン面接評価装置において、
ユーザ端末装置から面接のリクエストを受け付ける受付部と、
前記受付部により受け付けたユーザの認証を行う認証部と、
前記認証部により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信部と、
前記通信部により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成部と、
前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析部と、
前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析部と、
前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価部と、
評価基準を記憶する記憶部と、
前記評価部による評価結果が前記記憶部に記憶されている評価基準を満たしているか否かを判断する判断部とを備え、
前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されているオンライン面接評価装置。

【請求項2】

前記評価基準を設定する設定部を備える請求項１記載のオンライン面接評価装置。

【請求項3】

前記評価部による過去の評価結果の中から、前記判断部により前記評価基準を満たしていると判断された評価結果に基づいて、前記評価基準を生成する生成部を備える請求項１記載のオンライン面接評価装置。

【請求項4】

前記映像データ解析部は、面接参加者の表情または瞳を解析することにより前記面接参加者の顔に基づく表出情報を取得し、面接参加者の所作を解析することにより前記面接参加者の態度に基づく表出表現を取得し、
前記音声データ解析部は、音声データをテキストデータに変換し、変換したテキストデータを解析することにより前記面接参加者の発言内容に基づく表出表現を取得し、音声データの音響成分を解析することにより前記面接参加者の音響に基づく表出表現を取得する請求項１から３のいずれか一項に記載のオンライン面接評価装置。

【請求項5】

前記面接データには、複数の質問と当該質問に対する回答が含まれており、当該質問の先頭または後尾に区切りを示す区切信号が挿入されており、
前記映像データ解析部は、前記区切信号に基づいて、前記映像データを解析処理し、質問ごとに面接参加者の顔または態度に基づく表出情報を取得し、
前記音声データ解析部は、前記区切信号に基づいて、前記音声データを解析処理し、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得し、
前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて、質問ごとに面接参加者を評価する請求項１から４のいずれか一項に記載のオンライン面接評価装置。

【請求項6】

前記記憶部には、質問ごとの評価基準が記憶されており、
前記判断部は、前記評価部による質問ごとの評価結果が前記記憶部に記憶されている質問ごとの評価基準を満たしているか否かによって面接参加者の合否を判断する請求項１から５のいずれか一項に記載のオンライン面接評価装置。

【請求項7】

前記受付部は、前記面接参加者である被面接者のユーザ端末装置と、前記面接参加者である面接官のユーザ端末装置とから面接のリクエストを受け付け、
前記認証部は、前記受付部により受け付けた被面接者と面接官の認証を行い、
前記通信部は、前記認証部により認証されて面接が開始された場合、被面接者のユーザ端末装置から受信したデータを面接官のユーザ端末装置に送信し、面接官のユーザ端末装置から受信したデータを被面接者のユーザ端末装置に送信する請求項１から６のいずれか一項に記載のオンライン面接評価装置。

【請求項8】

前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得し、
前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得し、
前記評価部は、前記面接参加者である被面接者の顔または態度に基づく表出情報と、前記面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する請求項７記載のオンライン面接評価装置。

【請求項9】

前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である面接官の顔または態度に基づく表出情報を取得し、
前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である面接官の発言内容または音響に基づく表出表現を取得し、
前記評価部は、前記面接参加者である面接官の顔または態度に基づく表出情報と、前記面接参加者である面接官の発言内容または音響に基づく表出表現とに基づいて面接参加者である面接官を評価する請求項７または８記載のオンライン面接評価装置。

【請求項10】

前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて、質問ごとにリアルタイムに面接参加者を評価し、
前記通信部は、前記評価部による質問ごとの評価結果を面接官のユーザ端末装置に送信する請求項７または８に記載のオンライン面接評価装置。

【請求項11】

前記受付部は、前記面接参加者である被面接者のユーザ端末装置から面接のリクエストを受け付け、
前記認証部は、前記受付部により受け付けた被面接者の認証を行い、
前記通信部は、前記認証部により認証されて面接が開始された場合、被面接者のユーザ端末装置からデータを受信し、面接にかかるデータを被面接者のユーザ端末装置に送信し、
前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得し、
前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得し、
前記評価部は、前記面接参加者である被面接者の顔または態度に基づく表出情報と、前記面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する請求項１から６のいずれか一項に記載のオンライン面接評価装置。

【請求項12】

前記通信部は、語学に関するリスニング用のデータをユーザ端末装置に送信し、
前記面接データ生成部は、前記通信部によりユーザ端末装置から受信した前記語学に関するリスニング用のデータに対するユーザの受け答えのデータに基づいて、面接データを生成し、
前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて面接参加者の語学力を評価する請求項１１記載のオンライン面接評価装置。

【請求項13】

前記認証部は、ユーザ端末装置から送信されてくる面接参加者の顔データに基づく顔認証によりユーザの認証を行う請求項１から１２のいずれか一項に記載のオンライン面接評価装置。

【請求項14】

前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とを組み合わせ、前記面接参加者の自信と論理性から説得力を評価する請求項１から１３のいずれか一項に記載のオンライン面接評価装置。

【請求項15】

ネットワークを介してオンライン面接を行い、面接参加者を評価するオンライン面接評価方法において、
ユーザ端末装置から面接のリクエストを受け付ける受付工程と、
前記受付工程により受け付けたユーザの認証を行う認証工程と、
前記認証工程により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信工程と、
前記通信工程により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成工程と、
前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析工程と、
前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析工程と、
前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価工程と、
前記評価工程による評価結果が記憶部に記憶されている評価基準を満たしているか否かを判断する判断工程とを備え、
前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されているオンライン面接評価方法。

【請求項16】

ネットワークを介してオンライン面接を行い、面接参加者を評価するプログラムにおいて、
コンピュータに、
ユーザ端末装置から面接のリクエストを受け付ける受付工程と、
前記受付工程により受け付けたユーザの認証を行う認証工程と、
前記認証工程により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信工程と、
前記通信工程により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成工程と、
前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析工程と、
前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析工程と、
前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価工程と、
前記評価工程による評価結果が記憶部に記憶されている評価基準を満たしているか否かを判断する判断工程と、
を実行させるためのプログラムであって、
前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されているプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、オンライン面接により面接参加者の評価を行うオンライン面接評価装置、方法およびプログラムに関する。

【背景技術】

【0002】

求人企業の採用試験（特に面接試験）を受ける場合、求職者は、求人企業から通知された情報（試験会場、集合時間など）にしたがって、試験会場に行く必要がある。

【0003】

かかる採用試験は、地理的または時間的な制約があり、求職者にとって非常に負担が大きい。特に、多くの企業が集中している首都圏の会社に地方に在住している求職者が採用試験を受けに行く場合などにおいて、移動などの負担が大きい。一方、求人企業にとっても、試験会場や面接官以外の誘導員などの人員を確保しなければならず、負担が大きい。

【0004】

そこで、最近は、ネットワークを利用して面接を行うオンライン面接が脚光を浴びている。オンライン面接を利用すれば、求職者にとっては、地理的、時間的な制約が解消されるメリットがあり、求人企業にとっては、試験会場を確保する手間とコストを削減でき、かつ、人員も削減できるなどのメリットがある。

【0005】

例えば、特許文献１では、ネットワークを介して求職者と求人企業との仲介サービスを行なうサーバコンピュータの人材仲介プログラムにおいて、そのコンピュータに、求職者側端末装置と求人企業側端末装置とをネットワークを介して接続することにより、オンライン面接を行う技術が開示されている。さらに、特許文献１では、オンライン面接により面接記録情報を取得し、この面接記録情報を解析し、予め設定したキーワードが出現した出現回数を算出し、この出現回数に基づいて、求人企業の判定基準に合致するか否かを判定し、この判定の結果を求人企業に通知処理する技術が開示されている。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２００４−２８８１０７号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

しかし、特許文献１による技術では、単に、面接記録情報を解析し、予め設定されているキーワードの出現回数に基づいて求人企業の判定基準に合致しているか否かの判定を行っているだけであり、機械的な判定に過ぎず、優秀な人材を確保することが困難な可能性がある。

【0008】

一方、オンライン面接を利用して、面接官自身が求職者を評価する場合、通常の対面式の面接と同様に、求職者の熱意や人間性に基づいた評価を行うことが可能であるが、求職者の評価に対面式の面接と同様の人材およびコストがかかってしまう。また、求職者の評価が面接官の主観によって行われ、科学的客観性が低くなる可能性がある。

【0009】

そこで、本願発明では、オンライン面接に参加した面接参加者に対して、科学的客観性の高い評価を低コストに行うことができるオンライン面接評価装置、方法およびプログラムを提供することを目的とする。

【課題を解決するための手段】

【0010】

上記目的を達成するために、本発明の一態様におけるオンライン面接評価装置は、ネットワークを介してオンライン面接を行い、面接参加者を評価するオンライン面接評価装置において、ユーザ端末装置から面接のリクエストを受け付ける受付部と、前記受付部により受け付けたユーザの認証を行う認証部と、前記認証部により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信部と、前記通信部により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成部と、前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析部と、前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析部と、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価部と、評価基準を記憶する記憶部と、前記評価部による評価結果が前記記憶部に記憶されている評価基準を満たしているか否かを判断する判断部とを備え、前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されている。

【0012】

また、本発明の一態様におけるオンライン面接評価装置では、前記評価基準を設定する設定部を備える構成でもよい。

【0013】

また、本発明の一態様におけるオンライン面接評価装置では、前記評価部による過去の評価結果の中から、前記判断部により前記評価基準を満たしていると判断された評価結果に基づいて、前記評価基準を生成する生成部を備える構成でもよい。

【0015】

また、本発明の一態様におけるオンライン面接評価装置では、前記映像データ解析部は、面接参加者の表情または瞳を解析することにより前記面接参加者の顔に基づく表出情報を取得し、面接参加者の所作を解析することにより前記面接参加者の態度に基づく表出表現を取得し、前記音声データ解析部は、音声データをテキストデータに変換し、変換したテキストデータを解析することにより前記面接参加者の発言内容に基づく表出表現を取得し、音声データの音響成分を解析することにより前記面接参加者の音響に基づく表出表現を取得する構成でもよい。

【0016】

また、本発明の一態様におけるオンライン面接評価装置では、前記面接データには、複数の質問と当該質問に対する回答が含まれており、当該質問の先頭または後尾に区切りを示す区切信号が挿入されており、前記映像データ解析部は、前記区切信号に基づいて、前記映像データを解析処理し、質問ごとに面接参加者の顔または態度に基づく表出情報を取得し、前記音声データ解析部は、前記区切信号に基づいて、前記音声データを解析処理し、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得し、前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて、質問ごとに面接参加者を評価する構成でもよい。

【0017】

また、本発明の一態様におけるオンライン面接評価装置では、前記記憶部には、質問ごとの評価基準が記憶されており、前記判断部は、前記評価部による質問ごとの評価結果が前記記憶部に記憶されている質問ごとの評価基準を満たしているか否かによって面接参加者の合否を判断する構成でもよい。

【0018】

また、本発明の一態様におけるオンライン面接評価装置では、前記受付部は、前記面接参加者である被面接者のユーザ端末装置と、前記面接参加者である面接官のユーザ端末装置とから面接のリクエストを受け付け、前記認証部は、前記受付部により受け付けた被面接者と面接官の認証を行い、前記通信部は、前記認証部により認証されて面接が開始された場合、被面接者のユーザ端末装置から受信したデータを面接官のユーザ端末装置に送信し、面接官のユーザ端末装置から受信したデータを被面接者のユーザ端末装置に送信する構成でもよい。

【0019】

また、本発明の一態様におけるオンライン面接評価装置では、前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得し、前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得し、前記評価部は、前記面接参加者である被面接者の顔または態度に基づく表出情報と、前記面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する構成でもよい。

【0020】

また、本発明の一態様におけるオンライン面接評価装置では、前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である面接官の顔または態度に基づく表出情報を取得し、前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である面接官の発言内容または音響に基づく表出表現を取得し、前記評価部は、前記面接参加者である面接官の顔または態度に基づく表出情報と、前記面接参加者である面接官の発言内容または音響に基づく表出表現とに基づいて面接参加者である面接官を評価する構成でもよい。

【0021】

また、本発明の一態様におけるオンライン面接評価装置では、前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて、質問ごとにリアルタイムに面接参加者を評価し、前記通信部は、前記評価部による質問ごとの評価結果を面接官のユーザ端末装置に送信する構成でもよい。

【0022】

また、本発明の一態様におけるオンライン面接評価装置では、前記受付部は、前記面接参加者である被面接者のユーザ端末装置から面接のリクエストを受け付け、前記認証部は、前記受付部により受け付けた被面接者の認証を行い、前記通信部は、前記認証部により認証されて面接が開始された場合、被面接者のユーザ端末装置からデータを受信し、面接にかかるデータを被面接者のユーザ端末装置に送信し、前記映像データ解析部は、前記面接データにかかる映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得し、前記音声データ解析部は、前記面接データにかかる音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得し、前記評価部は、前記面接参加者である被面接者の顔または態度に基づく表出情報と、前記面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する構成でもよい。

【0023】

また、本発明の一態様におけるオンライン面接評価装置では、前記通信部は、語学に関するリスニング用のデータをユーザ端末装置に送信し、前記面接データ生成部は、前記通信部によりユーザ端末装置から受信した前記語学に関するリスニング用のデータに対するユーザの受け答えのデータに基づいて、面接データを生成し、前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて面接参加者の語学力を評価する構成でもよい。

【0024】

また、本発明の一態様におけるオンライン面接評価装置では、前記認証部は、ユーザ端末装置から送信されてくる面接参加者の顔データに基づく顔認証によりユーザの認証を行う構成でもよい。

【0025】

また、本発明の一態様におけるオンライン面接評価装置では、前記評価部は、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とを組み合わせ、前記面接参加者の自信と論理性から説得力を評価する構成でもよい。

【0026】

上記目的を達成するために、本発明の一態様におけるオンライン面接評価方法は、ネットワークを介してオンライン面接を行い、面接参加者を評価するオンライン面接評価方法において、ユーザ端末装置から面接のリクエストを受け付ける受付工程と、前記受付工程により受け付けたユーザの認証を行う認証工程と、前記認証工程により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信工程と、前記通信工程により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成工程と、前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析工程と、前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析工程と、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価工程と、前記評価工程による評価結果が記憶部に記憶されている評価基準を満たしているか否かを判断する判断工程とを備え、前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されている。

【0027】

上記目的を達成するために、本発明の一態様におけるオンライン面接評価プログラムは、ネットワークを介してオンライン面接を行い、面接参加者を評価するプログラムにおいて、コンピュータに、ユーザ端末装置から面接のリクエストを受け付ける受付工程と、前記受付工程により受け付けたユーザの認証を行う認証工程と、前記認証工程により認証されて面接が開始された場合、ユーザ端末装置との間でデータを送受信する通信工程と、前記通信工程により送受信されるデータに基づいて、質問ごとに面接データを生成する面接データ生成工程と、前記面接データにかかる映像データを解析処理して、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する映像データ解析工程と、前記面接データにかかる音声データを解析処理して、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析工程と、前記面接参加者の顔または態度に基づく表出情報と、前記面接参加者の発言内容または音響に基づく表出表現とに基づいて、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴に関する項目ごとに面接参加者を評価する評価工程と、前記評価工程による評価結果が記憶部に記憶されている評価基準を満たしているか否かを判断する判断工程と、実行させるためのプログラムであって、前記評価基準は、少なくとも、言葉の意味的特徴と、音声的特徴と、表情的特徴と、所作的特徴とから構成されている。

【発明の効果】

【0028】

オンライン面接に参加した面接参加者に対して、科学的客観性の高い評価を低コストに行うことができる。

【図面の簡単な説明】

【0029】

【図1】オンライン面接評価装置とユーザ端末装置の接続関係を示す図である。

【図2】オンライン面接評価装置の構成を示す概略ブロック図である。

【図3】面接データ生成部による面接データの生成についての説明に供する図である。

【図4】評価部による評価結果の一例を示す図である。

【図5】評価基準記憶部に記憶されている評価基準の一例を示す図である。

【図6】被面接者のユーザ端末装置のディスプレイに表示されるオンライン面接の画像の一例を示す図である。

【図7】面接官のユーザ端末装置のディスプレイに表示されるオンライン面接の画像の一例を示す図である。

【図8】被面接者と面接官との間で行われるオンライン面接の具体例についての説明に供する図である。

【図9】オンライン面接においてリアルタイム判定を取り入れた場合の具体例についての説明に供する図である。

【図10】セルフ面接の具体例についての説明に供する図である。

【図11】語学に関するテストの評価の具体例についての説明に供する図である。

【図12】オンライン面接評価装置の動作についての説明に供するフローチャートである。

【図13】コンピュータの構成を示すブロック図である。

【発明を実施するための形態】

【0030】

以下、本実施形態について説明する。なお、以下に説明する本実施形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また本実施形態で説明される構成の全てが、本発明の必須構成要件であるとは限らない。

【0031】

なお、以下の実施形態は、ネットワークＮを介してオンライン面接を行い、面接参加者を評価するオンライン面接評価装置、方法およびプログラムの動作と構成について説明する。なお、面接参加者とは、オンライン面接に参加する被面接者と、面接官をいう。被面接者とは、求職者や受験生などの面接を受ける者をいう。

【0032】

オンライン面接評価装置１は、図１に示すように、ネットワークＮを介して、面接参加者が利用する複数のユーザ端末装置２ａ，２ｂ・・・２ｎ（以下、ユーザ端末装置２という。）とが接続されている。ユーザ端末装置２は、ＬＡＮなどのネットワークＮを介してオンライン面接評価装置１に接続可能な通信部と、面接参加者の顔などを撮像するカメラと、面接参加者の声を集音するマイクと、オンライン面接評価装置１から送信されてきた映像を表示するディスプレイと、オンライン面接評価装置１から送信されてきた音声を出力するマイクとを備える装置であり、例えば、スマートフォン、携帯電話、タブレット、パーソナルコンピュータ（ＰＣ）などの情報処理装置である。

【0033】

オンライン面接は、Ｗｅｂブラウザを利用して提供されてもよいし、専用のアプリケーション（以下、専用アプリという）を利用して提供されてもよい。本実施例では、専用アプリを利用してオンライン面接を行うものとして説明するが、Ｗｅｂブラウザを利用してオンライン面接を行ってもよい。

【0034】

Ｗｅｂブラウザを利用する場合、面接参加者は、ユーザ端末装置２にインストールされているＷｅｂブラウザを起動し、Ｗｅｂブラウザによりオンライン面接評価装置１にアクセスする。そして、Ｗｅｂブラウザに表示される表示画面に対して所定の操作を行うことにより、オンライン面接を行う。

【0035】

また、専用アプリを利用する場合、面接参加者は、予めユーザ端末装置２にダウンロードされている専用アプリを起動し、専用アプリによりオンライン面接評価装置１にアクセスする。そして、専用アプリに表示される表示画面に対して所定の操作することにより、オンライン面接を行う。

【0036】

オンライン面接評価装置１は、図２に示すように、受付部１１と、認証部１２と、通信部１３と、面接データ生成部１４と、分離部１５と、映像データ解析部１６と、音声データ解析部１７と、評価部１８とを備える。

【0037】

受付部１１は、ユーザ端末装置２から面接のリクエストを受け付ける。具体的には、ユーザ端末装置２は、面接参加者の操作に応じて、専用アプリを起動する。また、ユーザ端末装置２は、専用アプリに表示される表示画面に対して所定の操作が行われ、オンライン面接評価装置１の受付部１１に対して面接のリクエストを行う。受付部１１は、当該リクエストを受け付ける。

【0038】

認証部１２は、受付部１１により受け付けたユーザの認証を行う。具体的には、受付部１１は、ユーザ端末装置２から面接のリクエストとともにユーザＩＤとパスワードを受け付ける。ユーザ情報記憶部１９には、ユーザ登録により、予め面接参加者の登録情報（ＩＤとパスワードなど）が記憶されている。認証部１２は、ユーザ情報記憶部１９を参照し、送信されてきたユーザＩＤとパスワードが記憶されている登録情報に一致するものがあるかどうかを判断し、一致した場合に認証を完了する。

【0039】

通信部１３は、認証部１２により認証されて面接が開始された場合、ユーザ端末装置２との間でデータを送受信する。通信部１３は、ユーザ端末装置２から送信されてきたデータをデータ記憶部２０に記憶する。データは、例えば、映像データと音声データが多重化されてユーザ端末装置２から送信されてくる。また、通信部１３は、データが圧縮されている場合には、データを伸張する。なお、通信部１３と受付部１１は、同一の構成であってもよい。

【0040】

面接データ生成部１４は、通信部１３により送受信されるデータに基づいて、面接データを生成する。例えば、面接が、複数のパート（例えば、「挨拶パート」、「第１質問パート」、「第２質問パート」、「第３質問パート」など）に分かれている場合には、面接データ生成部１４は、通信部１３により送受信されるデータ（図３中のＤ１）を各パートに分割することにより、面接データ（図３中のＤ２）を生成する。「挨拶パート」とは、例えば、被面接者の名前の確認などを行うパートである。「第１質問パート」とは、例えば、自己ＰＲや志望動機などを確認するパートである。「第２質問パート」とは、例えば、「第１質問パート」の回答に基づいて、質問するパートである。「第３質問パート」とは、例えば、エントリーシートなどに書かれている内容に基づいて行われるパートである。

【0041】

分離部１５は、面接データを映像データと音声データに分離する。なお、通信部１３で受信したデータが映像データと音声データとに多重化されていない場合には、分離部１５は不要である。

【0042】

映像データ解析部１６は、映像データを解析処理して、面接参加者の顔または態度に基づく表出情報を取得する。

【0043】

ここで、面接参加者の顔に基づく表出情報の取得について説明する。映像データ解析部１６は、面接参加者の表情または瞳を解析することにより面接参加者の顔に基づく表出情報を取得する。面接参加者の顔に基づく表出情報とは、面接参加者の表情の変化を示す情報である。映像データ解析部１６は、ある質問を行ったときに面接参加者の顔が、真顔から笑顔に変化したり、まったく変化しなかったときなどの表情の変化を分析する。また、映像データ解析部１６は、例えば、ある質問を行ったときの面接参加者の瞳の大きさ、色、輝き、形などの要素を分析する。

【0044】

つぎに、面接参加者の態度に基づく表出情報の取得について説明する。映像データ解析部１６は、面接参加者の所作を解析することにより面接参加者の態度に基づく表出表現を取得する。面接参加者の態度に基づく表出情報とは、面接参加者の顔以外の体の動きや手の動きの変化を示す情報である。映像データ解析部１６は、ある質問を行ったときに面接参加者の身振りや手振りが大きいか小さいかや、頷く回数などを分析する。

【0045】

音声データ解析部１７は、音声データを解析処理して、面接参加者の発言内容または音響に基づく表出表現を取得する。

【0046】

ここで、面接参加者の発言内容に基づく表出表現の取得について説明する。音声データ解析部１７は、音声データをテキストデータに変換し、変換したテキストデータを解析することにより面接参加者の発言内容に基づく表出表現を取得する。面接参加者の発言内容に基づく表出表現とは、発言された言葉の意味を分析処理して得られる情報であり、例えば、論理性（論理構造）、発言量、語彙の豊かさ、発言された語彙の難易度などを示す情報である。

【0047】

つぎに、面接参加者の音響に基づく表出表現の取得について説明する。音声データ解析部１７は、音声データの音響成分（音のテンポや強弱）を解析することにより面接参加者の音響に基づく表出表現を取得する。面接参加者の音響に基づく表出表現とは、発言された音声を分析処理して得られる情報であり、例えば、話す速度、声の大きさ、声の抑揚、声の音域、感情分析、ドッグワードなどを示す情報である。ドッグワードとは、「えー」、「あー」、「あのー」、「そのー」などの意味を有さない言葉のことである。

【0048】

評価部１８は、映像データ解析部１６から送信されてくる面接参加者の顔または態度に基づく表出情報と、音声データ解析部１７から送信されてくる面接参加者の発言内容または音響に基づく表出表現とに基づいて面接参加者を評価する。

【0049】

具体的には、評価部１８は、面接参加者の顔に基づく表出情報の評価と、面接参加者の態度に基づく表出情報の評価と、面接参加者の発言内容に基づく表出表現の評価と、面接参加者の音響に基づく表出表現の評価とを行う。

【0050】

また、評価部１８は、各表出情報を組み合わせた評価を行ってもよい。例えば、評価部１８は、面接参加者の顔に基づく表出情報と、面接参加者の発言内容に基づく表出表現とを組み合わせることにより、ある質問に対する面接参加者の回答時における顔の変化と、発言内容とから、自信のある顔で論理性のある回答を行っているのか、自信のない表情で論理性のある回答を行っているのかを評価することができ、説得力の有無などの評価を行うことができる。

【0051】

評価部１８は、例えば、面接参加者Ａが質問Ｘに対して、自信のある顔（５段階評価で「５」）で論理性の高い回答（５段階評価で「５」）を行っている場合には、図４中の線Ａに示すような描画を行う。線Ａが面接参加者Ａの評価になる。また、評価部１８は、例えば、面接参加者Ｂが質問Ｘに対して、自信のない顔（５段階評価で「１」）で論理性の高い回答（５段階評価で「５」）を行っている場合には、図４中の線Ｂに示すよう描画を行う。線Ｂが面接参加者Ｂの評価になる。企業側において、評価部１８による評価（図４）を一見するだけで、面接参加者Ａの説得力と面接参加者Ｂの説得力を把握することができる。また、同じ面接参加者Ａの中でも、質問に対する回答ごとに、自信と論理性の高さを評価して可視化することもできる。当該評価を見ることで、どの質問に対する回答に自信を持っているか、論理性の高い回答が出来ているかを把握することができる。なお、上述では、横軸の評価項目を「論理性」にし、縦軸の評価項目を「自信」にしたが、これは一例であり、さまざまな評価項目を適用することができる。また、評価は、縦軸と横軸に限らず複数の軸により表現してもよい。

【0052】

また、評価部１８は、例えば、５段階評価などで評価を行ってもよい。具体的には、評価部１８は、ある質問を行ったときに面接参加者の顔が、真顔から笑顔に変化している場合には、５点の評価を行い、一方、まったく変化しなかった場合には、１点の評価を行う。また、評価部１８は、ある質問を行ったときの面接参加者の瞳の大きさ、色、輝き、形などの要素に基づいて、質問に対する興味の度合などを分析し、評価（数値化）を行う。

【0053】

このような構成によれば、オンライン面接評価装置１は、オンライン面接に参加した面接参加者に対して、科学的客観性の高い評価を低コストに行うことができる。なお、評価部１８で評価された結果は、通信部１３を介して外部に送信される。

【0054】

また、オンライン面接評価装置１は、図２に示すように、評価基準記憶部２１と、判断部２２とを備える構成でもよい。

【0055】

評価基準記憶部２１は、評価基準を記憶する。評価基準は、合否の基準であり、図５に示すように、項目に対する評価が示されており、例えば、論理性の評価が５段階で３以上、発言量の評価が５段階評価で２以上などと示されている。

【0056】

判断部２２は、評価部１８による評価結果が評価基準記憶部２１に記憶されている評価基準を満たしているか否かを判断する。

【0057】

このような構成によれば、オンライン面接評価装置１は、客観的な基準である評価基準に基づいて面接参加者を評価することができる。なお、判断部２２で評価された結果は、通信部１３を介して外部に送信される。

【0058】

また、オンライン面接評価装置１は、図２に示すように、評価基準を設定する設定部２３を備える構成でもよい。設定部２３は、設定した評価基準を評価基準記憶部２１に記憶させる。

【0059】

例えば、企業の人事部の職員がオンライン面接評価装置１にアクセスし、設定部２３により企業独自の評価基準を設定することができる。

【0060】

よって、オンライン面接評価装置１は、設定部２３により評価基準を自在に設定や変更を行うことができ、評価基準のカスタマイズ性が高いメリットがある。

【0061】

また、オンライン面接評価装置１は、図２に示すように、判断部２２により評価基準を満たしていると判断された評価部１８により評価された評価結果に基づいて、評価基準を生成する生成部２４を備える構成でもよい。

【0062】

生成部２４は、例えば、過去に優秀だと評価された一または複数の面接参加者の評価結果の平均値を算出し、算出した平均値により評価基準を生成する。生成部２４は、生成した評価基準を評価基準記憶部２１に記憶させる。また、生成部２４は、人工知能としての機能を発揮し、過去に優秀だと評価された一または複数の面接参加者の評価結果（以下、過去の評価結果という）を分析し、学習を繰り返しながら評価基準を生成してもよい。なお、生成部２４の学習方法は、教師データを用いる教師付き学習でもよいし、教師なし学習でもよい。

【0063】

よって、オンライン面接評価装置１は、過去の面接参加者の評価結果に基づいて面接参加者を評価することができ、偏りのない評価を行うことができる。なお、オンライン面接評価装置１は、生成部２４により生成された評価基準の一部を変更できる機能を有していてもよい。

【0064】

ここで、面接データの構成と、映像データ解析部１６、音声データ解析部１７および評価部１８の動作について説明する。

【0065】

面接データには、複数の質問と当該質問に対する回答が含まれており、当該質問の先頭または後尾に区切りを示す区切信号が挿入されている。例えば、図３中のＤ２に示す例では、挨拶パートの先頭に区切信号Ｓ１が挿入され、第１質問パートの先頭に区切信号Ｓ２が挿入され、第２質問パートの先頭に区切信号Ｓ３が挿入され、第３質問パートの先頭に区切信号Ｓ４が挿入されている。なお、区切信号は、面接参加者である面接官によるユーザ端末装置２の操作（例えば、キーボードのエンターキーを操作）に基づいて、区切信号が挿入されてもよいし、面接参加者である面接官の所定の言葉（例えば、「では、次の質問に移ります」など）に基づいて、区切信号が挿入されてもよい。

【0066】

映像データ解析部１６は、区切信号に基づいて、映像データを解析処理し、質問ごとに面接参加者の顔または態度に基づく表出情報を取得する。例えば、映像データ解析部１６は、挨拶パート、第１質問パート、第２質問パートおよび第３質問パートごとに、面接参加者の顔または態度に基づく表出情報を取得する。

【0067】

音声データ解析部１７は、区切信号に基づいて、音声データを解析処理し、質問ごとに面接参加者の発言内容または音響に基づく表出表現を取得する。例えば、音声データ解析部１７は、挨拶パート、第１質問パート、第２質問パートおよび第３質問パートごとに、面接参加者の発言内容または音響に基づく表出表現を取得する。

【0068】

評価部１８は、面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて、質問ごとに面接参加者を評価する。例えば、評価部１８は、挨拶パート、第１質問パート、第２質問パートおよび第３質問パートごとに、面接参加者を評価する。

【0069】

よって、オンライン面接評価装置１は、区切信号が挿入されている単位で面接参加者の評価を行うことができるので、例えば、質問単位で面接参加者の評価を知ることができる。

【0070】

また、評価基準記憶部２１には、質問ごとの評価基準が記憶される構成でもよい。当該構成の場合には、判断部２２は、評価部１８による質問ごとの評価結果が評価基準記憶部２１に記憶されている質問ごとの評価基準を満たしているか否かによって面接参加者の合否を判断する。

【0071】

よって、オンライン面接評価装置１は、区切信号が挿入されている単位で面接参加者の評価に基づく判断を行うことができる。

【0072】

＜面接参加者が被面接者と面接官である場合＞
ここで、面接参加者が被面接者と面接官である場合について説明する。以下では、ユーザ端末装置２ａは、被面接者が利用する端末装置であり、ユーザ端末装置２ｂは、面接官が利用する端末装置である。

【0073】

受付部１１は、被面接者のユーザ端末装置２ａと面接官のユーザ端末装置２とから面接のリクエストを受け付ける。

【0074】

認証部１２は、受付部１１により受け付けた被面接者と面接官の認証を行う。具体的には、受付部１１は、ユーザ端末装置２ａおよびユーザ端末装置２ｂから面接のリクエストとともにユーザＩＤとパスワードを受け付ける。ユーザ情報記憶部１９には、予め面接参加者によりユーザ登録が行われたときに入力された登録情報（ＩＤとパスワードなど）が記憶されている。認証部１２は、ユーザ情報記憶部１９を参照し、送信されてきたユーザＩＤとパスワードが記憶されている登録情報に一致するものがあるかどうかを判断し、一致した場合に認証を完了する。このとき認証部１２は、ユーザ端末装置２ａが被面接者の端末装置であり、ユーザ端末装置２ｂが面接官の端末装置であることを認識する。

【0075】

通信部１３は、認証部１２により認証されて面接が開始された場合、被面接者のユーザ端末装置２ａから受信したデータを面接官のユーザ端末装置２ｂに送信し、面接官のユーザ端末装置２ｂから受信したデータを被面接者のユーザ端末装置２ａに送信する。なお、送受信するデータには、映像データと音声データとが含まれている。

【0076】

被面接者のユーザ端末装置２ａにおいては、ディスプレイに面接官の画像が表示され、スピーカから面接官の音声が出力される。なお、ユーザ端末装置２ａでは、図６（ａ）に示すように、面接官のみが表示されるビューや、図６（ｂ）に示すように、面接官と被面接者本人が並んで表示されるビューなどを選択することができる。

【0077】

同様に、面接官のユーザ端末装置２ｂにおいては、ディスプレイに被面接者の画像が表示され、スピーカから被面接者の音声が出力される。なお、ユーザ端末装置２ｂでは、図７（ａ）に示すように、被面接者のみが表示されるビューや、図７（ｂ）に示すように、面接官自身と被面接者が並んで表示されるビューなどを選択することができる。

【0078】

映像データ解析部１６は、分離部１５で分離された映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得する。

【0079】

音声データ解析部１７は、分離部１５で分離された音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得する。

【0080】

評価部１８は、面接参加者である被面接者の顔または態度に基づく表出情報と、面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する。

【0081】

また、映像データ解析部１６は、分離部１５で分離された映像データを解析処理して、面接参加者である面接官の顔または態度に基づく表出情報を取得する。面接官の顔に基づく表出情報とは、面接官の表情の変化を示す情報である。映像データ解析部１６は、ある質問を行うときや被面接者と会話を行うときなどの面接官の顔が、真顔から笑顔に変化したり、まったく変化しなかったときなどの表情の変化を分析する。また、映像データ解析部１６は、例えば、ある質問を行うときや被面接者と会話を行うときなどの面接官の瞳の大きさ、色、輝き、形などの要素を分析する。

【0082】

また、面接官の態度に基づく表出情報とは、面接官の顔以外の体の動きや手の動きの変化を示す情報である。映像データ解析部１６は、ある質問を行うときや被面接者と会話を行うときなどの面接官の身振りや手振りが大きいか小さいかや、頷く回数などを分析する。

【0083】

音声データ解析部１７は、分離部１５で分離された音声データを解析処理して、面接参加者である面接官の発言内容または音響に基づく表出表現を取得する。面接官の発言内容に基づく表出表現とは、発言された言葉の意味を分析処理して得られる情報であり、例えば、論理性（論理構造）、発言量、語彙の豊かさ、発言された語彙の難易度などを示す情報である。面接官の音響に基づく表出表現とは、発言された音声を分析処理して得られる情報であり、例えば、話す速度、声の大きさ、声の抑揚、声の音域、感情分析、ドッグワードなどを示す情報である。

【0084】

評価部１８は、面接参加者である面接官の顔または態度に基づく表出情報と、面接参加者である面接官の発言内容または音響に基づく表出表現とに基づいて面接参加者である面接官を評価する。評価部１８は、例えば、面接官による面接が圧迫面接になっていないかや、被面接者とよいコミュニケーションを図れているかなどを評価する。

【0085】

よって、オンライン面接評価装置１は、面接参加者である被面接者のみならず、面接官についても、科学的客観性の高い評価を低コストに行うことができる。

【0086】

ここで、被面接者と面接官との間で行われるオンライン面接の具体例について、図８を用いて説明する。なお、図８中の処理対象アーカイブデータ１１ａは、主にデータ記憶部２０に相当し、処理１１ｂは、主に、映像データ解析部１６、音声データ解析部１７および評価部１８に相当し、参照データ１１ｃは、主に評価基準記憶部２１に相当し、出力結果１１ｄは、主に、判断部２２および通信部１３に相当する。また、参照データ１１ｃは、例えば、企業側の優秀人材の特徴として、言葉の意味的特徴、音声的特徴、表情的特徴および所作的特徴が含まれている。

【0087】

所定対象アーカイブデータ１１ａには、オンライン面接によってユーザ端末装置２ａとユーザ端末装置２ｂとの間で送受信されるデータに基づいて、被面接者の発言内容、音声、表情、所作（ふるまい）等のデータと、面接官の発言内容、音声、表情、所作（ふるまい）等のデータとが蓄積される。

【0088】

処理１１ｂは、参照データ１１ｃを参照し、音声データに基づいて、言葉の意味分析処理と音声分析処理を行い、映像データに基づいて、表情分析処理を行う。

【0089】

言葉の意味分析処理は、参照データ１１ｃの言葉の意味的特徴を参照して、論理性（論理構造）の評価、発言量の評価、語彙の豊かさの評価、語彙の難易度の評価などを行う。

【0090】

音声分析処理は、参照データ１１ｃの音声的特徴を参照して、早さの評価、大きさの評価、抑揚の評価、音域の評価、感情分析の評価、ドッグワードの評価などを行う。

【0091】

表情分析処理は、参照データ１１ｃの表情的特徴を参照して、表情の変化の評価、表情の表出の評価などを行う。また、参照データ１１ｃの所作的特徴を参照して、所作の分析処理も行うことができる。

【0092】

出力結果１１ｄは、処理１１ｂによる被面接者の処理に基づいて、被面接者が合格する人材か否かなどの判定情報を作成し、企業側に提出する。

【0093】

また、出力結果１１ｄは、処理１１ｂによる面接官の処理に基づいて、面接官の面接が圧迫面接になっていないかや、被面接者とよいコミュニケーションを図れているかなどレポートを作成し、企業側に提出する。

【0094】

よって、オンライン面接評価装置１は、旧来は面接官の主観で行われていた被面接者に対する評価を科学的客観性に基づいて評価することができ、かつ、評価にかかる人的工数を削減することができる。

【0095】

＜リアルタイム判定＞
つぎに、リアルタイム判定について説明する。評価部１８は、面接参加者である被面接者の顔または態度に基づく表出情報と、面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて、質問ごとにリアルタイムに面接参加者を評価する。

【0096】

通信部１３は、評価部１８による質問ごとの評価結果を面接官のユーザ端末装置２ｂに送信する。

【0097】

よって、オンライン面接評価装置１は、質問ごとの評価結果をリアルタイムに面接官に通知するので、面接の進行を適応的に変更することができる。例えば、面接官は、評価結果に基づいて、質問の内容を変えたり、面接時間を縮めたり伸ばしたりできる。

【0098】

ここで、被面接者と面接官との間で行われるオンライン面接において、リアルタイム判定を取り入れた場合の具体例について、図９を用いて説明する。なお、図９中の処理対象アーカイブデータ１１ａは、主にデータ記憶部２０に相当し、処理１１ｂは、主に、映像データ解析部１６、音声データ解析部１７および評価部１８に相当し、参照データ１１ｃは、主に評価基準記憶部２１に相当し、出力結果１１ｄは、主に、判断部２２および通信部１３に相当する。また、参照データ１１ｃは、例えば、優秀人材の標準的特徴として、リアルタイム判定に利用される音声的特徴および表情的特徴が含まれている。

【0099】

所定対象アーカイブデータ１１ａには、オンライン面接によってユーザ端末装置２ａとユーザ端末装置２ｂとの間で送受信されるデータに基づいて、被面接者の発言内容、音声、表情、所作（ふるまい）等のデータが蓄積される。

【0100】

処理１１ｂは、参照データ１１ｃを参照し、音声データに基づいて、音声分析処理を行行い、映像データに基づいて、表情分析処理を行う。

【0101】

音声分析処理は、参照データ１１ｃの音声的特徴を参照して、早さの評価、大きさの評価、抑揚の評価、音域の評価、感情分析の評価、ドッグワードの評価などを行う。

【0102】

表情分析処理は、参照データ１１ｃの表情的特徴を参照して、表情の変化の評価、表情の表出の評価などを行う。

【0103】

出力結果１１ｄは、処理１１ｂに基づいて、合否判定の補助となる情報を面接官のユーザ端末装置２ｂに送信する。

【0104】

よって、オンライン面接評価装置１は、旧来は面接官の主観で行われていた被面接者に対する評価を科学的客観性に基づいて、質問単位でリアルタイムに評価することができ、面接をスムーズに進行させることができる。

【0105】

＜面接参加者が被面接者のみである場合（セルフ面接）＞
ここで、面接参加者が被面接者のみである場合（セルフ面接）について説明する。セルフ面接とは、流れてくる音声付動画にしたがって回答を行う形式の面接である。なお、被面接者は、セルフ面接をした様子をユーザ端末装置２の録画機能を利用して録画することもできる。被面接者は、録画した内容を再生することにより、次回以降の面接に役立てることができる。

【0106】

受付部１１は、被面接者のユーザ端末装置２ａから面接のリクエストを受け付ける。認証部１２は、受付部１１により受け付けた被面接者の認証を行う。通信部１３は、認証部１２により認証されて面接が開始された場合、被面接者のユーザ端末装置２ａからデータを受信し、面接にかかるデータを被面接者のユーザ端末装置２ａに送信する。面接にかかるデータとは、予め用意されている質問の映像データと音声データである。

【0107】

映像データ解析部１６は、分離部１５で分離された映像データを解析処理して、面接参加者である被面接者の顔または態度に基づく表出情報を取得する。

【0108】

音声データ解析部１７は、分離部１５で分離された音声データを解析処理して、面接参加者である被面接者の発言内容または音響に基づく表出表現を取得する。

【0109】

評価部１８は、面接参加者である被面接者の顔または態度に基づく表出情報と、面接参加者である被面接者の発言内容または音響に基づく表出表現とに基づいて面接参加者である被面接者を評価する。

【0110】

よって、オンライン面接評価装置１は、セルフ面接において、科学的客観性の高い評価を低コストに行うことができる。

【0111】

ここで、オンラインのセルフ面接の具体例について、図１０を用いて説明する。なお、図１０中の処理対象アーカイブデータ１１ａは、主にデータ記憶部２０に相当し、処理１１ｂは、主に、映像データ解析部１６、音声データ解析部１７および評価部１８に相当し、参照データ１１ｃは、主に評価基準記憶部２１に相当し、出力結果１１ｄは、主に、判断部２２および通信部１３に相当する。また、参照データ１１ｃは、例えば、企業側の優秀人材の特徴として、言葉の意味的特徴、音声的特徴、表情的特徴および所作的特徴が含まれている。

【0112】

所定対象アーカイブデータ１１ａには、セルフ面接によってユーザ端末装置２ａから送信されてくるデータに基づいて、被面接者の発言内容、音声、表情、所作（ふるまい）等のデータと、面接官の発言内容、音声、表情、所作（ふるまい）等のデータとが蓄積される。

【0113】

処理１１ｂは、参照データ１１ｃを参照し、音声データに基づいて、言葉の意味分析処理と音声分析処理を行い、映像データに基づいて、表情分析処理を行う。

【0114】

言葉の意味分析処理は、参照データ１１ｃの言葉の意味的特徴を参照して、論理性（論理構造）の評価、発言量の評価、語彙の豊かさの評価、語彙の難易度の評価などを行う。

【0115】

音声分析処理は、参照データ１１ｃの音声的特徴を参照して、早さの評価、大きさの評価、抑揚の評価、音域の評価、感情分析の評価、ドッグワードの評価などを行う。

【0116】

表情分析処理は、参照データ１１ｃの表情的特徴を参照して、表情の変化の評価、表情の表出の評価などを行う。また、参照データ１１ｃの所作的特徴を参照して、所作の分析処理も行うことができる。

【0117】

出力結果１１ｄは、処理１１ｂによる被面接者の処理に基づいて、被面接者が合格する人材か否かなどの判定情報を作成し、企業側に提出する。

【0118】

よって、オンライン面接評価装置１は、セルフ面接の結果を科学的客観性に基づいて評価することができ、かつ、評価にかかる人的工数を削減することができる。

【0119】

＜語学に関するテストの評価＞
オンライン面接評価装置１は、英語などの語学に関するテストの評価に利用することができる。

【0120】

通信部１３は、語学に関するリスニング用のデータを応募者のユーザ端末装置２ａに送信する。

【0121】

面接データ生成部１４は、通信部１３によりユーザ端末装置２ａから受信した語学に関するリスニング用のデータに対する応募者の受け答えのデータに基づいて、面接データを生成する。

【0122】

映像データ解析部１６は、分離部１５で分離された映像データを解析処理して、応募者の顔または態度に基づく表出情報を取得する。

【0123】

音声データ解析部１７は、分離部１５で分離された音声データを解析処理して、応募者の発言内容または音響に基づく表出表現を取得する。

【0124】

評価部１８は、応募者の顔または態度に基づく表出情報と、応募者の発言内容または音響に基づく表出表現とに基づいて応募者の語学力を評価する。

【0125】

よって、オンライン面接評価装置１は、発言内容だけでなく、応募者の顔または態度に基づく表出情報と、応募者の発言内容または音響に基づく表出表現とに基づいて面接参加者の語学力を評価するので、声の強弱や、ジェスチャや、顔の表情など、多面的な語学力の評価を行うことができる。

【0126】

ここで、語学に関するテストの評価の具体例について、図１１を用いて説明する。なお、図１１中の処理対象アーカイブデータ１１ａは、主にデータ記憶部２０に相当し、処理１１ｂは、主に、映像データ解析部１６、音声データ解析部１７および評価部１８に相当し、出力結果１１ｄは、主に、判断部２２および通信部１３に相当する。

【0127】

所定対象アーカイブデータ１１ａには、応募者のユーザ端末装置２ａから送信されてくるデータに基づいて、横暴者の発言内容、音声、表情、所作（ふるまい）等のデータが蓄積される。

【0128】

処理１１ｂは、音声データに基づいて、音声認識処理を行う。音声認識処理は、応募者がリスニング用のデータを聞いてどのくらい認識しているかを示す認識率の評価、文法の評価、語彙の豊かさの評価、語彙の難易度の評価などを行う。また、処理１１ｂは、映像データに基づいて、表情分析処理などを行ってもよい。

【0129】

出力結果１１ｄは、処理１１ｂによる処理に基づいて、応募者の総合的な語学力の判定結果を作成し、企業側に提出する。

【0130】

よって、オンライン面接評価装置１は、総合的な語学力を有しているか否かについて科学的客観性に基づいて評価することができ、かつ、評価にかかる人的工数を削減することができる。

【0131】

＜なりすまし防止機能＞
オンライン面接評価装置１は、オンライン面接（特に、セルフ面接や、語学に関するテストなど）を受ける面接参加者の成りすましを防止する機能を有している。

【0132】

ユーザ情報記憶部１９には、ユーザ登録により、予め面接参加者の登録情報（ＩＤとパスワードなど）と顔画像が記憶されている。

【0133】

認証部１２は、ユーザ情報記憶部１９を参照し、ユーザ端末装置２から送信されてくる面接参加者の顔画像に基づく顔認証を行い、一致する顔画像がユーザ情報記憶部１９に記憶されている場合、ユーザの認証を行う。

【0134】

よって、オンライン面接評価装置１は、顔認証を行うことにより、オンライン面接による面接参加者の成りすましを防止することができる。

【0135】

つぎに、オンライン面接評価装置１の動作について、図１２に示すフローチャートを参照しながら説明する。

【0136】

ステップＳ１において、受付部１１は、ユーザ端末装置２から面接のリクエストを受け付ける。

【0137】

ステップＳ２において、認証部１２は、ステップＳ１の工程により受け付けたユーザの認証を行う。

【0138】

ステップＳ３において、通信部１３は、ステップＳ２の工程により認証されて面接が開始された場合、ユーザ端末装置２との間でデータを送受信する。

【0139】

ステップＳ４において、ステップＳ３の工程により送受信されるデータに基づいて、面接データを生成する。

【0140】

ステップＳ５において、分離部１５は、面接データを映像データと音声データに分離する。

【0141】

ステップＳ６において、映像データ解析部１６は、映像データを解析処理して、面接参加者の顔または態度に基づく表出情報を取得する。

【0142】

ステップＳ７において、音声データ解析部１７は、音声データを解析処理して、面接参加者の発言内容または音響に基づく表出表現を取得する。

【0143】

ステップＳ８において、評価部１８は、面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて面接参加者を評価する。

【0144】

よって、オンライン面接評価装置１は、オンライン面接に参加した面接参加者に対して、科学的客観性の高い評価を低コストに行うことができる。

【0145】

また、図１３は、ネットワークＮを介してオンライン面接を行い、面接参加者を評価するプログラムを実行するコンピュータ５００の構成を示すブロック図である。コンピュータ５００は、ＣＰＵ５０１、主記憶装置５０２、補助記憶装置５０３、インタフェース５０４を備える。

【0146】

上述したオンライン面接評価装置１の各構成要素の動作は、プログラムの形式で補助記憶装置５０３に記憶されている。ＣＰＵ５０１は、プログラムを補助記憶装置５０３から読み出して主記憶装置５０２に展開し、当該プログラムに従って上記処理を実行する。また、ＣＰＵ５０１は、プログラムに従って、上述した記憶部に対応する記憶領域を主記憶装置５０２に確保する。

【0147】

当該プログラムは、具体的には、コンピュータ５００に、ユーザ端末装置２から面接のリクエストを受け付ける受付工程と、受付工程により受け付けたユーザの認証を行う認証工程と、認証工程により認証されて面接が開始された場合、ユーザ端末装置２との間でデータを送受信する通信工程と、通信工程により送受信されるデータに基づいて、面接データを生成する面接データ生成工程と、面接データを映像データと音声データに分離する分離工程と、映像データを解析処理して、面接参加者の顔または態度に基づく表出情報を取得する映像データ解析工程と、音声データを解析処理して、面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析工程と、面接参加者の顔または態度に基づく表出情報と、面接参加者の発言内容または音響に基づく表出表現とに基づいて面接参加者を評価する評価工程と、を実行させるためのプログラムである。

【0148】

なお、補助記憶装置５０３は、一時的でない有形の媒体の一例である。一時的でない有形の媒体の他の例としては、インタフェース５０４を介して接続される磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等が挙げられる。また、このプログラムがネットワークＮを介してコンピュータ５００に配信される場合、配信を受けたコンピュータ５００が当該プログラムを主記憶装置５０２に展開し、上記処理を実行してもよい。

【0149】

また、当該プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、当該プログラムは、前述した機能を補助記憶装置５０３に既に記憶されている他のプログラムとの組み合わせで実現するもの、いわゆる差分ファイル（差分プログラム）
であってもよい。

【0150】

以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものとする。

【符号の説明】

【0151】

１ オンライン面接評価装置、２ ユーザ端末装置、１１ 受付部、１２ 認証部、１３ 通信部、１４ 面接データ生成部、１５ 分離部、１６ 映像データ解析部、１７ 音声データ解析部、１８ 評価部、１９ ユーザ情報記憶部、２０データ記憶部、２１ 評価基準記憶部、２２ 判断部、２３ 設定部、２４ 生成部、５００ コンピュータ、５０１ ＣＰＵ、５０２ 主記憶装置、５０３ 補助記憶装置、５０４ インタフェース、Ｎ ネットワーク

【要約】

【課題】オンライン面接に参加した面接参加者に対して、科学的客観性の高い評価を低コストに行うことができるオンライン面接評価装置、方法およびプログラムを提供する。
【解決手段】ユーザ端末装置２から面接のリクエストを受け付ける受付部１１と、ユーザの認証を行う認証部１２と、ユーザ端末装置２との間でデータを送受信する通信部１３と、通信部１３により送受信されるデータに基づいて、面接データを生成する面接データ生成部１４と、面接データにかかる映像データを解析処理して、面接参加者の顔または態度に基づく表出情報を取得する映像データ解析部１６と、面接データにかかる音声データを解析処理して、面接参加者の発言内容または音響に基づく表出表現を取得する音声データ解析部１７と、面接参加者の表出表現に基づいて面接参加者を評価する評価部１８とを備える。
【選択図】図２

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】