特表 2024-513747 データ視覚化を生成するための視覚分析意図言語の適用

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-03-27

(54)【発明の名称】データ視覚化を生成するための視覚分析意図言語の適用

(51)【国際特許分類】

   G06F 16/907 20190101AFI20240319BHJP

   G06F 16/9038 20190101ALI20240319BHJP

【ＦＩ】

G06F16/907

G06F16/9038

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023558295

(86)(22)【出願日】2022-03-30

(85)【翻訳文提出日】2023-11-09

(86)【国際出願番号】 US2022022625

(87)【国際公開番号】W WO2022212563

(87)【国際公開日】2022-10-06

(31)【優先権主張番号】17/219,784

(32)【優先日】2021-03-31

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】63/168,212

(32)【優先日】2021-03-30

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＪＡＶＡＳＣＲＩＰＴ

(71)【出願人】

【識別番号】521550194

【氏名又は名称】タブロー ソフトウェア，エルエルシー

(74)【代理人】

【識別番号】100079108

【弁理士】

【氏名又は名称】稲葉 良幸

(74)【代理人】

【識別番号】100109346

【弁理士】

【氏名又は名称】大貫 敏史

(74)【代理人】

【識別番号】100117189

【弁理士】

【氏名又は名称】江口 昭彦

(74)【代理人】

【識別番号】100134120

【弁理士】

【氏名又は名称】内藤 和彦

(72)【発明者】

【氏名】セトラー，ヴィディヤ ラガヴァン

(72)【発明者】

【氏名】ブレーマー，マシュー マイケル

(72)【発明者】

【氏名】シャーマン，スコット

【テーマコード（参考）】

5B175

【Ｆターム（参考）】

5B175FB04

5B175GA01

5B175JA02

(57)【要約】

電子デバイスは、１つ以上のプロセッサ、及びメモリを有する。メモリは、１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶する。電子デバイスは、データソースに向けられた要求を受信する。要求は、１つ以上の意図タイプ、及び意図タイプに関連付けられた１つ以上の事前定義された属性を含む。事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する。要求に応答して、意図タイプの各々について、電子デバイスは、それぞれの意図仕様のそれぞれのプロパティを判定することを含む、要求に従って、それぞれの意図仕様を定式化する。電子デバイスはまた、それぞれの出力仕様を生成する。それぞれの出力仕様は、それぞれの推奨されるデータ視覚化タイプを含む。それぞれの出力仕様はまた、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定するそれぞれのデータ視覚化パラメータを含む。

【特許請求の範囲】

【請求項1】

方法であって、
第１のアプリケーションを動実行している電子デバイスであって、１つ以上のプロセッサと、前記１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶するメモリと、を含む、電子デバイスにおいて、
データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記１つ以上の意図タイプの各々について、
それぞれの前記１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記要求に従って前記それぞれの意図仕様を定式化することと、
それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むことと、を含む、方法。

【請求項2】

前記１つ以上の意図タイプが、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む、請求項１に記載の方法。

【請求項3】

前記要求が、前記傾向意図を含み、
前記それぞれの意図仕様を定式化することは、前記データソースから、（ｉ）測定データフィールド、及び（ｉｉ）時間を表す第１のデータフィールドを識別すること、
を含む、請求項２に記載の方法。

【請求項4】

前記要求が、前記傾向意図を含み、
前記それぞれの意図仕様を定式化することは、前記データソースから、（ｉ）全ての測定データフィールド、及び（ｉｉ）時間を表す全てのデータフィールドを識別すること、
を含む、請求項２に記載の方法。

【請求項5】

前記要求が、前記フォーカス意図を含み、
前記それぞれの意図仕様を定式化することが、
前記データソースからのデータ行をある順序で並べるソート動作と、
前記データソースからの前記データ行を、特定のデータフィールドが特定のデータ値を有するデータ行のサブセットにフィルタリングするフィルタ動作と、
前記データソースからのデータ行のサブセットを強調表示する強調表示動作と、のうちの１つ以上を実行すること、
を含む、請求項２に記載の方法。

【請求項6】

前記要求が、前記符号化意図を含み、第１のデータフィールドを指定し、前記それぞれの出力仕様を生成することが、
前記第１のデータフィールドに従って、前記データ視覚化をレンダリングすることを指定する符号化パラメータを追加すること、又は
前記第１のデータフィールドに従って、前記データ視覚化のための既存の符号化パラメータをオーバーライドすること、
を含む、請求項２に記載の方法。

【請求項7】

前記要求が、前記フィールド意図を含み、第１のデータフィールドを指定し、
それぞれの出力仕様を生成することが、前記第１のデータフィールドによって課されるセマンティック制約に基づいて１つ以上の推論ルールを適用すること、
を含む、請求項２に記載の方法。

【請求項8】

前記１つ以上の意図タイプの各々について、
前記それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することと、
前記それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、（ｉ）前記１つ以上のそれぞれのルール、（ｉｉ）前記データソースのメタデータ、及び（ｉｉｉ）前記要求において指定されたデータフィールドのメタデータに従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することと、
推論された前記情報に従って、前記１つ以上のそれぞれのデータ視覚化パラメータを更新することと、
を更に含む、請求項１に記載の方法。

【請求項9】

前記１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することが、
前記要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、
前記それぞれの意図タイプが曖昧であると確立することと、
前記数量の数値を推論することと、を更に含む、請求項８に記載の方法。

【請求項10】

前記データソースの前記メタデータが、データフィールドの意味、前記データフィールドに対応するデータフィールドタイプ、前記データフィールドの統計、前記データフィールドの導出、及び／又は前記データフィールドに対応するデフォルトビンサイズのメタデータを含む、請求項８に記載の方法。

【請求項11】

前記データフィールドタイプが、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む、請求項１０に記載の方法。

【請求項12】

以前の要求からのコンテキスト、前記以前の要求において識別されたデータフィールド、前記以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論することを更に含む、請求項８に記載の方法。

【請求項13】

前記１つ以上のそれぞれのデータ視覚化パラメータは、データ整形情報、符号化情報、及び／又は前記意図仕様に対応する識別子を含む、請求項１に記載の方法。

【請求項14】

前記１つ以上の意図タイプの各々について前記それぞれの出力仕様を生成した後、（ｉ）前記１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）前記第１のアプリケーション及び／又は前記電子デバイスの設定パラメータに従って、前記要求に応答してデータ分析を視覚的にレンダリングすること、
を更に含む、請求項１に記載の方法。

【請求項15】

方法であって、
第１のアプリケーションを実行している電子デバイスであって、１つ以上のプロセッサと、前記１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶するメモリと、を含む、電子デバイスにおいて、
データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記要求に応答して、前記１つ以上の意図タイプの各々について、
それぞれの前記１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記要求に従って前記それぞれの意図仕様を定式化することと、
前記それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することと、
前記それぞれの意図タイプが曖昧及び／又は情報不足であるという判定に従って、
（ｉ）前記１つ以上のそれぞれのルール、（ｉｉ）前記データソースのメタデータ、及び（ｉｉｉ）前記要求において指定されたデータフィールドのメタデータに従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することと、
推論された前記情報に従って、前記それぞれの意図タイプを更新することと、を含む、方法。

【請求項16】

それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）（１）推論された前記情報を含み、かつ（２）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むこと、
を更に含む、請求項１５に記載の方法。

【請求項17】

前記１つ以上の意図タイプが、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む、請求項１５に記載の方法。

【請求項18】

前記１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することが、
前記それぞれの意図タイプについての前記それぞれの意図仕様に対応するデータプロパティのセットを識別することと、
前記要求が前記データプロパティのセットの各データプロパティの属性を指定しているかどうかを判定することと、
前記要求が前記データプロパティのセットにおけるデータプロパティの２つ以上の属性を指定しているときに、前記それぞれの意図タイプが曖昧であると判定することと、
前記要求が前記データプロパティのセットにおける少なくとも１つのデータプロパティの属性を指定していないときに、前記それぞれの意図タイプが情報不足であると判定することと、更に含む、請求項１５に記載の方法。

【請求項19】

前記要求が前記データプロパティのセットの各データプロパティについて厳密に１つの属性を指定しているという判定に従って、前記それぞれの意図タイプが完全に指定されていると確立すること、
を更に含む、請求項１８に記載の方法。

【請求項20】

１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが前記曖昧及び／又は情報不足であるかどうかを判定することが、
前記要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、
前記それぞれの意図タイプが曖昧であると確立することと、
前記数量の数値を推論することと、を更に含む、請求項１５に記載の方法。

【請求項21】

前記それぞれの意図タイプが、フォーカス戦略プロパティを有するフォーカス意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記要求が「フィルタ」、「強調表示」、及び「ズーム」からなる群から選択される用語を含まないという判定に従って、強調表示戦略をデフォルトフォーカス戦略として選択すること、
を更に含む、請求項１５に記載の方法。

【請求項22】

前記デフォルト戦略として前記強調表示戦略を選択することが、
前記データソースのデータテーブルからのデータ行を、前記データテーブル内のデータフィールドのデータ値に従って昇順又は降順に並べるソート動作を実行することと、
前記データ値のランキングに基づいて、指定された数の前記データ値を強調表示する強調表示動作を実行することと、
を更に含む、請求項２１に記載の方法。

【請求項23】

前記それぞれの意図タイプが、フィールドプロパティを有するフォーカス意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記要求がデータフィールドを指定していないという判定に従って、テキストデータタイプを有し、かつ前記要求において指定された数量以上のドメインを有するデータフィールドを前記データソースから選択すること、
を更に含む、請求項１５に記載の方法。

【請求項24】

前記それぞれの意図タイプが、フィールドプロパティを有するフォーカス意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記データソースがテキストデータタイプ、及び指定された数量以上のドメインを有するデータフィールドを含まないという判定に従って、ドメインが前記要求において指定されたデータ値を含むデータフィールドを前記データソースから選択すること、
を更に含む、請求項１５に記載の方法。

【請求項25】

前記それぞれの意図タイプが、フォーカス意図であり、前記方法が、
前記要求が価格の形容詞を含むという判定に従って、前記データソースが通貨フィールドタイプを有するデータフィールドを含むかどうかを判定することと、
前記データソースが通貨フィールドタイプを有するデータフィールドを含むという判定に従って、前記データフィールドに対してソート動作を実行することと、
前記データソースが通貨フィールドタイプを有するデータフィールドを含まないという判定に従って、
前記データソース内の全ての数値データフィールドを識別することと、
前記数値データフィールドの各々に対してそれぞれのソート動作を実行することと、を更に含む、請求項１５に記載の方法。

【請求項26】

前記データソースの前記メタデータが、データフィールドの意味、前記データフィールドに対応するデータフィールドタイプ、前記データフィールドの統計、前記データフィールドの導出、及び／又は前記データフィールドに対応するデフォルトビンサイズのメタデータを含む、請求項１５に記載の方法。

【請求項27】

前記データフィールドタイプが、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む、請求項２６に記載の方法。

【請求項28】

前記それぞれの意図タイプが、グループ化フィールド及びビンサイズを含むグループ化プロパティを有する分布意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記要求がグループ化フィールドを指定していないという判定に従って、
数量依存フィールドタイプ、数量非依存フィールドタイプ、又は通貨フィールドタイプを有する前記データソース内の全てのデータフィールドを識別することと、
識別された前記データフィールドの各々を前記グループ化フィールドの推論された前記情報として指定することと、
を更に含む、請求項１５に記載の方法。

【請求項29】

前記要求がビンサイズを指定しているという判定に従って、前記メタデータ内のビンサイズ情報を前記指定されたビンサイズで置き換えること、
を更に含む、請求項２８に記載の方法。

【請求項30】

前記意図タイプが、測定データフィールド及び日付データフィールドを含む傾向プロパティを有する傾向意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記要求が測定データフィールドを含まないという判定に従って、
前記データソース内の全ての数量依存フィールドを識別すること、及び
前記数量依存フィールドの各々を前記測定データフィールドの推論された前記情報として指定すること、並びに／又は
前記要求が時間フィールドタイプを有するデータフィールドを含まないという判定に従って、
前記データソース内の全ての時間データフィールドを識別すること、及び
前記時間データフィールドの各々を前記日付データフィールドの推論された前記情報として指定すること、
を更に含む、請求項１５に記載の方法。

【請求項31】

前記意図タイプが、２つの数値データフィールドを相関させるための相関意図であり、
前記情報不足の意図を解決するために情報を推論することが、
前記要求が１つの数値データフィールドのみを指定しているときに、前記データソースからの全ての数値データフィールドから第２のデータフィールドの使用を推論することと、
前記要求が数値データフィールドを指定していないときに、前記データソースからの全ての数値データフィールドから、第１のデータフィールド及び第２のデータフィールドの使用を推論することと、を更に含む、請求項１５に記載の方法。

【請求項32】

以前の要求からのコンテキスト、前記以前の要求において識別されたデータフィールド、前記以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することを更に含む、請求項１５に記載の方法。

【請求項33】

方法であって、
第１のアプリケーションを実行している電子デバイスであって、１つ以上のプロセッサと、前記１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶するメモリと、を含む、電子デバイスにおいて、
前記電子デバイスと通信可能に接続されたサーバシステムから、前記第１のアプリケーションを含む複数のアプリケーションにわたって実行するように構成されている視覚分析意図ライブラリをダウンロードすることと、
前記電子デバイスが前記第１のアプリケーションを実行していることに基づいて、前記電子デバイス上で実行するように前記視覚分析意図ライブラリを設定することと、
前記設定の後、データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記要求に従って、前記１つ以上の意図タイプの各々について、前記それぞれの１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、前記それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記視覚分析意図ライブラリに従ってそれぞれの意図仕様を定式化することと、を含む、方法。

【請求項34】

前記意図タイプの各々について、前記それぞれの意図仕様を定式化した後、
前記視覚分析意図ライブラリに従って、それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むこと
を更に含む、請求項３３に記載の方法。

【請求項35】

前記１つ以上のそれぞれのデータ視覚化パラメータが、データ整形情報、符号化情報、及び／又は前記意図仕様に対応する識別子を含む、請求項３４に記載の方法。

【請求項36】

前記１つ以上の意図タイプの各々について前記それぞれの出力仕様を生成した後、（ｉ）前記１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）前記第１のアプリケーション及び／又は前記電子デバイスの設定パラメータに従って、前記要求に応答してデータ分析を視覚的にレンダリングすること、
を更に含む、請求項３４に記載の方法。

【請求項37】

前記要求に応答してデータ分析を視覚的にレンダリングすることが、第１のデバイスタイプを有する前記電子デバイスに更に従う、請求項３６に記載の方法。

【請求項38】

前記１つ以上の意図タイプのうちの１つの前記少なくとも１つの出力仕様が、第１の意図タイプに対応し、かつ推論された情報を有する第１の出力仕様を含み、
データ分析を視覚的にレンダリングすることが、前記第１のアプリケーションにおいて推論された前記情報を表示すること、
を更に含む、請求項３６に記載の方法。

【請求項39】

推論された前記情報が修正されることを可能にするデータウィジェットを表示することと、
前記データウィジェットとのユーザ対話を受信することと、
前記ユーザ対話に応答して、
前記第１の意図仕様を編集することと、
編集された前記第１の意図仕様に従って、前記第１の出力仕様を更新することと、
更新された前記第１の出力仕様、及び前記第１のアプリケーション及び／又は前記電子デバイスの前記設定パラメータに従って、更新されたデータ分析を生成し、視覚的にレンダリングすることと、
を更に含む、請求項３８に記載の方法。

【請求項40】

前記電子デバイスが、音声アシスタントデバイスであり、前記方法が、
前記それぞれの出力仕様を生成した後、
前記それぞれの出力仕様をそれぞれの口語的応答に変換することと、
前記それぞれの口語的応答を出力することと、を更に含む、請求項３４に記載の方法。

【請求項41】

前記それぞれの出力仕様が、推論された情報を含み、
前記それぞれの口語的応答を出力することが、推論された前記情報の口語的説明を出力すること、
を含む、請求項４０に記載の方法。

【請求項42】

前記第１のアプリケーションが、グラフィカルユーザインターフェースを含み、前記方法が、
前記グラフィカルユーザインターフェースを介して、前記１つ以上の意図タイプの識別を含む、前記要求を受信することを更に含む、請求項３４に記載の方法。

【請求項43】

前記それぞれの出力仕様に従って、それぞれのデータ視覚化を生成することと、
前記グラフィカルユーザインターフェース上に前記データ視覚化を表示することと、
を更に含む、請求項４０に記載の方法。

【請求項44】

前記第１のアプリケーションが、メッセージングアプリケーションであり、前記方法は、前記それぞれの出力仕様を生成した後、
前記視覚的仕様をテキスト出力に変換することと、
前記メッセージングアプリケーションにおいて前記テキスト出力を表示することと、を更に含む、請求項３４に記載の方法。

【請求項45】

前記１つ以上の意図タイプが、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む、請求項３３に記載の方法。

【請求項46】

前記要求を受信する前に、自然言語コマンドを受信することと、
前記要求を形成するために、視覚意図仕様言語に従って、前記自然言語コマンドを解析することと、を更に含む、請求項３３に記載の方法。

【請求項47】

前記解析に従って、前記１つ以上の意図タイプが「時間」という用語又は「傾向」という用語を有する前記自然言語コマンドに従って、傾向意図タイプを含むと判定すること、
を更に含む、請求項４６に記載の方法。

【請求項48】

前記解析に従って、前記１つ以上の意図タイプが、測定可能な形容詞を有する前記自然言語コマンドに従って、フォーカス意図タイプを含むと判定すること、
を更に含む、請求項４６に記載の方法。

【請求項49】

前記第１の意図仕様を前記要求において定式化された意図仕様と相関させることによって、以前の要求から定式化された第１の意図仕様を更新することを更に含む、請求項３３に記載の方法。

【請求項50】

前記以前の要求が、前記データソースからの第１のデータフィールドを含み、
前記要求が、前記第１のデータフィールドを前記データソースからの第２のデータフィールドで置き換えることを指定し、
前記第１の意図仕様を更新することは、前記第１のデータフィールドを前記第２のデータフィールドで置き換えること、
を含む、請求項４９に記載の方法。

【請求項51】

電子デバイスであって、
１つ以上のプロセッサと、
前記１つ以上のプロセッサに結合されたメモリと、を備え、前記メモリが、前記１つ以上のプロセッサによって実行されるように構成されている１つ以上のプログラムを記憶し、前記１つ以上のプログラムが、前記１つ以上のプロセッサによって実行されるときに、前記プロセッサに、請求項１～５０のいずれか一項に記載の方法を行わせる命令を含む、電子デバイス。

【請求項52】

１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、電子デバイスによって実行されるときに、前記電子デバイスに、請求項１～５０のいずれか一項に記載の方法を含む動作を行わせる命令を含む、非一時的なコンピュータ可読記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

（関連出願）
本出願は、２０２１年３月３０日に出願された「Ａｐｐｌｙｉｎｇ ａ Ｖｉｓｕａｌ Ａｎａｌｙｔｉｃｓ Ｉｎｔｅｎｔ Ｌａｎｇｕａｇｅ ｔｏ Ｇｅｎｅｒａｔｅ Ｄａｔａ Ｖｉｓｕａｌｉｚａｔｉｏｎｓ」と題する米国仮特許出願第６３／１６８，２１２号の優先権を主張する、２０２１年３月３１日に出願された「Ａｐｐｌｙｉｎｇ ａ Ｖｉｓｕａｌ Ａｎａｌｙｔｉｃｓ Ｉｎｔｅｎｔ Ｌａｎｇｕａｇｅ ｔｏ Ｇｅｎｅｒａｔｅ Ｄａｔａ Ｖｉｓｕａｌｉｚａｔｉｏｎｓ」と題する米国特許出願第１７／２１９，７８４号の継続出願であり、これらの出願の各々は、参照によりその全体が本明細書に組み込まれる。

【0002】

本出願は、以下の出願に関連し、これらの出願の各々は、参照によりその全体が本明細書に組み込まれる。
●（ｉ）２０１８年１０月１６日に出願された「Ｍｅｔｈｏｄｓ ａｎｄ Ｓｙｓｔｅｍｓ ｆｏｒ Ｂｕｉｌｄｉｎｇ ａ Ｖｉｅｗ ｏｆ ａ Ｄａｔａｓｅｔ Ｉｎｃｒｅｍｅｎｔａｌｌｙ Ａｃｃｏｒｄｉｎｇ ｔｏ Ｃｈａｒａｃｔｅｒｉｓｔｉｃｓ ｏｆ Ｕｓｅｒ－Ｓｅｌｅｃｔｅｄ Ｄａｔａ Ｆｉｅｌｄｓ」と題する米国特許出願第１６／１６２，３３２号、及び
●（ｉｉ）２０１８年２月２８日に出願された「Ｃｏｎｓｔｒｕｃｔｉｎｇ Ｄａｔａ Ｖｉｓｕａｌｉｚａｔｉｏｎ Ｏｐｔｉｏｎｓ ｆｏｒ ａ Ｄａｔａ Ｓｅｔ Ａｃｃｏｒｄｉｎｇ ｔｏ Ｕｓｅｒ－Ｓｅｌｅｃｔｅｄ Ｄａｔａ Ｆｉｅｌｄｓ」と題する米国特許出願第１５／９０８，７０９号。

【0003】

開示される実装形態は、概して、データ視覚化に関連し、より具体的には、データ視覚化を生成し、かつデータを分析するために視覚分析意図言語を適用するシステム、方法、及びユーザインターフェースに関連する。

【背景技術】

【0004】

視覚分析ツールは、ユーザが、データセットを視覚的に理解し、情報に基づいた決定を行うことを可能にする。ますます、視覚分析ツールは、自然言語対話並びに機械学習ベースの分析及び提案などの特徴を組み込んでおり、これらは、視覚化を生成するためのデータ属性及び値の単純な選択を超える、より洗練され表現型分析タスクを提供する。しかしながら、ユーザの分析意図を解釈することは、意図が、適切な応答を生成するより低レベルのシステムアクションに翻訳される必要があるため、課題のままである。このプロセスは、通常、アプリケーションごとにハードコードされ、微調整が困難である複雑な実装を伴う。

【0005】

したがって、分析ワークフロー中にユーザの意図を補足することができるシステム及び方法が必要とされている。そのようなシステム及び方法はまた、情報不足又は曖昧な意図を推論し、効果的な出力を示唆することが可能であるべきである。

【発明の概要】

【0006】

視覚分析ツールは、データ分析及び意思決定を容易にする。これらのツールは、情報を視覚的に符号化するための感知可能なデフォルトを有する選択されたデータ属性に基づいて視覚化タイプを提案することができる。多くの視覚分析ツールは、現在、ユーザに視覚化を提示するためのヒューリスティックベースの手法を採用するグラフィカルユーザインターフェース慣習を組み込んでいる。

【0007】

視覚分析ツールにおける最近の進歩にもかかわらず、ユーザが、ツールのより低レベルの動作に関して、それらのより高レベルの分析意図を表現しようとするときに、課題のままである。意図を表現するとなるといくつかの困難がある。第一に、意図が漠然としており、質問のエントリポイントがツールによって与えられるものと一致しない場合がある。例えば、ユーザはデータ属性について考えている可能性があるが、ツールはユーザが最初にチャートタイプを選択することを必要とする。第二に、ツールの分析関数の命名とユーザによって使用される用語との間に不一致があることがある。第三に、ユーザは、質問に回答するためにどのようなアクションが必要とされるかを単に知らない場合がある。

【0008】

更に、分析意図を表現できるスペクトルがある。一方で、分析意図は、視覚化を生成するために、事前定義されたリストからのデータ属性のユーザ選択を通すなどして、明示的に表現され得る。一方、分析意図は、漠然と定義され得るか、又はユーザが住宅データを見ているときにどの家を購入するかについて「安全な」近隣の識別を求めるユーザ要求などの主観的判断を伴う可能性がある。

【0009】

これらのアクションに対応するために、視覚分析アプリケーション開発者は、これらの意図の表現に対する適切な応答を判定するための特注のビジネスロジックを実装してきた。しかしながら、これらは厳密に実装される傾向があり、様々な視覚分析プラットフォーム及びモダリティにわたって一般化することができない。

【0010】

分析ワークフロー中にユーザの意図を補足するための分析意図システム及び方法を開発する必要がある。分析意図システム及び方法はまた、情報不足又は曖昧な意図を推論し、効果的な出力を示唆することが可能であるべきである。それらはまた、異なる視覚分析ツールによって、及び異なるデバイスにわたって使用するために、十分に高い抽象化レベルで実装されるべきである。

【0011】

本開示では、視覚分析意図言語（Visual Analytics Intent Language、ＶＡＩＬ）が提示される。ＶＡＩＬは、表現型高レベルの意図を、視覚分析アプリケーションのための抽象化の一般的な層として機能することができる低レベルの表現に翻訳する言語仕様である。ＶＡＩＬは、意図、データセマンティクス、及び出力を記載する仕様を含み、これらは、意図を編集し、曖昧な又は失われた意図を推論し、所与の意図仕様に対して有効な出力を提案するためのルールと組み合わされる。ＶＡＩＬは、開発者が自身の視覚分析アプリケーションにおいて意図を管理及び表現するのを助ける。

【0012】

したがって、このような方法及びインターフェースは、ユーザの認知的負担を軽減し、より効率的なマンマシンインターフェースを作り出す。電池駆動のデバイスの場合、このような方法及びインターフェースは電力を節約し、かつ電池の充電間隔を長くする。このような方法及びインターフェースは、データを可視化するために、従来の方法を補完又は置き換え得る。他の実装形態及び有益点は、本明細書の説明及び図面に照らして当業者には明らかになり得る。

【0013】

いくつかの実装形態によれば、方法は、第１のアプリケーションを実行している電子デバイスにおいて行われる。電子デバイスは、１つ以上のプロセッサ、及びメモリを含む。メモリは、１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶する。電子デバイスは、データソースに向けられた要求を受信する。要求は、１つ以上の意図タイプを含む。各意図タイプは、データソースに向けられたデータ分析動作の事前定義されたセットから選択される。要求は、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する。１つ以上の意図タイプの各々について、電子デバイスは、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、要求に従って、それぞれの意図仕様を定式化する。１つ以上の意図タイプの各々について、電子デバイスは、それぞれの出力仕様を生成する。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプを含む。それぞれの出力仕様は、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む。

【0014】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む。

【0015】

いくつかの事例では、要求は、傾向意図を含む。それぞれの意図仕様を定式化することは、データソースから、（ｉ）測定データフィールド、及び（ｉｉ）時間を表す第１のデータフィールドを識別することを含む。

【0016】

いくつかのインスタンスでは、要求はトレンド意図を含む。それぞれの意図仕様を定式化することは、データソースから、（ｉ）全ての測定データフィールド、及び（ｉｉ）時間を表す全てのデータフィールドを識別することを含む。

【0017】

いくつかの事例では、要求は、フォーカス意図を含む。それぞれの意図仕様を定式化することは、（１）データソースからのデータ行をある順序で並べるソート動作、（２）データソースからのデータ行を、特定のデータフィールドが指定のデータ値を有するデータ行のサブセットにフィルタリングするフィルタ動作、及び（３）データソースからのデータ行のサブセットを強調表示する強調表示動作のうちの１つ以上を実行することを含む。

【0018】

いくつかの事例では、要求は、符号化意図を含み、第１のデータフィールドを指定する。それぞれの出力仕様を生成することは、（１）第１のデータフィールドに従って、データ視覚化をレンダリングすることを指定する符号化パラメータを追加すること、又は（２）第１のデータフィールドに従って、データ視覚化のための既存の符号化パラメータをオーバーライドすることを含む。

【0019】

いくつかの事例では、要求は、フィールド意図を含み、第１のデータフィールドを指定する。それぞれの出力仕様を生成することは、第１のデータフィールドによって課される意味制約に基づいて１つ以上の推論ルールを適用することを含む。

【0020】

いくつかの実装形態では、方法は、１つ以上の意図タイプの各々について、それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することを更に含む。それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、電子デバイスは、（ｉ）１つ以上のそれぞれのルール、（ｉｉ）データソースのメタデータ、及び（ｉｉｉ）要求において指定されたデータフィールドのメタデータに従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する。電子デバイスは、推論された情報に従って、１つ以上のそれぞれのデータ視覚化パラメータを更新する。

【0021】

いくつかの事例では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、（１）それぞれの意図タイプが曖昧であることを確立することと、（２）数量の数値を推論することと、を更に含む。

【0022】

いくつかの事例では、データソースのメタデータは、データフィールドのセマンティクス、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む。

【0023】

いくつかの事例では、データフィールドタイプは、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む。

【0024】

いくつかの事例では、電子デバイスは、以前の要求からのコンテキスト、以前の要求において識別されたデータフィールド、以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する。

【0025】

いくつかの実装形態では、１つ以上のそれぞれのデータ視覚化パラメータは、データ整形情報、符号化情報、及び／又は意図仕様に対応する識別子を含む。

【0026】

いくつかの実装形態では、１つ以上の意図タイプの各々についてそれぞれの出力仕様を生成した後、電子デバイスは、（ｉ）１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、要求に応答してデータ分析を視覚的にレンダリングする。

【0027】

本開示のいくつかの実装形態によれば、方法は、第１のアプリケーションを実行している電子デバイスにおいて行われる。電子デバイスは、１つ以上のプロセッサ、及びメモリを含む。メモリは、１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶する。電子デバイスは、データソースに向けられた要求を受信する。要求は、１つ以上の意図タイプを含む。各意図タイプは、データソースに向けられたデータ分析動作の事前定義されたセットから選択される。要求は、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する。要求に応答して、１つ以上の意図タイプの各々について、電子デバイスは、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、要求に従って、それぞれの意図仕様を定式化する。電子デバイスは、それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定する。それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、電子デバイスは、（ｉ）１つ以上のそれぞれのルール、（ｉｉ）データソースのメタデータ、及び（ｉｉｉ）要求において指定されたデータフィールドのメタデータに従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する。電子デバイスは、推論された情報に従って、それぞれの意図タイプを更新する。

【0028】

いくつかの実装形態では、電子デバイスは、それぞれの出力仕様を生成する。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択されたそれぞれの推奨されるデータ視覚化タイプを含む。それぞれの出力仕様はまた、（１）推論された情報を含み、かつ（２）それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む。

【0029】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む。

【0030】

いくつかの実装形態では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、（１）それぞれの意図タイプについてのそれぞれの意図仕様に対応するデータプロパティのセットを識別することと、（２）要求がデータプロパティのセットの各データプロパティの属性を指定するかどうかを判定することと、を更に含む。いくつかの実装形態では、要求がデータプロパティのセット内のデータプロパティの２つ以上の属性を指定しているときに、電子デバイスは、それぞれの意図タイプが曖昧であると判定する。いくつかの実装形態では、要求がデータプロパティのセット内の少なくとも１つのデータプロパティの属性を指定していないときに、電子デバイス１０２は、それぞれの意図タイプが情報不足であると判定する。

【0031】

いくつかの事例では、要求がデータプロパティのセットの各データプロパティについて厳密に１つの属性を指定しているという判定に従って、電子デバイスは、それぞれの意図タイプが完全に指定されていると確立する。

【0032】

いくつかの実装形態では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、それぞれの意図タイプが曖昧であることを確立することと、数量の数値を推論することと、を更に含む。

【0033】

いくつかの実装形態では、それぞれの意図タイプは、フォーカス戦略プロパティを有するフォーカス意図である。情報不足の意図を解決するために情報を推論することは、要求が「フィルタ」、「強調表示」、及び「ズーム」からなる群から選択される第１の用語を含まないという判定に従って、デフォルトフォーカス戦略として強調表示戦略を選択することを更に含む。

【0034】

いくつかの事例では、デフォルト戦略として強調表示戦略を選択することは、（１）データソースのデータテーブルからのデータ行を、データテーブル内のデータフィールドのデータ値に従って、昇順又は降順に並べるソート動作を実行することと、（２）データ値のランキングに基づいて指定された数のデータ値を強調表示する強調表示動作を実行することと、を更に含む。

【0035】

いくつかの実装形態では、それぞれの意図タイプは、フィールドプロパティを有するフォーカス意図である。情報不足の意図を解決するために情報を推論することは、要求がデータフィールドを指定していないという判定に従って、テキストデータタイプを有し、かつ要求において指定された数量以上のドメインを有するデータフィールドをデータソースから選択することを更に含む。

【0036】

いくつかの実装形態では、それぞれの意図タイプは、フィールドプロパティを有するフォーカス意図である。情報不足の意図を解決するために情報を推論することは、データソースがテキストデータタイプ、及び指定された数量以上のドメインを有するデータフィールドを含まないという判定に従って、ドメインが要求において指定されたデータ値を含むデータフィールドをデータソースから選択することを更に含む。

【0037】

いくつかの実装形態では、それぞれの意図タイプは、フォーカス意図である。方法は、要求が価格の形容詞を含むという判定に従って、データソースが通貨フィールドタイプを有するデータフィールドを含むかどうかを判定することを更に含む。データソースが通貨フィールドタイプを有するデータフィールドを含むという判定に従って、電子デバイスは、データフィールドに対してソート動作を実行する。データソースが通貨フィールドタイプを有するデータフィールドを含まないという判定に従って、電子デバイスは、データソース内の全ての数値データフィールドを識別し、数値データフィールドの各々に対してそれぞれのソート動作を実行する。

【0038】

いくつかの実装形態では、データソースのメタデータは、データフィールドのセマンティクス、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む。

【0039】

いくつかの事例では、データフィールドタイプは、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む。

【0040】

いくつかの実装形態では、それぞれの意図タイプは、グループ化フィールド及びビンサイズを含むグループ化プロパティを有する分布意図である。情報不足の意図を解決するために情報を推論することは、要求がグループ化フィールドを指定していないという判定に従って、（１）数量依存フィールドタイプ、数量非依存フィールドタイプ、又は通貨フィールドタイプを有するデータソース内の全てのデータフィールドを識別することと、（２）識別されたデータフィールドの各々をグループ化フィールドの推論された情報として指定することと、を更に含む。

【0041】

いくつかの事例では、要求がビンサイズを指定しているという判定に従って、電子デバイスは、メタデータ内のビンサイズ情報を、指定されたビンサイズに置き換える。

【0042】

いくつかの実装形態では、意図タイプは、測定データフィールド及び日付データフィールドを含む傾向プロパティを有する傾向意図である。情報不足の意図を解決するために情報を推論することは、要求が測定データフィールドを含まないという判定に従って、（１）データソース内の全ての数量依存フィールドを識別することと、（２）数量依存フィールドの各々を測定データフィールドの推論された情報として指定することと、を更に含む。情報不足の意図を解決するために情報を推論することは、要求が時間フィールドタイプを有するデータフィールドを含まないという判定に従って、（１）データソース内の全ての時間データフィールドを識別することと、（２）時間データフィールドの各々を日付データフィールドの推論された情報として指定することと、を更に含む。

【0043】

いくつかの実装形態では、意図タイプは、２つの数値データフィールドを相関させるための相関意図である。情報不足の意図を解決するために情報を推論することは、（１）要求が１つの数値データフィールドのみを指定しているときに、データソースからの全ての数値データフィールドから第２のデータフィールドの使用を推論することと、（２）要求が数値データフィールドを指定していないときに、データソースからの全ての数値データフィールドから第１のデータフィールド及び第２のデータフィールドの使用を推論することと、を更に含む。

【0044】

いくつかの実装形態では、方法は、以前の要求からのコンテキスト、以前の要求において識別されたデータフィールド、以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論することを更に含む。

【0045】

いくつかの実装形態によれば、方法は、第１のアプリケーションを実行している電子デバイスにおいて行われる。電子デバイスは、１つ以上のプロセッサ、及びメモリを含む。メモリは、１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶する。電子デバイスは、電子デバイスと通信可能に接続されたサーバシステムから、第１のアプリケーションを含む複数のアプリケーションにわたって実行するように構成されている視覚分析意図ライブラリをダウンロードする。電子デバイスは、電子デバイスが第１のアプリケーションを実行していることに基づいて、電子デバイス上で実行するように視覚分析意図ライブラリを設定する。設定後、電子デバイスは、データソースに向けられた要求を受信する。要求は、１つ以上の意図タイプを含む。意図タイプの各々は、データソースに向けられたデータ分析動作の事前定義されたセットから選択される。要求は、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する。要求に従って、１つ以上の意図タイプの各々について、電子デバイスは、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、視覚分析意図ライブラリに従って、それぞれの意図仕様を定式化する。

【0046】

いくつかの実装形態では、電子デバイスは、第１のデバイスタイプを有する。いくつかの実装形態では、視覚分析意図ライブラリは、第１のデバイスタイプを含む複数のデバイスタイプにわたって実行するように構成されている。

【0047】

いくつかの実装形態では、意図タイプの各々について、それぞれの意図仕様を定式化した後、電子デバイスは、視覚分析意図ライブラリに従って、それぞれの出力仕様を生成する。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択されたそれぞれの推奨されるデータ視覚化タイプを含む。それぞれの出力仕様はまた、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む。

【0048】

いくつかの実装形態では、１つ以上のそれぞれのデータ視覚化パラメータは、データ整形情報、符号化情報、及び／又は意図仕様に対応する識別子を含む。

【0049】

いくつかの実装形態では、１つ以上の意図タイプの各々についてそれぞれの出力仕様を生成した後、電子デバイスは、（ｉ）１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、要求に応答してデータ分析を視覚的にレンダリングする。

【0050】

いくつかの実装形態では、要求に応答してデータ分析を視覚的にレンダリングすることは、第１のデバイスタイプを有する電子デバイスに更に従う。

【0051】

いくつかの事例では、１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様は、第１の意図タイプに対応し、かつ推論された情報を有する第１の出力仕様を含む。データ分析を視覚的にレンダリングすることは、第１のアプリケーションにおいて推論された情報を表示することを更に含む。

【0052】

いくつかの事例では、電子デバイスは、推論された情報が修正されることを可能にするデータウィジェットを表示する。電子デバイスは、データウィジェットとのユーザ対話を受信する。ユーザ対話に応答して、電子デバイスは、第１の意図仕様を編集する。電子デバイスは、編集された第１の意図仕様に従って、第１の出力仕様を更新する。電子デバイスは、更新された第１の出力仕様及び第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、更新されたデータ分析を生成し、視覚的にレンダリングする。

【0053】

いくつかの実装形態では、電子デバイスは、音声アシスタントデバイスである。方法は、それぞれの出力仕様を生成した後、（１）それぞれの出力仕様をそれぞれの口語的応答に変換することと、（２）それぞれの口語的応答を出力することと、を更に含む。

【0054】

いくつかの事例では、それぞれの出力仕様は、推論された情報を含む。それぞれの口語的応答を出力することは、推論された情報の口語的説明を出力することを含む。

【0055】

いくつかの実装形態では、第１のアプリケーションは、グラフィカルユーザインターフェースを含む。方法は、グラフィカルユーザインターフェースを介して、１つ以上の意図タイプの識別を含め、要求を受信することを更に含む。

【0056】

いくつかの事例では、電子デバイスは、それぞれの出力仕様に従って、それぞれのデータ視覚化を生成する。電子デバイスは、グラフィカルユーザインターフェース上にデータ視覚化を表示する。

【0057】

いくつかの実装形態では、第１のアプリケーションは、メッセージングアプリケーションである。方法は、それぞれの出力仕様を生成した後、（１）視覚的仕様をテキスト出力に変換することと、（２）メッセージングアプリケーションにおいてテキスト出力を表示することと、を更に含む。

【0058】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む。

【0059】

いくつかの実装形態では、要求を受信する前に、電子デバイスは自然言語コマンドを受信する。電子デバイスは、要求を形成するために、視覚的意図仕様言語に従って、自然言語コマンドを解析する。

【0060】

いくつかの事例では、電子デバイスは、解析に従って、１つ以上の意図タイプが「時間」という用語又は「傾向」という用語を有する自然言語コマンドに従って、傾向意図タイプを含むと判定する。

【0061】

いくつかの事例では、電子デバイスは、解析に従って、１つ以上の意図タイプが、測定可能な形容詞を有する自然言語コマンドに従って、フォーカス意図タイプを含むと判定する。

【0062】

いくつかの実装形態では、方法は、第１の意図仕様を要求において定式化された意図仕様と相関させることによって、以前の要求から定式化された第１の意図仕様を更新することを更に含む。

【0063】

いくつかの事例では、以前の要求は、データソースからの第１のデータフィールドを含む。要求は、第１のデータフィールドをデータソースからの第２のデータフィールドで置換することを指定する。第１の意図仕様を更新することは、第１のデータフィールドを第２のデータフィールドで置き換えることを含む。

【0064】

いくつかの実装形態では、電子デバイスは、１つ以上のプロセッサ、メモリ、及びメモリに記憶された１つ以上のプログラムを含む。プログラムが、１つ以上のプロセッサによって実行されるように構成されている。１つ以上のプログラムは、本明細書に記載の方法のいずれかを行うための命令を含む。

【0065】

いくつかの実装形態では、非一時的なコンピュータ可読記憶媒体は、１つ以上のプロセッサ及びメモリを有する電子デバイスによって実行されるように構成されている１つ以上のプログラムを記憶する。１つ以上のプログラムは、本明細書に記載の方法のいずれかを行うための命令を含む。

【0066】

したがって、ユーザ意図をキャプチャし、情報不足又は曖昧な意図を推論し、効果的な出力を提案する方法、システム、及びユーザインターフェースが開示される。

【図面の簡単な説明】

【0067】

前述のシステム、方法、及びグラフィカルユーザインターフェース、並びにデータ視覚化分析を提供する追加のシステム、方法、及びグラフィカルユーザインターフェースをよりよく理解するために、以下の図面と併せて、下記の発明を実施するための形態を参照されたい。図面において、同様の参照番号は図全体を通して対応する部分を指している。

【図1】いくつかの実装形態による、視覚分析意図言語を適用することによってデータ視覚化を生成するプロセスを概念的に例示する。

【図2】いくつかの実装形態による、電子デバイスのブロック図である。

【図3】いくつかの実装形態による、サーバシステムのブロック図である。

【図4】いくつかの実装形態による、視覚分析意図システムを例示する。

【図5】いくつかの実装形態による、いくつかのＶＡＩＬタームを定義するためのＢＮＦ（Backus-Naur Form）生成を提供する。

【図6】いくつかの実装形態による、意図仕様を定義するためのＢＮＦ生成を提供する。

【図7】いくつかの実装形態による、データセマンティクスを定義するためのＢＮＦ生成を提供する。

【図8】いくつかの実装形態による、出力仕様を定義するためのＢＮＦ生成を提供する。

【図9】いくつかの実装形態による、意図仕様を編集するためのＢＮＦ生成を提供する。

【図10】いくつかの実装形態による、情報不足のフォーカス意図を解決するために情報を推論するためのＢＮＦ生成を提供する。

【図11】いくつかの実装形態による、情報不足の相関意図を解決するために情報を推論するためのＢＮＦ生成を提供する。

【図12】いくつかの実装形態による、情報不足の分布意図を解決するために情報を推論するためのＢＮＦ生成を提供する。

【図13】いくつかの実装形態による、情報不足の傾向意図を解決するために情報を推論するためのＢＮＦ生成を提供する。

【図14A】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14B】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14C】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14D】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14E】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14F】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14G】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14H】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14I】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図14J】いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【図15】いくつかの実装形態による、ＶＡＩＬを使用するＳｌａｃｋｂｏｔアプリケーションのシステム概要１５００を提供する。

【図16A】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16B】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16C】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16D】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16E】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16F】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図16G】いくつかの実装形態による、Ｓｌａｃｋチャットボットための一連のスクリーンショットを提供する。

【図17A】いくつかの実装形態による、ディスプレイスクリーン１７００を含む音声アシスタントデバイスとの対話のための一連のスクリーンショットを提供する。

【図17B】いくつかの実装形態による、ディスプレイスクリーン１７００を含む音声アシスタントデバイスとの対話のための一連のスクリーンショットを提供する。

【図17C】いくつかの実装形態による、ディスプレイスクリーン１７００を含む音声アシスタントデバイスとの対話のための一連のスクリーンショットを提供する。

【図18A】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図18B】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図18C】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図18D】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図18E】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19A】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19B】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19C】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19D】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19E】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19F】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図19G】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20A】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20B】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20C】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20D】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20E】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【図20F】いくつかの実装形態による、電子デバイスにおいて行われる方法のフローチャートを提供する。

【0068】

ここで実装形態を参照し、その例を添付の図面に例示する。以下の説明では、本発明の完全な理解を提供するために、多数の特定の詳細が記載される。しかしながら、本発明がこれらの特定の詳細なしに実施され得ることは当業者には明らかであろう。

【発明を実施するための形態】

【0069】

視覚分析ツールは、データ探索をよりアクセス可能かつ知的にすることをますます試みている。これらのツールにおける意図の表現は、より微妙になっており、より抽象的で高レベルの分析問い合わせを可能にしている。本開示は、表現型視覚分析ツールの開発をサポートするための視覚分析意図言語（ＶＡＩＬ）を記載する。

【0070】

ＶＡＩＬは、開発者が視覚分析アプリケーションに組み込んで、表現型高レベルの意図を低レベルの表現に翻訳することができる分析意図のためのセマンティクスをカプセル化する言語である。ＶＡＩＬは、視覚分析アプリケーションのための抽象化の一般的な層として機能することができる。

【0071】

ＶＡＩＬは、意図、データセマンティクス、及び出力を記載する仕様を含み、これらは、意図を編集し、情報不足（例えば、省略された情報）又は曖昧な（例えば、漠然とした）意図を推論し、所与の意図仕様に対して有効な出力を提案するためのルールと組み合わされる。ＶＡＩＬは、開発者が自身の視覚分析アプリケーションにおいて意図を管理し表現するのを助ける。

【0072】

本開示では、「ＶＡＩＬ」、「ＶＡＩＬエンジン」、及び「視覚分析意図システム」という用語は、互換的に使用される。

【0073】

Ｉ．環境
本開示のいくつかの実装形態は、図１に示すように、ＶＡＩＬを適用することによってデータ視覚化を生成する。本開示のいくつかの実装形態によれば、ＶＡＩＬは、サーバ（例えば、サーバシステム３００）からダウンロードされ、電子デバイス１０２上で（例えば、ＶＡＩＬエンジンとも呼ばれる視覚分析意図システム２３０として）実行されるように構成され得る。視覚分析意図システム２３０は、電子デバイス１０２上で実行している他の視覚分析アプリケーションと併せて使用される。

【0074】

図１は、ＶＡＩＬが、電子デバイス１０２－１、ディスプレイスクリーンを有するモバイル電子デバイス１０２－２（例えば、モバイルフォン、スマートウォッチ、又はタブレット）などの複数の電子デバイス１０２上で、及び（例えば、ディスプレイスクリーンを有する又は有さない）音声アシスタントデバイス１０２－３上で実行され得ることを例示する。この例では、電子デバイス１０２の各々は、別個のデバイスタイプを有し、それぞれの視覚分析アプリケーションを含む。例えば、コンピューティングデバイス１０２－１は、データ視覚化ユーザインターフェース１０４（例えば、グラフィカルユーザインターフェース）を有するデータ視覚化アプリケーションを含む。電子デバイス１０２－２は、チャットアプリケーション１０６を含む。音声アシスタントデバイス１０２－３は、ユーザから音声入力１０８を受信する音声アシスタントアプリケーションを含む。いくつかの実装形態では、ＶＡＩＬはまた、視覚分析のために推奨システム又は他のスマートツール上で使用され得る。

【0075】

例示的な使用シナリオでは、ＶＡＩＬを実行する電子デバイス１０２は、電子デバイス１０２上のアプリケーション（例えば、データ視覚化アプリケーション、チャットアプリケーション、又は音声アシスタントアプリケーションなどのクライアントアプリケーション２２４）から、データソース１１０に向けられた要求を受信する（１１２）。要求に従って、電子デバイス１０２は、意図タイプの各々について、それぞれの意図仕様を（例えば、ＶＡＩＬを使用して）定式化する（１１４）。本明細書で開示されるように、ＶＡＩＬは、それぞれの意図タイプを有するそれぞれの意図仕様のためのデータプロパティのセットを定義する。ＶＡＩＬはまた、意図を編集するための、及び曖昧又は情報不足の意図を推論するためのルールを定義する。ＶＡＩＬによって確立されたルールを適用することによって、電子デバイス１０２は、意図タイプが曖昧及び／又は情報不足であるかどうかを判定することができる（１１６）。例えば、電子デバイス１０２は、要求がデータプロパティのセットにおけるデータプロパティに対して複数の属性を指定しているとき、又は要求が「上位」又は「最良」などの漠然とした修飾子を含むときに、それぞれの意図タイプが曖昧であると判定することができる。別の例として、電子デバイス１０２は、要求がデータプロパティのセットにおける少なくとも１つのデータプロパティに対して属性を指定していないときに、それぞれの意図タイプが情報不足であると判定することができる。いくつかの実装形態では、意図タイプが曖昧又は情報不足であるという判定に従って、ＶＡＩＬは、１つ以上のルール、要求において指定されたデータソース及び／又はデータフィールドのメタデータに従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する。

【0076】

図１は、いくつかの実装形態では、電子デバイス１０２が、意図タイプに対応する１つ以上のそれぞれの出力仕様を生成する（１１８）ことを描写する。ＶＡＩＬは、複数の可能な出力を記載するための汎用仕様を有する。例えば、出力仕様は、それぞれの推奨されるデータ視覚化タイプと、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する符号化及びデータ整形パラメータなどの１つ以上のそれぞれのデータ視覚化パラメータとを含むことができる。それぞれの意図タイプが情報不足又は曖昧であり、情報が推論されている場合、出力仕様は推論された情報を含む。いくつかの実装形態では、それぞれの出力仕様が生成された後、電子デバイス１０２は、それぞれの出力仕様を、ＶｉｚＱＬ若しくはＶｅｇａ－Ｌｉｔｅなどの視覚的文法に、又はテキスト若しくはオーディオなどの非視覚的形態に変換することができる（１２０）。

【0077】

図１はまた、要求に応答してデータ分析をレンダリングする電子デバイスを例示する。例えば、コンピューティングデバイス１０２－１は、要求に応答して、データ視覚化ユーザインターフェース１０４内にデータ視覚化１２２（例えば、棒グラフ）を表示する。電子デバイス１０２－２は、クエリ「昨年の売上はどうでしたか？」に応答して、２つの線グラフを含む視覚化１２４を表示する。いくつかの実装形態では、視覚化１２４は、チャットアプリケーション上での表示に適合するようにするためにデータ視覚化モジュールによって生成される画像ファイル（例えば、．ｊｐｇ又は．ｔｉｆなどの画像ファイルフォーマットを有する）である。図１はまた、音声入力１０８に応答して口語的（例えば、オーディオ）応答１２６を出力する音声アシスタントデバイス１０２－３を示す。いくつかの実装形態では、口語的応答１２６は、情報不足及び／又は曖昧な用語がどのように解釈されたかの説明を含むことができる（例えば、「最良」は最高ＲＰポイントを有するものとして解釈される）。いくつかの実装形態では、電子デバイス１０２はまた、ユーザの意図を更に明確にするために、追加の質問又はプロンプトに従う。

【0078】

ＩＩ．ブロック図
図２は、いくつかの実装形態に従って、電子デバイス１０２を例示するブロック図である。いくつかの実装形態では、電子デバイス１０２は、コンピューティングデバイスとしても知られている。電子デバイス１０２の様々な例は、デスクトップコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、ディスプレイアシスタントデバイス、モバイルフォン、及び音声アシスタントデバイスを含む。

【0079】

電子デバイス１０２は、典型的には、１つ以上の処理ユニット（プロセッサ又はコア）２０２、１つ以上のネットワーク又は他の通信インターフェース２０４、メモリ２１６、及びこれらの構成要素を相互接続するための１つ以上の通信バス２０５を含む。いくつかの実装形態では、通信バス２０５は、システム構成要素間の通信を相互接続及び制御する回路（チップセットと呼ばれることもある）を含む。

【0080】

電子デバイス１０２は、通信インターフェース２０６を含む。ユーザインターフェース２０６は、オプションで、ディスプレイ２０８を含む。いくつかの実装形態では、電子デバイス１０２は、キーボード、マウス、及び／又は他の入力ボタン２１０などの入力デバイスを含む。代替的又は追加的に、いくつかの実装形態では、ディスプレイ２０８はタッチ感知面を含み、その場合、ディスプレイ２０８は、タッチ感知ディスプレイである。いくつかの実装形態では、タッチ感知面は、様々なスワイプジェスチャ（例えば、垂直方向及び／又は水平方向の連続ジェスチャ）及び／又は他のジェスチャ（例えば、シングル／ダブルタップ）を検出するように構成されている。タッチ感知ディスプレイ２０８を有する電子デバイスでは、物理キーボードはオプションである（例えば、キーボード入力が必要なときにソフトキーボードが表示され得る）。ユーザインターフェース２０６はまた、スピーカ、又はスピーカ、イヤホン、若しくはヘッドホンに接続されるオーディオ出力接続などのオーディオ出力デバイス２１４を含む。更に、いくつかの電子デバイスは、キーボードを補足又は交換するためにマイクロホン及び音声認識を使用する。いくつかの実装形態では、電子デバイス１０２は、オーディオ（例えば、ユーザからの音声）をキャプチャするためのオーディオ入力デバイス２１４（例えば、マイクロホン）を含む。

【0081】

いくつかの実装形態では、メモリ２１６は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲ ＲＡＭ、又は他のランダムアクセス固体メモリデバイスなどの高速ランダムアクセスメモリを含む。いくつかの実装形態では、メモリ２１６は、１つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性固体記憶デバイスなどの不揮発性メモリを含む。いくつかの実装形態では、メモリ２１６は、プロセッサ２０２からリモートに位置する１つ以上の記憶デバイスを含む。メモリ２１６、又は代替的にメモリ２１６内の不揮発性メモリデバイスは、非一時的なコンピュータ可読記憶媒体を含む。いくつかの実装形態では、メモリ２１６、又はメモリ２０６のコンピュータ可読記憶媒体は、以下のプログラム、モジュール、及びデータ構造、又はそれらのサブセット若しくはスーパーセットを記憶する。
●様々な基本システムサービスを扱い、ハードウェア依存タスクを行うための手順を含む、オペレーティングシステム２１８。
●通信モジュール２２０。電子デバイス１０２を他のコンピュータ及びデバイスに接続するために使用され、これは１つ以上の通信ネットワークインターフェース２０４（有線又は無線）及び１つ以上の通信ネットワーク、例えばインターネット、他の広域ネットワーク、ローカルエリアネットワーク、メトロポリタンエリアネットワークなどのような通信ネットワークを介して行われる。
●ユーザがネットワークを用いて遠隔のコンピュータ又はデバイスと通信することを可能にするウェブブラウザ２２２（又は他のクライアントアプリケーション）。
●チャットアプリケーション、メッセージングアプリケーション、データ視覚化アプリケーション、音声アシスタントアプリケーション、及び／又は視覚分析のための他のアプリケーションなどの１つ以上のクライアントアプリケーション２２４。いくつかの実装形態では、クライアントアプリケーション２２４は、ユーザが視覚グラフィックス（例えば、個々のデータ視覚化又は複数の関連するデータ視覚化を備えたダッシュボード）を構築するか、又は意図タイプを入力するためのグラフィカルユーザインターフェース（graphical user interface、ＧＵＩ）を提供する。いくつかの実装形態では、クライアントアプリケーション２２４は、ユーザが自然言語コマンド又はクエリを入力するための自然言語ユーザインターフェースを含む。いくつかの実装形態では、クライアントアプリケーション２２４は、ユーザが口語的コマンドを入力するための音声アシスタントインターフェースを含む。いくつかの実装形態では、クライアントアプリケーション２２４は、スタンドアロンアプリケーションとして実行する。いくつかの実装形態では、クライアントアプリケーション２２４は、ウェブブラウザ２２２内で（例えば、ウェブアプリケーション３２２として）実行する。いくつかの実装形態では、クライアントアプリケーション２２４は、ユーザ入力（例えば、自然言語入力）を使用して、又は視覚分析意図システム２３０によって提供される出力仕様２３６に従って、対応する視覚グラフィック（「データ視覚化」又は「データビズ」とも呼ばれる）を自動的に生成及び表示する、データ視覚化生成器を含む。いくつかの実装形態では、クライアントアプリケーションは、ユーザ選択可能なオプションを含むウィジェットを生成するウィジェットジェネレータを含む。例えば、「ｓｏｒｔ（並べ替え）」ウィジェットは、ユーザが並べ替えフィールド（例えば、並べ替えフィールドとして識別される自然言語用語）上で選択（例えば、ホバリング）することに応答して生成される。並べ替えウィジェットは、「ａｓｃｅｎｄｉｎｇ（昇順）」、「ｄｅｓｃｅｎｄｉｎｇ（降順）」、及び／又は「ａｌｐｈａｂｅｔｉｃａｌ（アルファベット順）」などのユーザが選択可能なオプションを含み、ユーザは、ウィジェットから選択したフィールドをどのように並べ替えるのかを容易に選択することができる。
●自然言語コマンドを（例えば、トークンに）解析するためのパーサ２２６。いくつかの実装形態では、パーサ２２６は、ストップワード及び見出語化を除去してトークンを返す。いくつかの実装形態では、パーサ２２６は、視覚分析意図言語（ＶＡＩＬ）に従って自然言語コマンドを解析して、視覚分析意図システム２３０への要求を形成する。いくつかの実装形態では、電子デバイス１０２は、解析に従って、意図タイプ２２９を判定する。
●出力仕様２３６を視覚形態（例えば、ＶｉｚＱＬ又はＶｅｇａ－ｌｉｔｅ）又は非視覚形態（例えば、テキスト又はオーディオ）に変換するためのコンバータ２２８。
●ユーザ意図のタイプを識別する意図タイプ２２９。いくつかの実装形態では、意図タイプ２２９は、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む。
●以下を含む視覚分析意図システム２３０（例えば、ＶＡＩＬエンジン）。
○視覚分析意図システム２３０によって定式化される１つ以上の意図仕様２３４。意図仕様２３４は、ユーザによって表現された１つ以上の異なるタイプの意図に関する情報をキャプチャする。いくつかの実装形態では、意図仕様２３４は、意図仕様に対応する意図タイプ、一意の識別子、及び（例えば、意図タイプに対応する）プロパティのセットを含む。いくつかの実装形態では、視覚分析意図システム２３０は、（例えば、クライアントアプリケーション２２４からの）要求に従って、それぞれの意図仕様を定式化する。いくつかの実装形態では、それぞれの意図仕様を定式化することは、事前定義された属性及び／又は要求において指定されたデータソース１１０からのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む。いくつかの実装形態では、それぞれの意図仕様を定式化することは、（例えば、ＶＡＩＬエンジンによって定義された１つ以上のルールを適用することによって）１つ以上のプロパティを推論することを含む。
○視覚分析意図システム２３０によって生成される１つ以上の出力仕様２３６。いくつかの実装形態では、視覚分析意図システム２３０は、要求に含まれる各意図タイプに対して１つ以上の出力仕様２３６を生成する。
○意図仕様を追加、修正、又は削除するための意図編集サブシステム２３８。
○それぞれの意図タイプに対応する１つ以上のルールに従って、情報不足又は曖昧な意図を推論するための推論意図サブシステム２４０。いくつかの実装形態では、意図推論サブシステム２４０は、データソースに関するメタデータ（例えば、データセマンティクス）２４６（例えば、データソースに対応するデータテーブルのメタデータ）及び／又は要求において指定されたデータフィールドのメタデータを活用して、情報不足及び／又は曖昧な意図を推論する。
○指定された意図に対して有効な出力を提案するための出力提案サブシステム２４２。いくつかの実装形態では、ＶＡＩＬは、意図タイプを出力仕様における情報に変換するためのルールを定義する。
○出力仕様２３６をモダリティに変換するための出力変換サブシステム２４４。視覚分析意図システム２３０及びその使用の更なる詳細は、図４～図１７に記載される。
●アプリケーション２２４及び／又はデータ視覚化アプリケーション２３０によって使用される、０個以上のデータベース又はデータソース１１０（例えば、第１のデータソース１１０－１）。いくつかの実装形態では、データソースは、スプレッドシートファイル、ＣＳＶファイル、ＸＭＬファイル、フラットファイル、ＪＳＯＮファイル、リレーショナルデータベースのテーブル、クラウドデータベース、又は統計データベースとして記憶され得る。
●情報不足及び／又は曖昧な意図を推論するために視覚分析意図システム２３０によって使用される、データソースのメタデータ／データセマンティクス２４６（例えば、第１のデータソースに対応するメタデータ／データセマンティクス２４６－１）。いくつかの実装形態では、データソースのメタデータ２４６は、データフィールドのセマンティクス、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む。データソースのデータフィールドのセマンティクス、又はデータセマンティクスは、ユーザが対話しているデータの特定のセットを記載する。これは、フィールド、それらの役割、及び要約統計のリストを含む。いくつかの実装形態では、データセマンティクスは、視覚分析意図システム２３０が意図をより良く推論することを可能にするために、データベースから取り出されるか、又はユーザによってキュレートされ得る。いくつかの実装形態では、メタデータ２４６は、曖昧な及び／又は情報不足の意図を推論し、出力を提案するために、意図推論サブシステム２４０及び出力提案サブシステム２４２によって活用される。
●１つ以上のアプリケーション（例えば、ウェブブラウザ２２２、クライアントアプリケーション２２４、及び視覚分析意図システム２３０）からＡＰＩコールを受信し、ＡＰＩコールを適切なアクションに翻訳し、１つ以上のアクションを行うためのＡＰＩ２４８。

【0082】

上述の識別された実行可能モジュール、アプリケーション、又は手順のセットの各々は、１つ以上の上述のメモリデバイスに記憶され得、上述の機能を行うための命令のセットに対応する。上記の識別されたモジュール又はプログラム（すなわち、命令のセット）は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、これらのモジュールの様々なサブセットは、様々な実装形態において組み合わされるか、又は別様に再配置され得る。いくつかの実装形態では、メモリ２１６は、上記で識別されたモジュール及びデータ構造のサブセットを記憶する。いくつかの実装形態では、メモリ２１６は、上述されていない追加のモジュール又はデータ構造を記憶する。

【0083】

図２は、電子デバイス１０２を示しているが、図２は、本明細書に記載される実装形態の構造的概略としてではなく、むしろ存在し得る様々な特徴の機能的説明としてより意図されている。実際には、当業者によって認識されるように、別々に示された項目を組み合わせることが可能であり、いくつかの項目は分離することができる。

【0084】

図３は、いくつかの実装形態に従う、例示的なサーバシステム３００を例示するブロック図である。いくつかの実装形態では、サーバシステム３００は、データ視覚化サーバである。いくつかの実装形態では、サーバシステム３００は、１つ以上のライブラリ３２２、１つ以上のデータベース／データソース１１０、及び／又はデータソースに対応するメタデータ２４６をホストし得る。いくつかの実装形態では、サーバシステム３００は、様々な実行可能アプリケーション又はモジュールを提供し得る。サーバシステム３００は、典型的には、１つ以上の処理ユニット／コア（ＣＰＵ）３０２と、１つ以上の通信ネットワークインターフェース３０４と、メモリ３１４と、これらの構成要素を相互接続するための１つ以上の通信バス３１２と、を含む。いくつかの実装形態では、サーバシステム３００は、ディスプレイデバイス３０８とキーボード及びマウスなどの１つ以上の入力デバイス３１０と、を含む、ユーザインターフェース３０６を含む。いくつかの実装形態では、通信バス３１２は、システムコンポーネント間の通信を相互接続及び制御する回路（チップセットと称されることがある）を含んでもよい。

【0085】

いくつかの実装形態では、メモリ３１４は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲ ＲＡＭ、又は他のランダムアクセスソリッドステートメモリデバイスなどの高速ランダムアクセスメモリを含み、１つ以上の磁気ディスク記憶デバイス、光ディスク記憶デバイス、フラッシュメモリデバイス、又は他の不揮発性ソリッドステート記憶デバイスなどの不揮発性メモリを含んでもよい。いくつかの実装形態では、メモリ３１４は、ＣＰＵ３０２から遠隔に位置する１つ以上の記憶デバイスを含む。メモリ３１４、又は代替的にメモリ３１４内の不揮発性メモリデバイスは、非一時的なコンピュータ可読記憶媒体を含む。

【0086】

いくつかの実装形態では、メモリ３１４、又はメモリ３１４のコンピュータ可読記憶媒体は、以下のプログラム、モジュール、及びデータ構造、又はそれらのサブセットを記憶する。
●様々な基本システムサービスを扱い、ハードウェア依存タスクを行うための手順を含む、オペレーティングシステム３１６。
●１つ以上の通信ネットワークインターフェース３０４（有線又は無線）及びインターネット、他の広域ネットワーク、ローカルエリアネットワーク、メトロポリタンエリアネットワークなどのような１つ以上の通信ネットワークを介して、サーバシステム他のコンピュータ又は電子デバイス（例えば、電子デバイス１０２）に接続するために使用されるネットワーク通信モジュール３１８。
●ユーザからウェブ要求を受信し、応答ウェブページ又は他のリソースを提供することによって応答する、ウェブサーバ３２０（ＨＴＴＰサーバなど）。
●ライブラリ３２２。いくつかの実装形態では、ライブラリ３２２は、電子デバイス１０２上にダウンロードされ、（例えば、視覚分析意図システム２３０又はＶＡＩＬとして）使用するために構成され得る、視覚分析意図ライブラリ３２３を含む。
●意図タイプ２２９。
●ユーザの電子デバイス１０２上のウェブブラウザ４２８によってダウンロード及び実行され得るデータ視覚化ウェブアプリケーション３２４。一般に、データ視覚化ウェブアプリケーション３２４は、デスクトップデータ視覚化アプリケーション（例えば、データ視覚化ユーザインターフェース１０４を含むデータ視覚化アプリケーション）と同じ機能を有し、本出願が参照により組み込まれる特許出願に記載されているが、ネットワーク接続性を有する任意の場所にある任意のデバイスからのアクセスの柔軟性を提供し、インストール及び保守を必要としない。いくつかの実装形態では、データ視覚化ウェブアプリケーション３２４は、特定のタスクを行うための様々なソフトウェアモジュールを含む。いくつかの実装形態では、ウェブアプリケーション３２４は、ウェブアプリケーション３２４の全ての態様に対してユーザインターフェースを提供するユーザインターフェースモジュール３２６を含む。いくつかの実装形態では、ウェブアプリケーション３２４はデータ取り出しモジュール３２８を含み、それは、クエリをビルド及び実行して、１つ以上のデータソース１１０からデータを取り出す。データソース１１０は、サーバシステム３００上にローカルに記憶されるか、又は外部データベースに記憶され得る。いくつかの実装形態では、２つ以上のデータソースからのデータが混合され得る。いくつかの実装形態では、データ取り出しモジュール３２８は、視覚的仕様３４４を使用してクエリをビルドする。いくつかの実装形態では、データ視覚化ウェブアプリケーション３２４はまた、データ視覚化コンパイラ及びデータ視覚化仮想マシン（図示せず）を含む。
●自然言語入力機能を含むコンピュータシステム又は電子デバイス１０２によって提供されるクエリを受信及び解析する自然言語処理インターフェース３３０。いくつかの実装形態では、クエリは、電子デバイス１０２のユーザによって（例えば、チャットアプリケーション１０６を介して）提供される自然言語入力を含む。いくつかの実装形態では、自然言語処理インターフェース３３０は、集計表現、グループ表現、フィルタ表現、制限表現、及び／又はソート表現などの分析表現３３２を識別し得る。
●自然言語処理モジュール１６２はまた、依存性判定モジュール３３４を含んでもよく、これは、データベース／データソース１１０における依存関係を検索して、特定の用語及び／又はフレーズがどのように関連しているか（例えば、依存）を判定する。
●いくつかの実装形態では、自然言語処理インターフェース１６２は、１つ以上のフィルタがユーザによって修正されたフィールドに関連しているかどうかを判定するフィルタ生成モジュール５３２を含む。フィルタ生成モジュール５３２は、ユーザ選択に基づいて１つ以上のフィルタを生成する。
●以下を含むデータ視覚化プラットフォーム３３８。
○ユーザ入力（例えば、自然言語入力）を使用して、対応する視覚的グラフィック（「データ視覚化」又は「データビズ」とも称される）を自動的に生成及び表示するデータ視覚化生成モジュール３４０。
○データ視覚化の表現を生成し、生成された表現を電子デバイス１０２に送信する視覚表現生成モジュール３４２（オプション）。いくつかの実装形態では、データ視覚化の表現は、データ視覚化の画像ファイルである（例えば、画像ファイルは、．ｐｎｇ、．ｔｉｆｆ、又は．ｊｐｇファイルである）。いくつかの実装形態では、データ視覚化の表現は、画像へのリンクを含む。いくつかの実装形態では、データ視覚化の表現は、データ視覚化へのリンク（例えば、ＵＲＬリンク）である。
○所望のデータ視覚化の特性を定義するために使用される視覚的仕様３４６。いくつかの実装形態では、電子デバイス１０２が提供する情報（例えば、ユーザ入力）は、視覚的仕様として記憶される。いくつかの実装形態では、視覚的仕様３４６は、ユーザから受信した以前の自然言語コマンド、又は自然言語コマンドを介してユーザによって指定されたプロパティを含む。いくつかの実装形態では、視覚的仕様３４６は、異なる詳細レベルに基づく２つ以上の集計を含む。
●０個以上のデータベース又はデータソース１１０。いくつかの実装形態では、データソースは、スプレッドシートファイル、ＣＳＶファイル、ＸＭＬファイル、フラットファイル、若しくはＪＳＯＮファイルとして格納されるか、又はリレーショナルデータベースに記憶される。例えば、ユーザは、１つ以上のデータベース又はデータソース１１０（サーバシステム３００に記憶されるか、又はリモートに記憶され得る）を選択し、データソースからデータフィールドを選択し、選択されたフィールドを使用して視覚的グラフィックを定義する。
●情報不足及び／又は曖昧な意図を推論するためにサーバシステム３００によって使用される、データソースのメタデータ／データセマンティクス２４６（例えば、第１のデータソースに対応するメタデータ／データセマンティクス２４６－１）。いくつかの実装形態では、データソースのメタデータ２４６は、データフィールドのセマンティクス、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む。
●ＡＰＩコールを受信し、ＡＰＩコールを適切なアクションに翻訳し、１つ以上のアクションを行うためのＡＰＩ３４８。

【0087】

いくつかの実装形態では、サーバシステム３００は、１つ以上の推論ルールを使用して、データベース又はデータソース１１０に向けられた情報不足（例えば、省略された情報）又は曖昧な（例えば、漠然とした）自然言語コマンド（例えば、表現又は発話）を解決するために使用される推論モジュール（図示せず）を更に含む。いくつかの実装形態では、１つ以上の推論ルールは、視覚的分析意図言語（ＶＡＩＬ）に従って定義される。

【0088】

いくつかの実装形態では、正準表現が分析表現３３２に割り当てられ（例えば、自然言語処理モジュール３３０によって）、自然言語クエリに固有の曖昧な構文解析の急増の問題に対処する。正準構造は、パーサの観点から明確であり、自然言語処理モジュール３３０は、複数の構文解析間で迅速に選択して中間表現を形成することができる。

【0089】

上述の識別された実行可能モジュール、アプリケーション、又は手順のセットの各々は、１つ以上のメモリデバイスに記憶され得、上述の機能を行うための命令のセットに対応する。上記の識別されたモジュール又はプログラム（すなわち、命令のセット）は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、これらのモジュールの様々なサブセットは、様々な実装形態において組み合わされるか、又は別様に再配置され得る。いくつかの実装形態では、メモリ３１４は、上記で識別されたモジュール及びデータ構造のサブセットを記憶する。いくつかの実装形態では、メモリ３１４は、上述されていない追加のモジュール又はデータ構造を記憶する。

【0090】

図３は、サーバシステム３００を示しているが、図３は、本明細書に記載される実装形態の構造的概略としてではなく、存在し得る様々な特徴の機能的説明としてより意図されている。実際には、当業者によって認識されるように、別々に示された項目を組み合わせることが可能であり、いくつかの項目は分離することができる。加えて、サーバ３００に関して上に示したプログラム、機能、手順、又はデータのいくつかは、コンピューティングデバイス１０２上に記憶又は実行され得る。いくつかの実装形態では、機能及び／又はデータは、コンピューティングデバイス２００と１つ以上のサーバ３００との間で割り当てられ得る。更に、当業者は、図３が単一の物理デバイスを表す必要がないことを認識している。いくつかの実装形態では、サーバ機能は、サーバシステムを含む複数の物理デバイスにわたって割り当てられる。本明細書で使用される場合、「サーバ」又は「データ視覚化サーバ」への言及は、説明された機能を提供するサーバの様々なグループ、集まり、又は配列を含み、物理サーバは物理的に併置される必要はない（例えば、個々の物理デバイスは米国全体又は世界中に広がり得る）。

【0091】

ＩＩＩ．視覚分析意図システム
図４は、いくつかの実装形態による、視覚分析意図システム２３０（例えば、ＶＡＩＬエンジン）及びクライアントアプリケーションへの接続を示す。

【0092】

図４では、視覚分析意図システム２３０に入る矢印（例えば、矢印４０２、４０４、及び４０６）は、クライアントアプリケーション２２４からのコマンド（例えば、要求又は命令）を表現し、視覚分析意図システム２３０から出る矢印（例えば、矢印４０８、４１０、及び４１２）は、仕様（例えば、クライアントアプリケーションがユーザに応答を提示するために使用する視覚意図分析システム２３０によって生成される）を表す。

【0093】

いくつかの実装形態では、クライアントアプリケーション２２４は、ユーザインターフェース（例えば、ユーザインターフェース２０６）を含む。対話の典型的なサイクルにおいて、ユーザインターフェース２０６は、ユーザからの入力を受け入れる。ユーザ入力に従って、クライアントアプリケーション２２４は、ユーザ意図を記載する要求（例えば、コマンド）を視覚分析意図システム２３０に発行する。要求は、１つ以上の意図タイプの識別を含む。要求に従って、視覚分析意図システム２３０は、１つ以上の意図仕様２３４を定式化する（例えば、作成、更新、又は削除する）。いくつかの実装形態では、ユーザ意図は、情報不足及び／又は曖昧とすることができる。視覚分析意図システム２３０は、情報不足の意図の詳細（例えば、プロパティに対応する属性）を欠いており、意図が曖昧又は漠然とした任意の曖昧さを解決する。

【0094】

いくつかの実装形態では、意図が推論された後、ユーザインターフェースは、出力を提案するように視覚分析意図システム２３０に要求する。視覚分析意図システム２３０は、次いで、１つ以上の出力仕様２３６を生成し、これは、（例えば、出力変換サブシステム２４４を介して）クライアントアプリケーション２２４（及び電子デバイス１０２）のディスプレイモダリティに適合可能な様々なタイプの出力に変換され得る。図４は、出力仕様２３６が、クライアントアプリケーション２２４がユーザに表示することができる視覚化４１１、テキスト４１３、音声又は画像などの様々なタイプの出力に変換され得ることを示す。いくつかの状況では、推論された意図及び出力応答に基づいて、ユーザは、意図を修正することを決定することができ、データの分析において繰り返す際にサイクルを繰り返す。

【0095】

いくつかの実装形態では、クライアントアプリケーション２２４及び視覚分析意図システム２３０は、いくつかのサブシステムを含む１つの単一アプリケーションの一部であり、対話は、サブシステム内の対話を表現する。

【0096】

図４に示すように、視覚分析意図システム２３０は、意図仕様２３４と、出力仕様２３６と、１つ以上のデータソース１１０に対応するデータセマンティクス／メタデータ２４６と、意図を編集するためのサブシステム（例えば、編集意図サブシステム２３８）と、出力を提案するためのサブシステム（例えば、出力提案サブシステム２４２）と、出力を変換するためのサブシステム（例えば、出力変換サブシステム２４４）と、を含む。これらの構成要素の各々について以下に議論される。

【0097】

Ａ．フィールド
視覚分析意図システム２３０の多くの部分は、データソース１１０（又はデータソース１００に対応するデータテーブル）からのデータフィールドを参照する。

【0098】

図５は、いくつかの実装形態に従って、データフィールド（例えば、ｆｉｅｌｄ）を定義するためのＢＮＦ（Backus-Naur Form）生成を例示する。ｆｉｅｌｄ参照は、明示的なｆｉｅｌｄ－ｉｎｓｔａｎｃｅか、又は複数の可能なフィールドインスタンスを参照する変数への参照を記載する（例えば、ｖａｒ－ｎａｍｅ、［ｉｎｄｅｘ］）。

【0099】

いくつかの実装形態では、ｆｉｅｌｄ－ｉｎｓｔａｎｃｅは、値をビニングするときに使用されるべき、ｎａｍｅ（例えば、フィールド名）と、オプションのｄｅｒｉｖａｔｉｏｎ（例えば、合計若しくは分などの集計タイプ、又は年若しくは時間などの時間導出）と、オプションとしてのｂｉｎ－ｃｏｕｎｔと、を含む。

【0100】

変数フィールド（例えば、ｆｉｅｌｄ－ｖａｒ）は、変数フィールド名（例えば、ｖａｒ－ｎａｍｅ）をフィールドインスタンのリスト（例えば、｛ｆｉｅｌｄ｝）に関連付け、そのリストが様々な仕様から参照されることを可能にする。ｆｉｅｌｄ－ｖａｒは、名前によって参照される。オプションのｉｎｄｅｘ値は、２つ以上の意図又は出力プロパティがフィールド変数を参照するときに使用されるが、各参照は、変数のリスト内の異なるフィールドインスタンスに対するものであるべきである。

【0101】

Ｂ．意図仕様２３４
図６は、いくつかの実装形態による、意図仕様を定義するためのＢＮＦ生成を例示する。

【0102】

ユーザの意図は、ｖａｉｌ－ｉｎｔｅｎｔによって記載され、これは、ユーザによって表現される１つ以上の異なるタイプの意図に関する情報をキャプチャする。いくつかの実装形態では、意図タイプは、クライアントアプリケーション２２４によって（例えば、編集ルールを使用して）提供される。図６に例示されるように、ｖａｉｌ－ｉｎｔｅｎｔは、以下のタプルとして定義される。
●ｖａｉｌ－ｉｎｔｅｎｔ：＝（ｉｎｔｅｎｔｓ，ｆｉｅｌｄ－ｖａｒｓ）

【0103】

ｖａｉｌ－ｉｎｔｅｎｔは、意図仕様のリスト、及び視覚分析意図システム２３０のルールを推論することによって作成されたものがある場合、ｆｉｅｌｄ－ｖａｒｓを含む。図６は、単一の意図が、以下のタプルによって定義されることを示す。
●ｉｎｔｅｎｔ：＝（ｉｄ，ｉｎｆｅｒｒｅｄ，ｓｐｅｃｉｆｉｃ－ｉｎｔｅｎｔ）

【0104】

単一のｉｎｔｅｎｔ（例えば、それぞれの意図仕様２３４）は、一意のｉｄ、推論されたプロパティのリスト、及びｓｐｅｃｉｆｉｃ－ｉｎｔｅｎｔを含む。図６は、ｓｐｅｃｉｆｉｃ－ｉｎｔｅｎｔが、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、又はフィールド意図を含むことができることを示す。いくつかの実装形態では、ｓｐｅｃｉｆｉｃ－ｉｎｔｅｎｔは、意図タイプとも呼ばれる（例えば、意図タイプ２２９）。

【0105】

いくつかの実装形態では、それぞれの意図仕様２３４は、それぞれの意図仕様が対応する意図タイプに基づくプロパティの対応するセットを有する。これは、図６に例示されている。例えば、ｃｏｒｒｅｌａｔｉｏｎ意図は、第１のフィールドプロパティ（例えば、［ｆｉｅｌｄ１］）及び第２のフィールドプロパティ（例えば、［ｆｉｅｌｄ２］）を含む。ｄｉｓｔｒｉｂｕｔｉｏｎ意図は、グループ化フィールドプロパティ（例えば、［ｂｉｎ－ｆｉｅｌｄ］）と、ビンサイズプロパティ（例えば、［ｂｉｎ－ｃｏｕｎｔ］）と、を含む。ｆｉｅｌｄｓ意図は、フィールドプロパティ（例えば、（ｆｉｅｌｄ））を含む。

【0106】

いくつかの実装形態では、意図タイプは、ｆｏｃｕｓ意図を含む。ｆｏｃｕｓ意図は、フィールドプロパティ（例えば、［ｆｉｅｌｄ］）、データ値プロパティ（例えば、［ｖａｌｕｅｓ］）、ごとにソートバイフィールドプロパティ（例えば、ソート動作を実行するためのデータフィールド）（例えば、［ｓｏｒｔｂｙ－ｆｉｅｌｄ］）、形容詞（例えば、［ａｄｊｅｃｔｉｖｅ］）、数量（例えば、［ｑｕａｎｔｉｔｙ］）、及びフォーカス戦略プロパティ（例えば、［ｓｔｒａｔｅｇｙ］）を含むことができる。

【0107】

いくつかの実装形態では、意図タイプはｔｒｅｎｄ意図を含む。傾向意図は、測定データフィールドプロパティ（例えば、［ｍｅａｓｕｒｅ－ｆｉｅｌｄ］）及び時間フィールドプロパティ（又は日付／時間フィールドプロパティ）（例えば、［ｔｉｍｅ－ｆｉｅｌｄ］）を含むことができる。

【0108】

いくつかの実装形態では、視覚分析意図システム２３０は、全てのプロパティが要求において指定されているわけではない意図タイプを含む要求を受信する。視覚分析意図システム２３０は、以下で説明される、情報不足又は欠落しているプロパティを埋めるためのルールを有する。

【0109】

Ｃ．メタデータ／データセマンティクス２４６
いくつかの実装形態では、視覚分析意図システム２３０は、データソース（例えば、データソース１１０などのデータソースに対応するデータテーブル）に関するメタデータ（例えば、データセマンティクス）２４６を活用するルールを適用して、曖昧又は情報不足の意図についての情報を推論する。データソースのメタデータ２４６は、データフィールドのセマンティクス、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含むことができる。いくつかの実装形態では、メタデータ２４６は、クライアントアプリケーション２２４によって提供される。

【0110】

いくつかの実装形態では、データソースのメタデータは、ｄａｔａ－ｓｅｍａｎｔｉｃｓを使用して記載される。図７は、いくつかの実装形態による、ｄａｔａ－ｓｅｍａｎｔｉｃｓを定義するためのＢＮＦ生成を図示する。

【0111】

図７は、ｄａｔａ－ｓｅｍａｎｔｉｃｓが、フィールドについての関連付けられた情報を有するフィールド名のリストを含むことを示す（例えば｛（ｎａｍｅ，ｆｉｅｌｄ－ｉｎｆｏ）｝）。ｆｉｅｌｄ－ｉｎｆｏは、ｆｉｅｌｄ－ｔｙｐｅを含み、これは、フィールドに関する重要なセマンティクス、デフォルトｄｅｒｉｖａｔｉｏｎ、デフォルトビニングサイズ（例えば、［ｂｉｎ－ｃｏｕｎｔ］）、及びフィールドの統計値（例えば、［ｓｔａｔｓ］）をカプセル化する。ｆｉｅｌｄ－ｔｙｐｅは、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び／又は経度フィールドタイプを含む。いくつかの実装形態では、視覚分析意図システム２３０は、これらが要求において指定されていない場合、デフォルト導出プロパティ及び／又はビンサイズプロパティを使用する。フィールドの統計値（例えば、［ｓｔａｔｓ］）は、データフィールドのデータタイプ及び対応するドメインを含む（例えば、（ｄａｔａ－ｔｙｐｅ，ｄｏｍａｉｎ））。いくつかの実装形態では、ｄａｔａ－ｔｙｐｅはテキスト又は数字を含む。

【0112】

いくつかの実装形態では、メタデータ２３８は電子デバイス１０２上に記憶され、全てのＶＡＩＬエンジンプロセスは電子デバイス１０２上でローカルに実行され、それによって、サーバシステムに情報を送信する、及び／又はサーバシステム上でクエリを実行する必要性を回避し、それによって、大きなデータセットに対するデータ分析を実行可能にする。いくつかの実装形態では、メタデータ２４６は、サーバシステム３００上に記憶され、要求に従ってオンザフライで視覚分析意図システム２３０によって取り出される。

【0113】

Ｄ．出力仕様２３６
ＶＡＩＬは、複数の可能な出力を記載するための汎用仕様を有する。出力仕様２３６は、データがどのようにユーザに提示されるべきかを記載し、特定の出力モダリティに拘束されない。いくつかの実装形態では、視覚分析意図システム２３０は、各意図タイプに対応する１つ以上のそれぞれの出力仕様２３６を生成する。出力仕様２３６は、以下に記載されるように、ｖａｉｌ－ｉｎｔｅｎｔからｓｕｇｇｅｓｔ－ｏｕｔｐｕｔルールを介して生成される。出力仕様２３６は、ＶｉｚＱＬ若しくはＶｅｇａ－ｌｉｔｅなどの視覚的文法に、又はテキスト、口語、又はオーディオなどの非視覚的形態に変換され得る。

【0114】

いくつかの実装形態に従って、出力仕様２３６（例えば、ｖａｉｌ－ｏｕｔｐｕｔ）は、以下のタプルとして定義される。
●ｖａｉｌ－ｏｕｔｐｕｔ：＝（ｏｕｔｐｕｔ－ｓｏｒｔｅｄ，ｏｕｔｐｕｔ－ｂｙ－ｉｄ，ｆｉｅｌｄ－ｖａｒｓ）

【0115】

ｏｕｔｐｕｔ－ｓｏｒｔｅｄは、最も高く推奨される出力が最初に列挙される出力仕様のリストを含み、ｏｕｔｐｕｔ－ｂｙ－ｉｄは、意図ｉｄから、対応する意図から生成された異なる出力仕様へのルックアップを提供する。ｆｉｅｌｄ－ｖａｒｓは、出力仕様によって参照される任意のフィールド変数を含む。

【0116】

図８は、いくつかの実装形態による、単一の出力仕様（例えば、ｏｕｔｐｕｔ）を定義するためのＢＮＦ生成を示す。

【0117】

いくつかの実装形態では、図８に例示されるように、単一のｏｕｔｐｕｔ仕様は、ｗｅｉｇｈｔ、ｉｎｔｅｎｔ－ｉｄｓ、ｅｎｃｏｄｉｎｇ、及びｄａｔａ－ｓｈａｐｅを含む。

【0118】

いくつかの実装形態では、出力仕様（例えば、ｏｕｔｐｕｔ）は、０～１００のｗｅｉｇｈｔを含み、より高い数がより高く推奨される。ｉｎｔｅｎｔ－ｉｄｓは、出力を生成するために使用される全ての意図のｉｄｓを含む。ｅｎｃｏｄｉｎｇは、ｖｉｚ－ｔｙｐｅ、及び異なる符号化プロパティの集まりを含む。符号化は、０以上のフィールドを列挙することができ、マークｃｏｌｏｒ、ｓｉｚｅ、又はｓｈａｐｅについての明示的な詳細を含まないが、それは、これらの決定を出力実装に委ねるからである。いくつかの実装形態では、符号化タイプは単に提案であり、関連しないことがある。例えば、テキストを生成する出力実装は、データをどのように符号化するかではなく、単にデータをどのように整形するかを通知するためにｅｎｃｏｄｉｎｇｓを使用することを選択してもよい。

【0119】

いくつかの実装形態では、ｅｎｃｏｄｉｎｇフィールドのリスト全体が、出力のために使用されるべきデータの集計及び詳細レベルを判定するために使用される。例えば、ポイント、価格、名前、及び品種を有し、各行が異なるワインを記載するデータテーブルを考える。ｅｎｃｏｄｉｎｇｓが平均価格及び品種のみを含む場合、品種当たり１つの行が集計平均価格を含む状態で、価格及び品種フィールドのみを含めるべきである。

【0120】

ｄａｔａ－ｓｈａｐｅは、使用される前にソースデータを更にどのように修正するかを記載する。図８に更に例示されるように、ｄａｔａ－ｓｈａｐｅは、ｆｏｃｕｓ及びｓｏｒｔを含む。ｆｏｃｕｓは、データのどの部分にフォーカスするかを記載する。

【0121】

いくつかの実装形態では、ｆｏｃｕｓは、ｆｉｌｔｅｒ又はｈｉｇｈｌｉｇｈｔなど、どのようにフォーカスするかについての推奨される戦略を含む。ｏｕｔｐｕｔ－ａｄｊｅｃｔｉｖｅは、視覚分析意図システム２３０が、データを問い合わせる必要なく漠然とした範囲を指定することを可能にする特別なセマンティクスを有するいくつかの値を有する。「ｔｏｐ」及び「ｂｏｔｔｏｍ」は、出力実装が単一の値のみにフォーカスされるべきであることを示し、「ｈｉｇｈ」及び「ｌｏｗ」は、視覚分析意図システム２３０が最高値又は最低値の範囲にフォーカスすべきことを示す。ｓｏｒｔ整形プロパティは、データをソートするためにどのフィールドを使用するかを記載する。

【0122】

Ｅ．出力変換２４４
いくつかの実装形態では、視覚分析意図システム２３０は、出力仕様２３６を、ＶｉｚＱＬ若しくはベガライトなどの視覚文法に、又はテキスト、オーディオ、若しくは口語的出力などの非視覚形態に変換するためのアウトプット変換サブシステム２４４を備える。

【0123】

Ｆ．意図編集サブシステム２３８
ＶＡＩＬは、曖昧又は欠落した意図を推論するｖａｉｌ－ｉｎｔｅｎｔを編集し、意図に基づくｖａｉｌ－ｏｕｔｐｕｔを提案するためのルールを定義する。これらのルールは、データソース１１０内のデータフィールドの（又はデータソースのデータテーブルの）セマンティクスを記載する、ｄａｔａ－ｓｅｍａｎｔｉｃｓ内に含まれる情報（例えば、メタデータ２４６）を活用する。

【0124】

いくつかの実装形態では、視覚分析意図システム２３０は、意図仕様を編集するためにＶＡＩＬによって定義された１つ以上のルールを適用する意図編集サブシステム２３８を備える。

【0125】

図９は、いくつかの実装形態による、意図仕様（例えば、ｓｅｔ－ｉｎｔｅｎｔ）を編集するためのＢＮＦ生成ルールを例示する。

【0126】

上記に議論されたように、ｖａｉｌ－ｉｎｔｅｎｔは、複数の意図仕様を含むことができる。特定の意図は、ｓｅｔ－ｉｎｔｅｎｔルールで追加若しくは変更され得、又はｒｅｍｏｖｅ－ｉｎｔｅｎｔルールで除去され得る。いくつかの実装形態では、これらのルールは、特定の意図を識別するためにｉｄを使用する。ｖａｉｌ－ｉｎｔｅｎｔにおけるフィールドインスタンスの全ての発生は、ｒｅｐｌａｃｅ－ｆｉｅｌｄを使用して別のフィールドインスタンスとスワップアウトされ得、それによって、ユーザがそれらの意図で反復することを可能にする。

【0127】

Ｇ．意図推論サブシステム２４０
いくつかの実装形態では、視覚分析意図システム２３０は、曖昧又は情報不足の（例えば、欠落した）意図を推論するためにＶＡＩＬによって定義される１つ以上のルールを適用する意図推論サブシステム２４０を備える。

【0128】

いくつかの実装形態では、それぞれの意図タイプのそれぞれの意図仕様に対応するデータプロパティのセットがある。視覚分析意図システム２３０は、要求がデータプロパティのセットにおけるデータプロパティに対して複数の属性を指定しているときに、それぞれの意図タイプが曖昧であると判定することができる。それぞれの意図タイプはまた、要求が測定可能な形容詞（例えば、「上位」）を指定するが、数量を指定していないとき、曖昧とすることができる。いくつかの実装形態では、視覚分析意図システム２３０は、要求がデータプロパティのセットにおける少なくとも１つのデータプロパティに対して属性を指定していないときに、それぞれの意図タイプが情報不足であると判定することができる。いくつかの実装形態では、要求がデータプロパティのセットにおける各データプロパティについて厳密に１つの属性を指定しているときに、視覚分析意図システム２３０は、意図タイプが完全に指定されていると確立する。

【0129】

多くの意図タイプは、欠落又は曖昧な意図プロパティをどのように推論するかについてのルールを有する。ルールは、情報に基づいた決定を行うためにｄａｔａ－ｓｅｍａｎｔｉｃｓを調べる。いくつかの実装形態では、視覚分析意図システム２３０が、未指定のプロパティについて厳密に１つの可能なフィールドを見つけた場合、視覚分析意図システム２３０は、それを直接埋める。いくつかの実装形態では、視覚分析意図システム２３０が、未指定のプロパティに対して複数の可能なフィールドを見つけた場合、意図プロパティからのリスト及びその参照を含むｆｉｅｌｄ－ｖａｒを作成する。

【0130】

図１０は、いくつかの実装形態による、情報不足のｆｏｃｕｓ意図を解決するために情報を推論するためのＢＮＦ生成ルールを例示する。

【0131】

ｆｏｃｕｔ意図は、分析をデータ値のサブセットに向けることに関連する。図６において先に説明されたように、フォーカス意図タイプの入力仕様は、フィールドプロパティ（例えば、［ｆｉｅｌｄ］）、データ値プロパティ（例えば、［ｖａｌｕｅｓ］）、ソート動作を実行するためのデータフィールド（例えば、［ｓｏｒｔｂｙ－ｆｉｅｌｄ］）、形容詞（例えば、［ａｄｊｅｃｔｉｖｅ］）、数量プロパティ（例えば、［ｑｕａｎｔｉｔｙ］）、及びフォーカス戦略プロパティ（例えば、［ｓｔｒａｔｅｇｙ］）を含むことができる。

【0132】

ｓｔｒａｔｅｇｙプロパティは、ユーザの注意をデータ値のサブセットに向けるためのアプローチと関係がある。図１０は、いくつかの実装形態では、要求がｓｔｒａｔｅｇｙプロパティを指定していない（例えば、要求が「フィルタ」、「強調表示」、又は「ズーム」という用語を含まない）という判定に従って、視覚分析意図システム２３０がデフォルト戦略プロパティを強調表示することを選択すること（例えば、推論する）ができることを示している。なぜなら、研究は、コンテキスト内のデータを示すことがしばしば重要であることを示しているためである。いくつかの実装形態では、「強調表示」戦略に従って、視覚分析意図システム２３０は、出力仕様におけるｄａｔａＳｈａｐｅ．ｆｏｃｕｓによって記載された値を強調表示するための１つ以上の推奨動作を含む出力仕様を生成する。例えば、推奨される動作は、データテーブル内のデータフィールドのデータ値に従って昇順又は降順でデータソースのデータテーブルからのデータ行を並べるソート動作と、データ値のランキングに基づいて指定された数のデータ値を強調表示する強調表示動作と、を含むことができる。

【0133】

いくつかの実装形態では、フォーカス意図が戦略プロパティを指定していないという判定に従って、視覚分析意図システム２３０は、戦略プロパティとして「ズーム」を選択することができる。いくつかの実装形態では、「ズーム」戦略に従って、視覚分析意図システム２３０は、出力仕様におけるｄａｔａＳｈａｐｅ．ｆｏｃｕｓによって記載された値にズームするための推奨動作を含む出力仕様を生成する。

【0134】

いくつかの実装形態では、フォーカス意図が戦略プロパティを指定していないという判定に従って、視覚分析意図システム２３０は、戦略プロパティとして「フィルタ」を選択することができる。いくつかの実装形態では、「フィルタ」戦略に従って、視覚分析意図システム２３０は、データソースのデータ行を、特定のデータフィールドが特定のデータ値を有するデータ行のサブセットにフィルタリングするために、推奨されるフィルタ動作を含む出力仕様を生成する。

【0135】

再び図１０を参照すると、いくつかの実装形態では、フィールドプロパティ（例えば、ｆｉｅｌｄ）が要求において指定されていないという判定に従って、視覚分析意図システム２３０は、テキストデータタイプを有し、かつ要求において指定された数量以上のドメインを有するデータフィールドを、データソースから選択することができる。いくつかの実装形態では、フィールドプロパティ（例えば、ｆｉｅｌｄ）が指定されていないという判定に従って、視覚分析意図システム２３０は、ドメインが要求において指定されたデータ値を含むデータフィールドを選択することができる。いくつかの実装形態では、ｓｏｒｔ－ｂｙが指定されないときに、視覚分析意図システム２３０は、要求が価格を指す形容詞（例えば、「安い」又は「高価な」）を含む場合、通貨データタイプ（例えば、ＣＣｕｒｒｅｎｃｙ）を有するデータソース内の全てのデータフィールドを使用することができる。いくつかの実装形態では、データソースが通貨フィールドタイプを有するデータフィールドを含まないという判定に従って、視覚分析意図システム２３０は、全ての数値データフィールドを選択することによってｓｏｒｔ－ｂｙフィールドを推論する。

【0136】

図１１は、いくつかの実装形態による、情報不足のｃｏｒｒｅｌａｔｉｏｎ意図を解決するために情報を推論するためのＢＮＦ生成ルールを示す。

【0137】

ｃｏｒｒｅｌａｔｉｏｎ意図は、データフィールド間の相関を理解したいというユーザの希望を記載する。相関意図に対応する例示的な要求は、２つのデータフィールドが「馬力」及び「ＭＰＧ」である「馬力とＭＰＧとの間の相関を見せてください」とすることができる。図６に示されるように、ｃｏｒｒｅｌａｔｉｏｎ意図は、第１のフィールドプロパティ（例えば、［ｆｉｅｌｄ１］）及び第２のフィールドプロパティ（例えば、［ｆｉｅｌｄ２］）を含む。いくつかの実装形態では、ｃｏｒｒｅｌａｔｉｏｎ意図が、２つのフィールドプロパティのうちの少なくとも１つが要求において指定されないことで情報不足である。

【0138】

いくつかの実装形態では、相関意図が情報不足であるという判定に従って、視覚分析意図システム２３０は、データソース１１０内の全ての数値フィールドのリストを識別する。ここで、図１１の変数「ｌｉｓｔ」は配列である。すなわち、視覚分析意図システム２３０は、全ての数値データフィールドのリストである配列を作成する。次いで、意図仕様内で、第１のデータフィールドが指定されていない場合（すなわち、「！ｉ．ｆｉｅｌｄ１」）、視覚分析意図システム２３０は、このフィールドをリストからの要素０（すなわち、フィールドリスト内の第１のフィールド）で埋める。第２のフィールドが指定されていない場合、視覚分析意図システム２３０は、フィールドをリストからの要素１（第２の数値データフィールド）で埋める。両方のフィールドプロパティが指定されていない場合、視覚分析意図システム２３０は、ｆｉｅｌｄ１及びｆｉｅｌｄ２プロパティ内のインデックスをセットして、それらが、リスト内の同じフィールド変数であるが異なるフィールドを参照すべきであることを示す。

【0139】

図１２は、いくつかの実装形態による、情報不足のｄｉｓｔｒｉｂｕｔｉｏｎ意図を解決するために情報を推論するためのＢＮＦ生成ルールを例示する。ｄｉｓｔｒｉｂｕｔｉｏｎ意図は、データフィールドの値の広がりを見たいというユーザの希望を記載する。ｄｉｓｔｒｉｂｕｔｉｏｎ意図に対応する例示的な要求は、「ワイン価格の分布を見せてください。」である。図６に記載されるように、いくつかの実装形態では、ｄｉｓｔｒｉｂｕｔｉｏｎ意図は、グループ化フィールドプロパティ（例えば、［ｂｉｎ－ｆｉｅｌｄ］）及びビンサイズプロパティ（例えば、［ｂｉｎ－ｃｏｕｎｔ］）を含む。

【0140】

いくつかの実装形態では、要求がグループ化フィールドプロパティを指定していないという判定に従って、視覚分析意図システム２３０は、全ての数量フィールド（例えば、Ｑｉ、Ｑｄ、又はＣＣｕｒｒｅｎｃｙ）を検索する。いくつかの実装形態では、要求がビンサイズを指定しているという判定に従って、視覚分析意図システム２３０は、ｄａｔａ－ｓｅｍａｎｔｉｃｓにおいて指定されたビンサイズ情報（例えば、［ｂｉｎ－ｃｏｕｎｔ］）を、要求において指定されたビンサイズでオーバーライドする（例えば、置き換える）。

【0141】

図１３は、いくつかの実装形態による、情報不足のｔｒｅｎｄ意図を解決するために情報を推論するためのＢＮＦ生成ルールを例示する。

【0142】

傾向意図は、経時的にフィールドの値を見たいというユーザの希望を記載するために使用される。ｔｒｅｎｄ意図を含む例示的な要求は、「ＣＯＶＩＤ症例の傾向を見せてください。」などのステートメント、又は「過去５年にわたるサンフランシスコの１寝室のアパートの価格は？」などの質問を含む。

【0143】

図６に記述のように、いくつかの実装形態に従って、ｔｒｅｎｄ意図は、測定データフィールドプロパティ（例えば、［ｍｅａｓｕｒｅ－ｆｉｅｌｄ］）及び時間フィールドプロパティ（又は日付／時間フィールドプロパティ）（例えば、［ｔｉｍｅ－ｆｉｅｌｄ］）を含む。いくつかの実装形態では、要求が測定フィールドを含まないという判定に従って、視覚分析意図システム２３０は、データソース内の全ての数量依存フィールド（例えば、Ｑｄ）を見つけ、全ての数量依存フィールドを含むようにｆｉｅｌｄ－ｖａｒを作成し、ｍｅａｓｕｒｅ－ｆｉｅｌｄプロパティからそれを参照する。いくつかの実装形態では、要求が時間フィールドプロパティを指定していないという判定に従って、視覚分析意図システム２３０は、データソース内の全ての時間フィールドを識別し、全ての時間フィールドを含むようにｆｉｅｌｄ－ｖａｒを作成し、ｔｉｍｅ－ｆｉｅｌｄプロパティからそれを参照する。

【0144】

いくつかの実装形態では、意図タイプは、ｇｅｏｇｒａｐｈｉｃ意図を含む。地理的意図を含む例示的な要求は、「私の売り上げはどこですか？」である。いくつかの実装形態では、情報不足のｇｅｏｇｒａｐｈｉｃ意図に対する推論ルールは、ｇｅｏｇｒａｐｈｉｃ意図に対する推論ルールがタイプＣＧｅｏ、ＱＬａｔ、及びＱＬｏｎのフィールドを見つけること、を含むことを除いて、上述されたような情報不足の傾向意図に対する推論ルールと同様である。

【0145】

いくつかの実装形態では、意図タイプは、ｅｎｃｏｄｉｎｇ意図を含む。ｅｎｃｏｄｉｎｇ意図は、出力又は前の意図を修正したいという希望を表現する。ｅｎｃｏｄｉｎｇ意図を含む例示的な要求は、「Ｘごとに色付けしてください。」（Ｘはフィールドである）である。いくつかの実装形態では、ＶＡＩＬは、ｅｎｃｏｄｉｎｇ意図に対する推論ルールを定義しない。

【0146】

いくつかの実装形態では、要求は、符号化意図を含み、第１のデータフィールドを指定する。要求に従って、視覚分析意図システム２３０は、第１のデータフィールドに従ってデータ視覚化を、レンダリングすることを指定する符号化パラメータを追加することによって、それぞれの出力仕様を生成する。いくつかの実装形態では、視覚分析意図システム２３０は、第１のデータフィールドに従って、データ視覚化のための既存の符号化パラメータをオーバーライドするそれぞれの出力仕様を生成する。

【0147】

いくつかの実装形態では、意図タイプはｆｉｅｌｄｓ意図を含む。ｆｉｅｌｄｓ意図は、明示的に定義された分析意図のないフィールドへの関心を表現する。ｆｉｅｌｄｓ意図を含む例示的な要求は、「売り上げと利益を見せてください。」である。いくつかの実装形態では、ＶＡＩＬは、ｆｉｅｌｄｓ意図に対する推論ルールを定義しない。

【0148】

いくつかの実装形態では、要求は、フィールド意図を含み、第１のデータフィールドを指定する。要求に従って、視覚分析意図システム２３０は、第１のデータフィールドによって課されたセマンティック制約に基づいて１つ以上の推論ルールを適用することによって、それぞれの出力仕様を生成する。

【0149】

Ｈ．出力提案サブシステム２４２
いくつかの実装形態では、視覚分析意図システム２３０は、意図に基づいてｖａｉｌ－ｏｕｔｐｕｔを提案するための１つ以上のルールを適用する出力提案サブシステム２４２を含む。

【0150】

ユーザが指定した意図に対して効果的な出力を提案するために、ＶＡＩＬは、各意図タイプを出力仕様内の情報に変換するためのルールを定義する。いくつかの実装形態では、視覚分析意図システム２３０は、ｃｏｒｒｅｌａｔｉｏｎ、ｄｉｓｔｒｉｂｕｔｉｏｎ、ｔｒｅｎｄ、ｇｅｏｇｒａｐｈｉｃ、及びｆｉｅｌｄ意図から新しい出力仕様を作成する。

【0151】

いくつかの実装形態では、ｃｏｒｒｅｌａｔｉｏｎ意図は、散布図を生成するために使用される。
●ｖｉｚＴｙｐｅ：「ｓｃａｔｔｅｒＰｌｏｔ」，ｘ：ｉ．ｆｉｅｌｄ１，ｙ：ｉ．ｆｉｅｌｄ２

【0152】

いくつかの実装形態では、ｄｉｓｔｒｉｂｕｔｉｏｎ意図は、ヒストグラムを生成するために使用される。

【0153】

いくつかの実装形態では、ｔｒｅｎｄ意図は、折れ線グラフを作成する。

【0154】

いくつかの実装形態では、ｅｎｃｏｄｉｎｇ及びｆｏｃｕｓ意図は、前の意図によって生成された出力仕様を修正する。これらの意図タイプに対応する出力仕様がない場合、これらの意図からのフィールドを抽出し、ｆｉｅｌｄｓ意図のためのｓｕｇｇｅｓｔ－ｏｕｔｐｕｔルールに供給され得、ユーザからの更なる精緻化をもたらす。

【0155】

ｅｎｃｏｄｉｎｇ意図タイプは、他の出力仕様のエンコーディングを修正し、既存の符号化を追加又はオーバーライドするために使用される。ｆｏｃｕｓ意図タイプは、他の出力仕様のｄａｔａ－ｓｈａｐｅを修正するために使用される。これは、ｏｕｔｐｕｔ．ｄａｔａ－ｓｈａｐｅ．ｆｏｃｕｓ仕様を作成するために、ｆｉｅｌｄ、ａｄｊｅｃｔｉｖｅ、ｖａｌｕｅｓ、及びｑｕａｎｔｉｔｙを使用する（例えば、「上位１０個のＣＯＶＩＤ症例［カウント］を見せてください。」）。これは、ｆｉｅｌｄ、ｓｏｒｔ－ｂｙ、及びａｄｊｅｃｔｉｖｅを使用して、ｏｕｔｐｕｔ．ｄａｔａ－ｓｈａｐｅ．ｓｏｒｔ仕様を作成する。

【0156】

ユーザの目的についてあまり知られていないので、ｆｉｅｌｄｓ意図に対する出力ルールは、意図のフィールドのｄａｔａ－ｓｅｍａｎｔｉｃｓに依存する。これは、フィールドセマンティクスを使用して効果的な視覚化を生成するように設計されたＳｈｏｗ Ｍｅ又はＶｏｙａｇｅｒのようなシステムを活用することができる。

【0157】

Ｉ．拡張性及びカスタマイゼーション
いくつかの実装形態では、視覚分析意図システム２３０はまた、ユーザの必要性に従ってカスタマイズされ得る。例えば、開発者は、自身のカスタム意図を追加して、「最良の近傍」などのドメイン固有の概念、又はビジネスコンテキストにおいて固有である技術専門用語に合わせることができる。これは、対応する出力仕様を生成するためのルールとともに、欠落した又は曖昧なプロパティを推論するためのルールを提供することを伴う。意図プロパティは、使用されるべきフィールドのタイプを知ること、及び適切な一致を見つけるためにデータソースに関する情報を識別すること（例えば、時間を表現する全てのフィールドを見つけること）など、意図タイプ（例えば、特定の意図）の理解を介して推論され得る。

【0158】

いくつかの実装形態では、特定の意図タイプに対応する意図仕様を拡張して、新しいプロパティを追加することができる。例えば、ｆｏｃｕｓ意図では、高い数値又は低い数値を記載するための多くの選択肢があるため、形容詞プロパティ内の属性は、新しい形容詞を含むように拡張され得る。追加的又は代替的に、ｆｏｃｕｓ意図に対応するｉｎｆｅｒ－ｉｎｔｅｎｔルールは、新しいオプションを含むように調整され得る。一例として、いくつかの実装形態では、フォーカス意図がデータへのズームを示すことを可能にするために、開発者は、ズームと呼ばれる新しい戦略を追加し、次いで、出力仕様２３６におけるｄａｔａＳｈａｐｅ．ｆｏｃｕｓによって記載される値にズームインするために、カスタムロジックを出力仕様ハンドラに追加することができる。

【0159】

いくつかの実装形態では、視覚分析意図システム２３０は、ｓｕｇｇｅｓｔ－ｏｕｔｐｕｔルールから活用するためにｖａｉｌ－ｏｕｔｐｕｔに新しい可能性を追加することによって拡張され得る。例えば、開発者がツリーマップ視覚化を作成したｉｎｆｅｒ－ｉｎｔｅｎｔルールを作成したい場合、開発者は、ｏｕｔｐｕｔ仕様に新しいｖｉｚ－ｔｙｐｅを追加し、視覚化がどのように構築されるべきかを記載するために既存の符号化プロパティを活用することができる。

【0160】

これらの原理に照らして、我々は、特定の実装形態に目を向けることを知っている。

【0161】

ＩＶ．実装形態
いくつかの実装形態では、視覚分析意図システム２３０（例えば、ＶＡＩＬエンジン）は、ＴｙｐｅＳｃｒｉｐｔで書かれ、ＪａｖａＳｃｒｉｐｔにコンパイルする。

【0162】

いくつかの実装形態では、視覚分析意図システム２３０は、その組み込み意図仕様を入力及び修正するために使用され得る、Ｒｅａｃｔ構成要素を使用してビルドされるグラフィカルユーザインターフェース（ＧＵＩ）を含む。

【0163】

いくつかの実装形態では、クライアントアプリケーション２２４は、入力コマンド及び出力仕様を通して視覚分析意図システム２３０と対話することができ、同様に自身のデータソースを提供することができる。入力は、ＶＡＩＬコマンドを介して、エンジンに意図をセットし、欠落した曖昧な意図を推論し、出力を提案するように伝える。クライアントアプリケーション２２４は、視覚分析意図システム２３０が返信する推論された意図をユーザに示すことを選択することができ、オプションで、分析者が意図を精緻化する方法を提供する。

【0164】

いくつかの実装形態では、出力仕様は、クライアント固有の方法で解釈され得る。視覚分析意図システム２３０はまた、クライアント固有の解釈の代わりに（又はそれに加えて）使用され得るビルトインＶｅｇａ－ｌｉｔｅコンバータを含む。データソースは、意図を適切に推論し、効果的な出力を提案する視覚分析意図システム２３０の能力を向上させるように手動でキュレートされ得る。各フィールドは、通貨又は時間などのタイプ、平均又は合計などの任意の好ましい派生、及びオプションのビンサイズを指定することができる。

【0165】

いくつかの実装形態では、性能考慮事項として、視覚分析意図システム２３０は、ライブクエリを実行するのではなく、フィールドに関するメタデータ２４６のみを見る。

【0166】

Ａ．ＧＵＩベースのアプリケーション
図１４Ａ～図１４Ｊは、いくつかの実装形態による、ＶＡＩＬを使用するグラフィカルユーザインターフェースベースのアプリケーション２２４との対話のための一連のスクリーンショットを提供する。

【0167】

図１４Ａは、電子デバイス１０２上に表示される、アプリケーション２２４のグラフィカルユーザインターフェース１４００を例示する。グラフィカルユーザインターフェース１４００は、ユーザによって選択されるときに、データセット１４０４（例えば、それぞれのデータソース１１０に対応するデータセット）のリストをドロップダウンメニュー１４０６として表示させるグラフィカル制御要素１４０２（例えば、「データをピック」アフォーダンス）を含む。グラフィカルユーザインターフェース１４００はまた、ユーザによって選択されるときに、１つ以上のそれぞれの意図タイプ（例えば、図２の意図タイプ２２９及び図６のｓｐｅｃｉｆｉｃ－ｉｎｔｅｎｔｓ）を識別するグラフィカル制御要素１４０８（例えば、「意図を追加」アフォーダンス）を含む。図６の例では、アフォーダンス１４０８は、フォーカス意図アフォーダンス１４０８－１、相関意図アフォーダンス１４０８－２、傾向意図アフォーダンス１４０８－３、及び分布意図アフォーダンス１４０８－４を含む。

【0168】

いくつかの実装形態では、図１４Ａに例示されるように、グラフィカルユーザインターフェース１４００は、ユーザ対話に従ってＶＡＩＬによって定式化された１つ以上の意図仕様を表示するための意図仕様領域１４１２を含む。グラフィカルユーザインターフェース１４００は、ＶＡＩＬによって生成された１つ以上の出力仕様を表示するための出力仕様領域１４１４を含む。グラフィカルユーザインターフェース１４００はまた、（例えば、クライアントアプリケーション２２４からの）１つ以上のコマンドを表示するためのコマンド領域１４１６を含む。グラフィカルユーザインターフェース１４００はまた、ユーザによって指定されるデータ（例えば、プロパティ）を表示するためのデータ領域１４１８を含む。

【0169】

図１４Ａは、グラフィカルユーザインターフェース１４００とのユーザ対話を例示する。この例では、ユーザは、「ワイン」に対応するデータセット１４０４－３を選択する（１４１０）。ユーザはまた、フォーカス意図アフォーダンス１４０８－１を選択する。

【0170】

図１４Ｂは、「ワイン」データセットのユーザ選択に応答して、グラフィカルユーザインターフェース１４００がグラフィカル制御要素１４２０（例えば、「フィールドをピック」アフォーダンス）を表示することを例示する。要素１４２０の各々は、「ワイン」データソース内のそれぞれのデータフィールドに対応する。

【0171】

図１４Ｂはまた、「フォーカス」意図のユーザ選択に応答して、グラフィカルユーザインターフェース１４００が、フォーカス意図に対応するプロパティのセット１４２２を表示することを例示する。この例では、プロパティ１４２２は、「フィールド」プロパティ、「値」プロパティ、「ごとにソート」プロパティ、「形容詞」プロパティ、「数量」プロパティ、及びフォーカス戦略プロパティを含む。意図仕様領域１４１２は、選択された意図タイプを表示する（１４２４）。

【0172】

図１４Ｃは、図１４Ｂの「形容詞」プロパティ１４２２－１の隣のドロップダウンボタン１４２６のユーザ選択に応答して、グラフィカルユーザインターフェース１４００が、形容詞（例えば、測定可能な形容詞）のリストを含むドロップダウンメニュー１４２８を表示することを例示する。ユーザは、リストから第１の形容詞（例えば、「高価な」）を選択する（１４３０）。

【0173】

図１４Ｄは、グラフィカルユーザインターフェース１４００が、形容詞「高価な」のユーザ選択（例えば、ユーザ仕様）に応答して、データ視覚化１４３２（例えば、棒グラフ）を表示することを例示する。棒グラフにおける棒の各々はワイン品種に対応する。データバーは、降順にソートされ（例えば、並べられ）、上位３行は、棒グラフ内の他の行と視覚的に区別されるように表示される。この例では、視覚分析意図システム２３０は、形容詞「高価な」のユーザ選択に従って通貨属性「価格」を推論する。次いで、それは、価格値の上位範囲を強調表示する棒グラフを生成するための出力仕様を生成する。図１４はまた、データフィールド「品種」が「フィールド」プロパティ１４２２－２の推論されたフィールドであり、戦略「強調表示」が戦略プロパティとして推論されていることを示す。

【0174】

図１４Ｅ及び図１４Ｆは、グラフィカルユーザインターフェース１４００とのユーザ対話を例示する。図１４Ｅでは、ユーザは、「値」プロパティ１４２２－５に対して第１の値１４３４（例えば、「５５」）を入力する（例えば、指定する）。ユーザ入力に応答して、グラフィカルユーザインターフェース１４００は、少なくとも５５ドルの価格を有するワイン品種に対応するデータバーを有する更新されたデータ視覚化１４３６（例えば、棒グラフ）を表示する。図１４Ｆは、ユーザが第２の値１４３８（例えば、「５５、６５、７５」）を指定していることを例示する。この例では、ＶＡＩＬは、入力「５５、６５、７５」を、特定の値「５５」、「６５」、及び「７５」に基づいてビューをフィルタリングするユーザの意図として解釈する。視覚分析意図システム２３０は、この新しい意図を既存のコンテキストに適用して、特定の値「５５」、「６５」、及び「７５」にフィルタリングすることができる。次いで、データ行を、価格の値が「５５」、「６５」、及び「７５」であるデータ行のサブセットにフィルタリングするフィルタ動作を含む出力仕様を生成する。グラフィカルユーザインターフェース１４００は、出力仕様を反映する更新されたデータ視覚化１４４０を表示する。

【0175】

図１４Ｇは、「タイタニック」データソース１４０４－５のユーザ選択及び「分布」意図タイプ１４０８－４のユーザ選択を例示する。図１４Ｈは、ユーザ選択に応答して、視覚分析意図システム２３０が、データソース１４０４－５内のデータフィールド「年齢」をビニングされたフィールド１４４４として自動的に推論して（例えば、グループ化フィールドプロパティ、又は［ｂｉｎ－ｆｉｅｌｄ］）、ヒストグラム１４４２を表示することを示す。いくつかの実装形態では、視覚分析意図システム２３０はまた、データセットに対してカスタム定義されるビンサイズ１４４６（例えば、ビン間隔又は［ｂｉｎ－ｃｏｕｎｔ］）をピックする。

【0176】

図１４Ｉは、カルフォルニアのＣｏｖｉｄ－１９症例に対応する「Ｃｏｖｉｄ」データソース１４０４－４のユーザ選択を例示する。図１４Ｉはまた、「傾向」意図タイプ１４０８－３のユーザ選択を例示する。

【0177】

図１４Ｊは、ユーザ選択に応答して、グラフィカルユーザインターフェース１４００が、経時的な（例えば、日付ごとの）新しいＣｏｖｉｄ死亡カウントを示す時系列１４４６を表示することを例示する。図６に記載されるように、傾向意図は、測定データフィールドプロパティ及び時間フィールドプロパティを含む。ここで、視覚分析意図システム２３０は、測定データフィールドプロパティとして測定フィールド「新しい死亡カウント」を推論し、時間フィールドプロパティとしてフィールド「日付」を推論する。

【0178】

Ｂ．Ｓｌａｃｋｂｏｔアプリケーション
本開示のいくつかの実装形態によれば、ＶＡＩＬは、Ｓｌａｃｋアプリケーション（例えば、クライアントアプリケーション２２４又はチャットアプリケーション）において自然言語意図をサポートすることができる。

【0179】

図１５は、いくつかの実装形態による、ＶＡＩＬを使用するＳｌａｃｋｂｏｔアプリケーションのシステム概要１５００を例示する。

【0180】

Ｓｌａｃｋアプリケーションは、ｎｏｄｅ．ｊｓクライアント－サーバアーキテクチャを採用するＳｌａｃｋチャットボットを含む。いくつかの実装形態では、図１５に例示されるように、Ｓｌａｃｋチャットボットは、以下の構成要素を含む。
●Ｓｌａｃｋクライアント１５０２。いくつかの実装形態では、Ｓｌａｃｋクライアント１５０２は、Ｓｌａｃｋインターフェース内のユーザ対話イベント及びＳｌａｃｋサーバからのメッセージイベントをリッスンする。いくつかの実装形態では、Ｓｌａｃｋクライアント１５０２は、図１６に例示されるように、曖昧さを表面化するためのネイティブ対話型ウィジェットも表示するユーザインターフェースを含む。
●Ｓｌａｃｋサーバ１５０４。いくつかの実装形態では、Ｓｌａｃｋサーバ１５０４は、Ｓｌａｃｋクライアント１５０２とＳｌａｃｋアプリケーションの他の構成要素との間をブリッジするメインアプリケーション固有サーバである。Ｓｌａｃｋサーバ１５０４は、入力クライアントイベント（例えば、Ｓｌａｃｋメッセージ）を適切なＡＰＩ要求に変換し、同様に、ＡＰＩ応答を、クライアントに送信するための応答の正しいフォーマットに変換する。
●パーサ１５０６（例えば、図２、パーサ２２６）。いくつかの実装形態では、パーサ１５０６は、（例えば、Ｅｖｉｚａで実装されるような）文脈自由文法に基づいて、自然言語入力クエリをトークンに解析する。これらのトークンは、データ属性及び値（データソースからの情報を伴う）、又は「傾向」若しくは「最良」などの意図語彙として解決される。
●ＶＡＩＬエンジン１５０８（例えば、視覚分析意図システム２３０）。ＶＡＩＬ１５０８は、意図処理を処理し、情報不足又は曖昧な情報を推論する。サーバは、解析されたトークンをＶＡＩＬに渡し、このＶＡＩＬは、図１、図２、及び図４～図１３に関して議論したように、１つ以上の意図仕様及び１つ以上の出力仕様を生成する。
●ＶｉｚＱＬモジュール１５１０。ＶｉｚＱＬモジュール１５１０は、ＴａｂｌｅａｕのＶｉｚＱＬコマンドを使用して、チャートタイプ、意図戦略、データ属性、及び値などの情報に基づいて、データ視覚化結果の画像を生成する。いくつかの実装形態では、ＶｉｚＱＬモジュール１５１０は、データ視覚化を、Ｓｌａｃｋクライアント１５０２上での表示に適合可能なフォーマット（例えば、ｊｐｇ、ｔｉｆ、ｐｎｇ、ｇｉｆ、ｂｍｐ、ｐｄｆフォーマットなど）に変換する。
●自然言語生成（Natural language generation、ＮＬＧ）モジュール１５１２。ＮＬＧモジュール１５１２は、出力仕様からの情報を挿入するために、事前定義されたテキスト及びプレースホルダを有するＮＬＧのための単純な言語テンプレートを使用する。パーサ１５０６からの文法ルールは、言語的実現を支援するために更に使用される。

【0181】

図１６Ａ～図１６Ｇは、いくつかの実装形態による、Ｓｌａｃｋチャットボット（例えば、Ｓｌａｃｋｂｏｔ）との対話のための一連のスクリーンショットを提供する。この例では、Ｓｌａｃｋチャットボットは、「ワイン」データセット（例えば、データソース１１０）に関する質問に回答するためにＶＡＩＬを使用する。

【0182】

図１６Ａは、電子デバイス１０２上に表示されるＳｌａｃｋアプリケーションの例示的なグラフィカルユーザインターフェース１６００を例示する。

【0183】

いくつかの実装形態では、「ワイン」データソースのユーザ識別（例えば、ユーザ指定又はユーザ選択）に従って、Ｓｌａｃｋアプリケーションは、メッセージ１６０２を生成し、グラフィカルユーザインターフェース１６００上に表示して、ユーザにデータソースに関する質問をするように促す。いくつかの実装形態では、Ｓｌａｃｋアプリケーションはまた、データソース内のデータフィールドの属性を示す表現１６０４（例えば、．ｐｎｇ、．ｔｉｆｆ、．ｂｍｐ、又は．ｊｐｇファイルなどの画像ファイル）を表示する。図１６Ａの例では、ユーザは、初めてＳｌａｃｋアプリケーションと対話しており、したがって、「ワイン」データソースのユーザ選択は、新しい会話スレッド１６０６を開始する。

【0184】

図１６Ｂは、いくつかの実装形態による、グラフィカルユーザインターフェース１６００とのユーザ対話を例示する。この例では、ユーザは、入力ボックス１６０７にメッセージを構成する（例えば、タイプする）ことによって、ユーザインターフェース１６００と対話する。いくつかの実装形態では、ユーザは、自然言語コマンドを提供するために、電子デバイス１０２（例えば、オーディオ入力デバイス２１２）のマイクロホンに向かって話しかけることによって、入力ボックス１６０７と間接的に対話し得る。図１６Ｂの例では、ユーザは、自然言語コマンド（例えば、自然言語表現）「高価な品種を私に見せてください。（ｓｈｏｗ ｍｅ ｔｈｅ ｅｘｐｅｎｓｉｖｅ ｖａｒｉｅｔｉｅｓ）」を入力する。ここで、「高価な品種」は、ユーザが「高価」と言及しているが、ユーザが関心のある高価な品種の数を定義していないので、曖昧な意図を含む。

【0185】

いくつかの実装形態では、ユーザ入力に従って、コマンド（例えば、クエリ）を伴うＳｌａｃｋイベントがＳｌａｃｋサーバ１５０４に渡される。Ｓｌａｃｋサーバ１５０４は、イベントがクエリタイプのイベントであることを認識し、トークン化のためにクエリをパーサ１５０６に渡す。いくつかの実装形態では、クエリの受信に応答して、パーサ１５０６は、ストップワード及び見出語化（例えば、「見せて（ｓｈｏｗ）」及び「私に（ｍｅ）」）を除去して、トークン［「ｅｘｐｅｎｓｉｖｅ」，「ｖａｒｉｅｔｙ」］）をＳｌａｃｋサーバ１５０４に返す。次いで、Ｓｌａｃｋサーバ１５０４は、トークン化されたパーサ出力をＶＡＩＬエンジン１５０８（例えば、視覚分析意図システム２３０）に渡す。この例では、ＶＡＩＬエンジン１５０８は、「ｅｘｐｅｎｓｉｖｅ」が通貨属性ｐｒｉｃｅによってソートされたｖａｒｉｅｔｙを解決することを推論し、戦略は上位３個のアイテムを強調表示することを示す。次に、ＶＡＩＬエンジン１５０８は、図１６Ｃに例示される意図仕様１６０８を生成する。ＶＡＩＬエンジン１５０８はまた、図１６Ｄに例示される出力仕様１６１０を生成する。いくつかの実装形態では、出力仕様を生成した後、ＶＡＩＬエンジン１５０８は、出力された指定をＶｉｚＱＬモジュール１５１０及びＮＬＧモジュール１５１２に渡し、これらは、視覚化及びテキスト応答を生成する。

【0186】

図１６Ｅは、ユーザ入力に応答して更新されたユーザインターフェース１６００のビューを例示する。この例では、会話スレッド１６０６は、視覚化の表現１６１０（例えば、降順に並べられたデータバーを有する棒グラフ）及びテキスト応答１６１２（例えば、「上位３個の品種は、カベルネ・フラン・メルロー、ペチ・ヴェルド、及びボルドースタイルレッドブレンドです。「高価な」は、１０９ドル以上の平均価格として解釈されます。）を含むように更新されている。

【0187】

いくつかの実装形態では、Ｓｌａｃｋアプリケーションは、出力仕様に基づいて関連テンプレートを適用する。図１６の例では、関連テンプレートは、「［Ｎ］の［ｍｏｄｉｆｉｅｒ］［ｄｉｍｅｎｓｉｏｎ］は、［ｄａｔａ－ｖａｌｕｅｓ］です。［ｍｏｄｉｆｉｅｒ］は、［ｆｉｌｔｅｒ－ｖａｌｕｅ］として解釈されます。」であり、テキスト応答「３個（［Ｎ］）の高価な（［ｍｏｄｉｆｉｅｒ］）品種（ｄｉｍｅｎｓｉｏｎ］）は、カベルネ・フラン・メルロー（［ｄａｔａ－ｖａｌｕｅ１］）、ペチ・ヴェルド（［ｄａｔａ－ｖａｌｕｅ２］）、及びボルドースタイルレッドブレンド（［ｄａｔａ－ｖａｌｕｅ３］）です。「高価な」（［ｍｏｄｉｆｉｅｒ］）は、１０９ドル以上の平均価格（［ｆｉｌｔｅｒ－ｖａｌｕｅ］）として解釈されます。」に対応している。

【0188】

図１６Ｂに記載されているように、語句「高価な品種」は、ユーザが「高価な」に言及しているが、ユーザが関心のある高価な品種の数を定義していないので、曖昧な意図を含む。この例では、ＶＡＩＬエンジン１５０８は、データ値のランキング（例えば、降順）に基づいて、数量「３個」を強調表示すべきデータ値の数として推論する。図１６Ｅの表現１６１０は、棒グラフの上位３個のデータ行１６１４が、棒グラフの他のデータ行１６１６とは視覚的に区別されるように表示されることを示す（例えば、上位３個のデータ行１６１４が強調表示され、他のデータ行は強調表示されない）。いくつかの実装形態では、推論された情報（例えば、「上位Ｎ個」）は、ユーザが対話して応答を精緻化し、更新することができるデータウィジェット１６１８として表示される。

【0189】

一例として、ユーザが図１６Ｅのデータウィジェット１６１８を選択して、フィルタを「上位３個」から「上位５個」に変更すると仮定する。いくつかの実装形態では、ユーザ選択に応答して（２０４２）、ＶＡＩＬは、［ｑｕａｎｔｉｔｙ］プロパティを推論値「３個」からユーザ指定値「５個」に変更することによって、それぞれの意図仕様を編集する。ＶＡＩＬは、それぞれの編集された意図仕様に従ってそれぞれの出力仕様を更新する。クライアントアプリケーション２２４は、それぞれの出力仕様に従って、更新されたデータ分析を生成し（２０４８）、視覚的にレンダリングする。例えば、ユーザインターフェース１６００は、上位５個のデータバーが強調表示される棒グラフの更新された画像を表示することができる。

【0190】

図１６Ｆは、いくつかの実装形態によるユーザインターフェース１６００との別のユーザ対話を例示する。この例では、ユーザは、メッセージ（例えば、「最良のワインについてはどう思いますか。」）を入力ボックス１６０７にタイプすることによって、ユーザインターフェース１６００と対話する。この例では、「最良」という用語は曖昧である。なぜなら、「最良」は、例えば、販売されたワインの数、最高平均顧客レビュースコア、又は発生した収益の量に関して定義され得るためである。「ワイン」という用語はまた、シャルドネ若しくはカベルネットなどのワインのタイプ、又はワイナリーを意味し得るので、曖昧である。

【0191】

図１６Ｇは、ユーザ入力に応答して更新されたユーザインターフェース１６００のビューを例示する。この例では、ユーザインターフェース１６００は、視覚化の表現１６２０（例えば、降順に並べられたデータバーを有する棒グラフ）及びテキスト応答１６２２（例えば、「ここでは、平均ポイントで降順にソートされたワイナリーです。「最良」は上位１個として解釈されます。」）を表示する。この例では、応答１６２２は、表現１６２０の説明と、曖昧な用語（例えば、「最良」）がどのように解釈されたかの説明と、を含む。いくつかの実装形態では、ユーザインターフェース１６００は、ユーザ選択可能なフィードバックボタン１６２６（例えば、インターフェース要素１６２６）を含むフォローアップ質問１６２４（例えば、「これは予想されたものですか？」）を表示することができる。いくつかの実装形態では、ボタン１６２６のうちの１つのユーザ選択は、Ｓｌａｃｋアプリケーションに関連するフォローアップ質問を提案させ、それによって、潜在的に発見されていない分析能力の可能性を提供することができる。

【0192】

Ｃ．音声対応スマートアシスタントチャットボット
本開示のいくつかの実装形態によれば、ＶＡＩＬは、音声アシスタントアプリケーション（例えば、音声チャットボットアプリケーション）を実行している音声アシスタントデバイスとともに使用され得る。いくつかの実装形態では、音声アシスタントデバイスは、ディスプレイ画面を含む。いくつかの実装形態では、音声アシスタントデバイスは、ディスプレイ画面を含まない。

【0193】

図１７Ａ～図１７Ｃは、いくつかの実装形態による、ディスプレイスクリーン１７００を含む音声アシスタントデバイスとの対話のための一連のスクリーンショットを提供する。この例では、「ワイン」データセットのユーザ選択（例えば、口語的に、又はタッチスクリーンを介して）に応答して、音声アシスタントデバイスは、データセット内のデータフィールドの属性１７０２を表示する。図１７Ａはまた、音声アシスタントデバイスが口語的応答１７０４（例えば、オーディオ出力デバイス２１４を介して）（例えば、「こんにちは、ワインのデータについて質問してください、お助けします。」）を出力することを例示する。

【0194】

図１７Ｂは、音声アシスタントデバイスとのユーザ対話を例示する。この例では、ユーザは、音声コマンド「場所ごとにワインを見せてください。」を提供する。

【0195】

いくつかの実装形態では、音声アシスタントアプリケーションは、その実装アーキテクチャに関して、図１６Ａ～図１６Ｇに記載されているＳｌａｃｋｂｏｔアプリケーションと同様である。しかしながら、いくつかの実装形態では、音声アシスタントアプリケーションは、特注のパーサ及びＮＬＧモジュールを使用するのではなく、会話型対話を実装するためにＡｌｅｘａ ＡＰＩを使用する。音声アシスタントアプリケーションは、出力仕様を使用して、一次応答及び任意のフォローアップ応答を判定し、出力仕様に含まれる特定の視覚符号化を無視する。

【0196】

図１７Ｂの例に戻って参照すると、いくつかの実装形態では、音声コマンドに応答して、音声アシスタントデバイスは、ＶＡＩＬによって生成される出力仕様に従って口語的応答１７０６（例えば、「最も高価なワイナリーは米国に位置しています。」）を出力する。図１７Ｂは、最も高価なワイナリーが位置する国に対応する網掛け領域を含む視覚化１７０８（例えば、地図）を表示するディスプレイ画面１７００を示す。

【0197】

図１７Ｃは、音声アシスタントデバイスとのユーザ対話を例示する。この例では、ユーザは、「最も高価な品種を私に見せてください。」という音声コマンドを提供する。いくつかの実装形態では、音声コマンドに応答して、ＶＡＩＬは、意図仕様を更新し、更新された意図仕様に従って更新された出力仕様を生成する。音声アシスタントデバイスは、口語的応答１７１０（例えば、「最も高価な品種は、カベルネ・ソーヴィニョンです。」）を出力する。図１７Ｃはまた、更新された視覚化１７１２（例えば、棒グラフ）を表示するディスプレイ画面１７００を示す。

【0198】

Ｖ．フローチャート
図１８Ａ～図１８Ｅは、方法１８００のフローチャートを提供する。方法１８００は、プロセスとも称される。

【0199】

方法１８００は、第１のアプリケーション（例えば、クライアントアプリケーション２２４）を実行している電子デバイス１０２において行われる（１８０２）。

【0200】

電子デバイス１０２は、１つ以上のプロセッサ２０２及びメモリ２１６を含む（１８０４）。メモリは、１つ以上のプロセッサによる実行のために１つ以上のプログラムを記憶する（１８０６）。いくつかの実装形態では、図４～図１７に示される動作は、メモリ２１６又は他の非一時的なコンピュータ可読記憶媒体に記憶された命令に対応する。コンピュータ可読記憶媒体は、磁気若しくは光ディスク記憶デバイス、フラッシュメモリなどのソリッドステート記憶デバイス、又は他の１つ以上の不揮発性メモリデバイスを含み得る。コンピュータ可読記憶媒体に格納された命令は、ソースコード、アセンブリ言語コード、オブジェクトコード、又は１つ以上のプロセッサによって解釈される他の命令フォーマットのうちの１つ以上を含み得る。方法１８００におけるいくつかの動作は、組み合わされ得、及び／又はいくつかの動作の順序は、変更され得る。

【0201】

電子デバイス１０２は、データソース（例えば、データソース１１０）に向けられた要求を受信する（１８０８）。要求は、１つ以上の意図タイプ（例えば、意図タイプ２２９）を含む（１８１０）。各意図タイプは、データソースに向けられたデータ分析動作の時点定義されたセットから選択される（１８１１）。

【0202】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図（例えば、データ点のサブセットにフォーカスする）、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む（１８１２）。これは、図６に例示されている。

【0203】

要求はまた、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む（１８１４）。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する（１８１５）。

【0204】

１つ以上の意図タイプの各々について、電子デバイス１０２は、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、要求に従って、それぞれの意図仕様（例えば、意図仕様２３４）を定式化する（１８１８）。

【0205】

１つ以上の意図タイプの各々について、電子デバイス１０２はまた、それぞれの出力仕様（例えば、出力仕様２３６）を生成する（１８２０）。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプを含む（１８２２）。それぞれの出力仕様はまた、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む（１８２４）。これは、図８に例示されている。

【0206】

いくつかの実装形態では、１つ以上のそれぞれのデータ視覚化パラメータは、データ整形情報、符号化情報、及び／又は意図仕様に対応する識別子を含む（１８２６）。例えば、データ整形は、データソースが使用される前にデータソースを修正する（例えば、ソート又はフィルタ）情報を含む。符号化情報は、推奨される視覚化のタイプ（例えば、棒グラフ又は散布図）と、表示されるフィールドの各々について推奨される視覚符号化（例えば、ｘ、ｙ、色、及びサイズ）とを列挙する。これは、図８に例示されている。

【0207】

いくつかの実装形態では、１つ以上の意図タイプの各々についてそれぞれの出力仕様を生成した後、電子デバイス１０２は、（ｉ）１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、要求に応答してデータ分析を視覚的にレンダリングする（１８２８）。

【0208】

いくつかの事例では、要求は、傾向意図を含む（１８３０）。それぞれの意図仕様を定式化することは、データソースから、（ｉ）測定データフィールド、及び（ｉｉ）時間を表すデータフィールドを識別する第１のデータを識別すること（１８３２）を含む。これは、図６に例示されているいくつかの実装形態では、第１のデータフィールドは、時間フィールド、日付フィールド、又は日付／時間フィールドとすることができる。

【0209】

いくつかの事例では、要求は、傾向意図を含む（１８３４）。それぞれの意図仕様を定式化することは、データソースから、（ｉ）全ての測定データフィールド、及び（ｉｉ）時間を表す全てのデータフィールドを識別することを含む（１８３６）。

【0210】

いくつかの事例では、要求は、フォーカス意図を含む（１８３８）。それぞれの意図仕様を定式化することは、（１）データソースからのデータ行をある順序で並べるソート動作、（２）データソースからのデータ行を、特定のデータフィールドが指定のデータ値を有するデータ行のサブセットにフィルタリングするフィルタ動作、及び（３）データソースからのデータ行のサブセット（例えば、最上行、最上３行など）を強調表示する強調表示動作のうちの１つ以上を実行することを含む（１８４０）。

【0211】

いくつかの事例では、要求は、フォーカス意図を含む。それぞれの意図仕様を定式化することは、データ行のサブセットをズームインする（例えば、強調する、拡大する、ユーザの注意を向ける）「ズーム」動作を実行することを含む。

【0212】

いくつかの事例では、要求は、符号化意図を含み（１８４２）、第１のデータフィールドを指定する。それぞれの出力仕様を生成することは、第１のデータフィールドに従って、データ視覚化をレンダリングすることを指定する符号化パラメータを追加すること（１８４４）、又は第１のデータフィールドに従って、データ視覚化のための既存の符号化パラメータをオーバーライドすること（１８４６）を含む。

【0213】

いくつかの事例では、フィールド意図を含み（１８４８）、第１のデータフィールドを指定する。それぞれの出力仕様を生成することは、第１のデータフィールドによって課される意味制約に基づいて１つ以上の推論ルールを適用することを含む（１８５０）。

【0214】

いくつかの実装形態では、方法１８００は、１つ以上の意図タイプの各々について、それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定すること（１８５４）を更に含む。それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、電子デバイス１０２は、（ｉ）１つ以上のそれぞれのルール（例えば、テントシステム２３０内の視覚分析によって定義され、かつ図４～図１３に記載されるルール）、（ｉｉ）データソースのメタデータ（例えば、メタデータ２４６）、及び（ｉｉｉ）要求において指定されたデータフィールドのメタデータに従って、曖昧な及び又は情報不足の意図を解決するために情報を推論する（１８５６）。電子デバイス１０２は、推論された情報に従って、１つ以上のそれぞれのデータ視覚化パラメータを更新する（１８５８）。

【0215】

いくつかの事例では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、要求が測定可能な形容詞を指定し、数量を指定していないという判定（例えば、要求が「上位」を指定するが、数を指定していない）（１８６０）に従って、それぞれの意図タイプが曖昧であることを確立することと（１８６２）、数量の数値を推論することと（１８６４）、を更に含む。

【0216】

いくつかの事例では、データソースのメタデータは、データフィールドの意味、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む（１８６６）。

【0217】

いくつかの実装形態では、データソースのデータフィールドのセマンティクス、又はデータセマンティクスは、ユーザが対話しているデータの特定のセットを記載する。これは、フィールド、それらの役割、及び要約統計のリストを含む。いくつかの実装形態では、データセマンティクスは、視覚分析意図システム２３０が意図をより良く推論することを可能にするために、データベースから取り出されるか、又はユーザによってキュレートされ得る。

【0218】

いくつかの事例では、データフィールドタイプは、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む（１８６８）。

【0219】

いくつかの実装形態では、電子デバイス１０２は、以前の要求からのコンテキスト、以前の要求において識別されたデータフィールド、以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する（１８７０）。

【0220】

図１９Ａ～図１９Ｇは、方法１９００のフローチャートを提供する。方法１９００は、プロセスとも称される。

【0221】

方法１９００は、第１のアプリケーション（例えば、クライアントアプリケーション２２４）を実行している電子デバイス１０２において行われる（１９０２）。

【0222】

電子デバイス１０２は、１つ以上のプロセッサ２０２及びメモリ２１６を含む（１９０４）。メモリは、１つ以上のプロセッサ２０２によって実行されるように構成された１つ以上のプログラムを記憶する（１９０６）。いくつかの実装形態では、図４～図１７に示される動作は、メモリ２１６又は他の非一時的なコンピュータ可読記憶媒体に記憶された命令に対応する。コンピュータ可読記憶媒体は、磁気若しくは光ディスク記憶デバイス、フラッシュメモリなどのソリッドステート記憶デバイス、又は他の１つ以上の不揮発性メモリデバイスを含み得る。コンピュータ可読記憶媒体に格納された命令は、ソースコード、アセンブリ言語コード、オブジェクトコード、又は１つ以上のプロセッサによって解釈される他の命令フォーマットのうちの１つ以上を含み得る。方法１８００におけるいくつかの動作は、組み合わされ得、及び／又はいくつかの動作の順序は、変更され得る。

【0223】

電子デバイス１０２は、データソース（例えば、データソース１１０）に向けられた要求を受信する（１９０８）。要求は、１つ以上の意図タイプ（例えば、意図タイプ２２９）を含む（１９１０）。各意図タイプは、データソースに向けられたデータ分析動作の時点定義されたセットから選択される（１９１１）。

【0224】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む（１９１２）。これは、図６に例示されている。

【0225】

いくつかの実装形態では、要求は、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む（１９１４）。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する（１９１５）。

【0226】

要求に応答して（１９１６）、１つ以上の意図タイプの各々について、電子デバイス１０２は、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、要求に従って、それぞれの意図仕様を定式化する（１９１８）。

【0227】

電子デバイス１０２は、それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定する（１９２０）。

【0228】

それぞれの意図タイプが曖昧又は情報不足であるという判定（１９２２）に従って、電子デバイス１０２は、（ｉ）１つ以上のそれぞれのルール、（ｉｉ）データソースのメタデータ、及び（ｉｉｉ）要求において指定されたデータフィールドのメタデータに従って、曖昧な及び／又は情報不足の意図を解決するために情報を推論する（１９２４）。

【0229】

いくつかの実装形態では、データソースのメタデータは、データフィールドの意味、データフィールドに対応するデータフィールドタイプ、データフィールドの統計、データフィールドの導出、及び／又はデータフィールドに対応するデフォルトビンサイズのメタデータを含む（１９２６）。

【0230】

いくつかの事例では、データフィールドタイプは、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む（１９２８）。

【0231】

電子デバイス１０２は、推論された情報に従って、それぞれの意図タイプを更新する（１９３０）。

【0232】

いくつかの実装形態では、方法１９００は、以前の要求からのコンテキスト、以前の要求において識別されたデータフィールド、以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、曖昧な及び／又は情報不足の意図を解決するたに情報を推論すること（１９３２）を更に含む。例えば、ユーザは、データソースのデータテーブルに付加されるコンテンツをキュレートすることができる。いくつかの実装形態では、ユーザはまた、メタデータとして、「このデータフィールドＸＸは、通貨フィールドとして解釈され得る」などの定義を含むことができる。

【0233】

いくつかの実装形態では、電子デバイス１０２は、それぞれの出力仕様を生成する（１９３４）。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択されるそれぞれの推奨されるデータ視覚化タイプを含む（１９３６）。それぞれの出力仕様は、（１）推論された情報を含み、かつ（２）それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む（１９３８）。

【0234】

いくつかの実装形態では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、それぞれの意図タイプのそれぞれの意図仕様に対応するデータプロパティのセットを識別することと（１９４０）、要求がデータプロパティのセットの各データプロパティの属性を指定しているかどうかを判定することと（１９４２）、を更に含む。いくつかの実装形態では、要求がデータプロパティのセット内のデータプロパティの２つ以上の属性を指定しているときに、電子デバイス１０２は、それぞれの意図タイプが曖昧であると判定する（１９４４）。いくつかの実装形態では、要求がデータプロパティのセット内の少なくとも１つのデータプロパティの属性を指定していないときに、電子デバイス１０２は、それぞれの意図タイプが情報不足であると判定する（１９４６）。

【0235】

いくつかの実装では、要求がデータプロパティのセットの各データプロパティについて厳密に１つの属性を指定しているという判定に従って、電子デバイス１０２は、それぞれの意図タイプが完全に指定されていると確立する（１９４８）。

【0236】

いくつかの実装形態では、１つ以上のそれぞれのルールを適用して、それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することは、要求が測定可能な形容詞を指定し（１９５０）、数量を指定していないという判定に従って、電子デバイス１０２は、それぞれの意図タイプが曖昧であると確定する（１９５２）ことを更に含む。電子デバイス１０２は、数量の数値を推論する（１９５４）。

【0237】

いくつかの実装形態では、それぞれの意図タイプは、フォーカス戦略プロパティを有するフォーカス意図である（１９５６）。情報不足の意図を解決するために情報を推論することは、要求が「フィルタ」、「強調表示」、及び「ズーム」からなる群から選択される第１の用語を含まないという判定に従って、デフォルトフォーカス戦略として強調表示戦略を選択すること（１９５８）を更に含む。

【0238】

いくつかの事例では、デフォルト戦略として強調表示戦略を選択することは、データソースのデータテーブルからのデータ行を、データテーブル内のデータフィールドのデータ値に従って、昇順又は降順に並べるソート動作を実行することと（１９６２）、データ値のランキングに基づいて指定された数のデータ値を強調表示する強調表示動作を実行することと（１９６４）、を更に含む。

【0239】

いくつかの実装形態では、それぞれの意図タイプは、フィールドプロパティを有するフォーカス意図である（１９６６）。情報不足の意図を解決するために情報を推論することは、要求がデータフィールドを指定していないという判定に従って、テキストデータタイプを有し、かつ要求において指定された数量以上のドメインを有するデータフィールドを（例えば、メタデータに基づいて）データソースから選択すること（１９６８）を更に含む。いくつかの実装形態では、ドメインは、要求において指定された数量と同じとすることができる。いくつかの実装形態では、要求において指定された数量がドメインよりも大きい場合、電子デバイス１０２は、要求における数量をドメインのサイズになるように修正することができる。

【0240】

いくつかの実装形態では、それぞれの意図タイプは、フィールドプロパティを有するフォーカス意図である（１９７０）。情報不足の意図を解決するために情報を推論することは、データソースがテキストデータタイプ、及び指定された数量以上のドメインを有するデータフィールドを含まないという判定に従って、ドメインが要求において指定されたデータ値を含むデータフィールドをデータソースから選択すること（１９７２）を更に含む。

【0241】

いくつかの実装形態では、それぞれの意図タイプは、フォーカス意図である（１９７４）。方法１９００は、要求が価格の形容詞を含む（例えば、形容詞が「安い」、「高価」、「最も高価」、「最も安価」、「高価（extravagant）」などを含む）という判定に従って、データソースが通貨フィールドタイプを有するデータフィールドを含むかどうかを（例えば、メタデータに少なくとも部分的に基づいて）判定すること（１９７６）を更に含む。いくつかの実装形態では、データソースが通貨フィールドタイプを有するデータフィールドを含むという判定に従って、電子デバイス１０２は、データフィールドに対してソート動作を実行する（１９７８）。いくつかの実装形態では、データソースが通貨フィールドタイプを有するデータフィールドを含まないという判定（１９８０）に従って、電子デバイス１０２は、データソース内の全ての数値データフィールド（例えば、測定フィールド）を識別する（１９８２）。電子デバイス１０２は、数値データフィールドの各々に対してそれぞれのソート動作を実行する（１９８４）。

【0242】

いくつかの実装形態では、それぞれの意図タイプは、グループ化フィールド及びビンサイズを含むグループ化プロパティを有する配信意図である（１９８６）。情報不足の意図を解決するために情報を推論することは、要求がグループ化フィールドを指定していないという判定（１９８８）に従って、（１）数量依存フィールドタイプ、数量非依存フィールドタイプ、又は通貨フィールドタイプを有するデータソース内の全てのデータフィールドを識別することと（１９９０）、（２）識別されたデータフィールドの各々をグループ化フィールドの推論された情報として指定することと（１９９２）、を更に含む。

【0243】

いくつかの事例では、要求がビンサイズを指定しているという判定に従って、電子デバイス１０２は、メタデータ内のビンサイズ情報を、指定されたビンサイズに置き換える（１９９４）。

【0244】

いくつかの実装形態では、意図タイプは、測定データフィールド及び日付データフィールドを含む傾向プロパティを有する傾向意図である（１９９６）。情報不足の意図を解決するために情報を推論することは、要求が測定データフィールドを含まないという判定（１９９８）に従って、（１）データソース内の全ての数量依存フィールドを識別することと（１９１００）、（２）数量依存フィールドの各々を測定データフィールドの推論された情報として指定することと（１９１０２）、を更に含む。いくつかの実装形態では、情報不足の意図を解決するために情報を推論することは、要求が時間フィールドタイプを有するデータフィールドを含まないという判定（１９１０４）に従って、（１）データソース内の全ての時間データフィールドを識別することと（１９１０６）、（２）時間データフィールドの各々を日付データフィールドの推論された情報として指定することと（１９１０８）、を更に含む。

【0245】

いくつかの実装形態では、意図タイプは、２つの数値データフィールドを相関させるための相関意図である（１９１１０）。情報不足の意図を解決するために情報を推論することは、（１）要求が１つの数値データフィールドのみを指定しているときに、データソースからの全ての数値データフィールドから第２のデータフィールドの使用を推論することと（１９１１２）、（２）要求が数値データフィールドを指定していないときに、データソースからの全ての数値データフィールドから第１のデータフィールド及び第２のデータフィールドの使用を推論することと（１９１１４）、を更に含む。

【0246】

図２０Ａ～図２０Ｆは、方法２０００のフローチャートを提供する。方法２０００は、プロセスとも称される。

【0247】

方法２０００は、第１のアプリケーション（例えば、クライアントアプリケーション２２４）を実行している電子デバイス１０２において行われる（２００２）。

【0248】

電子デバイス１０２は、１つ以上のプロセッサ２０２及びメモリ２１６を含む（２００４）。メモリは、１つ以上のプロセッサ２０２によって実行されるように構成された１つ以上のプログラムを記憶する（２００６）。いくつかの実装形態では、図４～図１７に示される動作は、メモリ２１６又は他の非一時的なコンピュータ可読記憶媒体に記憶された命令に対応する。コンピュータ可読記憶媒体は、磁気若しくは光ディスク記憶デバイス、フラッシュメモリなどのソリッドステート記憶デバイス、又は他の１つ以上の不揮発性メモリデバイスを含み得る。コンピュータ可読記憶媒体に格納された命令は、ソースコード、アセンブリ言語コード、オブジェクトコード、又は１つ以上のプロセッサによって解釈される他の命令フォーマットのうちの１つ以上を含み得る。方法１８００におけるいくつかの動作は、組み合わされ得、及び／又はいくつかの動作の順序は、変更され得る。

【0249】

電子デバイスは、電子デバイスと通信可能に接続されたサーバシステム（例えば、サーバシステム３００）から、第１のアプリケーションを含む複数のアプリケーションにわたって実行するように構成されている視覚分析意図ライブラリ（例えば、視覚分析意図ライブラリ３２３）をダウンロードする（２００８）。

【0250】

電子デバイス１０２は、電子デバイスが第１のアプリケーションが実行していることに基づいて、電子デバイス上で実行するように視覚分析意図ライブラリを設定する（２０１０）。

【0251】

設定後、電子デバイス１０２は、データソースに向けられた要求を受信する（２０１２）。要求は、１つ以上の意図タイプを含む（２０１４）。意図タイプの各々は、データソースに向けられたデータ分析動作の事前定義されたセットから選択される（２０１５）。

【0252】

いくつかの実装形態では、１つ以上の意図タイプは、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む（２０１６）。

【0253】

要求はまた、１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性を含む（２０１８）。１つ以上の事前定義された属性の各々は、それぞれの意図タイプのそれぞれのデータ分析動作を制限する（２０１９）。

【0254】

要求に従って、１つ以上の意図タイプの各々について、電子デバイス１０２は、それぞれの１つ以上の事前定義された属性に従って、かつ要求において指定されたデータソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、視覚分析意図ライブラリに従って、それぞれの意図仕様を定式化する（２０２０）。

【0255】

いくつかの実装形態では、電子デバイスは、第１のデバイスタイプを有する。いくつかの実装形態では、視覚分析意図ライブラリは、第１のデバイスタイプを含む複数のデバイスタイプにわたって実行するように構成されている。

【0256】

いくつかの実装形態では、意図タイプの各々について、それぞれの意図仕様を定式化した後、電子デバイス１０２は、視覚分析意図ライブラリに従って、それぞれの出力仕様を生成する（２０２２）。それぞれの出力仕様は、データソースの、データ視覚化タイプの事前定義されたセットから選択されたそれぞれの推奨されるデータ視覚化タイプを含む（２０２４）。それぞれの出力仕様はまた、それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータを含む（２０２６）。

【0257】

いくつかの実装形態では、１つ以上のそれぞれのデータ視覚化パラメータは、データ整形情報、符号化情報、及び／又は意図仕様に対応する識別子を含む（２０２８）。

【0258】

いくつかの実装形態では、１つ以上の意図タイプの各々についてそれぞれの出力仕様を生成した後、電子デバイス１０２は、（ｉ）１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、要求に応答してデータ分析を視覚的にレンダリングする（２０３０）。

【0259】

いくつかの実装形態では、要求に応答してデータ分析を視覚的にレンダリングすることは、第１のデバイスタイプを有する電子デバイス１０２に更に従う（２０３２）。例えば、いくつかの実装形態では、要求に応答してデータ分析を視覚的にレンダリングすることは、ディスプレイ画面を有する電子デバイス、若しくはディスプレイ画面のサイズ）、又はオーディオ入力及び出力デバイスなどの周辺機器に更に従う。

【0260】

いくつかの事例では、１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様は、第１の意図タイプに対応し、かつ推論された情報を有する第１の出力仕様を含む（２０３４）。データ分析を視覚的にレンダリングすることは、第１のアプリケーションにおいて推論された情報を表示すること（２０３６）を更に含む。

【0261】

いくつかの実装形態では、電子デバイス１０２は、推論された情報を、要求に含まれる情報と視覚的に区別される方式で表示する。いくつかの実装形態では、推論された情報を表示することは、推論されたデータフィールドの識別を表示することを含む。いくつかの実装形態では、推論された情報を表示することは、要求内の用語内の用語がどのように解釈されたかの説明を提供することを含むことができる。

【0262】

いくつかの事例では、電子デバイス１０２は、推論された情報が修正されることを可能にするデータウィジェット（例えば、図１６Ｅのデータウィジェット１６１８）を表示する（２０３８）。電子デバイス１０２は、データウィジェットとのユーザ対話を受信する（２０４０）。ユーザ対話に応答して（２０４２）、電子デバイス１０２は、第１の意図仕様を編集する（２０４４）。電子デバイス１０２は、編集された第１の意図仕様に従って、第１の出力仕様を更新する（２０４６）。電子デバイス１０２は、更新された第１の出力仕様及び第１のアプリケーション及び／又は電子デバイスの設定パラメータに従って、更新されたデータ分析を生成し（２０４８）、視覚的にレンダリングする。

【0263】

いくつかの実装形態では、電子デバイス１０２は、音声アシスタントデバイス（例えば、ディスプレイ画面を含まない図１の音声アシスタントデバイス１０２－３、又はディスプレイ画面１７００を含む図１７の音声アシスタントデバイス）である（２０５０）。方法２０００は、それぞれの出力仕様を生成した後、それぞれの出力仕様をそれぞれの口語的応答に変換することと（２０５４）、それぞれの口語的応答を出力することと（２０５６）、を更に含む。

【0264】

例えば、図１７Ｃは、「最も高価な品種を私に見せてください。」というユーザ要求に応答して、電子デバイスが、出力仕様をそれぞれの口語的応答に変換し、「最も高価な品種は、カベルネ・ソーヴィニョンです。」という口語的応答１７１０を出力することを示す。

【0265】

いくつかの実装形態では、口語的応答は、視覚化を言語で記載する応答を含むことができる。いくつかの実装形態では、口頭的応答は、要求内の曖昧な用語がどのように推論されたかを口語的に記載する応答を含むことができる。

【0266】

いくつかの事例では、それぞれの出力仕様は、推論された情報を含む（２０５８）。それぞれの口語的応答を出力することは、推論された情報の口語的説明（例えば、説明、明確化など）を出力すること（２０６０）を含む

【0267】

いくつかの実装形態では、応答を出力した後、音声アシスタントデバイスは、推論された情報がユーザ要求と一致することを明確にするか又は確認するために、フォローアップ質問をユーザに明示することができる。

【0268】

いくつかの実装形態では、第１のアプリケーションは、グラフィカルユーザインターフェースを含む（２０６２）。方法２０００は、グラフィカルユーザインターフェースを介して、１つ以上の意図タイプの識別を含め、要求を受信すること（２０６４）を更に含む。

【0269】

例えば、図１４Ａ～図１４Ｊに示すように、第１のアプリケーション２２４は、グラフィカルユーザインターフェース１４００を含む。方法は、グラフィカルユーザインターフェース１４００を介して、１つ以上の意図タイプ１４０８の識別を含め、要求を受信することを更に含む。

【0270】

いくつかの事例では、電子デバイス１０２は、それぞれの出力仕様に従って、それぞれのデータ視覚化を生成する（２０６６）。電子デバイス１０２は、グラフィカルユーザインターフェース上にデータ視覚化を表示する（２０６８）。これは、図１４Ｄ、図１４Ｅ、図１４Ｆ、及び図１４Ｈに例示されている。

【0271】

いくつかの実装形態では、第１のアプリケーションは、メッセージングアプリケーションである（２０７０）。方法２０００は、それぞれの出力仕様を生成した後（２０７２）、（１）視覚的仕様をテキスト出力に変換することと（２０７４）、（２）メッセージングアプリケーションにおいてテキスト出力を表示することと（２０７６）、を更に含む。

【0272】

例えば、いくつかの実装形態では、第１のアプリケーションは、図１のチャットアプリケーション１０６又は図１５及び図１６のＳｌａｃｋｂｏｔアプリケーションなどのメッセージングアプリケーションである。方法は、それぞれの出力仕様を生成した後、視覚的仕様を、図１６Ｅのテキスト出力１６１２又は図１６Ｇのテキスト出力１６２２などのテキスト出力に変換することを更に含む。方法はまた、メッセージングアプリケーションのユーザインターフェース１６００にテキスト出力を表示すること、を含む。

【0273】

いくつかの実装形態では、要求を受信する前に、電子デバイス１０２は自然言語コマンドを受信する（２０７８）。電子デバイス１０２は、要求を形成するための視覚的意図仕様言語に従って、自然言語コマンドを（例えば、パーサ２２６又はパーサ１５０６を使用して）解析する（２０８０）。

【0274】

いくつかの事例では、電子デバイス１０２は、解析に従って、１つ以上の意図タイプが「時間」という用語又は「傾向」という用語を有する自然言語コマンドに従って、傾向意図タイプを含むと判定する（２０８２）。

【0275】

いくつかの事例では、電子デバイス１０２は、解析に従って、１つ以上の意図タイプが、測定可能な形容詞（例えば、「最高」、「最低」、「高い」、「低い」、又は「最も高価な」などの形容詞）を有する自然言語コマンドに従って、フォーカス意図タイプを含むと判定する（２０８４）。いくつかの実装形態では、測定可能な形容詞は、数値的に数量化され、ランク付けされ、又は特定の順序で並べられ得る属性を有する形容詞を指す。

【0276】

いくつかの実装形態では、方法２０００は、第１の意図仕様を要求において定式化された意図仕様と相関させることによって、以前の要求から定式化された第１の意図仕様を更新すること（２０８６）を更に含む。

【0277】

いくつかの事例では、以前の要求は、データソースからの第１のデータフィールドを含む（２０８８）。要求は、第１のデータフィールドをデータソースからの第２のデータフィールドで置換すること（２０９０）を指定する。第１の意図仕様を更新することは、第１のデータフィールドを第２のデータフィールドで置き換えること（２０９２）を含む。

【0278】

上記で識別された実行可能モジュール、アプリケーション、又は手順のセットの各々は、前述のメモリデバイスのうちの１つ以上に記憶され得、上述された機能を行うための命令のセットに対応する。上記の識別されたモジュール又はプログラム（すなわち、命令のセット）は、別個のソフトウェアプログラム、手順、又はモジュールとして実装される必要はなく、したがって、これらのモジュールの様々なサブセットは、様々な実装形態において組み合わされるか、又は別様に再配置され得る。いくつかの実装形態では、メモリ２１６は、上記で識別されたモジュール及びデータ構造のサブセットを記憶する。更に、メモリ２１６は、上述されていない追加のモジュール又はデータ構造を記憶し得る。

【0279】

本明細書において本発明の説明で使用される用語は、特定の実装形態を説明することのみを目的としたものであり、本発明を限定することを意図するものではない。本発明の説明及び添付の特許請求の範囲において使用される場合、単数形「ａ」、「ａｎ」及び「ｔｈｅ」は、文脈がそうでないことを明確に示さない限り、複数形も含むことが意図される。本明細書で使用される場合、「及び／又は」という用語は、関連する列挙された項目のうちの１つ以上のありとあらゆる可能な組み合わせを指し、それらを包含することも理解されよう。「含む（comprises）」及び／又は「含んでいる（comprising）」という用語は、本明細書で使用されたとき、述べられた特徴、ステップ、動作、要素、及び／又は構成要素の存在を指定するが、１つ以上の他の特徴、ステップ、動作、要素、構成要素、及び／又はそれらのグループの存在又は追加を排除しないことが更に理解されよう。

【0280】

前述の説明は、説明の目的で、特定の実装形態を参照して記載されている。しかしながら、上記の例示的な考察は、網羅的であること、又は本発明を開示された厳密な形態に限定することを意図するものではない。上記の教示を考慮して、多くの修正及び変形が可能である。実装形態は、本発明の原理及びその実用的な用途を最良に説明するために選択及び記載され、これにより他の当業者は、本発明と、企図される特定の使用に適した様々な修正を伴う様々な実装形態とを最大限に活用することが可能となる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14A】

【図14B】

【図14C】

【図14D】

【図14E】

【図14F】

【図14G】

【図14H】

【図14I】

【図14J】

【図15】

【図16A】

【図16B】

【図16C】

【図16D】

【図16E】

【図16F】

【図16G】

【図17A】

【図17B】

【図17C】

【図18A】

【図18B】

【図18C】

【図18D】

【図18E】

【図19A】

【図19B】

【図19C】

【図19D】

【図19E】

【図19F】

【図19G】

【図20A】

【図20B】

【図20C】

【図20D】

【図20E】

【図20F】

【手続補正書】

【提出日】2023-11-09

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

方法であって、
第１のアプリケーションを実行している電子デバイスであって、１つ以上のプロセッサと、前記１つ以上のプロセッサによる実行のための１つ以上のプログラムを記憶するメモリと、を含む、電子デバイスにおいて、
データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記１つ以上の意図タイプの各々について、
それぞれの前記１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記要求に従って前記それぞれの意図仕様を定式化することと、
それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むことと、を含む、方法。

【請求項2】

前記１つ以上の意図タイプが、フォーカス意図、傾向意図、相関意図、分布意図、地理的意図、符号化意図、及びフィールド意図のうちの１つ以上を含む、請求項１に記載の方法。

【請求項3】

前記要求が、前記傾向意図を含み、
前記それぞれの意図仕様を定式化することが、前記データソースから、（ｉ）測定データフィールド、及び（ｉｉ）時間を表す第１のデータフィールドを識別すること、
を含む、請求項２に記載の方法。

【請求項4】

前記要求が、前記傾向意図を含み、
前記それぞれの意図仕様を定式化することが、前記データソースから、（ｉ）全ての測定データフィールド、及び（ｉｉ）時間を表す全てのデータフィールドを識別すること、
を含む、請求項２に記載の方法。

【請求項5】

前記要求が、前記フォーカス意図を含み、
前記それぞれの意図仕様を定式化することが、
前記データソースからのデータ行をある順序で並べるソート動作と、
前記データソースからの前記データ行を、特定のデータフィールドが特定のデータ値を有するデータ行のサブセットにフィルタリングするフィルタ動作と、
前記データソースからのデータ行のサブセットを強調表示する強調表示動作と、のうちの１つ以上を実行すること、
を含む、請求項２に記載の方法。

【請求項6】

前記要求が、前記符号化意図を含み、第１のデータフィールドを指定し、
前記それぞれの出力仕様を生成することが、
前記第１のデータフィールドに従って、前記データ視覚化をレンダリングすることを指定する符号化パラメータを追加すること、又は
前記第１のデータフィールドに従って、前記データ視覚化の既存の符号化パラメータをオーバーライドすること、
を含む、請求項２に記載の方法。

【請求項7】

前記要求が、前記フィールド意図を含み、第１のデータフィールドを指定し、
それぞれの出力仕様を生成することは、前記第１のデータフィールドによって課されるセマンティック制約に基づいて１つ以上の推論ルールを適用すること、
を含む、請求項２に記載の方法。

【請求項8】

前記１つ以上の意図タイプの各々について、
前記それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することと、
前記それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、（ｉ）前記１つ以上のそれぞれのルール、（ｉｉ）前記データソースのメタデータ、及び（ｉｉｉ）前記要求において指定されたデータフィールドのメタデータに従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することと、
推論された前記情報に従って、前記１つ以上のそれぞれのデータ視覚化パラメータを更新することと、
を更に含む、請求項１に記載の方法。

【請求項9】

前記１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することが、
前記要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、
前記それぞれの意図タイプが曖昧であると確立することと、
前記数量の数値を推論することと、を更に含む、請求項８に記載の方法。

【請求項10】

前記データソースの前記メタデータが、データフィールドの意味、前記データフィールドに対応するデータフィールドタイプ、前記データフィールドの統計、前記データフィールドの導出、及び／又は前記データフィールドに対応するデフォルトビンサイズのメタデータを含む、請求項８に記載の方法。

【請求項11】

前記データフィールドタイプが、カテゴリフィールドタイプ、時間フィールドタイプ、地理的フィールドタイプ、通貨フィールドタイプ、数量依存フィールドタイプ、数量非依存フィールドタイプ、緯度フィールドタイプ、及び経度フィールドタイプのうちの１つ以上を含む、請求項１０に記載の方法。

【請求項12】

以前の要求からのコンテキスト、前記以前の要求において識別されたデータフィールド、前記以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することを更に含む、請求項８に記載の方法。

【請求項13】

前記１つ以上のそれぞれのデータ視覚化パラメータが、データ整形情報、符号化情報、及び／又は前記意図仕様に対応する識別子を含む、請求項１に記載の方法。

【請求項14】

前記１つ以上の意図タイプの各々について前記それぞれの出力仕様を生成した後、（ｉ）前記１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、及び（ｉｉ）前記第１のアプリケーション及び／又は前記電子デバイスの設定パラメータに従って、前記要求に応答してデータ分析を視覚的にレンダリングすること、
を更に含む、請求項１に記載の方法。

【請求項15】

電子デバイスであって、
１つ以上のプロセッサと、
前記１つ以上のプロセッサに結合されたメモリと、を備え、前記メモリが、前記１つ以上のプロセッサによって実行されるように構成された１つ以上のプログラムを記憶しており、前記１つ以上のプログラムが、
データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記１つ以上の意図タイプの各々について、
それぞれの前記１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記要求に従って前記それぞれの意図仕様を定式化することと、
それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むことと、を行うための命令を含む、電子デバイス。

【請求項16】

前記１つ以上のプログラムが、
前記１つ以上の意図タイプの各々について、
前記それぞれの意図タイプに対応する１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定することと、
前記それぞれの意図タイプが曖昧又は情報不足であるという判定に従って、（ｉ）前記１つ以上のそれぞれのルール、（ｉｉ）前記データソースのメタデータ、及び（ｉｉｉ）前記要求において指定されたデータフィールドのメタデータに従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論することと、
推論された前記情報に従って、前記１つ以上のそれぞれのデータ視覚化パラメータを更新することと、を行うための命令を更に含む、請求項１５に記載の電子デバイス。

【請求項17】

前記１つ以上のそれぞれのルールを適用して、前記それぞれの意図タイプが曖昧及び／又は情報不足であるかどうかを判定するための前記命令が、
前記要求が測定可能な形容詞を指定し、数量を指定していないという判定に従って、
前記それぞれの意図タイプが曖昧であると確立することと、
前記数量の数値を推論することと、を行うための命令を更に含む、請求項１６に記載の電子デバイス。

【請求項18】

前記１つ以上のプログラムが、以前の要求からのコンテキスト、前記以前の要求において識別されたデータフィールド、前記以前の要求において識別された属性、ユーザ提供解釈、及び／又はユーザ提供定義に従って、前記曖昧な及び／又は情報不足の意図を解決するために情報を推論するための命令を更に含む、請求項１６に記載の電子デバイス。

【請求項19】

前記１つ以上のプログラムが、
前記１つ以上の意図タイプの各々について前記それぞれの出力仕様を生成した後、（ｉ）前記１つ以上の意図タイプのうちの１つの少なくとも１つの出力仕様、並びに（ｉｉ）第１のアプリケーション及び／又は前記電子デバイスの設定パラメータに従って、前記要求に応答してデータ分析を視覚的にレンダリングするための命令を更に含む、請求項１５に記載の電子デバイス。

【請求項20】

１つ以上のプログラムを記憶する非一時的なコンピュータ可読記憶媒体であって、前記１つ以上のプログラムは、電子デバイスによって実行されるときに、前記電子デバイスに、
データソースに向けられた要求を受信することであって、前記要求が、（ｉ）各意図タイプが前記データソースに向けられたデータ分析動作の事前定義されたセットから選択される１つ以上の意図タイプと、（ｉｉ）前記１つ以上の意図タイプに関連付けられた１つ以上の事前定義された属性であって、前記１つ以上の事前定義された属性の各々がそれぞれの意図タイプのそれぞれのデータ分析動作を制限する、１つ以上の事前定義された属性と、を含むことと、
前記１つ以上の意図タイプの各々について、
それぞれの前記１つ以上の事前定義された属性に従って、かつ前記要求において指定された前記データソースからのデータフィールドに従って、それぞれの意図仕様の１つ以上のそれぞれのプロパティを判定することを含む、前記要求に従って前記それぞれの意図仕様を定式化することと、
それぞれの出力仕様を生成することであって、前記それぞれの出力仕様が、（ｉ）前記データソースの、データ視覚化タイプの事前定義されたセットから選択される、それぞれの推奨されるデータ視覚化タイプと、（ｉｉ）前記それぞれの推奨されるデータ視覚化タイプのデータ視覚化をどのようにレンダリングするかを指定する１つ以上のそれぞれのデータ視覚化パラメータと、を含むことと、を含む動作を行わせる命令を含む、非一時的なコンピュータ可読記憶媒体。

【国際調査報告】