特表 2024-513771 自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法及び装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-03-27

(54)【発明の名称】自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法及び装置

(51)【国際特許分類】

   G09G 5/02 20060101AFI20240319BHJP

   G09G 5/00 20060101ALI20240319BHJP

   B60K 35/22 20240101ALI20240319BHJP

   B60K 35/28 20240101ALI20240319BHJP

   H04N 5/66 20060101ALI20240319BHJP

   H04N 1/409 20060101ALI20240319BHJP

【ＦＩ】

G09G5/02 B

G09G5/00 510A

G09G5/00 550H

G09G5/00 555D

G09G5/00 555A

G09G5/00 X

B60K35/22

B60K35/28

H04N5/66 Z

H04N1/409

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023558675

(86)(22)【出願日】2022-03-16

(85)【翻訳文提出日】2023-09-22

(86)【国際出願番号】 EP2022056824

(87)【国際公開番号】W WO2022207323

(87)【国際公開日】2022-10-06

(31)【優先権主張番号】102021001673.4

(32)【優先日】2021-03-30

(33)【優先権主張国・地域又は機関】DE

(81)【指定国・地域】

(71)【出願人】

【識別番号】598051819

【氏名又は名称】メルセデス・ベンツ グループ アクチェンゲゼルシャフト

【氏名又は名称原語表記】Ｍｅｒｃｅｄｅｓ－Ｂｅｎｚ Ｇｒｏｕｐ ＡＧ

【住所又は居所原語表記】Ｍｅｒｃｅｄｅｓｓｔｒａｓｓｅ １２０，７０３７２ Ｓｔｕｔｔｇａｒｔ，Ｇｅｒｍａｎｙ

(74)【代理人】

【識別番号】100101856

【弁理士】

【氏名又は名称】赤澤 日出夫

(72)【発明者】

【氏名】アックスマン，ベンヤミン

(72)【発明者】

【氏名】イーヴン，クリストフ

(72)【発明者】

【氏名】クロイツァー，マークス

(72)【発明者】

【氏名】プロス，アヒム

【テーマコード（参考）】

3D344

5C058

5C077

5C182

【Ｆターム（参考）】

3D344AA19

3D344AB01

3D344AD01

3D344AD13

5C058BA35

5C077MP08

5C182AB25

5C182AC02

5C182AC03

5C182AC43

5C182BC03

5C182BC11

5C182BC29

5C182CA01

5C182CA02

5C182CA32

5C182CB03

5C182CC24

5C182DA14

5C182DA52

5C182DA70

(57)【要約】

本発明は、送信ユニットと、受信ユニットと、受信ユニットによって生成された画像を表示するための表示ユニットと、を含む、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法に関する。本発明によれば、安全性等級がより高い画像は、安全性等級がより低い画像よりも修正が少なく、画像強調処理によって表示装置上に表示される。本方法では、表示される画像の安全性等級に関する情報は、送信ユニットを使用して、ピクセルマトリクスを介して表示される画像の少なくとも１つのピクセルの色ビット情報における分類バイナリコードによって、データストリームに導入されて、画像強調処理中に画像データを出力する送信ユニットに関連する画像エンハンサにおいて、すべての安全性等級の画像に対して、画像の変化を制御する。

【特許請求の範囲】

【請求項1】

送信ユニット（１１０）と、受信ユニット（１２０）と、前記受信ユニット（１２０）によって出力された画像を表示するための表示ユニット（１３０）と、を含む、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法であって、
安全性等級がより高い画像は、安全性等級がより低い画像よりも画像強調処理による修正が少なく、前記表示ユニット（１３０）上に表示され、
表示される画像の前記安全性等級に関する情報は、前記送信ユニット（１１０）を使用して、ピクセルマトリクスを介して表示される前記画像の少なくとも１つのピクセルの色ビット情報における分類バイナリコードによって、データストリームに導入されて、前記画像強調処理中に前記画像データが出力される前記受信ユニット（１２０）に関連する画像エンハンサ（１２５）において、すべての安全性等級の画像に対して、前記画像の変化を制御する、方法。

【請求項2】

少なくとも１つのピクセルの分類バイナリコードは、前記ピクセルを含む前記表示される画像が前記表示ユニット（１３０）に送信される前に、前記画像データを出力する前記受信ユニット（１２０）によって受信された前記データストリームから読み取られ、前記少なくとも１つのピクセルのバイナリコードに応じて、画像強調の実行に関する決定が行われることを特徴とする、請求項１に記載の方法。

【請求項3】

前記少なくとも１つのピクセルの前記読み取られたバイナリコードは、前記バイナリコードの前にピクセルに本来格納されていた色値ビットによって置き換えられ、前記表示される画像は、前記画像強調処理において関連する分類バイナリコードに対応して修正されることを特徴とする、請求項１又は２に記載の方法。

【請求項4】

前記出力される画像が前記関連するバイナリコードによって指定される前記安全性等級に応じて出力されるかどうか、前記画像強調処理後に出力される、前記表示される画像の前記色値ビットを検証することを特徴とする、請求項１～３の少なくとも一項に記載の方法。

【請求項5】

ＲＧＢ情報の所定の色における前記バイナリコードのために、１ビットが予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項6】

前記バイナリコードのために、１ピクセルは、前記ＲＧＢ情報の各色に予約されていること特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項7】

前記バイナリコードのために、所定の色のビットは、各データフレームにおいて交互に予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項8】

前記バイナリコードのために、ＬＳＢ情報が、所定の色深度を持つフレームに追加で提供されるか、又はビットが、色エンコーディング、好適には、ＲＧＢＡエンコーディング若しくはＲＧＢＷエンコーディングの補助チャネル内に予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項9】

データストリームを介して通信する、画像データを生成する送信ユニット（１１０）及び画像データを出力する受信ユニット（１２０）を備える、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための装置であって、画像データを出力する前記出力ユニット（１２０）は、前記画像を表示する表示ユニット（１３０）と接続されている、装置において、
前記画像データを生成する前記送信ユニット（１１０）は、前記画像の修正を制御するために、すべての安全性等級の画像に対する画像データを出力する前記受信ユニット（１２０）に関連付けられた画像エンハンサ（１２５）における画像強調処理中、前記表示される画像データの安全性等級に関する追加情報を、分類バイナリコードを前記画像データのピクセルに導入する、装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、自動車の表示装置上にＡＳＩＬ関連データを信頼性高く表示するための方法であって、本方法では、安全性等級がより高い表示は、安全性等級がより低い表示よりも、表示ユニットによって画像強調処理により修正が少なく表示される、方法、及び本方法を実行するための装置に関する。

【背景技術】

【0002】

特許文献１は、安全性の低い装置を使用するＡＳＩＬ Ｄ情報の表示を開示している。その場合、異なる安全性等級（なし、又はＡＳＩＬ Ａ、Ｂ、Ｃ、Ｄ）を持つデータは、等級がより高い表示が、等級がより低い表示と比較して、表示ユニットによって（輝度、色の最適化などの）修正が少なく又は修正されずに表示されるように様々に処理される。

【0003】

特許文献２には、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法が記載されている。その場合、安全性が重要なデータと安全性が重要ではないデータとは分離され、互いに独立して処理されて、安全性が重要ではない表示要素及び安全性が重要な表示要素を生成する。その場合、安全性が重要な表示要素は、表示装置を使用して表示された状態で、安全性が重要ではない表示要素にグラフィック的にオーバーレイして表示される。その場合、安全性が重要な画像データと安全性が重要ではない画像データとは、互いに分離することができ、追加的に又は代替的に、互いに独立して読み込むことができる。更に、安全性が重要な表示要素と安全性が重要ではない表示要素とは、互いに分離することができ、追加的に又は代替的に互いに独立して出力することができる。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】独国特許出願公開第１０２０１９２０５２３７号明細書

【特許文献2】独国特許出願公開第１０２０１５２００２９２号明細書

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明の課題は、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法及び装置を提供することであり、表示装置は、表示される画像の正確な表示内容への推論を可能にする正確かつ詳細な情報を提供する。

【課題を解決するための手段】

【0006】

本発明は、独立請求項の特徴から明らかとなる。有利な発展形態及び構成は、従属請求項の主題である。本発明の更なる特徴、適用可能性及び利点は、以下の説明及び図に示される本発明の例示的な実施例の説明から明らかになる。

【0007】

本課題は、冒頭で説明した方法を用いて、表示される画像の安全性等級に関する情報が、ピクセルマトリクスを介して表示される画像の少なくとも１つのピクセルの色ビット情報のバイナリコードによって、データストリームに導入されて、画像の安全性関連の表示の変更を画像強調処理中に制御することによって、すなわち最小化又は完全に防止することによって解決される。バイナリコードによって、ピクセルレベルでの色情報を超える情報が提供される。それにより、それぞれ転送されたピクセルの種類又は性質についての推論が可能であり、それにより、画像の正確な表示内容を逆にたどることができる。ピクセルレベルでのこのメタデータ情報は、オリジナルの画像信号を品質低下させることなく、ビットレベルでの画像情報に更に追加される。ピクセルに分解された画像データは、最初に生成された方法に従ってユーザに表示される。

【0008】

有利には、バイナリーコードは、画像データ生成ユニットによって色ビット情報に追加され、画像データ生成ユニットは、色ビット情報のデータストリームを、画像データ出力ユニットに送信する。レンダリングユニットにおいて、画像データは、レンダリングされ、分類バイナリコードは、画像データの安全性等級に対応して導入される。画像作成時にレンダリングユニットにおいてできるだけ早く画像データを分類することにより、画像データ出力ユニット及び関連する画像エンハンサによる画像データの誤った取り扱いが回避される。画像エンハンサとは、先行技術から公知のソフトウェアモジュール又はソフトウェアモジュールを備えた装置と理解されたく、その装置は、画像強調技術を使用して、表示装置に表示される前に、画像を、例えば、色、コントラスト、明度、シャープネス、解像度、ノイズなどに関して最適化する。画像という用語は、本開示の意味において、表示装置上のすべての種類の表示、すなわち、例えば、シンボル、画像、テキスト又はアニメーションを含む。

【0009】

一実施形態では、分類バイナリコードを含む少なくとも１つのピクセルは、表示される画像が表示ユニットに送信される前に、画像データを生成かつ出力するユニットによって受信されたデータストリームから読み取られ、少なくとも１つのピクセルの分類バイナリコードに応じて、画像強調の実行の種類に関する決定は、表示ユニットへの送信前に行われ、それに対応して変換される。画像データ及びバイナリコードに関する情報を分離することにより、バイナリコードを正確に評価することができ、表示する画像の安全性等級を、画像を表示する前に正確に特定することができる。

【0010】

一変形例では、少なくとも１つのピクセルの読み出された分類バイナリコードは、バイナリコードの前にピクセルに元々保存されていた色値ビットによって置き換えられ、表示される画像は、画像内の関連する分類バイナリコードに対応して画像強調処理において修正される。画像エンハンサが分類バイナリコードを読み取った後に画像強調処理を実行する方法に関する指示を受信した後、画像強調処理の前に、分類バイナリコードは、バイナリコードが導入される前にピクセルに保存されていた元の色値ビットによって置き換えられる。有利には、画像エンハンサに供給される画像の色値は、分類バイナリコードが導入される前の画像の色値に正確に相当する。安全関連「ＡＳＩＬ」として等級分類された色ピクセルは、品質を損なうことなく、定義された安全性等級に関する要件を満たし、重要ではないと分類されたピクセルは、画像強調処理において完全に最適化することができる。

【0011】

一実施形態では、画像強調処理後に出力される、表示される画像の色値ビットは、出力される画像が関連するバイナリコードによって規定された安全性等級に応じて出力されるかどうかが検証される。このために、バイナリコードが導入される前にレンダリングユニットによって生成された画像が、表示される画像と比較される。特に、ＡＳＩＬ等級が高い画像について、すなわち、バイナリコードが導入される前の画像と、受信ユニットによって表示ユニットに送信された画像とが一致する必要がある画像について比較することによって、エラー又は偏差を確実に検知して、必要に応じて安全警告を出力したり、又は是正措置を講じることができる。これにより、表示される画像の安全性等級を再度検証するという冗長性が実現される。

【0012】

更なる実施形態では、ＲＧＢ情報の特定の色におけるバイナリコードのために１ビットが予約される。これにより、２つの分類状態が生じる。

【0013】

代替形態では、ＲＧＢ情報の各色の１ピクセルがバイナリコードのために予約される。これにより、分類状態の数が増加する。

【0014】

新しいデータフレームごとにバイナリコード用にＲＧＢ色のビット情報で１ビットを交互に予約すると、分類状態の数を更に増やすことが可能になる。更に、画像データ出力ユニットによって、色値のビット情報の間で分類ビットが変化しなくなるとすぐに、画像のフリーズが認識される。

【0015】

あるいは、バイナリコード用に指定された色深度のフレームに、追加のＬＳＢ情報が提供される。これにより、色ごとに任意の数のピクセルを追加することが可能になり、これにより、高度な分類の多様性が可能になる。

【0016】

更なる実施形態では、色符号化、すなわち、例えば、透明性用に提供されたＲＧＢＡ色符号化のビット又は白色成分用に提供されたＲＧＢＷ符号化のビットのうちの１つ以上の追加チャネルが、ＡＳＩＬ分類バイナリコード用にメタ情報として使用される。補助チャネルは、複数のビット又は１バイトを含む。原則として、それぞれ色符号化を追加するＡチャネル（アルファ）及びＷチャネルは、Ｒ、Ｇ及びＢの３つの色バイトをそれぞれバイナリコードが導入される４番目のバイトで補完する。ＲＧＢデータは、例えば、レンダリングユニットとして構成された送信ユニットから画像処理かつ画像出力する受信ユニットまでのデータチャネルにおいて送信するデータ量を低減するために、圧縮フォーマットで送信される。有利には、補助チャネルに対して、すなわち、Ａチャネル又はＷチャネルのバイトに対しても圧縮は行われないので、圧縮エラー又は解凍エラーによる誤った分類バイナリコードの出力が排除されている。

【0017】

本発明の更なる態様は、データストリームを介して通信する、画像データ生成ユニットと、画像データ出力ユニットとを備える、自動車の表示装置上にＡＳＩＬ関連データを安全に表示する装置であって、画像データ出力ユニットは、表示ユニットに接続されている、装置に関する。画像データ生成ユニットは、表示される画像データの安全性等級に関する追加情報を、画像データの少なくとも１つのピクセルの色ビット情報における分類バイナリコードによってデータストリームに導入し、それにより画像データを安全性等級に関して分類して、画像データ出力ユニットによる画像強調処理中に安全性関連の画像表示の変化を制御し、画像強調処理が最小限に抑えるか又は完全に防止する。

【0018】

更なる利点、特徴及び詳細は、必要に応じて図面を参照しながら、少なくとも１つの実施例が詳細に説明される以下の説明から明らかになる。説明かつ／又は図示された特徴は、それ自体で、又は任意の意味のある組み合わせで、場合によっては特許請求の範囲とは無関係に、本発明の主題を形成することができ、特に、１つ以上の別個の出願の主題とすることもできる。同一の部品、類似する部品及び／又は機能的に同一の部品には、同じ参照符号が付けられている。

【図面の簡単な説明】

【0019】

【図1】本発明による装置の概略図である。

【図2】受信ユニットにおける２段階の機能安全プロセスを備えた図１による装置を用いた本発明による方法の実施例の図である。

【図3】受信ユニットにおけるフローチャートの実施例の図である。

【図4】受信ユニットにおいてＡＳＩＬ分類ピクセルを処理するための実施例の図である。

【図5】受信ユニットにおいて非ＡＳＩＬ分類ピクセルを処理するための実施例の図である。

【図6】分類ビットを導入して、続いて元の画像データのビットと置き換える実施例の図である。

【発明を実施するための形態】

【0020】

図１には、本発明による装置の概略図が示されている。装置１００は、送信ユニット１１０及び受信ユニット１２０から構成され、これらは両方とも、受信ユニット１２０の一部である表示ユニット１３０に表示される画像データを処理する。生データから画像を生成するためのレンダリングユニットとなる送信ユニット１１０は、第１レイヤー１４０を含み、第１レイヤー１４０では、重要ではないと分類されたピクセルレイヤーが画像に導入される。安全なユニットとして形成されている第２レイヤー１５０では、安全性が重要であると分類された画像要素が画像に導入される。画像の生成に使用されるピクセルレイヤーの重要性は、例えば、画像が自動運転用のシステムなどのＡＳＩＬ関連システムの表示をレンダリングするか、又はエンターテインメントシステムなどの非安全性システムの表示をレンダリングするかにより異なる。送信ユニット１１０側で完全にレンダリングされ、かつピクセルレベルで分類された画像コンテンツは、シリアライザ１６０において圧縮データストリームに形成され、圧縮データストリームは、ビデオ伝送路１７０を介して受信ユニット１２０に送信され、受信ユニット１２０においてデシリアライザ１８０を使用して元通りに解凍されて、画像情報に変換される。受信ユニット１２０は、送信された画像情報をコントローラ１９０を使用して受け取る。安全性等級への分類を可能にするピクセルコンテンツマッピングによって決定される、画像情報のピクセルが安全性が重要である（ＡＳＩＬ関連）か又は重要ではないかに応じて、表示される画像は、画像エンハンサ（１２５）において、すなわち、画像強調処理において修正されるか又は修正されずに、受信ユニット１２０の表示ユニット１３０に供給される。

【0021】

図２は、受信ユニット１２０における２段階の機能安全プロセスを備えた図１による装置１００を用いた本発明による方法の実施例を示す。機能１では、可視化関連の内部情報及び外部情報、好適には車両情報が、送信ユニット１１０に収集される。可視化関連パラメータは、画像合成のための画像情報、この場合はピクセルカラーコンテンツに関連付けられる。次に、機能２では画像情報を、画像情報の安全性等級を分類するバイナリコードを含むメタデータと、画像情報に対してピクセル精度で類型化するためにマージ、すなわち、レンダリングする。レンダリングされた画像情報が送信ユニット１１０から受信ユニット１２０への送信（機能３）後、機能４は、表示される画像のデータストリームをピクセルごとに表示情報（色及び位置）とメタデータ（分類及び位置）とに分離する。その場合、メタデータは、安全性等級におけるＡＳＩＬ関連の分類に関するピクセル精度の情報を提供し、表示情報は、ピクセルの色を決定する。第１の機能安全性等級５では、各ピクセルの等級分類の検証が行われる。検知されたＡＳＩＬ関連のメタデータに応答して、システムでは、例えば、ルックアップテーブルで導出される事前定義されたパラメータに従って、画像強調プロセス及び表示プロセスに対するルールを含む対応するフィードバックが行われる。これらのルールは、画像強調プロセス及び表示ユニット１３０に供給される。これらのルール及び機能安全等級５の結果に応じて、機能６では、ピクセル分類の関数として適用されるルールに従って、画像強調プロセスが各ピクセルを処理する。機能７によれば、目的の表示に対するピクセルベースの修正又は最適化に適用されるルールが遵守されているかどうかが検証される。この場合、受信ユニットによって受信された値は、表示ユニットに出力される値と、例えば、ハッシュ値アルゴリズムを用いてピクセルごとに比較される。値が一致する場合、機能８において、画像情報は、表示ユニットで可視化するためにドライバに転送される。

【0022】

上述したように、ビデオ伝送路１７０上で送信ユニット１１０と受信ユニット１２０との間で送信される各フレームごとに、送信ユニット１１０側では画像のピクセルに、それがどのタイプのピクセルであるかに関する情報を追加する。これは、ＲＧＢピクセル分類マッピングによって行われる。ＲＧＢピクセルレベルでの分類は、提供されるビット数に依存し、ＲＧＢマトリクスの各ＬＳＢデータ（最下位ビットデータ）で実行される。分類オプションは、８ビットＲＧＢピクセルを用いて示されるものとする。

【0023】

【表1】

【0024】

以下では、ＲＧＢに基づくピクセルフォーマット方式のいくつかの可能な形式を例示的に説明する。

【0025】

１．青色ＢにおけるＬＳＢピクセルの予約により２つの分類状態が生じる
Ｒ＝８，Ｇ=８，Ｂ=８ → Ｒ＝８，Ｇ＝８，Ｂ＝７＋ｘ
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢｘ

【0026】

２．色ごとの１ビットの予約により、８つの分類状態が生じる
Ｒ＝８，Ｇ＝８，Ｂ＝８ → Ｒ＝７＋ｘ，Ｇ＝７＋ｘ，Ｂ＝７＋ｘ
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲｘ ＧＧＧＧＧＧＧｘ ＢＢＢＢＢＢＢｘ

【0027】

３．データフレームごとに１ビットの色を予約することにより、３つのデータフレームにわたって８つの分類状態が生じる。これは、顕著な画像損失を伴わない、フレームベースの反復ピクセル分類である。フレームごとに、分類ビットは、赤、緑及び青のビットコーディングの間で交互に切り替わる。

【0028】

データフレーム１
Ｒ＝８，Ｇ＝８，Ｂ＝８ → Ｒ＝７＋ｘ，Ｇ＝８，Ｂ＝８
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲｘ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ

【0029】

データフレーム２：
Ｒ＝８，Ｇ＝８，Ｂ＝８ → Ｒ＝８，Ｇ＝７＋ｘ，Ｂ＝８
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧｘ ＢＢＢＢＢＢＢＢ

【0030】

データフレーム３：
Ｒ＝８，Ｇ＝８，Ｂ＝８ → Ｒ＝８，Ｇ＝８，Ｂ＝７＋ｘ
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢｘ

【0031】

４．１０ビット色深度を有する個々の画像にＬＳＢ情報を追加提供することにより、分類状態１～Ｎが生じる
Ｒ＝１０，Ｇ＝１０，Ｂ＝１０ → Ｒ＝１０－ｎ＋ｎ＊ｘ，Ｇ＝１０－ｎ＋ｎ＊ｘ，Ｂ＝１０－ｎ＋ｎ＊ｘ；
ｎ＝３の場合
ＲＲＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢＢＢ → ＲＲＲＲＲＲＲＲｘｘｘ ＧＧＧＧＧＧＧＧｘｘｘ ＢＢＢＢＢＢＢＢｘｘｘ

【0032】

５．追加チャネル（アルファ及びホワイト）におけるコーディングによるメタ情報の追加提供
Ｒ＝８，Ｇ＝８，Ｂ＝８，Ａ＝８ → Ｒ＝８，Ｇ＝８，Ｂ＝８，Ａ＝（Ａ＋ｘ）＝８
ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ ａａａａａａａａ → ＲＲＲＲＲＲＲＲ ＧＧＧＧＧＧＧＧ ＢＢＢＢＢＢＢＢ ａａａａｘｘｘｘ
提示された分類のすべての事例において、ｘは、ＬＳＢフォーマット用の予約ビットを指す。

【0033】

図３は、受信ユニット１２０のコントローラ１９０におけるフローチャートの実施例を示す。ブロック２００において、画像全体がマトリクスピクセルデータの形式で読み込まれる。ブロック２１０において、個々のピクセルが抽出され、その個々のピクセルは、ブロック２２０において検証プロセスで読み取られる。次に、ブロック２３０において、個々のピクセルについて、そのピクセルがどのピクセルタイプであるかが検証される。分類バイナリコードに基づいて安全性が重要なピクセル内容が検知された場合、ブロック２４０に移行し、ブロック２４０において、ピクセル操作の制限基準が定義される。これは、例えば、変更に対する保護であり得る。次にプロセスはブロック２５０に進み、ブロック２５０では、ブロック２３０において重要ではない内容が検知されたピクセルのデータも転送される。このブロック２５０において、検証されたピクセルが重要ではないピクセル内容を含む場合、画像データの画像強調が行われる。安全性が重要な内容を含むピクセルがブロック２３０において検知された場合、画像データは、許可された制限基準の範囲内のみに限定されて処理される。プロセスがブロック２５０からブロック２６０に移行し、ブロック２６０において、適用可能な検証基準への準拠が検証され、この検証基準は、同様にブロック２４０において安全性が重要な内容を有するピクセルについて定義される。ブロック２７０において、ピクセル分類は、画像データから除去され、その画像データは、ブロック２８０において元の単一ピクセルデータによって置き換えられる。

【0034】

受信ユニット１２０においてＡＳＩＬ分類ピクセルを処理するための実施例が図４に示されている。機能３では、既に説明したように、画像データが送信ユニット１１０から受信ユニット１２０に送信され、画像データは、受信ユニット１２０において画像全体のピクセルマトリクスに変換される。機能４では、画像全体がピクセルごとに分離される。以下では、例えば、表示情報（色００００００００ ００００００００ ０００００００１）及びメタデータ（分類１）として含む青色の値の８ビット目（Ｂ８）について考察する。第１の機能安全性レベル５では、ビットＢ８の分類の検証が実行される。評価の結果は、分類レベル１＝ＡＳＩＬピクセルである。機能ステップ６において、分類ビットは、元の画像情報に属する一時的に保存されたビットによって交換される、すなわち、この場合、ビットＢ８が置き換えられる、すなわち、そのビットは、１から画像値０にリセットされる。更に、機能６では、ＲＧＢ画像情報のピクセルを処理するための画像強調処理は、ＡＳＩＬピクセル分類によって与えられるパラメータに応じて適用される基準に従って実行される。これによれば、バイナリコード１は、ビットＢ８に関連付けられた画像のピクセル画像強調を行ってはいけないことを意味する（第１の機能安全性レベル５）。機能７では、第１の機能安全レベル５で規定されたピクセルベースの修正又は最適化の基準が遵守されているかどうかの検証が行われる。結果が肯定的である場合、画像データは、機能８でドライバに転送され、表示ユニット１３０において可視化される。結果が否定的である場合、緊急対策が講じられ、例えば、画像強調の機能がオフにされるか、代替値が形成されるか、又は車両ユーザに故障に関するメッセージが出力される。

【0035】

図５には、受信ユニット１２０において非ＡＳＩＬに分類されたピクセルを処理するための実施例が示されている。その場合、機能３及び機能４は、図４に関連して説明した機能に相当する。この場合、両方の値が０であるため、分類ビットを元の画像の色値ビットと交換する必要はない。ただし、この場合、分類ビットＢ８は、安全性が重要ではない内容を指す分類ビット情報として０を含み、そのため、画像強調処理中にビットＢ８に関連付けられた画像への変更が許可されおり、これは、機能６でもまた行われる。ここでも、第１の機能安全レベル５で規定された基準は、機能７により検証される。ピクセルＢ８を含む画像は、重要ではない内容を有するため、追加の検証基準は存在しないため、ピクセル値は、機能６で変更された形式、すなわち、画像強調された形式で表示ユニット１３０に出力される。

【0036】

図６において詳細に示されるように、メタ情報は、最後の画像又は前の画像の、メタ情報の元の色情報によって置き換えられ、これは、特に、コントローラ１９０内にピクセル当たりの可能な変更された色値ビットの数をバッファリングすることによって行われる。本実施例では、分類ビットがＲＧＢ色値のビット情報に交互に書き込まれる、上記３．に記載したピクセルフォーマット方式に基づいて、バッファリングを説明する。機能２又は関連する方法ステップにおける図２に関する説明によれば、ＡＳＩＬ分類ビット１は、分類バイナリコードとして青のＬＳＢビットに符号化されている。符号化前に有効であった元のピクセルの青のＬＳＢ色値ビットは、矢印で示すように、赤及び緑の色値ビットとともにバッファリングされている（図６ａを参照）。分類ビットは、そのビットに関連付けられたピクセル又は画像のＡＳＩＬ関連性を定義するために、図４の機能５に対応して読み出される。機能６では、分類ビットは、色値についてバッファリングされたビットによって再度上書きされる、すなわち、図６ｂに示すように、分類ビットは、値０に置き換えられる。したがって符号化前に存在する元のピクセル又はピクセルに関連付けられた元の画像は、読み出された分類ビットに対応して画像エンハンサにおいて処理される、すなわち、この場合、強調なしで出力される。したがって、赤又は青の色で符号化された分類ビットは、画像エンハンサに送信される前に、元の画像のバッファリングされたＬＳＢビットに置き換えられる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【手続補正書】

【提出日】2023-09-22

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

送信ユニット（１１０）と、受信ユニット（１２０）と、前記受信ユニット（１２０）によって出力された画像を表示するための表示ユニット（１３０）と、を含む、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための方法であって、
安全性等級がより高い画像は、安全性等級がより低い画像よりも画像強調処理による修正が少なく、前記表示ユニット（１３０）上に表示され、
表示される画像の前記安全性等級に関する情報は、前記送信ユニット（１１０）を使用して、ピクセルマトリクスを介して表示される前記画像の少なくとも１つのピクセルの色ビット情報における分類バイナリコードによって、データストリームに導入されて、前記画像強調処理中に前記画像データが出力される前記受信ユニット（１２０）に関連する画像エンハンサ（１２５）において、すべての安全性等級の画像に対して、前記画像の変化を制御する、方法。

【請求項2】

少なくとも１つのピクセルの分類バイナリコードは、前記ピクセルを含む前記表示される画像が前記表示ユニット（１３０）に送信される前に、前記画像データを出力する前記受信ユニット（１２０）によって受信された前記データストリームから読み取られ、前記少なくとも１つのピクセルのバイナリコードに応じて、画像強調の実行に関する決定が行われることを特徴とする、請求項１に記載の方法。

【請求項3】

前記少なくとも１つのピクセルの前記読み取られたバイナリコードは、前記バイナリコードの前にピクセルに本来格納されていた色値ビットによって置き換えられ、前記表示される画像は、前記画像強調処理において関連する分類バイナリコードに対応して修正されることを特徴とする、請求項１又は２に記載の方法。

【請求項4】

前記出力される画像が前記関連するバイナリコードによって指定される前記安全性等級に応じて出力されるかどうか、前記画像強調処理後に出力される、前記表示される画像の前記色値ビットを検証することを特徴とする、請求項１～３の少なくとも一項に記載の方法。

【請求項5】

ＲＧＢ情報の所定の色における前記バイナリコードのために、１ビットが予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項6】

前記バイナリコードのために、１ビットは、前記ＲＧＢ情報の各色に予約されていること特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項7】

前記バイナリコードのために、所定の色のビットは、データフレームにおいて交互に予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項8】

前記バイナリコードのために、追加のＬＳＢデータ（Ｌｅａｓｔ Ｓｉｇｎｉｆｉｃａｎｔ Ｂｉｔ Ｄａｔａ、最下位ビットデータ）が、所定の色深度を持つフレームに追加で提供されるか、又はビットが、色エンコーディング、好適には、ＲＧＢＡエンコーディング若しくはＲＧＢＷエンコーディングの補助チャネル内に予約されることを特徴とする、請求項１～４の少なくとも一項に記載の方法。

【請求項9】

データストリームを介して通信する、画像データを生成する送信ユニット（１１０）及び画像データを出力する受信ユニット（１２０）と、前記受信ユニット（１２０）によって出力された前記画像を表示するための表示ユニット（１３０）とを備える、自動車の表示装置上にＡＳＩＬ関連データを安全に表示するための装置であって、
前記画像データを生成する前記送信ユニット（１１０）は、前記画像の修正を制御するために、すべての安全性等級の画像に対する画像データを出力する前記受信ユニット（１２０）に関連付けられた画像エンハンサ（１２５）における画像強調処理中、前記表示される画像データの安全性等級に関する追加情報を、分類バイナリコードとして前記画像データのピクセルに導入するように構成されている、装置。

【国際調査報告】