特許7027023画像処理装置、画像処理プログラム、画像処理方法および画像処理システム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-02-18
(45)【発行日】2022-03-01
(54)【発明の名称】画像処理装置、画像処理プログラム、画像処理方法および画像処理システム
(51)【国際特許分類】
G06T 3/40 20060101AFI20220221BHJP
A63F 13/52 20140101ALI20220221BHJP
【ＦＩ】
G06T3/40 705
A63F13/52
【請求項の数】
12
(21)【出願番号】P 2020044948
(22)【出願日】2020-03-16
(65)【公開番号】P2021149117
(43)【公開日】2021-09-27
【審査請求日】2020-10-15
(73)【特許権者】
【識別番号】000233778
【氏名又は名称】任天堂株式会社
(74)【代理人】
【識別番号】100090181
【弁理士】
【氏名又は名称】山田 義人
(74)【代理人】
【識別番号】100130269
【弁理士】
【氏名又は名称】石原 盛規
(72)【発明者】
【氏名】伊藤 邦朗
(72)【発明者】
【氏名】川瀬 智広
【審査官】佐藤 実
(56)【参考文献】
【文献】特開２００２－０２７２３７（ＪＰ，Ａ）
【文献】特開２００９－０９４９０２（ＪＰ，Ａ）
【文献】国際公開第２００５／０９６６２４（ＷＯ，Ａ１）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｔ １／００ － ７／９０
Ａ６３Ｆ １３／５２
(57)【特許請求の範囲】
【請求項1】
元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、
前記中間画像生成部は、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理装置。
【請求項2】
前記出力画像生成部は、前面側の第１中間画像データと後面側の第２中間画像データとを重ね合わせることで前記出力画像データを生成するものであり、前記第１中間画像データの一部の前記第２ピクセルの色は、前記元画像データの一部の前記第１ピクセルの色に対して透明度が反映された色である、請求項１記載の画像処理装置。
【請求項3】
前記元画像データの第１ピクセルに用いられる各色に対応する第１カラーパレットと、当該各色に対して１または複数の異なる所定の透明度が設定された１または複数の第２カラーパレットを含むルックアップテーブルを記憶する記憶手段をさらに備え、前記出力画像生成部は、前記第１中間画像データおよび前記第２中間画像データのピクセルの色の少なくとも一部を、前記第２カラーパレットを参照して取得する、請求項２記載の画像処理装置。
【請求項4】
前記所定の透明度がα（０＜α＜１）に相当する第２カラーパレットを備える一方、１－αの透明度に相当する第２カラーパレットを備えず、前記第１中間画像データの前記第２ピクセルの第１の色に１－αの透明度を反映した第２の色と、前記第２中間画像データの前記第２ピクセルの第３の色が混合されることによって生成される第４の色と実質的に等しい第５の色が、当該第１中間画像データの前記第２ピクセルの前記第３の色にαの透明度を反映した第６の色と、当該第２中間画像の前記第２ピクセルの前記第１の色が混合されることによって生成される、請求項３記載の画像処理装置。
【請求項5】
元画像データを、横方向に５個の第１ピクセル毎に分割した場合の各第１領域について、横方向に６個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、
前記５個の第１ピクセルの色が左から順に、ａ色、ｂ色、ｃ色、ｄ色およびｅ色である場合に、
前記中間画像生成部は、生成する前記２つの中間画像データの各々の前記第２領域に対応する６個の前記第２ピクセルにおいて、
両端に位置する前記第２ピクセルの色を、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの前記ａ色および前記ｅ色と一致するように設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、左から順に、（ｂ，ａ）、（ｃ，ｂ）、（ｃ，ｄ）、（ｄ，ｅ）の組毎に所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理装置。
【請求項6】
前記２つの中間画像データのうちの第１中間画像データの前記各第２領域における両端の前記第２ピクセルを除いた前記第２ピクセルの色は、それぞれ、透明度が８０％であるｂ色、透明度が６０％であるｃ色、透明度が６０％であるｃ色、および、透明度が８０％であるｄ色であり、前記２つの中間画像のうちの第２中間画像データの両端の前記第２ピクセルを除いた前記第２ピクセルの色は、透明度が２０％であるａ色、透明度が４０％であるｂ色、透明度が４０％であるｄ色および透明度が２０％であるｅ色である、請求項５記載の画像形成装置。
【請求項7】
前記２つの中間画像データのうちの前面側の前記第１中間画像データの前記各第２領域における両端の前記第２ピクセルの色は、透明度が０％であるａ色およびｅ色である、請求項６記載の画像形成装置。
【請求項8】
元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、
前記中間画像生成部は、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を、当該２つの第１ピクセルの各々と当該第２ピクセルが対応する部分の面積の比率で混合するように決定して、
前記２つの中間画像データを生成する、画像処理装置。
【請求項9】
元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成するプロセッサと、前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成するマイクロコントローラと、
前記マイクロコントローラによって生成された出力画像データを出力する表示部を備え、
前記プロセッサは、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理装置。
【請求項10】
２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置のピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部を備える画像処理装置の画像処理プログラムであって、前記画像処理装置のプロセッサに、
元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い前記２つの中間画像データを生成する中間画像生成ステップと、
中間画像生成ステップにおいて生成した前記２つの中間画像データを前記出力画像生成部に出力する出力ステップを実行させ、
前記中間画像生成ステップは、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理プログラム。
【請求項11】
画像処理方法であって、（ａ）元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が元画像データよりも多い２つの中間画像データを生成するステップと、
（ｂ）前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成するステップを含み、
前記ステップ（ａ）は、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理方法。
【請求項12】
表示装置と、元画像データを、横方向にＭピクセルの領域毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が前記元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、
前記２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の前記第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、
前記出力画像生成部によって生成された出力画像データを前記表示装置に出力する出力部と、を備え、
前記中間画像生成部は、生成する前記２つの中間画像データの各々の前記第２領域において、
両端に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、前記元画像データの前記第１領域の両端の前記第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、
両端の間に位置する前記第２ピクセルについては、生成する前記２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、前記元画像データの前記第１領域内で隣り合った２つの前記第１ピクセルの色を所定の比率に応じた透明度で設定して、
前記２つの中間画像データを生成する、画像処理システム。
【発明の詳細な説明】
【技術分野】
【0001】
この発明は画像処理装置、画像処理プログラム、画像処理方法および画像処理システムに関し、特にたとえば、画像を表示装置に表示する、画像処理装置、画像処理プログラム、画像処理方法および画像処理システムに関する。
【背景技術】
【0002】
過去のデバイスで遊ばれていたゲームアプリケーションを、近年のデバイスを用いて遊べるようにすることが行われている。この種の画像処理装置の一例が特許文献１に開示されている。この特許文献１のゲーム画像処理装置では、低解像度のゲーム画像を高解像度のゲーム画像に変換する場合に、ジャギー補間処理および色強調処理を施すことにより、低解像度の従来のゲーム画像の見た目を向上させている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２００７－２９６２１８
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかし、過去のデバイスでは、ブラウン管のテレビジョン受像機のようなモニタに接続されてゲームをプレイするのが一般的であり、ゲーム画像を構成するピクセルは、縦に比べて横が長い。
【0005】
一方で、近年のデバイスでは、ゲーム画像を構成するピクセルは、縦横比が実質的に等しく設定されていることが多い。このため、従来のデバイスで遊ばれていたゲームソフトにおける各ピクセルの指定色をそのまま近年の表示装置に表示すると、従来のテレビで表示されていた画像に比べて、全体的に縦長の表示となってしまう。その結果、当時と同じ映像体験を得たいと考えるユーザは違和感を覚える可能性があった。
【0006】
つまり、背景技術のゲーム画像処理装置では、ジャギーを低減するに留まっており、改善の余地があった。
【0007】
それゆえに、この発明の主たる目的は、新規な、画像処理装置、画像処理プログラム、画像処理方法および画像処理システムを提供することである。
【0008】
また、この発明の他の目的は、ユーザが違和感を覚えることを出来る限り防止することができる、画像処理装置、画像処理プログラム、画像処理方法および画像処理システムを提供することである。
【課題を解決するための手段】
【0009】
第１の発明は、元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、中間画像生成部は、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を所定の比率に応じた透明度で設定して、２つの中間画像データを生成する、画像処理装置である。
【0010】
第２の発明は、第１の発明に従属し、出力画像生成部は、前面側の第１中間画像データと後面側の第２中間画像データとを重ね合わせることで出力画像データを生成するものであり、第１中間画像データの一部の第２ピクセルの色は、元画像データの一部の第１ピクセルの色に対して透明度が反映された色である。
【0011】
第３の発明は、第２の発明に従属し、元画像データの第１ピクセルに用いられる各色に対応する第１カラーパレットと、当該各色に対して１または複数の異なる所定の透明度が設定された１または複数の第２カラーパレットを含むルックアップテーブルを記憶する記憶手段をさらに備え、出力画像生成部は、第１中間画像データおよび第２中間画像データのピクセルの色の少なくとも一部を、第２カラーパレットを参照して取得する。
【0012】
第４の発明は、第３の発明に従属し、所定の透明度がα（０＜α＜１）に相当する第２カラーパレットを備える一方、１－αの透明度に相当する第２カラーパレットを備えず、第１中間画像データの第２ピクセルの第１の色に１－αの透明度を反映した第２の色と、第２中間画像データの第２ピクセルの第３の色が混合されることによって生成される第４の色と実質的に等しい第５の色が、当該第１中間画像データの第２ピクセルの第３の色にαの透明度を反映した第６の色と、当該第２中間画像の第２ピクセルの第１の色が混合されることによって生成される。
【0013】
第５の発明は、元画像データを、横方向に５個の第１ピクセル毎に分割した場合の各第１領域について、横方向に６個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、５個の第１ピクセルの色が左から順に、ａ色、ｂ色、ｃ色、ｄ色およびｅ色である場合に、中間画像生成部は、生成する２つの中間画像データの各々の第２領域に対応する６個の第２ピクセルにおいて、両端に位置する第２ピクセルの色を、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルのａ色およびｅ色と一致するように設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、左から順に、（ｂ，ａ）、（ｃ，ｂ）、（ｃ，ｄ）、（ｄ，ｅ）の組毎に所定の比率に応じた透明度で設定して、２つの中間画像データを生成する、画像処理装置である。
【0014】
第６の発明は、第５の発明に従属し、２つの中間画像データのうちの第１中間画像データの各第２領域における両端の第２ピクセルを除いた第２ピクセルの色は、それぞれ、透明度が８０％であるｂ色、透明度が６０％であるｃ色、透明度が６０％であるｃ色、および、透明度が８０％であるｄ色であり、２つの中間画像のうちの第２中間画像データの両端の第２ピクセルを除いた第２ピクセルの色は、透明度が２０％であるａ色、透明度が４０％であるｂ色、透明度が４０％であるｄ色および透明度が２０％であるｅ色である。
【0015】
第７の発明は、第６の発明に従属し、２つの中間画像データのうちの前面側の第１中間画像データの各第２領域における両端の第２ピクセルの色は、透明度が０％であるａ色およびｅ色である。
【0016】
第８の発明は、元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、を備え、中間画像生成部は、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を、当該２つの第１ピクセルの各々と当該第２ピクセルが対応する部分の面積の比率で混合するように決定して、２つの中間画像データを生成する、画像処理装置である。
【0017】
第９の発明は、元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成するプロセッサと、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成するマイクロコントローラと、マイクロコントローラによって生成された出力画像データを出力する表示部を備え、プロセッサは、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を所定の比率に応じた透明度で設定して、２つの中間画像データを生成する、画像処理装置である。
【0018】
第１０の発明は、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置のピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部を備える画像処理装置の画像処理プログラムであって、画像処理装置のプロセッサに、元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成ステップと、中間画像生成ステップにおいて生成した２つの中間画像データを出力画像生成部に出力する出力ステップを実行させ、中間画像生成ステップは、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を所定の比率に応じた透明度で設定して、２つの中間画像データを生成する、画像処理プログラムである。
【0019】
第１１の発明は、画像処理方法であって、（ａ）元画像データを、横方向にＭ個の第１ピクセル毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮ個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成するステップと、（ｂ）２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成するステップを含み、ステップ（ａ）は、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を所定の比率に応じた透明度で設定して、２つの中間画像データを生成する、画像処理方法である。
【0020】
第１２の発明は、表示装置と、元画像データを、横方向にＭピクセルの領域毎に分割した場合の各第１領域について、横方向にＭ個よりも多いＮピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データよりも多い２つの中間画像データを生成する中間画像生成部と、２つの中間画像データから、それぞれの当該中間画像データにおいて対応する位置の第２ピクセル同士の色を混合することで、１つの出力画像データを生成する出力画像生成部と、出力画像生成部によって生成された出力画像データを表示装置に出力する出力部と、を備え、中間画像生成部は、生成する２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように、当該第２ピクセルの色を設定し、両端の間に位置する第２ピクセルについては、生成する２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を、元画像データの第１領域内で隣り合った２つの第１ピクセルの色を所定の比率に応じた透明度で設定して、２つの中間画像データを生成する。
【発明の効果】
【0021】
この発明によれば、ユーザが見た目の違和感を覚えることを出来る限り防止することができる。
【図面の簡単な説明】
【0022】
【図2】図２（Ａ）は横長のピクセルで描画される画像の一部の限定しない一例を示す図であり、図２（Ｂ）は図２（Ａ）に示す画像を同じ数の正方形のピクセルで描画した場合の画像を示す図であり、図２（Ｃ）は図２（Ａ）に示す画像を個数を増やして正方形のピクセルで描画した場合の画像を示す図である。
【発明を実施するための形態】
【0023】
図１を参照して、限定しない一例の情報処理装置１０は、画像処理装置としても機能し、プロセッサ２０を含む。プロセッサ２０は、ＲＡＭ２２、フラッシュメモリ２４、通信モジュール２６、入力装置３０、表示制御装置３２およびＤ／Ａ変換器３４に接続される。また、表示制御装置３２は、表示装置３６に接続され、Ｄ／Ａ変換器３４は、スピーカ３８に接続される。
【0024】
プロセッサ２０は、情報処理装置１０の全体制御を司る。具体的には、プロセッサ２０は、ＣＰＵやＧＰＵの機能を内蔵したＳｏＣ(System-on-a-chip)である。ＲＡＭ２２は、揮発性の記憶媒体であり、プロセッサ２０のワークメモリやバッファメモリとして使用される。また、ＲＡＭ２２は、情報処理装置１０のメインメモリであり、２つのフレームバッファ３０４ｃおよび３０４ｄを有している（図５参照）。この実施例では、フォアグラウンド（以下、「ＦＧ」という）側のフレームバッファ３０４ｃおよびバックグラウンド（以下、「ＢＧ」という）側のフレームバッファ３０４ｄが設けられる。
【0025】
ただし、フレームバッファ３０４ｃおよびフレームバッファ３０４ｄは、ＲＡＭ２２以外の１つのメモリに設けられてもよいし、ＲＡＭ２２以外の２つのメモリに分けて設けられてもよい。
【0026】
フラッシュメモリ２４は、不揮発性の記憶媒体であり、各種のアプリケーションのプログラムを記憶したり、各種のデータを記憶（セーブ）したりするために使用される。たとえば、アプリケーションのプログラムおよび必要なデータは、フラッシュメモリ２４から読み出され、ＲＡＭ２２に記憶される。
【0027】
ただし、アプリケーションとしては、ゲームのアプリケーション、マニュアル表示のアプリケーション、文書作成のアプリケーション、電子メールのアプリケーション、お絵描きのアプリケーション、文字練習用のアプリケーション、語学トレーニングのアプリケーション、学習のアプリケーションなどの様々な情報処理についてのアプリケーションが該当する。
【0028】
通信モジュール２６は、たとえばＩＥＥＥ８０２．１１．ｂ／ｇの規格に準拠した方式により、無線ＬＡＮに接続する機能を有する。したがって、たとえば、プロセッサ２０は、通信モジュール２６を用いて、アクセスポイントおよびインターネットなどのネットワークを介して他の機器との間でデータを送受信する。たとえば、他の機器は、コンピュータまたは他の情報処理装置１０などである。ただし、通信モジュール２６を用いて、他の機器との間で直接データを送受信することもできる。
【0029】
ただし、通信モジュール２６は、イーサネット（登録商標）の通信方式を利用して、有線ＬＡＮに接続する機能を有していてもよい。
【0030】
また、通信モジュール２６は、無線ＬＡＮまたは有線ＬＡＮに接続する機能とは異なり、近距離無線通信を行う機能を有していてもよい。具体的には、通信モジュール２６は、所定の通信方式（たとえば、赤外線方式）により、他の機器との間で赤外線信号の送受信を行う機能、および所定の通信プロトコル（たとえば、マルチリンクプロトコル）に従って、同種の情報処理装置との間で無線通信を行う機能を有する。この場合、たとえば、プロセッサ２０は、通信モジュール２６を用いて、同種の他の情報処理装置との間でデータを直接送受信することができる。ただし、赤外線方式の近距離無線通信に代えて、Bluetooth（登録商標）のような他の無線通信規格に従う近距離無線通信を行うようにしてもよい。
【0031】
入力装置３０は、たとえば、情報処理装置１０に設けられるタッチパネルおよび各種の押しボタンまたはスイッチであり、ユーザによって、メニュー選択およびアプリケーションにおける指示などの各種の操作に用いられる。ただし、入力装置３０としては、コンピュータマウスのようなタッチパネル以外のポインティングデバイス、マイクおよびカメラなどの入力手段が、タッチパネルおよび押しボタンに代えて、または、タッチパネルおよび押しボタンとともに設けられてもよい。また、タッチパネルは、後述する表示装置３６に組み込まれる場合もある。この場合の表示装置３６は、タッチパネル一体型表示装置である。
【0032】
表示制御装置３２は、プロセッサ２０の指示の下、表示装置３６に各種の表示画像を表示するために使用される。表示画像としては、上記のアプリケーションを実行している場合の実行画面または上記のアプリケーションの実行を選択する場合のメニュー画面などが該当する。表示制御装置３２の詳細については後述する。表示装置３６は、典型的には、ＬＣＤである。ただし、表示装置３６としては、有機ＥＬディスプレイを用いることもできる。
【0033】
Ｄ／Ａ変換器３４は、プロセッサ２０から与えられる音声データをアナログの音声信号に変換し、スピーカ３８に出力する。ただし、音声データは、キャラクタないしオブジェクトが発生する音、効果音、ＢＧＭなどの音楽についてのデータである。
【0034】
なお、図１に示す情報処理装置１０の電気的な構成は単なる一例であり、これに限定される必要はない。たとえば、通信モジュール２６は無くてもよい。
【0035】
このような構成の情報処理装置１０では、従来のゲーム機用のゲームソフト（つまり、ゲームのアプリケーションのプログラム）をエミュレータなどによってそのまま実行したり、ストーリなどの一部を改変したリメイクソフトによってプレイしたりすることができる。
【0036】
従来のゲーム画像処理装置では、低解像度のゲーム画像を高解像度のゲーム画像に変換する場合に、ジャギー補間処理および色強調処理を施すことにより、低解像度の従来のゲーム画像の見た目を向上させている。
【0037】
しかし、従来のゲーム機では、横長のピクセル（以下、「第１ピクセル」という。）でゲーム画像のデータが描画されており、これに対して、近年では、正方形のピクセル（以下、「第２ピクセル」という。）でゲーム画像のデータが描画される場合がある。したがって、上記のように、従来の仮想のゲームのアプリケーションをエミュレータなどによってそのまま実行し、各ピクセルの指定色をそのまま表示装置３６に表示すると、従来のテレビジョン受像機のモニタで表示されていた画像に比べて、ゲーム画像が縦長に表示されてしまう。このため、当時と同じ映像体験を得たいユーザは違和感を覚える虞があった。
【0038】
ただし、この明細書において、「ピクセル」は、デジタル画像を構成する最小単位を意味し、「画素」とも呼ばれる。
【0039】
なお、過去のゲーム機例えばファミリーコンピュータ（登録商標）およびスーパーファミコン（登録商標）などは、従来のテレビジョン受像機のように、ブラウン管（または、陰極線管）を用いたモニタに接続され、このモニタは横長の形状であるため、第１ピクセルでゲーム画像のデータは描画されていた。一例として、従来のゲーム機では、フレームバッファの大きさは、横２５６ピクセル×縦２４０ピクセルである。また、従来のモニタの画面アスペクト比は４：３であり、従来の第１ピクセルのピクセルアスペクト比（「ピクセル比」ともいう）は１．２：１である。
【0040】
ここでは、分かり易く説明するために、ゲームソフトをエミュレーション実行してゲーム画像のデータを描画する場合について説明したが、画像（以下、「元画像」という）データが第１ピクセルで描画されており、この元画像データを第２ピクセルで描画する場合であれば、ゲームソフトおよびゲーム画像に限定される必要はない。
【0041】
ただし、元画像データは、第１ピクセルで描画されていない場合もある。たとえば、元画像データが第２ピクセルで描画されている場合には、後述するようなブレンドの処理は不要である。
【0042】
ここで、図２（Ａ）および図２（Ｂ）を参照しながら、上記のように、ゲーム画像が縦長に表示されてしまう理由について具体的に説明する。図２（Ａ）は第１ピクセルで描画した元画像データの一部を示す図である。図２（Ｂ）は図２（Ａ）に示す元画像データの一部を第２ピクセルで描画した場合の画像を示す図である。
【0043】
上記のとおり、図２（Ａ）に示すピクセルのピクセルアスペクト比は１．２：１であり、図２（Ｂ）に示すピクセルのピクセルアスペクト比は１：１である。また、図２（Ａ）および図２（Ｂ）では、縦方向および横方向に、それぞれ、５個のピクセルが並んでいる。また、この実施例では、分かり易く示すために、第１ピクセルおよび第２ピクセルの縦の長さを同じ長さにしてある。
【0044】
【0045】
図２（Ａ）および図２（Ｂ）を参照して分かるように、元画像データを、第１ピクセルと同じ個数の第２ピクセルでそのまま描画すると、第２ピクセルは第１ピクセルよりも横幅が短いため、第２ピクセルで描画された場合には、第１ピクセルで描画された元画像に比べて縦長に見える。
【0046】
したがって、この実施例では、上記のような不都合を回避するべく、第１ピクセルで描画された元画像データを、第２ピクセルで描画する場合に、横方向において、Ｎ／Ｍ倍の個数の第２ピクセルで描画した２つの中間画像データ（以下、「中間画像データ」という）を生成し、これらを合成する。簡単に言うと、横方向において、第１ピクセルよりも多い数の第２ピクセルを用いて元画像データを描画する。つまり、図２（Ａ）に示す元画像データの一部を第２ピクセルで描画する場合に、図２（Ｃ）に示すように、横方向のピクセルの数が増加される。この実施例では、Ｍ＝５であり、Ｎ＝６である。したがって、Ｎ／Ｍ倍は１．２倍である。また、Ｎ／Ｍ倍は整数倍ではない。整数倍であれば、２つの中間画像データを合成する必要はなく、単に、各第１ピクセルで描画された画像を、横方向に整数倍した個数の第２ピクセルで描画すれば良いからである。
【0047】
ただし、この実施例では、中間画像データは、元画像データに基づいて生成された画像のデータであって、一部の第２ピクセルに、色を混合する場合の所定の比率に応じた透明度が設定された画像のデータである。
【0048】
図３（Ａ）－図３（Ｄ）を参照して、２つの中間画像データを生成し、これらを合成する方法について説明する。図３（Ａ）は、元画像データが描画された第１ピクセルを５個横方向に並べた図であり、図３（Ｂ）は、表示装置３６への出力画像のデータ（以下、「出力画像データ」という）のうち、図３（Ａ）の５個の第１ピクセルに対応する位置の６個の第２ピクセルを示す図であり、図３（Ｃ）はＦＧ側のフレームバッファ３０４ｃに描画された中間画像（以下、「第１中間画像」という）データのうち、図３（Ａ）の５個の第１ピクセルに対応する位置の６個の第２ピクセルを示す図であり、そして、図３（Ｄ）はＢＧ側のフレームバッファ３０４ｄに描画された中間画像（以下、「第２中間画像」という）データのうち、図３（Ａ）の５個の第１ピクセルに対応する位置の６個の第２ピクセルを示す図である。
【0049】
なお、図３（Ｃ）に示す第１中間画像データの６個の第２ピクセルと、図３（Ｄ）に示す第２中間画像データの６個の第２ピクセルは、それぞれ、図３（Ｂ）に示す出力画像データの６個の第２ピクセルと同じ位置のピクセルである。
【0050】
また、フレームバッファ３０４ｃおよび３０４ｄの大きさは、横３０７ピクセル×縦２４０ピクセルであり、この実施例では、第１ピクセルと第２ピクセルの縦の長さを同じにしてあるため、第１ピクセルを用いた場合の従来のフレームバッファと略同じ大きさである。
【0051】
さらに、この実施例では、画像のデータはラスタスキャン方式で描画され、画像の左上から右方向に順次描画され、右端まで描画されると、一列下の段の左端から右方向に順次描画され、このような処理が繰り返し実行される。
【0052】
図３（Ａ）に示すように、５個の第１ピクセルが横方向に並んでおり、各第１ピクセルに記載したａ、ｂ、ｃ、ｄおよびｅは対応する第１ピクセルの色を示す。具体的には、１番目（図３（Ａ）において、左端）の第１ピクセルはａ色であり、２番目の第１ピクセルはｂ色であり、３番目の第１ピクセルはｃ色であり、４番目の第１ピクセルはｄ色であり、そして、５番目（図３（Ａ）において、右端）の第１ピクセルはｅ色である。
【0053】
この実施例では、第１ピクセルで描画された元画像データを第２ピクセルで描画する場合に、上記のとおり、１．２倍の個数の第２ピクセルが用いられる。これは、第１ピクセルのピクセルアスペクト比が１．２：１だからであり、１．２倍の個数の第２ピクセルを用いることにより、横方向にＭ個の第１ピクセル毎に分割した場合の各領域（以下、「第１領域」という）について、横方向にＮ（１．２×Ｍ）個の第２ピクセルとなるように対応する各領域（以下、「第２領域」という）を生成することができるからである。
【0054】
ただし、説明の便宜上、「分割」と表現しているだけであり、実際の処理において、元画像データを分割している訳ではない。
【0055】
【0056】
なお、この実施例において、第１ピクセルで描画された画像と第２ピクセルで描画された画像を仮想的に重ねた場合に、着目する第１ピクセルと重なる位置に配置された第２ピクセルを、「第１ピクセルに対応する位置の第２ピクセル」と呼び、着目する第２ピクセルと重なる位置に配置された第１ピクセルを「第２ピクセルに対応する位置の第１ピクセル」と呼ぶこととする。
【0057】
また、図３（Ａ）および図３（Ｂ）を参照して分かるように、この実施例では、出力画像データは、６個の第２ピクセルのうち、両端（１番目と６番目）の第２ピクセルについては、元画像データの色でそのまま描画される。また、６個の第２ピクセルのうち、両端の第２ピクセルの間の第２ピクセルについては、５個の第１ピクセルのうち、対応する位置において隣接する２つの第１ピクセルの色を所定の比率で混合して描画される。ただし、所定の比率は、２つの第１ピクセルの色の透明度についての比率である。
【0058】
したがって、図３（Ｂ）に示すように、６個の第２ピクセルのうち、１番目（左端）の第２ピクセルはａ色であり、６番目（右端）の第２ピクセルはｅ色である。６個の第２ピクセルのうち、２番目の第２ピクセルはａ色とｂ色を所定の比率Ｐ１で混合した色であり、３番目の第２ピクセルはｂ色とｃ色を所定の比率Ｐ２で混合した色であり、４番目の第２ピクセルはｃ色とｄ色を所定の比率Ｐ３で混合した色であり、５番目の第２ピクセルはｄ色とｅ色を所定の比率Ｐ４で混合した色である。つまり、出力画像データにおいて、６個の第２ピクセルのうち、両端の間に位置する第２ピクセルの色は、左から順に、（ｂ，ａ）、（ｃ，ｂ）、（ｃ，ｄ）、（ｄ，ｅ）の組毎に所定の比率で混合して生成される。
【0059】
所定の比率Ｐ１、Ｐ２、Ｐ３、Ｐ４は、色の配分比率であって、２番目－５番目の第２ピクセルの各々に対応する位置において、隣接する２つの第１ピクセルに重ねた場合に、当該２つの第１ピクセルと当該第２ピクセルが重なる部分の面積の比率で決定される。
【0060】
図３（Ａ）および図３（Ｂ）に示すように、２番目の第２ピクセルは、その全体の面積のうちの２割について１番目の第１ピクセルと重なり、残りの８割について２番目の第１ピクセルと重なる。面積が重なる割合については、図３（Ａ）および図３（Ｂ）の間に示してある。したがって、所定の比率Ｐ１は、１対４であり、２番目の第２ピクセルは０．２ａ＋０．８ｂ色である。ここで、「＋」は混合（または、合成）を意味する。また、係数は所定の比率Ｐ１に基づく数値であり、この実施例では、透明度を用いて設定される。透明度は、０％から１００％の数値であり、この数値が０から１の数値で表される。ただし、透明度が１００％（つまり、完全透明）である場合には、α値は０であり、透明度が０％（つまり、不透明）である場合には、α値は１である。これらのことは、他の第２ピクセルの色の場合についても同様である。
【0061】
したがって、３番目の第２ピクセルは、その全体の面積のうちの４割について２番目の第１ピクセルと重なり、残りの６割について３番目の第１ピクセルと重なる。したがって、所定の比率Ｐ２は、２対３であり、３番目の第２ピクセルは０．４ｂ＋０．６ｃ色である。
【0062】
また、４番目の第２ピクセルは、その全体の面積のうちの６割について３番目の第１ピクセルと重なり、残りの４割について４番目の第１ピクセルと重なる。したがって、所定の比率Ｐ３は、３対２であり、４番目の第２ピクセルは０．６ｃ＋０．４ｄ色である。
【0063】
さらに、５番目の第２ピクセルは、その全体の面積のうちの８割について４番目の第１ピクセルと重なり、残りの２割について５番目の第１ピクセルと重なる。したがって、所定の比率Ｐ４は、４対１であり、５番目の第２ピクセルは０．８ｄ＋０．２ｅ色である。
【0064】
図３（Ｂ）に示すように色を混合した出力画像を生成するために、上述したように、この実施例では、混合前の２つの中間画像データが生成される。図３（Ｃ）が第１中間画像データの一部であり、図３（Ｄ）が第２中間画像データの一部である。
【0065】
図３（Ｃ）に示すように、第１中間画像データでは、１番目の第２ピクセルはａ色であり、２番目の第２ピクセルは０．８ｂ色であり、３番目の第２ピクセルは０．６ｃ色であり、４番目の第２ピクセルは０．６ｃ色であり、５番目の第２ピクセルは０．８ｄ色であり、６番目の第２ピクセルはｅ色である。
【0066】
また、図３（Ｄ）に示すように、第２中間画像データでは、１番目および６番目の第２ピクセルには、色が無く、２番目の第２ピクセルは０．２ａ色であり、３番目の第２ピクセルは０．４ｂ色であり、４番目の第２ピクセルは０．４ｄ色であり、５番目の第２ピクセルは０．２ｅ色である。
【0067】
第２中間画像データにおいて、両端の第２ピクセルの色が無いのは、第１中間画像データの両端の第２ピクセルの色が、第１中間画像データと第２中間画像データを合成した後の色になっているからである。したがって、第１中間画像データにおいて、両端の第２ピクセルの透明度を１００％（すなわち、α＝０）にした場合には、第２中間画像データにおいて、両端の第２ピクセルの色がａ色とｅ色に設定される。また、他の例では、第１中間画像データにおいて、両端の第２ピクセルの色が、透明度が５０％（すなわち、α＝０．５）のａ色とｅ色に設定された場合には、第２中間画像データにおいて、両端の第２ピクセルの色が、透明度が５０％（すなわち、α＝０．５）のａ色とｅ色に設定に設定される。
【0068】
また、この実施例では、混合する色の配分比率を分かり易く示すために、第２中間画像データについても所定の比率Ｐ１－Ｐ４に従って係数を設定するようにしてあるが、第２中間画像データは後面側であるため、不透明である。つまり、第２中間画像データの各ピクセルの色については、透明度はすべて０％（すなわち、α＝１）である。このため、第１中間画像データの一部の第２ピクセルの色が、元画像データの一部の第１ピクセルの色に対して透明度が反映された色である。
【0069】
したがって、この実施例では、第２領域の両端の第２ピクセルを除いて、所定の比率Ｐ１－Ｐ４に従って係数を設定された透明な色の第１中間画像データと、不透明な色の第２中間画像データとが合成され、出力画像データにおいては、結果的に、所定の比率Ｐ１－Ｐ４に従って設定された配分比率の色が実現される。
【0070】
さらに、図３（Ｃ）および図３（Ｄ）に示す第１中間画像データおよび第２中間画像データは一例であり、第１中間画像データに設定される色と第２中間画像データに設定される色は入れ替えてもよい。この場合、第２中間画像データの両端の間の第２ピクセルの色は、透明度が０％の色に設定される。また、この場合、第１中間画像データの両端の第２ピクセルには、透明度が１００％である任意の色を設定することもできる。
【0071】
上述したように、この実施例では、ＦＧ側のフレームバッファ３０４ｃに第１中間画像データが描画（または、生成）され、ＢＧ側のフレームバッファ３０４ｅに第２中間画像データが描画（または、生成）され、第１中間画像データおよび第２中間画像データが合成される。
【0072】
つまり、第１ピクセルで描画していた元画像データを第２ピクセルで描画する場合に、横方向における第２ピクセルの個数を増やし、横方向に５個の第１ピクセル毎に分割した場合の各第１領域について、横方向に６個の第２ピクセルとなるように対応する各第２領域を生成することによって、横方向のピクセル数が当該元画像データの１．２倍となるよう２つの中間画像データが生成される。そして、生成された２つの中間画像データにおいては、それぞれの先頭の第２ピクセルから順番に、対応する位置の２つの第２ピクセルの色が混合される。
【0073】
ただし、２つの中間画像データの各々の第２領域において、両端に位置する第２ピクセルについては、当該２つの中間画像データにおいて対応する位置の当該第２ピクセルの色を混合した結果が、元画像データの第１領域の両端の第１ピクセルの色と一致するように設定される。また、２つの中間画像データの各々の第２領域において、両端の間に位置する第２ピクセルについては、混合される、つまり、当該２つの中間画像データにおいて対応する位置に在る２つの当該第２ピクセルの色は、それぞれ、元画像データにおいて当該第２領域に対応する位置の第１領域内で隣り合った２つの第１ピクセルの色に基づいて生成される。
【0074】
また、上述したように、フレームバッファ３０４ｃおよび３０４ｄの大きさは、横３０７ピクセル×縦２４０ピクセルであるため、実際には、第１中間画像データおよび第２中間画像データでは、横方向の第２ピクセルの個数が元画像データのＮ／Ｍ倍ではない。
【0075】
なお、表示装置３６では、表示画像データの一部（たとえば、両端の数～数十ピクセル分）は表示されないため、第１中間画像データおよび第２中間画像データにおいて、第２ピクセルの個数は、元画像データの個数よりも多ければ、Ｎ／Ｍ倍にならなくてもよい。
【0076】
図４は、図１に示した表示制御装置３２の構成を示すブロック図である。表示制御装置３２は、マイクロコントローラ（または、コントロールＩＣ）であり、一例として、ＳＴマイクロエレクトロニクス社製のChrom-Art Accelerator コントローラ（DMA2D）を使用することができる。
【0077】
図４は図１に示した表示制御装置３２の限定しない一例のブロック図である。図４に示すように、表示制御装置３２は、ＦＧ側のＰＦＣ（以下、「ＦＧＰＦＣ」という）３２０およびＢＧ側のＰＦＣ（以下、「ＢＧＰＦＣ」という）を含む。ＦＧＰＦＣ３２０は、ＲＡＭ３２４に接続されるとともに、ブレンダ３２８の一方入力端に接続される。ＢＧＰＥＣ３２２は、ＲＡＭ３２６に接続されるとともに、ブレンダ３２８の他方入力端に接続される。
【0078】
ＦＧＰＦＣ３２０は、前面側のピクセルフォーマット変換回路であり、フレームバッファ３０４ｃから入力される第１中間画像データすなわち各第２ピクセルのデータ（以下、「ピクセルデータ」という）を色データに変換する。色データは、後述する色情報と付加情報で表される色についてのデータである。この実施例では、ピクセルデータは、ＲＡＭ３２４に記憶されたルックアップテーブルに記載された識別番号（または、識別情報）についてのデータである。
【0079】
ルックアップテーブルは、一例として、従来のゲーム機で使用可能な不透明の複数の色（この実施例では、６４色）についてのカラーパレット（以下、「不透明カラーパレット」ということがある）を含む。また、この実施例では、ルックアップテーブルは、上記の複数の色（６４色）を２０％の透明度で表した色についてのカラーパレット（以下、「透明度２０％カラーパレット」ということがある）と、上記の複数の色（６４色）を４０％の透明度で表した色についてのカラーパレット（以下、「透明度４０％カラーパレット」ということがある）を含む。
【0080】
ルックアップテーブルでは、上記の３つのカラーパレットに含まれる各色情報およびこの各色情報に対応する各付加情報が、識別番号に対応して記載される。色情報は、Ｒ、Ｇ、Ｂのそれぞれの値についてのデータである。また、付加情報は、α値についてのデータである。この実施例では、Ｒ、Ｇ、Ｂおよびαのそれぞれが８ビットのデータで指定される。α値は、透明度についてのデータであり、１（“11111111”）と０（“00000000”）間の数値で設定される。上記の不透明カラーパレットでは、６４色は不透明であるため、α値は１に設定される。また、透明度２０％カラーパレットでは、透明度が２０％であるため、α値は０．８に設定される。さらに、透明度４０％カラーパレットでは、透明度が４０％であるため、α値は０．６に設定される。
【0081】
この実施例では、透明度がα（０＜α＜１）である透明度２０％カラーパレットおよび透明度４０％カラーパレットを備えているが、透明度が１－αであるカラーパレットを備えていない。これは、透明度が１－αである場合には、ＦＧ側とＢＧ側とで色を入れ替えれば良いからである。したがって、本来は、透明度が２０％、４０％、６０％および８０％である４種類のカラーパレットが必要であるところ、この実施例の情報処理装置１０（または、表示制御装置３２）は、透明度２０％カラーパレットおよび透明度４０％カラーパレットだけを備えて、透明度が６０％および８０％のカラーパレットについては省略してある。
【0082】
上述したように、図３（Ｃ）および図３（Ｄ）において、第１中間画像データに設定される色と第２中間画像データに設定される色は入れ替えてもよいが、数式を用いて色を表現した場合は同じ色として表現されるが、実際には、全く同じ色が生成されるとは限らない。
【0083】
つまり、第１中間画像データの第２ピクセルの第１の色に１－αの透明度を反映した第２の色と、第２中間画像データの対応する第２ピクセルの第３の色が混合されることによって生成される第４の色と、当該第１中間画像データの当該第２ピクセルを第３の色にαの透明度を反映した第６の色として、当該第２中間画像データの対応する第２ピクセルを第１の色としてこれらを混合されることによって生成される第５の色とは、実質的に等しいが全く同じ色が生成されるとは限らない。
【0084】
なお、この実施例では、１つのルックアップテーブルに３つのカラーパレットを設けるようにしたが、これに限定される必要はない。３つのカラーパレットを、それぞれ、個別のルックアップテーブルに設けるようにしてもよい。
【0085】
図４に戻って、ＢＧＰＦＣ３２２は、後面側のピクセルフォーマット変換回路であり、フレームバッファ３０４ｄから入力される第２中間画像データすなわち各ピクセルのピクセルデータを色データに変換する。このピクセルデータは、ＲＡＭ３２６に記憶されたルックアップテーブルの識別番号を指定するデータである。この実施例では、ＲＡＭ３２６に記憶されるルックアップテーブルは、上述したＲＡＭ３２４に記憶されるルックアップテーブルと同じである。したがって、ルックアップテーブルの内容等についての重複する説明は省略する。
【0086】
各ピクセルのピクセルデータが色データに変換された第１中間画像データおよび第２中間画像データは、ブレンダ３２８で混合（または、合成）される。上述したように、表示装置３６に出力される出力画像は、第１中間画像データの色および第２中間画像データの色が、それぞれの先頭の第２ピクセルから順に、対応する位置の２つの第２ピクセルの色を混合することにより、生成される。
【0087】
色の混合は、上述したとおりであり、具体的には、出力画像の各ピクセルの色が数１に従って算出される。ただし、Ｃは、Ｒ、ＧまたはＢである。また、上記のとおり、ＦＧはフォアグラウンド（または、第１中間画像データ）を意味し、ＢＧはバックグラウンド（または、第２中間画像データ）を意味し、ＯＵＴは出力を意味する。ただし、混合されるのは、第１中間画像データの第２ピクセルの色と、これに対応する位置の第２中間画像データの第２ピクセルの色である。
【0088】
［数１］
COUT = CFG * αFG + CBG * αBG
ただし、上述したように、この実施例では、αFG = 0.6、0.8または1であり、αBG = 1である。
COUT = CFG * αFG + CBG * αBG
ただし、上述したように、この実施例では、αFG = 0.6、0.8または1であり、αBG = 1である。
【0089】
なお、フレームバッファ３０４ｃおよびフレームバッファ３０４ｄは、横方向の幅が３０７ビットであり、６の倍数ではないため、各行の３０７ビット目については色は算出されない。
【0090】
以上より、横方向における第２ピクセルの個数を１．２倍にすることにより、第１ピクセルとのピクセルアスペクト比の違いを吸収するとともに、６個のうちの両端以外の第２ピクセルについては、元画像データが描画された５個の第１ピクセルのうち、隣接する２つの第１ピクセルの色を面積比に応じた透明度の比率で混合した色に設定するので、第１ピクセルで描画された元画像に似た見た目の出力画像を第２ピクセルで描画することができる。したがって、ユーザが違和感を覚えるのを、できる限り防止することができる。
【0091】
図５は図１に示した情報処理装置１０のＲＡＭ２２のメモリマップ３００の一例を示す図である。図５に示すように、ＲＡＭ２２は、プログラム記憶領域３０２およびデータ記憶領域３０４を含む。プログラム記憶領域３０２には、上述した第１中間画像データおよび第２中間画像データを生成および合成する画像処理を含む情報処理プログラムの一例であるゲームプログラムが記憶される。
【0092】
ゲームプログラムは、ゲームメイン処理プログラム３０２ａ、画像生成プログラム３０２ｂおよび画像表示プログラム３０２ｃを含む。
【0093】
なお、情報処理プログラム（ここでは、ゲームプログラム）は、予めフラッシュメモリ２４に記憶されていてもよいし、外部の情報処理装置からインターネットのようなネットワークを介して取得してもよい。また、情報処理プログラムは、情報処理装置１０に着脱可能な光ディスクまたはメディアカードのような外部メモリから取得してもよい。ただし、情報処理プログラムの一部をフラッシュメモリ２４に記憶しておき、他の一部を外部の情報処理装置または外部メモリから取得するようにしてもよい。これらのことは、後述する画像生成用データ３０４ａについても同様である。
【0094】
ゲームメイン処理プログラム３０２ａは、仮想のゲームのメインルーチンを処理するためのプログラムである。画像生成プログラム３０２ｂは、画像生成用データ３０４ａを用いてゲーム画像などの様々な表示画像のデータ（以下、「表示画像データ」という）を生成するためのプログラムである。この実施例では、元画像データが第２ピクセルで描画されている場合には、画像生成プログラムは、表示画像データをフレームバッファ３０４ｃに描画する。また、画像生成プログラム３０２ｂは、元画像データが第１ピクセルで描画されている場合には、表示画像データとして、第１中間画像データをフレームバッファ３０４ｃに描画するとともに、第２中間画像データをフレームバッファ３０４ｄに描画する。ただし、表示画像データは、ピクセル毎にピクセルデータを指定したデータである。第１中間画像データおよび第２中間画像データもまた、ピクセル毎のピクセルデータを指定したデータである。
【0095】
画像表示プログラム３０２ｃは、画像生成プログラム３０２ｂに従って生成された表示画像データを表示制御装置３２に出力するためのプログラムである。この実施例では、表示画像データ（第１中間画像データおよび第２中間画像データの場合もある）は、表示制御装置３２に出力され、出力画像データが表示制御装置３２から表示装置３６に出力される。ただし、出力画像データは、フレームバッファ３０４ｃに描画された表示画像データまたはフレームバッファ３０４ｃに描画された第１中間画像データおよび第２中間画像データを合成したデータである。
【0096】
図示は省略するが、プログラム記憶領域３０２には、ユーザないしプレイヤの操作を検出するための操作検出プログラム、他の情報処理装置（１０）と通信するための通信プログラム、ゲーム処理の際に必要な音を生成および出力するための音出力プログラムなどの他のプログラムも記憶される。
【0097】
データ記憶領域３０４には、画像生成用データ３０４ａおよびブレンドフラグ３０４ｂが記憶される。また、データ記憶領域３０４には、フレームバッファ３０４ｃおよびフレームバッファ３０４ｄが設けられる。
【0098】
画像生成用データ３０４ａ、表示画像データを生成するためのポリゴンデータおよびテクスチャデータなどのデータを含む。ブレンドフラグ３０４ｂは、第１ピクセルで描画された元画像データを第２ピクセルで描画するかどうかを示すフラグである。ブレンドフラグ３０４ｂがオンであれば、第１ピクセルで描画された元画像データを第２ピクセルで描画することが判断される。一方、ブレンドフラグ３０４ｂがオフであれば、第１ピクセルで描画された元画像データを第２ピクセルで描画しないこと、すなわち、第１中間画像データおよび第２中間画像データを生成せずに、第２ピクセルで描画された元画像データを描画する通常の描画処理を実行することが判断される。
【0099】
フレームバッファ３０４ｃは、第１中間画像データを生成するためのバッファ（ＶＲＡＭ）である。フレームバッファ３０４ｄは、第２中間画像データを生成するためのバッファ（ＶＲＡＭ）である。
【0100】
図示は省略するが、データ記憶領域には、ゲーム処理を実行するための操作データおよびゲーム処理における画像処理に必要な他のデータが記憶されたり、カウンタまたはタイマが設けられたりする。
【0101】
図６は、仮想のゲームのゲーム全体処理の限定しない一例を示すフロー図である。図６に示すように、プロセッサ２０は、ゲーム全体処理を開始すると、ステップＳ１で、ゲーム初期化処理を実行する。ここでは、仮想のゲームを最初から開始する場合には、ＲＡＭ２２のバッファ領域（たとえば、フレームバッファ３０４ｃおよび３０４ｄ）をクリアしたり、各フラグ（たとえば、ブレンドフラグ３０４ｂ）を初期設定したりする。この実施例では、ブレンドフラグ３０４ｂは、プレイヤが選択した仮想のゲームのゲーム画像が第１ピクセルで描画されているかどうか、たとえば、従来の仮想のゲームをエミュレーション実行するかどうかに応じてオン／オフされる。
【0102】
続くステップＳ３では、ゲーム制御処理を実行する。たとえば、プロセッサ２０は、プレイヤオブジェクトの２次元または３次元位置をプレイヤの操作入力に従って更新したり、敵オブジェクトの２次元または３次元位置を更新したりする。また、必要に応じて、プロセッサ２０は、仮想カメラ（視点）を切り換える。
【0103】
次のステップＳ５では、ブレンドを行うかどうかを判断する。ここでは、プロセッサ２０は、ブレンドフラグ３０４ｂがオンであるかどうかを判断する。ステップＳ５で“ＮＯ”であれば、つまり、ブレンドを行わない場合には、ステップＳ７で、第２ピクセルで描画された元画像データ、ここでは、ゲーム画像のデータ（すなわち、表示画像データ）をフレームバッファ３０４ｃに描画し、ステップＳ１３に進む。たとえば、新規に作成されたゲームシーンのゲーム画像または当初から第２ピクセルを想定して作成された仮想のゲームのゲーム画像を生成する場合には、プロセッサ２０は、ステップＳ５で“ＮＯ”と判断する。
【0104】
一方、ステップＳ５で“ＹＥＳ”であれば、つまり、ブレンドを行う場合には、ステップＳ９で、第１中間画像データをフレームバッファ３０４ｃに描画し、ステップＳ１１で、第２中間画像データをフレームバッファ３０４ｄに描画して、ステップＳ１３に進む。
【0105】
ステップＳ１３では、ゲーム画像を表示する。ここでは、プロセッサ２０は、フレームバッファ３０４ｃに記憶されている表示画像データ、または、フレームバッファ３０４ｃに記憶されている第１中間画像データおよびフレームバッファ３０４ｄに記憶されている第２中間画像データを表示制御装置３２に出力して、表示装置３６にゲーム画面を表示させる。または、表示装置３６に表示されたゲーム画面が更新される。
【0106】
そして、ステップＳ１５では、ゲーム終了かどうかを判断する。ここでは、プレイヤがゲーム終了を指示したり、ゲームオーバになったりしたかどうかを判断する。ステップＳ１５で“ＮＯ”であれば、つまりゲーム終了でなければ、ステップＳ３に戻る。一方、ステップＳ１５で“ＹＥＳ”であれば、つまりゲーム終了であれば、ゲーム全体処理を終了する。
【0107】
なお、図６に示す例では、仮想のゲームのアプリケーションが実行された場合について説明してあるが、これに限定される必要はない。第１ピクセルで描画した元画像データを第２ピクセルで描画する場合には、他の種類のアプリケーションについても同様の処理が実行される。その場合、図６のフロー図およびその説明において、仮想のゲームが他の種類のアプリケーションに変更され、当該他の種類のアプリケーションに応じた処理が実行される。
【0108】
この実施例によれば、第１ピクセルで描画された元画像データを第２ピクセルで描画する場合に、横方向に並ぶピクセル数を増加することにより、第１ピクセルよりも横幅が短くなったことを補うとともに、第２ピクセルに対応する位置において隣接する２つの第１ピクセルの色を当該第２ピクセルと重なる部分の面積比に応じた透明度の色を混合した色を当該第２ピクセルに設定するので、第１ピクセルで描画された元画像に近似した画像を表示することができる。したがって、ユーザが見た目の違和感を覚えることを出来る限り防止することができる。
【0109】
また、この実施例によれば、２つの中間画像データを合成し、合成した出力画像を表示装置３６に出力するのは、表示制御装置３２であるため、合成する処理をプロセッサ２０が実行する必要がない。したがって、プロセッサ２０の処理負荷を軽減することができる。ただし、プロセッサ２０の処理能力が十分に高い場合には、２つの中間画像データを合成する処理もプロセッサ２０が実行することもできる。
【0110】
なお、この実施例では、プロセッサ２０は、フレームバッファ３０４ｃおよび３０４ｄにゲーム画像を描画する場合、第２ピクセル毎にルックアップテーブルの識別番号をピクセルデータとして記載するようにしたが、第２ピクセル毎に色データを直接記載するようにしてもよい。かかる場合には、表示制御装置３２は、第１中間画像データと第２中間画像データを混合して、出力画像を表示装置３６に出力するだけでよい。
【0111】
また、この実施例では、横方向に５個の第１ピクセルが並んだ領域または部分を、横方向に並んだ６個の第２ピクセルで描画するようにしたが、これは一例であり、限定されるべきではない。他の例では、元画像データのうち、横方向に１０個の第１ピクセルが並んだ領域または部分を、横方向に並んだ１２個の第２ピクセルで描画するようにしてもよい。
【0112】
また、Ｎ／Ｍ倍は、１．２倍にする必要はなく、他の倍率でもよい。たとえば、第１ピクセルのピクセルアスペクト比が１．４：１であり、第２ピクセルのピクセルアスペクト比が１：１であれば、Ｎ／Ｍ倍を１．４倍に設定することができる。
【0113】
また、第２ピクセルは正方形に限定される必要はなく、縦の長さを第１ピクセルと同じ長さに設定した場合に、横幅が第１ピクセルよりも短い横長の形状でもよい。たとえば、元画像データが描画された第１ピクセルのピクセルアスペクト比が１．２：１であり、第２ピクセルのピクセルアスペクト比が１．１：１であると仮定すると、Ｎ／Ｍ倍を１０／９倍に設定することができる。この場合には、９個の第１ピクセルの横幅と、１０個の第２ピクセルの横幅とは一致しないが、ほぼ同じであるため、上記の実施例と同様に、第１中間画像データおよび第２中間画像データを生成し、これらを合成することにより、出力画像を元画像の見た目に近似させることができる。
【0114】
さらに、この実施例では、第１ピクセルと第２ピクセルの縦の長さが同じであることを前提として説明したが、これに限定される必要はない。縦の長さが異なる場合には、ピクセルアスペクト比を維持した状態で、第１ピクセルと第２ピクセルの縦の長さが同じになるように、第１ピクセルまたは第２ピクセルを拡大または縮小して、Ｎ／Ｍ倍を決定して、第２領域の両端以外の第２ピクセルの色を算出するのに使用する、対応する２つの第１ピクセルの色を混合する比率を決定すればよい。
【0115】
また、この実施例では、表示装置３６を備える情報処理装置１０について説明したが、表示装置３６は情報処理装置１０とは別に設けるようにしてもよい。かかる場合には、情報処理装置１０と表示装置３６によって、情報処理システム（または、画像処理システム）が構成される。また、情報処理装置１０としては、ゲーム装置、デスクトップＰＣ、ノートＰＣ、ＰＤＡ、タブレットＰＣおよびスマートフォンなどの他の電子機器を用いることもできる。
【0116】
さらに、この実施例で示した情報処理装置の構成、混合処理および具体的な数値は単なる例示であり、限定されるべきでなく、実際の製品に応じて適宜変更可能である。
【0117】
さらにまた、同じ効果または結果が得られる場合には、フロー図に示した各ステップの順番は適宜変更されてもよい。たとえば、ステップＳ１３とＳ１５が処理される順番は逆でもよい。
【符号の説明】
【0118】
１０ …情報処理装置
２０ …プロセッサ
２２ …ＲＡＭ
２４ …フラッシュメモリ
２６ …通信モジュール
３０ …入力装置
３４ …表示制御装置
３６ …表示装置
３８ …スピーカ
２０ …プロセッサ
２２ …ＲＡＭ
２４ …フラッシュメモリ
２６ …通信モジュール
３０ …入力装置
３４ …表示制御装置
３６ …表示装置
３８ …スピーカ
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】