JP2024008045A - Control device, projection device, projection system, control method, and program - Google Patents

To provide a control device capable of suppressing a misadjusted black level.SOLUTION: A control device includes: an optical modulator lit by light from a light source; and a dimmer part for modulating the amount of light led to a projected surface among the light from the light source, and controls a projection device for projecting projected images based on geometric correction images including a geometrically-corrected input image. The control device also includes: a first acquisition section for acquiring information on geometric correction to be performed on the input image; and a change section for making the dimmer part change the amount of the light by using the information on the geometric correction.SELECTED DRAWING: Figure 1

本発明は、制御装置、投写装置、投写システム、制御方法、及びプログラムに関する。 The present invention relates to a control device, a projection device, a projection system, a control method, and a program.

従来、湾曲したスクリーンや、正対していないスクリーンに映像を投写する場合に入力映像に対して幾何補正を行い、幾何補正後の映像に基づく投写映像を投写する投写装置が知られている。この場合、投写映像は、入力映像の情報を含む領域と、該領域以外の領域（ブランク領域）とからなる。特許文献１には、ブランク領域を除いて投写映像の輝度を調整する構成が開示されている。 2. Description of the Related Art Conventionally, there has been known a projection device that performs geometric correction on an input image when projecting an image onto a curved screen or a screen that is not facing directly, and projects a projected image based on the image after the geometric correction. In this case, the projected image consists of an area containing information about the input image and an area other than the area (blank area). Patent Document 1 discloses a configuration for adjusting the brightness of a projected image excluding blank areas.

特開２０１９－１８４９０２号公報Japanese Patent Application Publication No. 2019-184902

ブランク領域は、黒の諧調０で表現され、理想的には完全に光が見えないことが望ましいが、実際にはパネルからの漏れ光によりある程度の輝度を持つ映像（黒浮き）として視認される。 The blank area is expressed as a black tone of 0, and ideally it would be completely invisible, but in reality it is visible as an image with some brightness (black floating) due to light leaking from the panel. .

特許文献１の構成では、ブランク領域を除いて投写映像の輝度を調整するため、黒浮きを抑制することができない。また、特許文献１の構成を、それぞれが幾何補正された複数の投写装置の映像を連結して１枚の映像を投写するマルチプロジェクション投写で使用する場合、各投写装置はブランク領域を除外して輝度調整を行うため、全体の映像が破綻してしまう可能性がある。 In the configuration of Patent Document 1, since the brightness of the projected image is adjusted except for the blank area, black floating cannot be suppressed. Furthermore, when the configuration of Patent Document 1 is used in multi-projection projection in which images from a plurality of projection devices, each of which has been geometrically corrected, are connected to project one image, each projection device excludes blank areas. Since the brightness is adjusted, there is a possibility that the entire image will be distorted.

本発明は、黒浮きを抑制可能な制御装置を提供することを目的とする。 An object of the present invention is to provide a control device that can suppress black floating.

本発明の一側面としての制御装置は、光源からの光により照明される光変調素子と、光源からの光のうち被投写面に導かれる光の光量を変更する調光部とを備え、幾何補正された入力映像を含む幾何補正映像に基づく投写映像を投写する投写装置を制御するための制御装置であって、入力映像に対する幾何補正に関する情報を取得する第１取得部と、幾何補正に関する情報を用いて、調光部に光量を変更させる変更部とを有することを特徴とする。 A control device according to one aspect of the present invention includes a light modulation element that is illuminated by light from a light source, and a light control unit that changes the amount of light that is guided to a projection surface out of the light from the light source. A control device for controlling a projection device that projects a projection image based on a geometrically corrected image including a corrected input image, the control device comprising: a first acquisition unit that acquires information regarding geometric correction for the input image; and information regarding the geometric correction. and a changing unit that causes the light control unit to change the amount of light.

本発明によれば、黒浮きを抑制可能な制御装置を提供することができる。 According to the present invention, it is possible to provide a control device that can suppress black floating.

実施例１の投写システムの構成図である。FIG. 1 is a configuration diagram of a projection system according to a first embodiment. 実施例１のプロジェクタのブロック図である。1 is a block diagram of a projector according to a first embodiment. FIG. 実施例１の光源の出力の制御を示すフローチャートである。5 is a flowchart showing control of the output of the light source in Example 1. FIG. 実施例１の光源出力値、入力映像の明るさ、及びブランク率の関係の説明図である。FIG. 3 is an explanatory diagram of the relationship among the light source output value, the brightness of an input image, and the blank rate in Example 1. FIG. 光変調パネルと投写映像のブランク率の説明図である。FIG. 3 is an explanatory diagram of a light modulation panel and a blank rate of a projected image. 光変調パネルと投写映像のブランク率の説明図である。FIG. 3 is an explanatory diagram of a light modulation panel and a blank rate of a projected image. 光変調パネルと投写映像のブランク率の説明図である。FIG. 3 is an explanatory diagram of a light modulation panel and a blank rate of a projected image. 実施例１の投写システムの変形例の構成図である。FIG. 3 is a configuration diagram of a modification of the projection system of the first embodiment. 実施例２に投写システムの構成図である。FIG. 2 is a configuration diagram of a projection system according to a second embodiment. 実施例２の制御装置のブロック図である。FIG. 2 is a block diagram of a control device according to a second embodiment. 実施例２のプロジェクタのブロック図である。FIG. 2 is a block diagram of a projector according to a second embodiment. 実施例２の光源の出力の制御を示すフローチャートである。7 is a flowchart showing control of the output of a light source in Example 2. FIG. 実施例２の投写システムの変形例の構成図である。FIG. 7 is a configuration diagram of a modification of the projection system of the second embodiment. 実施例２のプロジェクタの変形例のブロック図である。FIG. 3 is a block diagram of a modification of the projector of Example 2. FIG.

以下、本発明の実施形態について、図面を参照しながら詳細に説明する。各図において、同一の部材については同一の参照番号を付し、重複する説明は省略する。 Embodiments of the present invention will be described in detail below with reference to the drawings. In each figure, the same reference numerals are given to the same members, and duplicate explanations will be omitted.

図１は、本実施例の投写システムの構成図である。本実施例の投写システムは、プロジェクタ（投写装置）１００を有する。プロジェクタ１００は、外部装置から入力映像の信号（映像信号）１０を受信し、湾曲したスクリーン（被投写面）１３に合わせて映像信号１０に対する幾何補正を行い、幾何補正後の映像（幾何補正映像）に基づく投写映像１２をスクリーン１３に投写する。外部装置は例えば、パーソナルコンピュータ、カメラ、携帯電話、スマートフォン、ハードディスクレコーダ、及びゲーム機等の映像供給装置である。幾何補正映像と投写映像１２は、映像信号１０を含む領域と、グレーで示される映像信号１０を含む領域以外の領域（ブランク領域）とからなる。なお、図１では、入力映像と投写映像１２との関係を分かりやすくするために投写映像１２は歪んだままではあるが、実際には入力映像と同様の絵としてユーザに視認される。 FIG. 1 is a block diagram of the projection system of this embodiment. The projection system of this embodiment includes a projector (projection device) 100. The projector 100 receives an input video signal (video signal) 10 from an external device, performs geometric correction on the video signal 10 in accordance with a curved screen (projection surface) 13, and performs geometric correction on the video signal 10 after the geometric correction (geometric correction image). ) is projected onto the screen 13. External devices include, for example, video supply devices such as personal computers, cameras, mobile phones, smart phones, hard disk recorders, and game consoles. The geometrically corrected image and the projected image 12 are composed of an area including the video signal 10 and an area other than the area including the video signal 10 (blank area) shown in gray. In FIG. 1, although the projected image 12 remains distorted in order to make the relationship between the input image and the projected image 12 easier to understand, it is actually visually recognized by the user as a picture similar to the input image.

図２は、プロジェクタ１００のブロック図である。プロジェクタ１００は、光変調パネル（光変調素子）１０１、投写光学レンズ１０２、操作部１０３、通信部１０４、光源駆動部（調光部）１０５、光源１０６、映像処理部１２０、及び制御部１３０を有する。光変調パネル１０１は例えば、透過型の液晶パネル、反射型の液晶パネル、及びデジタルマイクロミラーデバイス等であり、光源１０６からの光により照明される。操作部１０３は、プロジェクタ１００に設けられたボタン、リモートコントローラ、及び制御ポート等からの操作信号を受信し、制御部１３０に入力する。操作信号は、後述する幾何補正を行うためのパラメータ値を含む。通信部１０４は、制御部１３０により制御され、外部装置や、他のプロジェクタとの間で制御値や設定の通信を行う。光源駆動部１０５は、光源１０６を発光させるための駆動回路であり、制御部１３０からの制御指示に基づき光源１０６に印加する電流や電圧等を制御し、光源１０６の光量を変更する。なお、光源１０６の光量は、光源１０６からの光を光変調パネル１０１に導く光路上に設置された絞り機構や光量カットフィルター等を用いて変更されてもよい。光源１０６は、投写映像１２を出力するための発光部である。光源１０６は、本実施例では、高圧ランプの他、ＬＥＤやレーザーダイオード等の固体光源であるが、本発明はこれに限定はされない。 FIG. 2 is a block diagram of the projector 100. The projector 100 includes a light modulation panel (light modulation element) 101, a projection optical lens 102, an operation section 103, a communication section 104, a light source driving section (dimmer section) 105, a light source 106, an image processing section 120, and a control section 130. have The light modulation panel 101 is, for example, a transmissive liquid crystal panel, a reflective liquid crystal panel, a digital micromirror device, or the like, and is illuminated by light from a light source 106. The operation unit 103 receives operation signals from buttons provided on the projector 100, a remote controller, a control port, etc., and inputs them to the control unit 130. The operation signal includes parameter values for performing geometric correction, which will be described later. The communication unit 104 is controlled by the control unit 130 and communicates control values and settings with external devices and other projectors. The light source drive unit 105 is a drive circuit for causing the light source 106 to emit light, and controls the current, voltage, etc. applied to the light source 106 based on control instructions from the control unit 130, and changes the amount of light from the light source 106. Note that the light amount of the light source 106 may be changed using a diaphragm mechanism, a light amount cut filter, etc. installed on the optical path that guides the light from the light source 106 to the light modulation panel 101. The light source 106 is a light emitting unit for outputting the projected image 12. In this embodiment, the light source 106 is a solid state light source such as an LED or a laser diode in addition to a high-pressure lamp, but the present invention is not limited thereto.

映像処理部１２０は、専用のマイクロプロセッサや論理回路で構成されるＡＳＩＣ及び映像入力端子からなる。映像処理部１２０は、映像入力ＩＦ部１２１、信号処理部１２２、画像処理部１２３、幾何補正部１２４、及びパネル駆動部１２５を備える。 The video processing unit 120 includes an ASIC including a dedicated microprocessor and logic circuit, and a video input terminal. The video processing section 120 includes a video input IF section 121, a signal processing section 122, an image processing section 123, a geometric correction section 124, and a panel driving section 125.

映像入力ＩＦ部１２１は、コンポジット端子、Ｓ映像端子、Ｄ端子、コンポーネント端子、アナログＲＧＢ端子、ＤＶＩ－Ｉ端子、ＤＶＩ－Ｄ端子、ＨＤＭＩ（登録商標）端子、及びＤｉｓｐｌａｙＰｏｒｔ（登録商標）等の各種映像信号の端子を含む。映像入力ＩＦ部１２１は、外部装置から入力された映像信号１０を受信し、信号処理部１２２に送信する。 The video input IF section 121 has various terminals such as a composite terminal, an S video terminal, a D terminal, a component terminal, an analog RGB terminal, a DVI-I terminal, a DVI-D terminal, an HDMI (registered trademark) terminal, and a DisplayPort (registered trademark). Contains video signal terminals. Video input IF section 121 receives video signal 10 input from an external device and transmits it to signal processing section 122 .

信号処理部１２２は、映像信号１０に対して同期分離、Ａ／Ｄ変換、及び入力映像に含まれるメタデータの処理等の信号処理を行う。 The signal processing unit 122 performs signal processing on the video signal 10, such as synchronous separation, A/D conversion, and processing of metadata included in the input video.

画像処理部１２３は、信号処理部１２２から出力された信号処理後の映像信号１０に対して、フレームレート変換、インターレース・プログレッシブ変換、色補正、解像度変換、エッジ強調、及びコントラスト強調等の画像処理を行う。 The image processing unit 123 performs image processing such as frame rate conversion, interlace/progressive conversion, color correction, resolution conversion, edge enhancement, and contrast enhancement on the video signal 10 after signal processing output from the signal processing unit 122. I do.

幾何補正部１２４は、画像処理後の映像信号１０に対し、キーストン補正やワーピング補正等の幾何補正を行い、幾何補正後の映像信号１０である幾何補正映像１１を生成する。なお、幾何補正は、入力映像に対する射影変換であってもよい。また、幾何補正は、アスペクト変換であってもよいし、入力映像に黒マスク等のマスク画像を重畳させるマスク処理であってもよい。 The geometric correction unit 124 performs geometric correction such as keystone correction and warping correction on the video signal 10 after image processing, and generates a geometrically corrected image 11 that is the video signal 10 after the geometric correction. Note that the geometric correction may be a projective transformation on the input video. Further, the geometric correction may be aspect conversion, or may be mask processing in which a mask image such as a black mask is superimposed on the input video.

パネル駆動部１２５は、幾何補正部１２４から出力された幾何補正映像１１に応じて光変調パネル１０１を駆動する。パネル駆動部１２５は例えば、液晶パネルに印加する電圧を制御して、液晶パネルの透過率を調整する。なお、パネル駆動部１２５は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭに記憶されたプログラムによって、ＣＰＵがパネル駆動部１２５と同様の処理を実行してもよい。例えば光変調パネル１０１が透過型の液晶パネルである場合、パネル駆動部１２５は幾何補正部１２４から１フレームの画像データを受信するごとに画像に対応する透過率となるように光変調パネル１０１を制御する。 The panel driving section 125 drives the light modulation panel 101 according to the geometrically corrected image 11 output from the geometrically correcting section 124. For example, the panel drive unit 125 controls the voltage applied to the liquid crystal panel to adjust the transmittance of the liquid crystal panel. Note that the panel drive unit 125 does not need to be a dedicated microprocessor, and for example, a CPU may execute the same processing as the panel drive unit 125 using a program stored in a ROM. For example, when the light modulation panel 101 is a transmissive liquid crystal panel, the panel drive unit 125 adjusts the light modulation panel 101 to have a transmittance corresponding to the image each time it receives one frame of image data from the geometric correction unit 124. Control.

光変調パネル１０１からの映像光は、投写光学レンズ１０２を介してスクリーン１３に投写される。これによりスクリーン１３に投写映像１２が表示される。 Image light from the light modulation panel 101 is projected onto the screen 13 via the projection optical lens 102. As a result, the projected image 12 is displayed on the screen 13.

制御部１３０は、マイクロプロセッサや論理回路で構成されるＡＳＩＣ等により構成される。制御部１３０は、操作部１０３を介して取得した幾何補正を行うためのパラメータ値を映像処理部１２０に送信し、幾何補正を実行させる。なお、制御部１３０は、専用のマイクロプロセッサである必要はなく、例えば、ＲＯＭに記憶されたプログラムによって、ＣＰＵが制御部１３０と同様の処理を実行してもよい。 The control unit 130 is composed of an ASIC or the like composed of a microprocessor or a logic circuit. The control unit 130 transmits the parameter values for performing geometric correction acquired via the operation unit 103 to the video processing unit 120, and causes the video processing unit 120 to perform the geometric correction. Note that the control unit 130 does not need to be a dedicated microprocessor, and for example, a CPU may execute the same processing as the control unit 130 using a program stored in a ROM.

制御部１３０は、映像明るさ判定部（第２取得部）１３１、ブランク率取得部（第１取得部）１３２、及び光源出力取得部（変更部）１３３を備える。 The control unit 130 includes a video brightness determination unit (second acquisition unit) 131, a blank rate acquisition unit (first acquisition unit) 132, and a light source output acquisition unit (change unit) 133.

映像明るさ判定部１３１は、映像信号１０の輝度情報を取得し、入力映像の明るさを判定する。明るさは例えば、入力映像の輝度分布に関する統計量を用いて判定されてもよいし、入力映像に含まれるメタデータを用いて判定されてもよい。メタデータの例として、ＨＤＲ（Ｈｉｇｈ Ｄｉｎａｍｉｃ Ｒａｎｇｅ）に対応するＨＤＭＩ（登録商標）映像では、ＭＡＸ ＣＬＬ（映像コンテンツの最大輝度）やＡＶＥ ＣＬＬ（映像コンテンツの平均輝度）等の映像コンテンツの輝度情報がある。また、ＨＤＲ１０＋（登録商標）に代表される規格等の映像シーンごとに輝度情報が変更される動的メタデータがある。 The video brightness determination unit 131 acquires the brightness information of the video signal 10 and determines the brightness of the input video. For example, the brightness may be determined using statistics regarding the luminance distribution of the input video, or may be determined using metadata included in the input video. As an example of metadata, for HDMI (registered trademark) video that supports HDR (High Dynamic Range), brightness information of video content such as MAX CLL (maximum brightness of video content) and AVE CLL (average brightness of video content) be. Additionally, there is dynamic metadata in which brightness information is changed for each video scene, such as standards such as HDR10+ (registered trademark).

ブランク率取得部１３２は、ブランク領域が幾何補正映像１１に占める比率（以下、ブランク率）を取得する。ブランク率は、映像信号１０を含む領域と映像信号１０を含む領域以外の領域の面積比の値でもよいし、２つの領域に含まれる光変調パネル１０１の画素の数の比の値でもよい。ブランク領域は、射影変換処理から判定されてもよいし、入力映像と幾何補正映像１１との差分情報から判定されてもよい。また、映像のフレームを比較し、映像に変化がなく、諧調が０となる領域がブランク領域として判定されてもよい。 The blank ratio acquisition unit 132 acquires the ratio of the blank area to the geometrically corrected image 11 (hereinafter referred to as blank ratio). The blanking ratio may be a value of the area ratio between the area including the video signal 10 and an area other than the area including the video signal 10, or may be a value of the ratio of the number of pixels of the light modulation panel 101 included in the two areas. The blank area may be determined from projective transformation processing, or may be determined from difference information between the input video and the geometrically corrected video 11. Alternatively, video frames may be compared, and an area where there is no change in the video and the gradation is 0 may be determined as a blank area.

光源出力取得部１３３は、ブランク率と入力映像の明るさに関する情報に基づいて、光源出力値を決定し、決定した光源出力値を光源駆動部１０５に送信する。 The light source output acquisition unit 133 determines a light source output value based on information regarding the blank rate and the brightness of the input image, and transmits the determined light source output value to the light source driving unit 105.

なお、制御部１３０は、本実施例ではプロジェクタ１００内に設けられているが、プロジェクタ１００とは異なる制御装置として構成されてもよい。 Note that although the control unit 130 is provided within the projector 100 in this embodiment, it may be configured as a control device different from the projector 100.

図３は、本実施例の光源１０６の出力の制御を示すフローチャートである。本フローは、操作部１０３に対するユーザ操作に応じて制御部１３０により実行される。 FIG. 3 is a flowchart showing control of the output of the light source 106 in this embodiment. This flow is executed by the control unit 130 in response to a user operation on the operation unit 103.

ステップＳ１では、制御部１３０は、幾何補正が実行されているかどうかを判定する。幾何補正が実行されていると判定された場合、ステップＳ２に進み、そうでないと判定された場合、本フローを終了する。 In step S1, the control unit 130 determines whether geometric correction is being performed. If it is determined that geometric correction is being performed, the process proceeds to step S2, and if it is determined that this is not the case, this flow is ended.

ステップＳ２では、映像明るさ判定部１３１は、映像信号１０の輝度情報を取得する。本実施例では、ＨＤＲ映像の動的メタデータＭＡＸ ＣＬＬ（シーン最大輝度）とＡＶＥ ＣＬＬ（シーン平均輝度）を取得する場合を例に説明する。なお、輝度情報は、入力映像のメタデータから取得される静的の入力映像の最大輝度と平均輝度であってもよい。 In step S2, the video brightness determination unit 131 acquires brightness information of the video signal 10. In this embodiment, a case where dynamic metadata MAX CLL (scene maximum brightness) and AVE CLL (scene average brightness) of an HDR video are acquired will be described as an example. Note that the brightness information may be the maximum brightness and average brightness of a static input video acquired from metadata of the input video.

ステップＳ３では、映像明るさ判定部１３１は、取得したＭＡＸ ＣＬＬとＡＶＥ ＣＬＬを用いて入力映像の明るさを判定する。具体的には、入力映像が暗いか、明るいかが判定される。本ステップの処理は、暗い映像ほど黒浮きが目立つため、光源出力値を補正するために実行される。入力映像の明るさは、ＡＶＥ ＣＬＬを使用することで簡易的に判定される。ただし、夜空等のＭＡＸ ＣＬＬとＡＶＥ ＣＬＬの差が激しいコンテンツも存在するため、これらの値を用いて算出された輝度分布の重心値を用いて明るさが判定されてもよい。 In step S3, the video brightness determination unit 131 determines the brightness of the input video using the acquired MAX CLL and AVE CLL. Specifically, it is determined whether the input video is dark or bright. The process in this step is executed to correct the light source output value because the darker the image, the more noticeable the black floating is. The brightness of the input video is easily determined by using AVE CLL. However, since there are contents such as the night sky where the difference between MAX CLL and AVE CLL is large, the brightness may be determined using the centroid value of the brightness distribution calculated using these values.

ステップＳ４では、ブランク率取得部１３２は、映像処理部１２０から得た幾何補正映像１１を用いてブランク率を取得する。 In step S4, the blank rate acquisition section 132 acquires the blank rate using the geometrically corrected image 11 obtained from the image processing section 120.

ステップＳ５では、光源出力取得部１３３は、入力映像の明るさとブランク率に基づいて光源出力値を決定する。図４（ａ）及び図４（ｂ）はそれぞれ、ブランク率が１０％と３０％である場合の入力映像の明るさと光源出力値との関係の一例を示している。光源出力値は、例えば図４に示されるように、入力映像が暗く、かつブランク率が大きい場合に本フロー開始前より光量が下がるように決定される。光量を下げることにより黒浮きが生じていた諧調０の漏れ光が抑制され目立たなくなる。なお、本フロー開始前の光源出力値を１００％としている。また、本実施例では、入力映像の明るさとブランク率を用いて光源出力値を決定するが、本発明はこれに限定されない。ブランク率のみを用いて光源出力値を決定してもよい。例えば、ブランク率が所定値より大きい場合、光量が下がるように光源出力値を決定し、ブランク率が所定値より小さい場合、光量を変更させないように光源出力値を決定してもよい。 In step S5, the light source output acquisition unit 133 determines the light source output value based on the brightness of the input video and the blank rate. FIGS. 4A and 4B show an example of the relationship between the brightness of the input image and the light source output value when the blank ratio is 10% and 30%, respectively. The light source output value is determined such that, as shown in FIG. 4, for example, when the input image is dark and the blanking rate is high, the light amount is lower than before the start of this flow. By lowering the light intensity, the leaked light of gradation 0, which causes black floating, is suppressed and becomes less noticeable. Note that the light source output value before the start of this flow is 100%. Further, in this embodiment, the light source output value is determined using the brightness of the input image and the blank rate, but the present invention is not limited thereto. The light source output value may be determined using only the blank ratio. For example, if the blanking rate is greater than a predetermined value, the light source output value may be determined so that the amount of light is decreased, and if the blanking rate is less than the predetermined value, the light source output value may be determined so that the amount of light is not changed.

入力映像の明るさとブランク率の組み合わせによっては、黒浮きの抑制よりもコントラスト低下が問題となる可能性がある。例えば、入力映像が比較的明るく、ブランク率が小さい場合である。この場合、光源出力値を変更しなくてもよい。また、単純にブランク率が閾値（所定値）より大きい場合、光量を変更しなくてもよい。部屋の照明等が明るい場合でも黒浮きよりコントラスト低下が問題となるため、照度センサ等を用いた閾値を用意してもよい。 Depending on the combination of the brightness of the input video and the blanking rate, contrast reduction may be more of a problem than suppression of black floating. For example, this is the case when the input video is relatively bright and the blanking rate is small. In this case, there is no need to change the light source output value. Moreover, if the blank rate is simply larger than a threshold value (predetermined value), the light amount does not need to be changed. Even when the lighting in the room is bright, contrast reduction is more of a problem than black floating, so a threshold value using an illuminance sensor or the like may be prepared.

以上説明したように、本実施例の構成によれば、黒浮きを抑制可能である。 As explained above, according to the configuration of this embodiment, black floating can be suppressed.

なお、本実施例では、ブランク率は、光変調パネル１０１に入力される幾何補正映像１１を用いて取得される。しかしながら、幾何補正映像１１を用いて取得されるブランク率と投写映像１２のブランク率は異なる場合がある。以下、光変調パネル１０１と投写映像１２のブランク率が異なる場合について説明する。 Note that in this embodiment, the blank rate is obtained using the geometrically corrected image 11 input to the light modulation panel 101. However, the blank rate obtained using the geometrically corrected image 11 and the blank rate of the projected image 12 may be different. Hereinafter, a case where the blank ratios of the light modulation panel 101 and the projected image 12 are different will be described.

図５乃至図７は、光変調パネル１０１と投写映像１２のブランク率の説明図である。図５（ａ）及び図６（ａ）はそれぞれ、プロジェクタ１００から距離Ｌ［ｍ］，２Ｌ［ｍ］だけ離れた平面のスクリーン１３に幾何補正（キーストン補正）前の投写映像１２を投写した様子を示している。光変調パネル１０１の画素数は、横Ｗ×縦Ｈ個とする。光変調パネル１０１のそれぞれの画素は、プロジェクタ１００からスクリーン１３までの距離（投写距離）に応じてｌ［ｍｍ］／Ｌ［ｍ］の割合で拡大されてスクリーン１３に投写される。すなわち、図５（ｂ）と図６（ｂ）ではそれぞれ、スクリーン１３上に横Ｗｌ×縦Ｈｌ［ｍｍ］と横２Ｗｌ×縦２Ｈｌ［ｍｍ］の投写映像１２が投写される。 5 to 7 are explanatory diagrams of the blank ratio of the light modulation panel 101 and the projected image 12. 5(a) and 6(a) show how the projected image 12 before geometric correction (keystone correction) is projected onto a flat screen 13 that is distance L [m] and 2L [m] away from the projector 100, respectively. It shows. The number of pixels of the light modulation panel 101 is assumed to be W in the horizontal direction and H in the vertical direction. Each pixel of the light modulation panel 101 is enlarged at a ratio of l [mm]/L [m] according to the distance from the projector 100 to the screen 13 (projection distance) and is projected onto the screen 13. That is, in FIG. 5(b) and FIG. 6(b), the projected images 12 of width Wl×height Hl [mm] and width 2Wl×height 2Hl [mm] are projected on the screen 13, respectively.

図７（ａ）は、下部の位置における投写距離がＬ、上部の位置における投写距離が２Ｌとなるようにスクリーン１３が傾けられた状態を示している。スクリーン１３の下部の位置における投写距離はＬであるため、下部の位置での光変調パネル１０１の画素サイズは横ｌ×縦ｌ［ｍｍ］である。スクリーン１３の位置が上部になるにつれて投写距離が伸びることからスクリーン１３上での画素サイズは徐々に大きくなる。上部の位置での光変調パネル１０１の画素サイズは、横２ｌ×縦２ｌ［ｍｍ］である。したがって、投写映像１２は、図７（ｂ）に示されるように、上部の幅が２Ｗｌ［ｍｍ］、下部の幅がＷｌ［ｍｍ］、高さが２Ｈｌ［ｍｍ］の台形の映像となる。ユーザは、投写映像１２を見ながら、図７（ｃ）に示されるように、投写距離がＬである場合と同じアスペクト比となる横Ｗｌ×縦Ｈｌ［ｍｍ］の投写映像になるまでキーストン補正を行う。すなわち、投写映像１２は、縮小され、上部の横幅と高さはそれぞれ半分ずつブランクされる。光変調パネル１０１には、図７（ｄ）に示されるように、図７（ｃ）に対して上下を逆転させた幾何補正映像１１が表示される。このとき、横方向に関しては射影変換に従い、Ｗ個の画素のうち半分のＷ／２個の画素をブランクにすればよい。したがって、横方向に限定すれば、投写映像１２と光変調パネル１０１上のブランク率の関係はほぼ同じである。一方、高さ方向では、前述したように、下部の側から上部の側に沿ってスクリーン１３上の画素サイズが大きくなる。すなわち、縦方向の画素の半分をブランクにした場合、投写映像１２の縦方向のサイズはＨよりも小さくなってしまう。ここで、投写映像１２は、下部を１行目として画素サイズがｌ［ｍｍ］、２行目がｌ＋２ｌ／Ｈ［ｍｍ］、３行目がｌ＋３×（ｌ／Ｈ）、４行目がｌ＋４×（ｌ／Ｈ）・・・、Ｈ行目が２ｌ（＝ｌ＋Ｈ×（ｌ／Ｈ））［ｍｍ］と徐々に大きくなると仮定する。ｎ行目までの高さの総和がＨｌ［ｍｍ］となるには、以下の式（１）を満足すればよい。 FIG. 7A shows a state in which the screen 13 is tilted so that the projection distance at the lower position is L and the projection distance at the upper position is 2L. Since the projection distance at the lower position of the screen 13 is L, the pixel size of the light modulation panel 101 at the lower position is 1 mm horizontally and 1 mm vertically. Since the projection distance increases as the position of the screen 13 moves upward, the pixel size on the screen 13 gradually increases. The pixel size of the light modulation panel 101 at the upper position is 2 l (width) x 2 l (height) [mm]. Therefore, the projected image 12 becomes a trapezoidal image with an upper width of 2Wl [mm], a lower width of Wl [mm], and a height of 2Hl [mm], as shown in FIG. 7(b). While viewing the projected image 12, the user performs keystone correction until the projected image has the same aspect ratio as when the projection distance is L, that is, width Wl x height Hl [mm], as shown in FIG. 7(c). I do. That is, the projected image 12 is reduced, and the width and height of the upper part are each half blank. As shown in FIG. 7(d), the light modulation panel 101 displays a geometrically corrected image 11 that is upside down relative to FIG. 7(c). At this time, in the horizontal direction, half of W/2 pixels out of W pixels may be blanked according to projective transformation. Therefore, limited to the horizontal direction, the relationship between the blank ratios on the projected image 12 and the light modulation panel 101 is almost the same. On the other hand, in the height direction, as described above, the pixel size on the screen 13 increases from the lower side to the upper side. That is, if half of the vertical pixels are blank, the vertical size of the projected image 12 will be smaller than H. Here, the projected image 12 has a pixel size of l [mm] with the bottom as the first row, the second row as l+2l/H [mm], the third row as l+3×(l/H), and the fourth row as l+4. ×(l/H)..., it is assumed that the H row gradually increases to 2l (=l+H×(l/H)) [mm]. In order for the total height up to the n-th row to be Hl [mm], the following equation (1) should be satisfied.

式（１）の両辺をｌで割ると、以下の式（２）となる。 When both sides of equation (1) are divided by l, the following equation (2) is obtained.

したがって、式（２）を満足するｎ行まで画素を点灯すればよい。高さ方向の光変調パネル１０１における画素のブランク率は（Ｈ―ｎ）／Ｈとなる。すなわち、光変調パネル１０１と投写映像のブランク率は一致しない場合がある。この場合、カメラで撮影を行うことで、ブランク率を取得すればよい。 Therefore, it is only necessary to light up pixels up to n rows that satisfy equation (2). The blank ratio of pixels in the light modulation panel 101 in the height direction is (H−n)/H. That is, the blank ratios of the light modulation panel 101 and the projected image may not match. In this case, the blank rate may be obtained by photographing with a camera.

図８は、投写システムの変形例の構成図である。投写システムは、図１の構成に加えて投写映像１２を撮影するカメラ２００を有する。カメラ２００で撮影された撮像写真２０は、プロジェクタ１００に入力される。 FIG. 8 is a configuration diagram of a modification of the projection system. In addition to the configuration shown in FIG. 1, the projection system includes a camera 200 that captures the projected image 12. A photograph 20 taken by the camera 200 is input to the projector 100.

撮像写真２０は、映像信号１０と同様に映像入力ＩＦ部１２１に入力された後、各種処理を施され、ブランク率取得部１３２に送信される。なお、画像処理部１２３は、ブランク率を取得しやすいようにエッジ強調やコントラスト強調処理等の画像処理を行ってもよい。 The captured photograph 20 is input to the video input IF unit 121 in the same way as the video signal 10, and then subjected to various processing and sent to the blank rate acquisition unit 132. Note that the image processing unit 123 may perform image processing such as edge enhancement or contrast enhancement processing to facilitate obtaining the blank rate.

ブランク率取得部１３２は、光変調パネル１０１に表示されている幾何補正映像１１と撮像写真２０とを用いてブランク率を取得する。なお、映像信号１０の明るさが、撮像写真２０を用いて判定されてもよい。また、幾何補正するためのパラメータ値がユーザ入力ではなく、撮像写真２０から推定され、推定されたパラメータ値を用いて幾何補正が行われてもよい。このようにカメラ２００により投写映像１２を撮影することで、ユーザビリティを向上させると共に、黒浮きをより抑制可能である。 The blank rate acquisition unit 132 acquires a blank rate using the geometrically corrected image 11 displayed on the light modulation panel 101 and the captured photograph 20. Note that the brightness of the video signal 10 may be determined using the captured photograph 20. Alternatively, the parameter values for geometric correction may be estimated from the captured photograph 20 instead of being input by the user, and the geometric correction may be performed using the estimated parameter values. By photographing the projected image 12 with the camera 200 in this manner, usability can be improved and black floating can be further suppressed.

実施例１では、投写システムが１つのプロジェクタを有する場合について説明したが、本実施例では、複数のプロジェクタを有する場合について説明する。 In the first embodiment, a case where the projection system has one projector has been described, but in this embodiment, a case where the projection system has a plurality of projectors will be described.

図９は、本実施例の投写システム（マルチプロジェクションシステム）の構成図である。本実施例の投写システムは、４台のプロジェクタ３００ａ，３００ｂ，３００ｃ，３００ｄ、及び制御装置３０１を有する。制御装置３０１と各プロジェクタは例えば有線ＬＡＮ等により互いの情報や制御命令を交換できるように接続されている。 FIG. 9 is a configuration diagram of the projection system (multi-projection system) of this embodiment. The projection system of this embodiment includes four projectors 300a, 300b, 300c, and 300d, and a control device 301. The control device 301 and each projector are connected, for example, via a wired LAN or the like so that they can exchange information and control commands with each other.

本実施例では、制御装置３０１には、解像度３８４０×２１６０の入力映像の信号（以下、映像信号）３０が入力される。制御装置３０１は、幾何補正を行い、幾何補正後の映像（幾何補正映像）３１を解像度１９２０×１０８０のサイズで分割する。制御装置３０１は、分割映像３１ａ，３１ｂ，３１ｃ，３１ｄを対応するプロジェクタ３００ａ，３００ｂ，３００ｃ，３００ｄに送信する。各プロジェクタのパネル解像度は１９２０×１０８０であり、プロジェクタ３００ａ，３００ｂ，３００ｃ，３００ｄはそれぞれ、投写映像３２ａ，３２ｂ，３２ｃ，３２ｄを投写する。各プロジェクタの投写映像をそれぞれスクリーン１３上で隣接するように投写することで、１台のプロジェクタでは実現できない解像度３８４０×２１６０である高解像度の投写映像３２を投写することができる。 In this embodiment, an input video signal (hereinafter referred to as video signal) 30 with a resolution of 3840×2160 is input to the control device 301 . The control device 301 performs geometric correction and divides the geometrically corrected video (geometrically corrected video) 31 into a size with a resolution of 1920×1080. Control device 301 transmits divided images 31a, 31b, 31c, and 31d to corresponding projectors 300a, 300b, 300c, and 300d. The panel resolution of each projector is 1920×1080, and projectors 300a, 300b, 300c, and 300d project images 32a, 32b, 32c, and 32d, respectively. By projecting the projected images of each projector so as to be adjacent to each other on the screen 13, it is possible to project a high-resolution projected image 32 with a resolution of 3840×2160, which cannot be achieved with a single projector.

なお、マルチプロジェクションシステムでは、投写映像３２ａ，３２ｂ，３２ｃ，３２ｄには隣接部に重畳する領域を設け、いわゆるエッジブレンディング補正と呼ばれる重畳する領域の輝度補正を行うことが望ましい。本実施例では説明を省略するが、後述の光源出力値の設定をする際には、エッジブレンディング補正の値も考慮することが望ましい。 Note that in the multi-projection system, it is desirable that the projected images 32a, 32b, 32c, and 32d have regions that overlap with adjacent portions, and perform brightness correction of the overlapping regions called so-called edge blending correction. Although the description will be omitted in this embodiment, it is desirable to also consider the edge blending correction value when setting the light source output value, which will be described later.

図１０は、制御装置３０１のブロック図である。制御装置３０１は、通信部３０４、操作部３１１、映像処理部３２０、及び制御部３３０を有する。通信部３０４と操作部３１１はそれぞれ、図１の通信部１０４と操作部１０３と同様の機能を有するため、本実施例では説明を省略する。 FIG. 10 is a block diagram of the control device 301. The control device 301 includes a communication section 304, an operation section 311, a video processing section 320, and a control section 330. The communication unit 304 and the operation unit 311 have the same functions as the communication unit 104 and the operation unit 103 in FIG. 1, respectively, so their description will be omitted in this embodiment.

映像処理部３２０は、映像入力ＩＦ部３２１、信号処理部３２２、画像処理部３２３、幾何補正部３２４、映像分割部３２５、及び映像出力ＩＦ部３２６を備える。映像入力ＩＦ部３２１、画像処理部３２３、及び幾何補正部３２４はそれぞれ、図１の通映像入力ＩＦ部１２１、画像処理部１２３、及び幾何補正部１２４と同様の機能を有するため、本実施例では説明を省略する。 The video processing section 320 includes a video input IF section 321, a signal processing section 322, an image processing section 323, a geometric correction section 324, a video division section 325, and a video output IF section 326. Since the video input IF section 321, the image processing section 323, and the geometric correction section 324 have the same functions as the video input IF section 121, the image processing section 123, and the geometric correction section 124 in FIG. 1, respectively, this embodiment The explanation will be omitted here.

映像分割部３２５は、幾何補正映像３１を分割映像３１ａ，３１ｂ，３１ｃ，３１ｄに分割する。映像出力ＩＦ部３２６は、分割映像３１ａ，３１ｂ，３１ｃ，３１ｄを出力する。 The video dividing unit 325 divides the geometrically corrected video 31 into divided videos 31a, 31b, 31c, and 31d. The video output IF unit 326 outputs divided videos 31a, 31b, 31c, and 31d.

制御部３３０は、映像明るさ判定部３３１、ブランク率取得部３３２、及び光源出力取得部３３３を備える。 The control unit 330 includes a video brightness determination unit 331, a blank rate acquisition unit 332, and a light source output acquisition unit 333.

映像明るさ判定部３３１は、映像信号３０の輝度情報を取得し、入力映像の明るさを判定する。明るさは、映像信号３０の明るさを演算して判定されてもよい。また、映像分割領域ごとに判定されてもよい。この場合、ＨＤＲメタデータではなく、個別に統計量が演算されることが望ましい。 The video brightness determination unit 331 acquires the brightness information of the video signal 30 and determines the brightness of the input video. The brightness may be determined by calculating the brightness of the video signal 30. Alternatively, the determination may be made for each video segment area. In this case, it is desirable that statistics be calculated individually instead of using HDR metadata.

光源出力取得部３３３は、入力映像の明るさと各ブランク率に基づいて、光源出力値を決定し、決定した光源出力値を各プロジェクタの光源駆動部に送信する。光源出力値は、全てのプロジェクタに共通の値である。本実施例では、入力映像の明るさと各ブランク率を用いて光源出力値を決定するが、本発明はこれに限定されない。各ブランク率のみを用いて光源出力値を決定してもよい。 The light source output acquisition unit 333 determines a light source output value based on the brightness of the input image and each blank rate, and transmits the determined light source output value to the light source driving unit of each projector. The light source output value is a value common to all projectors. In this embodiment, the light source output value is determined using the brightness of the input image and each blank rate, but the present invention is not limited thereto. The light source output value may be determined using only each blank ratio.

なお、制御部３３０は、本実施例では制御装置３０１内に設けられているが、制御装置３０１とは異なる制御装置として構成されてもよいし、複数のプロジェクタのいずれかに設けられてもよい。 Note that although the control unit 330 is provided within the control device 301 in this embodiment, it may be configured as a control device different from the control device 301, or may be provided in any of the plurality of projectors. .

図１１は、本実施例のプロジェクタ３００ａのブロック図である。プロジェクタ３００ａは、幾何補正部、映像明るさ判定部、ブランク率取得部、及び光源出力取得部を有さない。すなわち、プロジェクタ３００ａは、光源１０６の光量を変更できる点以外は一般的なプロジェクタであり、幾何補正等の機能を有していなくてもよい。プロジェクタ３００ａは、制御装置３０１から受信した光源出力値に従い光源１０６の光量を決め、投写映像３２ａを投写する。なお、プロジェクタ３００ｂ，３００ｃ，３００ｄは、プロジェクタ３００ａと同様の構成を有する。 FIG. 11 is a block diagram of the projector 300a of this embodiment. The projector 300a does not include a geometric correction section, an image brightness determination section, a blank rate acquisition section, and a light source output acquisition section. That is, the projector 300a is a general projector except that the amount of light from the light source 106 can be changed, and does not need to have a function such as geometric correction. The projector 300a determines the amount of light from the light source 106 according to the light source output value received from the control device 301, and projects the projected image 32a. Note that the projectors 300b, 300c, and 300d have the same configuration as the projector 300a.

図１２は、本実施例の光源の出力の制御を示すフローチャートである。本フローは、操作部３１１に対するユーザ操作に応じて制御装置３０１により実行される。 FIG. 12 is a flowchart showing control of the output of the light source in this embodiment. This flow is executed by the control device 301 in response to a user operation on the operation unit 311.

ステップＳ１０では、制御部３３０は、幾何補正が実行されているかどうかを判定する。幾何補正が実行されていると判定された場合、ステップＳ１１に進み、そうでないと判定された場合、本フローを終了する。 In step S10, the control unit 330 determines whether geometric correction is being performed. If it is determined that geometric correction is being performed, the process advances to step S11, and if it is determined that this is not the case, this flow is ended.

ステップＳ１１では、映像明るさ判定部３３１は、映像信号３０の輝度情報を取得する。 In step S11, the video brightness determination unit 331 acquires brightness information of the video signal 30.

ステップＳ１２では、ブランク率取得部３３２は、映像処理部３２０から分割映像３１ａ，３１ｂ，３１ｃ，３１ｄを取得する。 In step S12, the blank rate acquisition unit 332 acquires the divided videos 31a, 31b, 31c, and 31d from the video processing unit 320.

ステップＳ１３では、ブランク率取得部３３２は、分割映像ごとにブランク率を取得する。 In step S13, the blank rate acquisition unit 332 acquires the blank rate for each divided video.

ステップＳ１４で、光源出力取得部３３３は、分割映像３１ａ，３１ｂ，３１ｃ，３１ｄのブランク率を比較する。分割映像ごとにブランク率を比較するのは、分割前の映像のブランク率を用いると、例えば、全体のブランク率は小さいが特定のプロジェクタの映像にブランクが集中する映像に対して適正な明るさを設定できず、黒浮きを改善することができないためである。 In step S14, the light source output acquisition unit 333 compares the blank ratios of the divided images 31a, 31b, 31c, and 31d. Comparing the blank rate for each divided video is because if you use the blank rate of the video before division, you can, for example, find the appropriate brightness for a video where the overall blank ratio is small but the blanks are concentrated in the video of a specific projector. This is because it is not possible to set the black color, and it is not possible to improve black floating.

ステップＳ１５では、光源出力取得部３３３は、最大となるブランク率を用いて光源出力値を決定する。光源出力値の決定方法は、実施例１と同様であるため説明を省略する。なお、実施例１で説明したように、カメラにより撮影された撮像写真を用いて光源出力値を決定してもよい。また、分割映像ごとに明るさとブランク率を用いて評価点を付け、評価点が最も低いプロジェクタに合わせて光源出力値を調整してもよいし、評価点の平均値に対応するように光源出力値を調整してもよい。評価点は例えば、映像が暗いほど低く、ブランク率が大きいほど低くなるように付ければよい。 In step S15, the light source output acquisition unit 333 determines the light source output value using the maximum blank rate. The method for determining the light source output value is the same as in Example 1, so the explanation will be omitted. Note that, as described in the first embodiment, the light source output value may be determined using a photograph taken by a camera. Alternatively, you can assign an evaluation score to each divided image using brightness and blanking rate, and adjust the light source output value to match the projector with the lowest evaluation score, or adjust the light source output value to correspond to the average value of the evaluation points. You may adjust the value. For example, the evaluation score may be set so that the darker the image is, the lower the evaluation score is, and the higher the blank ratio is, the lower the evaluation score is.

ステップＳ１６では、制御部３３０は、通信部３０４を介して各プロジェクタに対して光源出力値を指示する。各プロジェクタは、受信した光源出力値を用いて光源発光量を調整する。 In step S16, the control unit 330 instructs each projector through the communication unit 304 to specify a light source output value. Each projector adjusts the amount of light emitted by the light source using the received light source output value.

以上説明したように、本実施例の構成によれば、複数の投写装置を用いる場合でも黒浮きを抑制可能である。 As described above, according to the configuration of this embodiment, it is possible to suppress black floating even when a plurality of projection devices are used.

なお、本実施例では、制御装置３０１が幾何補正機能を有するが、プロジェクタが幾何補正機能を有してもよい。この場合、図１３（ａ）に示されるように、各プロジェクタをデイジーチェーン接続で映像信号３０を伝送し、各プロジェクタが映像信号３０を幾何補正し、それぞれの担当領域を１９２０×１０８０のサイズで切り出して投写すればよい。 Note that in this embodiment, the control device 301 has a geometric correction function, but the projector may also have a geometric correction function. In this case, as shown in FIG. 13(a), each projector is connected in a daisy chain to transmit the video signal 30, each projector performs geometric correction on the video signal 30, and the area it is responsible for is set to a size of 1920 x 1080. All you have to do is cut it out and project it.

図１４は、本実施例のプロジェクタ３００ａの変形例のブロック図である。プロジェクタ３００ａは、図１１の構成に加え、幾何補正部１２４、映像切り出し部４０１、及び映像出力ＩＦ部４０２を備える。映像切り出し部４０１は、幾何補正映像３１から所定の範囲を切り出す。映像出力ＩＦ部４０２は、後段のプロジェクタに映像信号３０をそのまま出力する。また、制御部１３０は、制御装置３０１に設けられた制御部３３０と同等の機能を有する。 FIG. 14 is a block diagram of a modification of the projector 300a of this embodiment. In addition to the configuration shown in FIG. 11, the projector 300a includes a geometric correction section 124, a video cutout section 401, and a video output IF section 402. The video clipping unit 401 clips a predetermined range from the geometrically corrected video 31. The video output IF unit 402 outputs the video signal 30 as it is to a subsequent projector. Further, the control unit 130 has the same function as the control unit 330 provided in the control device 301.

光源出力値の取得は例えば、デイジーチェーンの最初段のプロジェクタが行い、映像信号３０と共に他のプロジェクタに命令を送信してもよい。各プロジェクタが自身の光源出力値を取得後、ネットワークを介してプライマリとなるプロジェクタが集計し各光源出力値の平均値となる光源出力値を返してもよい。 The light source output value may be acquired, for example, by the projector at the first stage of the daisy chain, and a command may be transmitted along with the video signal 30 to other projectors. After each projector obtains its own light source output value, the primary projector may aggregate it via the network and return a light source output value that is the average value of each light source output value.

また、図１３（ｂ）に示されるように、最初段のプロジェクタが幾何補正の実行及び光源出力値の取得を行い、他のプロジェクタに幾何補正映像３１及び光源出力値を送信してもよい。図１３（ｂ）の構成では、映像出力ＩＦ部４０２は幾何補正映像３１を出力する。 Alternatively, as shown in FIG. 13B, the first-stage projector may perform geometric correction and obtain the light source output value, and may transmit the geometrically corrected image 31 and the light source output value to other projectors. In the configuration of FIG. 13(b), the video output IF unit 402 outputs the geometrically corrected video 31.

プロジェクタに幾何補正機能を持たせることで、制御装置３０１が不要となり、構成を簡略化しつつ黒浮きを抑制可能である。
［その他の実施例］
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。 By providing the projector with a geometric correction function, the control device 301 becomes unnecessary, and it is possible to suppress black floating while simplifying the configuration.
[Other Examples]
The present invention provides a system or device with a program that implements one or more of the functions of the above-described embodiments via a network or storage medium, and one or more processors in the computer of the system or device reads and executes the program. This can also be achieved by processing. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

本実施形態の開示は、以下の構成及び方法を含む。
（構成１）
光源からの光により照明される光変調素子と、前記光源からの光のうち被投写面に導かれる光の光量を変更する調光部とを備え、幾何補正された入力映像を含む幾何補正映像に基づく投写映像を投写する投写装置を制御するための制御装置であって、
前記入力映像に対する幾何補正に関する情報を取得する第１取得部と、
前記幾何補正に関する情報を用いて、前記調光部に前記光量を変更させる変更部とを有することを特徴とする制御装置。
（構成２）
前記幾何補正に関する情報は、前記幾何補正映像に対する幾何補正された前記入力映像を含む領域以外の領域の比率に関する情報であることを特徴とする請求項１に記載の制御装置。
（構成３）
前記幾何補正に関する情報は、前記幾何補正映像の面積に対する幾何補正された前記入力映像を含む領域以外の領域の面積の比率に関する情報であることを特徴とする請求項１又は２に記載の制御装置。
（構成４）
前記幾何補正に関する情報は、前記幾何補正映像に含まれる前記光変調素子の画素の数に対する幾何補正された前記入力映像を含む領域以外の領域に含まれる前記光変調素子の画素の数の比率に関する情報であることを特徴とする構成１又は２に記載の制御装置。
（構成５）
前記幾何補正に関する情報は、前記入力映像と前記幾何補正映像との差分を用いて取得されることを特徴とする構成１乃至４の何れか一つの構成に記載の制御装置。
（構成６）
前記幾何補正に関する情報は、前記幾何補正映像におけるフレームの差分を用いて取得されることを特徴とする構成１乃至４の何れか一つの構成に記載の制御装置。
（構成７）
前記入力映像に対する幾何補正は、キーストン補正であることを特徴とする構成１乃至６の何れか一つの構成に記載の制御装置。
（構成８）
前記入力映像に対する幾何補正は、ワーピング補正であることを特徴とする構成１乃至６の何れか一つの構成に記載の制御装置。
（構成９）
前記入力映像に対する幾何補正は、アスペクト変換であることを特徴とする構成１乃至６の何れか一つの構成に記載の制御装置。
（構成１０）
前記入力映像に対する幾何補正は、射影変換であることを特徴とする構成１乃至６の何れか一つの構成に記載の制御装置。
（構成１１）
前記入力映像に対する幾何補正は、前記入力映像にマスク画像を重畳させるマスク処理であることを特徴とする構成１乃至６の何れか一つの構成に記載の制御装置。
（構成１２）
前記変更部は、前記比率が所定値より大きい場合、前記調光部に前記光量を下げさせることを特徴とする構成２乃至４の何れか一つの構成に記載の制御装置。
（構成１３）
前記変更部は、前記比率が所定値より小さい場合、前記調光部に前記光量を変更させないことを特徴とする構成２乃至４、１２の何れか一つの構成に記載の制御装置。
（構成１４）
前記入力映像の輝度情報を取得する第２取得部を更に有し、
前記変更部は、前記輝度情報を用いて、前記調光部に前記光量を変更させることを特徴とする構成１乃至１３の何れか一つの構成に記載の制御装置。
（構成１５）
前記変更部は、前記入力映像の輝度が所定値より低い場合、前記調光部に前記光量を下げさせることを特徴とする構成１４に記載の制御装置。
（構成１６）
前記輝度情報は、前記入力映像のメタデータから取得される動的又は静的の前記入力映像の最大輝度と平均輝度であることを特徴とする構成１４又は１５に記載の制御装置。
（構成１７）
前記輝度情報は、前記入力映像のメタデータから取得される動的又は静的の前記入力映像の最大輝度と平均輝度とを用いて算出される輝度分布の重心値であることを特徴とする構成１４又は１５に記載の制御装置。
（構成１８）
前記輝度情報は、前記入力映像の輝度分布に関する統計量であることを特徴とする構成１４又は１５に記載の制御装置。
（構成１９）
前記輝度情報は、前記被投写面を撮影して得られる情報であることを特徴とする構成１４又は１５に記載の制御装置。
（構成２０）
幾何補正された入力映像を含む幾何補正映像に基づく投写映像を投写する投写装置であって、
構成１乃至１９の何れか一つの構成に記載の制御装置と、
光源からの光により照明される光変調素子と、
前記光源からの光のうち被投写面に導かれる光の光量を変更する調光部とを有することを特徴とする投写装置。
（構成２１）
前記調光部は、前記光源に印加する電流又は電圧を調整することで前記光量を変更することを特徴とする構成２０に記載の投写装置。
（構成２２）
前記調光部は、前記光源からの光を前記光変調素子に導く光路上に設置された絞り機構を用いて前記光量を変更することを特徴とする構成２０又は２１に記載の投写装置。
（構成２３）
前記調光部は、前記光源からの光を前記光変調素子に導く光路上に設置された光量カットフィルターを用いて前記光量を変更することを特徴とする構成２０乃至２２の何れか一つの構成に記載の投写装置。
（構成２４）
光源からの光により照明される光変調素子と、前記光源からの光のうち投写面に導かれる光の光量を変更する調光部とを備え、幾何補正された入力映像を含む幾何補正映像に基づく投写映像を投写する投写装置と、
構成１乃至１９の何れか一つの構成に記載の制御装置とを有することを特徴とする投写システム。
（方法１）
光源からの光により照明される光変調素子と、前記光源からの光のうち被投写面に導かれる光の光量を変更する調光部とを備え、幾何補正された入力映像を含む幾何補正映像に基づく投写映像を投写する投写装置を制御するための制御方法であって、
前記入力映像に対する幾何補正に関する情報を取得するステップと、
前記幾何補正に関する情報を用いて、前記調光部に前記光量を変更させるステップとを有することを特徴とする制御方法。
（構成２５）
方法１に記載の制御方法をコンピュータに実行させることを特徴とするプログラム。 The disclosure of this embodiment includes the following configuration and method.
(Configuration 1)
A geometrically corrected image including a geometrically corrected input image, comprising a light modulation element that is illuminated by light from a light source, and a light control unit that changes the amount of light guided to a projection surface out of the light from the light source. A control device for controlling a projection device that projects a projected image based on
a first acquisition unit that acquires information regarding geometric correction for the input video;
A control device comprising: a changing unit that causes the light adjustment unit to change the amount of light using information regarding the geometric correction.
(Configuration 2)
2. The control device according to claim 1, wherein the information regarding the geometric correction is information regarding a ratio of an area other than an area including the geometrically corrected input image to the geometrically corrected image.
(Configuration 3)
The control device according to claim 1 or 2, wherein the information regarding the geometric correction is information regarding a ratio of the area of an area other than the area including the geometrically corrected input image to the area of the geometrically corrected image. .
(Configuration 4)
The information regarding the geometric correction relates to the ratio of the number of pixels of the light modulation element included in an area other than the area including the geometrically corrected input image to the number of pixels of the light modulation element included in the geometrically corrected image. The control device according to configuration 1 or 2, wherein the control device is information.
(Configuration 5)
5. The control device according to any one of configurations 1 to 4, wherein the information regarding the geometric correction is obtained using a difference between the input image and the geometric correction image.
(Configuration 6)
5. The control device according to any one of configurations 1 to 4, wherein the information regarding the geometric correction is acquired using a frame difference in the geometric correction video.
(Configuration 7)
7. The control device according to any one of configurations 1 to 6, wherein the geometric correction to the input video is keystone correction.
(Configuration 8)
7. The control device according to any one of configurations 1 to 6, wherein the geometric correction to the input video is warping correction.
(Configuration 9)
7. The control device according to any one of configurations 1 to 6, wherein the geometric correction for the input video is aspect conversion.
(Configuration 10)
7. The control device according to any one of configurations 1 to 6, wherein the geometric correction for the input video is projective transformation.
(Configuration 11)
7. The control device according to any one of configurations 1 to 6, wherein the geometric correction to the input video is mask processing in which a mask image is superimposed on the input video.
(Configuration 12)
5. The control device according to any one of configurations 2 to 4, wherein the changing unit causes the light adjustment unit to lower the light amount when the ratio is larger than a predetermined value.
(Configuration 13)
13. The control device according to any one of configurations 2 to 4 and 12, wherein the changing unit does not cause the light adjustment unit to change the light amount when the ratio is smaller than a predetermined value.
(Configuration 14)
further comprising a second acquisition unit that acquires luminance information of the input video,
14. The control device according to any one of configurations 1 to 13, wherein the changing unit causes the light control unit to change the amount of light using the brightness information.
(Configuration 15)
15. The control device according to configuration 14, wherein the changing unit causes the light adjustment unit to lower the light amount when the brightness of the input image is lower than a predetermined value.
(Configuration 16)
16. The control device according to configuration 14 or 15, wherein the brightness information is a maximum brightness and an average brightness of the dynamic or static input video acquired from metadata of the input video.
(Configuration 17)
A configuration characterized in that the brightness information is a centroid value of a brightness distribution calculated using a maximum brightness and an average brightness of the dynamic or static input video acquired from metadata of the input video. 16. The control device according to 14 or 15.
(Configuration 18)
16. The control device according to configuration 14 or 15, wherein the brightness information is a statistic regarding a brightness distribution of the input video.
(Configuration 19)
16. The control device according to configuration 14 or 15, wherein the brightness information is information obtained by photographing the projection surface.
(Configuration 20)
A projection device that projects a projected image based on a geometrically corrected image including a geometrically corrected input image,
A control device according to any one of configurations 1 to 19,
a light modulation element illuminated by light from a light source;
A projection device comprising: a light control section that changes the amount of light guided to a projection surface out of the light from the light source.
(Configuration 21)
21. The projection device according to configuration 20, wherein the light control unit changes the amount of light by adjusting the current or voltage applied to the light source.
(Configuration 22)
22. The projection device according to configuration 20 or 21, wherein the light control unit changes the amount of light using a diaphragm mechanism installed on an optical path that guides light from the light source to the light modulation element.
(Configuration 23)
Any one of configurations 20 to 22, wherein the light control unit changes the amount of light using a light amount cut filter installed on an optical path that guides the light from the light source to the light modulation element. The projection device described in .
(Configuration 24)
A light modulation element that is illuminated by light from a light source, and a light control unit that changes the amount of light guided to a projection surface among the light from the light source, and provides a geometrically corrected image including a geometrically corrected input image. a projection device that projects a projected image based on the
20. A projection system comprising the control device according to any one of configurations 1 to 19.
(Method 1)
A geometrically corrected image including a geometrically corrected input image, comprising a light modulation element that is illuminated by light from a light source, and a light control unit that changes the amount of light guided to a projection surface out of the light from the light source. A control method for controlling a projection device that projects a projected image based on
obtaining information regarding geometric correction for the input video;
A control method comprising the step of causing the light adjustment section to change the amount of light using the information regarding the geometric correction.
(Configuration 25)
A program that causes a computer to execute the control method described in Method 1.

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。 Although preferred embodiments of the present invention have been described above, the present invention is not limited to these embodiments, and various modifications and changes can be made within the scope of the invention.

１１，３１ 幾何補正映像
１２，３２ 投写映像
１３ スクリーン（被投写面）
１００，３００ａ，３００ｂ，３００ｃ，３００ｄ プロジェクタ
１０１ 光変調パネル（光変調素子）
１０５ 光源駆動部（調光部）
１０６ 光源
１２５ パネル駆動部
１３０，３３０ 制御部（制御装置）
１３２，３３２ ブランク率取得部（第１取得部）
１３３，３３３ 光源出力取得部（変更部）
11, 31 Geometrically corrected image 12, 32 Projected image 13 Screen (projection surface)
100, 300a, 300b, 300c, 300d Projector 101 Light modulation panel (light modulation element)
105 Light source drive unit (light control unit)
106 Light source 125 Panel drive unit 130, 330 Control unit (control device)
132,332 Blank rate acquisition section (first acquisition section)
133,333 Light source output acquisition unit (change unit)