合成背景に人が溶け込むよう照明を調節する技術Googleが開発

Rate this post

「米Google Research」が開発した「Total Relighting」は、深層学習を使用して、人物の画像を切り取って別の背景に置き換えたときに被写体の照明を変更する技術だ。 静止画像だけでなく、動画内の動く人物も新しい背景照明と組み合わせて、快適な動画コンテンツを作成する。

撮影した人物を異なる背景に合成して実際に見えるようにする手法が主なクロマキー合成を使用する主な方法だが、被写体の照明が他の背景と重なると不自然になる。 

そのため、近年、機械学習を利用した再照明技術が積極的に導入されている。 このシステムは、画像から前景とアルファブラーを検出し、ターゲットの照明条件で前景を再照明して合成するようにトレーニングされた3つのモジュールで構成されている。