Pix2Pix

Pix2Pixは、Conditional GANを用いた画像変換技術の一種です。対のデータセットを使用して、あるドメインの画像から別のドメインの画像へ変換することを目的としています。例えば、白黒画像をカラー画像に変換したり、スケッチから実際の写真を生成したりといったタスクに高い効果を発揮します。

仕組みとしては、入力画像に対して出力画像の条件付けを行い、生成器と識別器が対立的に学習します。生成器にはU-Netアーキテクチャが採用されており、入力画像の特徴を保持したまま変換を行う工夫がなされています。識別器は、入力画像と生成された画像のペアが本物か偽物かを判定するように学習します。

G検定の視点では、生成モデルの代表的な応用事例として記憶しておくべき用語です。GANの基本的な仕組みを理解した上で、入力と出力のペアデータが必要であるという制約条件を把握しておくことが重要です。似た技術としてペアデータが不要なCycleGANとの違いを区別できるようにしておくと良いでしょう。