深層学習における敵対的ネットワークを用いた漫画画像の自動カラー化

近年スマートフォンやタブレット端末と行った電子機器が発達し,雑誌で掲載されていた漫画を電子書籍で読むことが可能となっている.また雑誌を印刷する必要がなくなるために,カラー化した画像を使用しても印刷のコストが掛からなくなった.そこで従来の白黒で描かれた漫画画像をデジタル上で編集し,カラー化したものを電子書籍で扱うことが考えられる.この時,自動カラー化技術を用いれば,漫画をカラーにすることができれば,人的コストや作業時間を大幅に減らすことが可能となる.本研究では,深層学習を用いた漫画画像のカラー化について検討する.本システムは,モノクロの入力画像から,輪郭などの特徴情報を抽出するネットワークと,カラーの入力画像から色情報を抽出するネットワークからなる.この2つのネットワークの出力を,色付けを行うネットワークの入力とし,カラー画像を出力する.本システムは,敵対的ネットワークを用いた学習によって,自然なカラー化を可能とする点に特徴がある.また,色情報を抽出するネットワークの出力の分布が,事前分布になるように学習を行うことにより,事前分布からサンプリングした値に従った任意の色付けが可能であり,より自然なカラー化が可能となっている.