LoginSignup
1
0

More than 5 years have passed since last update.

Image Generation from Scene Graphsを読んだ

Last updated at Posted at 2018-05-11

Justin Johnson, Agrim Gupta, Li Fei-Fei, CVPR2018
arxiv, pdf

1.どんなもの?

シーングラフから画像を生成する.

2.先行研究と比べてどこがすごいの?

複雑な文章を再現できる.
image.png

3.技術や手法のキモはどこにあるか?

image.png

1.グラフ構造のを処理する方法を開発

image.png
グラフ畳み込みネットワークで処理.
画像のCNNのように,グラフのつながりに沿って畳み込みを行う.

2.生成された画像がグラフによって指定されたオブジェクトと関係するようにした

image.png
オブジェクトごとに荒い画像と,バウンディングボックスを予測し,バウンディングボックス内に画像を配置したレイアウト画像を作成する.
アップサンプリングする場合は各層で前の層からの入力と,ダウンサンプリングされたレイアウト画像を用いる.

3.合成画像が現実的であることを確認

ディスクリミネータを用いて学習することで現実的な画像を生成するよう訓練する.

4.どうやって有効だと検証した?

image.png

5.議論はあるか?

6.次に読むべき論文はあるか?

StackGAN: Text to Photo-realistic Image Synthesis with Stacked Generative Adversarial Networks

1
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
1
0