講義「Machine learning for artists」とは?
ニューヨーク大学ITP(Interactive Telecommunications Program)の講義名です。
- 講師
- Gene Koganさん
- アーティスト、プログラマ
- openFrameworks,Processing,p5jsのcontributor
- 参考
授業動画
授業動画はYoutubeで公開されています。
ITP-NYU - Spring 2016
01 introduction, neural networks
- superviesd and unsuperviesed
- classification
- regression
- バスルームの数
- 家のlocation
- costをpredict
- Clustering
- unsupervised
- KMeans
- neural networks
- cnn
- speech recognition
- image competion
- image net
- classfiy accurate
- cnn
- a calculus of the nervous system
- ada lovelace
- how to annoy a neurroscientist101
- binary
-
ml4a :: Forward pass
- sigmoid
- 0~1の値になる
- ReLU
- ニューロンそれぞれは重みを持つ
- bias
- sigmoid
- MNIST
- ml4a :: MNIST demo
- 28 * 28 = 784pixels
- 1 hidden layer
- 15個ある
- 10 neuron output layer
- 54000のデータを学習
- 7に見えるけど2と判定されているものもある
- データの数を減らしてみる
- 一度に学習する数を多くしてみる
- back propagation
- 9のサンプル
- 1番目のニューロン
- ニューロンを介して値が変わる
- MNIST first layer
- 784pixel
- no hidden layer
- 10 output layer
- pixel1は一番左上のvalue
-
ml4a :: MNIST confusion
- top mistakesに間違いが表示される
- ml4a :: CIFAR-10 confusion
-
ConvNetJS: Deep Learning in your browser
- convnetJS
-
ml4a :: CIFAR weights
- 1024のinputs
- Convolutional neural networks
- ニューラルネットワークの一種
- correct weightを探すのは難しい
- 長い間うまくいかなかった
- facebook AIの研究者
- 1998年の論文
- Convntes do everything
- 自動運転
- DeepMind
- alpha go
- speech recognition
- deep dream
- memo aktenさんの画像
- CNN demo
- 犬の画像
- 一つ一つ違う犬のアウトライン
- 96パターンfilter
- 7 * 7フィルター
- sliceしoverlapping
- 7 * 7 regionでinput
- multiplyで1 pixelに変換
- mouse
- high feature
- pooling layer
- many pixels
- cnnが何層かある
- huge pixelになる
- faceだけが白くなる
- eye noseで顔は構成してる
- composition
- full connection
- get dump
- Fully connect layer
- 96filter
- very long
- 6 * 6 * 256
- final layer
- 1000class
- リアルタイムで物体を認識
- Instagramのハッシュタグを検索 thub.io/dev/demos/demo_forwardpass.html)
- sigmoid
- 0~1の値になる
- ReLU
- ニューロンそれぞれは重みを持つ
- bias
- 犬の画像
- MNIST
- ml4a :: MNIST demo
- 28 * 28 = 784pixels
- 1 hidden layer
- 15個ある
- 10 neuron output layer
- 54000のデータを学習
- 7に見えるけど2と判定されているものもある
- データの数を減らしてみる
- 一度に学習する数を多くしてみる
- back propagation
- 9のサンプル
- 1番目のニューロン
- ニューロンを介して値が変わる
- MNIST first layer
- 784pixel
- no hidden layer
- 10 output layer
- pixel1は一番左上のvalue
-
ml4a :: MNIST confusion
- top mistakesに間違いが表示される
- ml4a :: CIFAR-10 confusion
-
ConvNetJS: Deep Learning in your browser
- convnetJS
-
ml4a :: CIFAR weights
- 1024のinputs
- Convolutional neural networks
- Visualizing convnets
- zeiler fergus 2013
- which pixels affect the activations
- classify ipad
- which part
- gray boxが見える
- ポラメリアンの犬の画像
- actibateがoutput
- first layer
- 9weights
- どのfilterがいい感じか
- layer2でも同じことする
- Image generated by a cnn
- deep dream?
- どんな画像が犬に見えるのか
- Goolge Inceptionism classvis
- realy hight response starfish
- アリ
- バナナ
- パラシュート
- Deepdream
- super cool
- backprogation
- change weight
- 特定のレイヤーを最大化
- Deepdream noise
- mike tyka
- Deepdreamの実験スライド
- jaaga
- fireworks
- lake indawgyi
- 旅行の写真w
- Deepzoom
- Oscillating which layer to enhance
- Style Transfer
- ピカソ、語ってょ
- Mona lisa
- different
- Google maps
- Ryojiikeda
- Stlye net alice in wonderland
- Deep convolutional generative adverssarial network
- fake image
- perlino noiseで変える
- 5 dimension
- smmooth change
- bed room
- generating numbers
- mnistの数字作る
- interpolating numbers
- a book from the sky
- 漢字
- dataset
- left本物
- right generative
- A Book from the Sky | Gene Kogan
- loops around latent space
- Character interpolation
- 違う漢字同士でtransition
- Radical interpolations
- Arithmetic
- king - male + female = queen
- t-SNE
- reduce data dimensions
- coors converiging in 2d
- t-SNE Caltech-256animatils
- similar
- 2dにする
- birds
- t-SNE flower
- t-SNE ikea catalog
- クラスタリング
- t-sne impressioints
- t-sne satelite
- t-sne 10k forccesiong
- wiki-tsne
- wiki-tSNE
- tSNEでwikipediaをクラスタリング
- Face2Face
補足
t-SNE
- 次元圧縮を行うアルゴリズムの名前
- 高次元のデータをうまく可視化して分類できる
- 主成分分析ではごちゃごちゃになってしまう分類も綺麗に分類できる
- 主成分分析ではごちゃごちゃになってしまう分類も綺麗に分類できる
- 高次元のデータをうまく可視化して分類できる
- 確率分布を用いる
- 詳しいことはまだよくわからん
- 詳しいことはまだよくわからん
- 参考
- t-SNE を用いた次元圧縮方法のご紹介 | ALBERT Official Blog
-
Visualizing Data Using t-SNE
- 名大院生による論文紹介スライド
- 100枚のスライド
A book from the sky
- 天書
- アーティスト徐冰（Xu Bing、シュー・ビン）による作品
- fake kanjiを4000文字くらい作った
- Xu Bing, Book from the Sky, c. 1987-91 - YouTube
- xubingdotcom
Dataset
-
CAVE | Software: COIL-20: Columbia Object Image Library
- Coil-20 は、20 種類の物体を 5 度ずつ角度を変えて撮影した画像データセット
- The Olivetti faces dataset