2
2

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

PythonのFastAIの使い方初心者向け

Posted at

第1章: fastaiとは何か

fastaiは、ディープラーニングを簡単に始められるPythonライブラリです。PyTorchをベースに構築されており、複雑な機械学習タスクを数行のコードで実現できます。初心者にも使いやすく設計されていますが、同時に高度な機能も備えています。

fastaiの特徴は、「トップダウンアプローチ」を採用していることです。つまり、まず全体像を把握してから詳細に入っていくという学習方法を推奨しています。これにより、ユーザーは早い段階で実用的なモデルを作成でき、その後徐々に理解を深めていくことができます。

以下は、fastaiをインストールし、バージョンを確認する基本的なコードです:

!pip install fastai
import fastai
print(fastai.__version__)

第2章: fastaiのインストールと環境設定

fastaiを使用するには、まずPythonとPyTorchがインストールされている必要があります。その上でfastaiをインストールします。最も簡単な方法は、pipを使用することです。

環境設定では、GPUの使用が推奨されます。GPUを使用することで、モデルの学習が大幅に高速化されます。Google Colabを使用する場合は、GPUが利用可能です。

以下のコードで、環境設定とGPUの確認を行います:

import torch
from fastai.vision.all import *

print(f"PyTorch version: {torch.__version__}")
print(f"fastai version: {fastai.__version__}")
print(f"GPU available: {torch.cuda.is_available()}")

第3章: データの準備と前処理

fastaiでは、データの準備と前処理が非常に簡単です。DataLoaderと呼ばれるクラスを使用して、データを効率的に読み込みます。

画像分類を例にとると、以下のようにデータを準備します:

from fastai.vision.all import *

# データセットのダウンロードと解凍
path = untar_data(URLs.PETS)/'images'

# データの準備
dls = ImageDataLoaders.from_folder(path, valid_pct=0.2, seed=42, 
                                   item_tfms=Resize(224), batch_tfms=aug_transforms())

# データの確認
dls.show_batch(max_n=4, figsize=(10,8))

このコードでは、PETSデータセットをダウンロードし、画像を224x224にリサイズしています。また、データ拡張(augmentation)も適用しています。

第4章: モデルの作成

fastaiでは、事前学習済みのモデルを簡単に使用できます。以下は、ResNet34を使用した画像分類モデルの作成例です:

learn = cnn_learner(dls, resnet34, metrics=error_rate)

この1行で、ResNet34をベースとした畳み込みニューラルネットワーク(CNN)モデルが作成されます。metrics=error_rateは、モデルの評価指標としてエラー率を使用することを指定しています。

第5章: モデルの学習

fastaiでは、fitメソッドを使用してモデルを学習させます。以下は、モデルを5エポック学習させる例です:

learn.fit(5)

このシンプルなコードの背後では、学習率の自動調整、早期停止、モデルの保存など、多くの最適化が行われています。

第6章: 学習率の探索

適切な学習率を選択することは、モデルの性能に大きな影響を与えます。fastaiには、最適な学習率を見つけるためのlr_findメソッドが用意されています:

learn.lr_find()

このコードを実行すると、学習率と損失の関係を示すグラフが表示されます。通常、損失が最も急激に減少する点の少し前の学習率を選択します。

第7章: ファインチューニング

転移学習を行う際、モデルの一部をフリーズ(凍結)し、残りの部分だけを学習させることができます。これをファインチューニングと呼びます。

learn.freeze()
learn.fit_one_cycle(3)
learn.unfreeze()
learn.fit_one_cycle(3, lr_max=slice(1e-6,1e-4))

このコードでは、まずモデルの大部分をフリーズして3エポック学習し、その後全層をアンフリーズして再度3エポック学習しています。

第8章: モデルの評価

モデルの性能を評価するには、validateメソッドを使用します:

learn.validate()

このメソッドは、検証セットに対するモデルの性能を表示します。また、混同行列を表示するには以下のコードを使用します:

interp = ClassificationInterpretation.from_learner(learn)
interp.plot_confusion_matrix()

第9章: 予測の実行

学習したモデルを使用して新しいデータに対する予測を行うには、predictメソッドを使用します:

img = PILImage.create('path/to/image.jpg')
pred,pred_idx,probs = learn.predict(img)
print(f"予測: {pred}; 確率: {probs[pred_idx]:.4f}")

このコードは、指定した画像に対する予測クラスとその確率を表示します。

第10章: データ拡張

データ拡張は、訓練データを人工的に増やすテクニックです。fastaiでは、aug_transforms関数を使用して簡単にデータ拡張を適用できます:

dls = ImageDataLoaders.from_folder(path, valid_pct=0.2, seed=42,
                                   item_tfms=Resize(224),
                                   batch_tfms=aug_transforms(mult=2, flip_vert=True, max_rotate=20))

このコードでは、画像の水平・垂直フリップ、回転、ズームなどの拡張を適用しています。

第11章: コールバックの使用

コールバックは、学習プロセスの特定のポイントで実行される関数です。fastaiには多くの組み込みコールバックがあります。例えば、SaveModelCallbackは最良のモデルを自動的に保存します:

learn = cnn_learner(dls, resnet34, metrics=error_rate, 
                    cbs=[SaveModelCallback(monitor='error_rate', comp=np.less)])
learn.fit(5)

このコードでは、エラー率が最も低いモデルが自動的に保存されます。

第12章: 学習の再開

学習を中断した後、再開したい場合があります。fastaiでは以下のように簡単に学習を再開できます:

learn.load('model_name')
learn.fit(3)

このコードは、保存されたモデルを読み込み、そこから学習を3エポック続けます。

第13章: テキスト分類

fastaiは画像だけでなく、テキストデータの処理も得意です。以下は、IMDBデータセットを使用したテキスト分類の例です:

from fastai.text.all import *

dls = TextDataLoaders.from_folder(untar_data(URLs.IMDB), valid='test')
learn = text_classifier_learner(dls, AWD_LSTM, drop_mult=0.5, metrics=accuracy)
learn.fit_one_cycle(1, 2e-2)

このコードは、LSTM(Long Short-Term Memory)モデルを使用してIMDBの映画レビューを肯定的または否定的に分類します。

第14章: 表形式データの処理

fastaiは表形式データ(例:CSVファイル)の処理もサポートしています。以下は、Adult Censusデータセットを使用した例です:

from fastai.tabular.all import *

path = untar_data(URLs.ADULT_SAMPLE)
dls = TabularDataLoaders.from_csv(path/'adult.csv', path=path, y_names="salary",
    cat_names = ['workclass', 'education', 'marital-status', 'occupation', 'relationship', 'race'],
    cont_names = ['age', 'fnlwgt', 'education-num'],
    procs = [Categorify, FillMissing, Normalize])

learn = tabular_learner(dls, metrics=accuracy)
learn.fit_one_cycle(3)

このコードは、個人の特徴から年収が50,000ドルを超えるかどうかを予測するモデルを作成します。

第15章: 協調フィルタリング

推薦システムの基本的なアプローチである協調フィルタリングも、fastaiで簡単に実装できます:

from fastai.collab import *

dls = CollabDataLoaders.from_csv(path/'ratings.csv')
learn = collab_learner(dls, n_factors=50, y_range=(0.5,5.5))
learn.fit_one_cycle(5)

このコードは、ユーザーと商品の潜在因子を学習し、評価を予測するモデルを作成します。

第16章: セグメンテーション

画像セグメンテーションは、画像の各ピクセルにラベルを割り当てるタスクです。fastaiでは以下のように実装できます:

path = untar_data(URLs.CAMVID_TINY)
dls = SegmentationDataLoaders.from_label_func(
    path, bs=8, fnames = get_image_files(path/"images"),
    label_func = lambda o: path/'labels'/f'{o.stem}_P{o.suffix}',
    codes = np.loadtxt(path/'codes.txt', dtype=str)
)

learn = unet_learner(dls, resnet34)
learn.fine_tune(8)

このコードは、道路画像のセグメンテーションを行うU-Netモデルを作成します。

第17章: GANの実装

Generative Adversarial Network (GAN)も、fastaiで実装できます。以下は簡単な例です:

from fastai.vision.gan import *

dls = ImageDataLoaders.from_folder(path)
generator = basic_generator(64, 3, n_extra_layers=1)
critic = basic_critic(64, 3, n_extra_layers=1)
learn = GANLearner.wgan(dls, generator, critic, opt_func=Adam)
learn.fit(20)

このコードは、WGAN(Wasserstein GAN)を実装し、新しい画像を生成するモデルを作成します。

第18章: 自然言語処理の高度なタスク

fastaiは、より高度な自然言語処理タスクもサポートしています。以下は、テキスト生成の例です:

from fastai.text.all import *

dls = TextDataLoaders.from_folder(path, bs=32, seq_len=80)
learn = language_model_learner(dls, AWD_LSTM, drop_mult=0.3, metrics=[accuracy, Perplexity()])
learn.fit_one_cycle(1, 5e-3)

TEXT = "I believe the meaning of life is"
N_WORDS = 40
N_SENTENCES = 2

print("\n".join(learn.predict(TEXT, N_WORDS, temperature=0.7) for _ in range(N_SENTENCES)))

このコードは、与えられたテキストの続きを生成するモデルを作成します。

第19章: カスタムモデルの作成

fastaiでは、カスタムモデルの作成も簡単です。以下は、簡単なカスタムモデルの例です:

from fastai.vision.all import *

class MyModel(nn.Module):
    def __init__(self):
        super().__init__()
        self.conv1 = nn.Conv2d(3, 6, 5)
        self.pool = nn.MaxPool2d(2, 2)
        self.conv2 = nn.Conv2d(6, 16, 5)
        self.fc1 = nn.Linear(16 * 5 * 5, 120)
        self.fc2 = nn.Linear(120, 84)
        self.fc3 = nn.Linear(84, 10)

    def forward(self, x):
        x = self.pool(F.relu(self.conv1(x)))
        x = self.pool(F.relu(self.conv2(x)))
        x = x.view(-1, 16 * 5 * 5)
        x = F.relu(self.fc1(x))
        x = F.relu(self.fc2(x))
        x = self.fc3(x)
        return x

learn = Learner(dls, MyModel(), loss_func=nn.CrossEntropyLoss(), metrics=accuracy)
learn.fit(5)

このコードは、簡単な畳み込みニューラルネットワークを定義し、それをfastaiのLearnerで学習させています。

第20章: モデルの解釈と可視化

モデルの解釈は、機械学習において非常に重要です。fastaiには、モデルの決定を理解するためのツールが用意されています:

from fastai.vision.all import *

learn = cnn_learner(dls, resnet34, metrics=error_rate)
learn.fit_one_cycle(3)

# 混同行列の表示
interp = ClassificationInterpretation.from_learner(learn)
interp.plot_confusion_matrix()

# 最も誤分類された画像の表示
interp.plot_top_losses(9, figsize=(15,11))

# Grad-CAMを使用した特徴マップの可視化
learn.predict('path/to/image.jpg')
learn.show_results(ds_idx=1, nrows=3, figsize=(8,9))

このコードでは、混同行列、最も誤分類された画像、そしてGrad-CAM(Gradient-weighted Class Activation Mapping)を使用した特徴マップの可視化を行っています。これらのツールを使用することで、モデルがどのような特徴に注目して判断を下しているかを理解することができます。

以上で、fastaiに関する20章からなる詳細な解説が完了しました。各章で、fastaiの主要な機能と使用方法について、コード例とともに説明しました。fastaiは非常に強力で使いやすいライブラリであり、これらの知識を活用することで、様々な機械学習タスクを効率的に実装することができます。

fastaiの哲学は「実践を通じて学ぶ」ことです。この記事で紹介したコードを実際に試し、自分のプロジェクトに適用してみることをお勧めします。そうすることで、理論と実践の両面からディープラーニングの理解を深めることができるでしょう。

また、fastaiは常に進化を続けているライブラリです。公式ドキュメントやフォーラムを定期的にチェックし、最新の機能や best practices を学び続けることが重要です。

ディープラーニングの旅を楽しんでください!fastaiを使うことで、複雑な問題に取り組む際の障壁が大きく下がり、より創造的で革新的なソリューションを生み出すことができるはずです。

2
2
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
2
2

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?