- AIでデータ分析-データ前処理(57)-ベクトル化：Bag Of Words
- 用いるデータの紹介
- Pythonで実装
- AIの活用：geminiを活用
- まとめ
AIでデータ分析-データ前処理AIでデータ分析-データ前処理(57)-ベクトル化：Bag Of Words
今回はデータの前処理でよく行われるチェックリスト(57)-ベクトル化：Bag Of Words をAIを用いて行ってみたいと思います。
AIを用いることでいかに効率化できるのか、体験していただければと思います。
所要時間は30分ほどとなっています。
それでは、さっそく始めていきましょう！
データの紹介
今回用いる前処理練習用のcsvデータです。
サンプルデータはこちらから、チェックリストはこちらからダウンロードできます。
1行が1訪問を表すデータになっています。
Pythonで実装
まずはPythonで実行します。
所要時間20分でした。
AIの活用：geminiを活用
今度は同じことがAIでもできるか下記のようにgeminiに依頼します。
結果を確認します。
抽出された単語が自身で行ったときは29単語だったのに対し、AIに依頼した場合は28単語（愚弟的には「待ち」と「時間」が「待ち時間」にまとめられていた違いと、「品揃え」が「揃え」になって抽出された違いがありました。）となっていました。入力データの前処理のずれが原因と考えられますが、大枠で同じ結果を得られることが確認できました。
所要時間2分でした。
まとめ
今回は前処理練習用のデータに対し、前処理チェックリスト(57)-ベクトル化：Bag Of Words をAIを用いてできるか試しました。
結果はAIで代替できることを確認することができました。
AIでできることとできないことを把握し、うまく活用することで、データ分析もかなり効率化できそうですね！
AIでデータ分析-データの前処理(57)-ベクトル化：Bag Of Words は以上となります！