目的

競馬を統計的に予想したい！

何回かに分けて目的を達成してく予定

環境

参考サイト
レース結果テーブルの情報取得
https://stackoverflow.com/questions/21997587/beautifulsoup-get-text-from-find-all

スクリプトを作成する

使用方法は上記のREADMEを読んでいただければわかると思われる

$ python result_scraping.py

レース結果のURLを取得で作成したURLファイル(url_list.txt) に書かれたURLからレース結果を取得して、outputというディレクトリにcsv形式のファイルとして格納する
結果ファイルのフォーマットについては、GitHubにサンプルを挙げているのでそちらを参照ください

注意点

今回の目的は達成！

競馬を統計的に予想したい！

2. 1のURLからレース結果をスクレイピング <- 今回はこれが目的

次回は以下を実現する

3. 2のデータから統計モデルを作る

ラズパイ上で動作させることは必須ではないが、今後スタンドアローンで動かせるようにしていきたいため、ラズパイを使用 ↩
参考に今回の環境だと5年分のデータ取得に約1日かかった ↩
robots.txtがサイトのTOPに見当たらなかったため、sleepの時間は適当に設定しているが、サイトアクセスの回数がかなり多いため、時間を変更する場合はあまり短くしないように注意 ↩
数年分のデータであれば、100MBもあれば十分 ↩