Requests-HTMLを使用してBeautifle SoupやSeleniumを使用せずに簡単にスクレイピングしてみます。
この記事をスクレイピングしてみます。
from requests_html import HTMLSession
session = HTMLSession()
r = session.get('https://jp.reuters.com/article/chile-google-idJPKCN1LT0E0')
article = r.html.find('.StandardArticleBody_body', first=True)
print(article.text)
実行結果
$ python3 scrape_reuter.py
［サンティアゴ １２日 ロイター］ - 米アルファベット(GOOGL.O)傘下のグーグルは、１億４０００万ドルを投じてチリのデータセンターを拡充すると発表した。同施設はグーグルにとって中南米唯一のデータセンター。
９月１２日、米アルファベット傘下のグーグルは、１億４０００万ドルを投じてチリのデータセンターを拡充すると発表した。写真はチューリッヒで５日撮影（２０１８年 ロイター／Arnd WIegmann）
今回の投資でサンティアゴ近郊のキリクラにあるデータセンターの規模を３倍の１１．２ヘクタールに広げる。拡張工事に伴い新たに１０００人余りの雇用が発生するほか、完成後に正規に１２０人を採用するという。
同センターはグーグルが１億５０００万ドルで建設し、２０１５年に全面操業を開始。１７年１月からはアタカマ地域の太陽光発電だけで運営されている。
チリのゼネラルマネージャー、エドガルド・フリアス氏は、チリでのデータセンター建設によるインフラの改善が、人工知能（ＡＩ）や機械学習の分野で処理能力向上に役立っていると述べた。
私たちの行動規範：トムソン・ロイター「信頼の原則」