Webスクレイピング&ファイル名一覧獲得

Webスクレイピング

Beautiful Soupについて：https://gammasoft.jp/blog/difference-find-and-select-in-beautiful-soup-of-python/

code

#4travelの場合
import requests
from bs4 import BeautifulSoup

url = 'https://4travel.jp/dm_shisetsu/10002779#contents_top'
r = requests.get(url)
soup = BeautifulSoup(r.text, "html.parser")
reviews = soup.select('[class="shisetsu_reviewItem"]')
print(reviews)

例

[<li class="shisetsu_reviewItem">
<div class="review_summaryBox is_reviewCaption">
<div class="u_titleWrap">
<h3 class="u_titleItem">
...

ファイル名一覧獲得