Help us understand the problem. What is going on with this article?

wgetでWebサイトのリンク切れをチェック

More than 3 years have passed since last update.

wgetは --spider オプションをつけると、指定したURLのリンクの存在をチェックします。
そして --recursive オプションをつけると、URLのHTMLを解釈してリンクを再帰的に辿ります。
--spiderオプションと --recursive オプションを組み合わせることで、Webサイトのリンク切れをチェックできます。

例を次に示します。

wget \
  --spider \
  --recursive \
  --level=inf \
  --no-verbose \
  --execute robots=off \
  localhost:8000
  • --level=inf: --recursive オプションでたどる深さを上限なしに
  • --no-verbose: 出力を簡素に
  • --execute robots=off: robots.txt を取得しない

JavaScriptの実行などはしないため、動的に作られるリンクを調べることはできません。
しかしこのテクニックを使うと、CIなどで事前にリンク切れを検知することができます。
Jekyll、Middleman、MkDocsといったページジェネレータなどでその威力を発揮します。

Why not register and get more from Qiita?
  1. We will deliver articles that match you
    By following users and tags, you can catch up information on technical fields that you are interested in as a whole
  2. you can read useful information later efficiently
    By "stocking" the articles you like, you can search right away
Comments
No comments
Sign up for free and join this conversation.
If you already have a Qiita account
Why do not you register as a user and use Qiita more conveniently?
You need to log in to use this function. Qiita can be used more conveniently after logging in.
You seem to be reading articles frequently this month. Qiita can be used more conveniently after logging in.
  1. We will deliver articles that match you
    By following users and tags, you can catch up information on technical fields that you are interested in as a whole
  2. you can read useful information later efficiently
    By "stocking" the articles you like, you can search right away
ユーザーは見つかりませんでした