サイトを巡回してすべてのリンクを検証するリンク切れチェッカー

汎用AIがリンクチェックでつまずく理由

リンクが有効かどうかは、推論ではわかりません。そのアドレスにリクエストを送り、返ってくる結果を見るしかありません。AIチャットアシスタントは、たとえブラウズ機能があっても、1回の回答で行えるリクエストはせいぜい数件です。小規模なサイトでもリンクは数百件、何年も続いているブログなら数千件にのぼります。

そのため、チャットボットにサイトのリンク切れを探すよう頼むと、できる範囲のことをします。トップページを開いて数件のリンクを見たり、古そうなアドレスや形が不自然なアドレスを指摘したり、自分でリンクをチェックする方法を説明したりします。いずれも、実際にエラーになるリンクの一覧ではありません。しかも「リンク切れのようです」という推測は、結局手作業で確かめる必要があります。

このチェッカーは、面倒な作業をすべて代行します。入力されたアドレスから始めて内部リンクをページごとにたどり、見つけたリンクをすべて集めます。重複を除いた各アドレスに1回ずつリクエストを送り、リダイレクトは最終的な行き先までたどります。エラーになったものは、サーバーが返した正確なステータスとともに報告します。

主な用途

• リニューアル、移行、URL構成の変更後に404を見つける
• 参照先が消えてしまった過去のブログ記事を整理する
• 公開前やキャンペーン前のリンクチェック
• 企業サイトの定期的なSEOメンテナンス
• 他の人から引き継いだばかりのサイトを点検する
• クライアント向けレポート用の改善前後のリスト作成

結果の見方

404はそのアドレスがすでに存在しないこと、410は意図的に削除されたことを意味します。どちらもリンク切れですので、リンクを更新するか削除してください。5xxは相手側サーバーのエラー、「応答なし」はサイトがまったく応答しなかったことを示します。一時的な場合もあるため、削除する前にブラウザで開いて確認してください。

401、403、429は別の扱いになります。これらは、相手のサイトが私たちのチェックを拒否した、またはリクエスト数を制限したことを意味します。大規模なサイトやSNSでは、自動リクエストに対してよくあることです。こうしたリンクはリンク切れではなく「ブロックされたもの」として別枠で掲載します。多くはブラウザでは普通に開けます。

「掲載ページ」と「リンクテキスト」の列で、どこを修正すればよいかがわかります。フッターのリンクのように、同じリンク切れが多くのページに出てくる場合、レポートにはそのうちの数ページを掲載し、全ページは掲載しません。

チェックできること、できないこと

チェッカーは、各ページが配信するHTMLを読み取り、そこに含まれる通常のリンクをテストします。JavaScriptの実行後にはじめて表示されるリンクは検出できない場合があり、画像、スクリプト、スタイルシートはテスト対象外です。メールや電話のリンクはスキップします。ログインが必要なページは巡回しません。

1件の作業ごとに1つのサイトをクロールします。入力したアドレスを起点に、ご利用プランのページ数上限までを対象とします。サイトのページ数が上限を超える場合は、先に到達したページからチェックします。リンク切れを報告するのみで、修正は行いません。修正はご自身のサイトで行ってください。