ディレクトリ階層のクローラーへの影響と分け方の方法

こんにちは、もぐさです。

ディレクトリ構造はそのままWebサイトのURLの階層になります。
これはOSのディレクトリ構造のように、同じ種類の書類をカテゴリごとにフォルダ（ディレクトリ）に分けて整理することと似ています。

書類がどのフォルダに入っているかはカテゴリごとにフォルダ分けされていれば探しやすいですよね。それは検索エンジンも同じです。ディレクトリはトップページをルート（階層の最上位）として、カテゴリごとにディレクトリを分けルートから分岐していきます。

ユーザーにとっての階層構造
検索エンジンにとっての階層構造
ディレクトり階層は必要最低限で簡潔に
まとめ

ユーザーにとっての階層構造

ディレクトリ構造を考える際にはユーザー（対人）にとっての階層とクローラー（対クローラー）にとっての階層の両方を考慮して決定する必要があります。

訪問ユーザーは通常、検索エンジン経由で該当のページに移動してくるため、最初に訪問されたページ（ランディングページ）はあまり階層は関係ありません。しかしユーザーが他の記事も探したい場合、今いる場所（カレントディレクトリ）を見るかもしれません。

例えば、訪問したURLが/ゲーム攻略/RPG/ゲームA/というディレクトリだったとします。
もし他にどんなRPGの攻略が書かれているかを知りたいと思ったら、殆どのユーザーは階層を1つ上がり、/ゲーム攻略/RPG/にRPGのゲーム攻略のゲーム一覧のページが存在することを期待します。
URLから/ゲームA/を消して1つ上の階層に上がってその一覧が表示されればユーザーの期待通りとなり、さらに他のページも読んでもらえるかもしれません。

このように、人によってはURLを見てページを移動したいと思う方もいます。
ユーザービリティはまさにこういったユーザーが期待した通りの表示をしてあげる事にあり、これはURLの階層構造にも当てはまります。

なお、実際にはURLを操作してページを探す人はそれほど多くはないと考えられます。
サイトの記事を探す場合、カテゴリーページを表示したり、パンくずリストでサイトのリンク階層を遡って探すことが一般的です。
URLのディレクトリ階層とサイトのリンク階層は微妙に異なるため注意が必要です。

むしろ対人においては、サイトのリンク階層（ナビゲーション）の方が重要になってきます。

検索エンジンにとっての階層構造

対人においては、サイトの階層の方が重要と述べましたが、訪問者の視点からサイトを評価する検索エンジンにとってもそれは同じはずです。
検索エンジンもカテゴリーページやパンくずリストからサイトの構造やどの記事がどのディレクトリに存在するかを推測します。

一方で検索エンジンはURLのディレクトリ階層もサイトの構造を把握するための参考にしており、重要な要素となります。
検索エンジンは人とは異なり、サイト構造の把握や記事の種類を分類をする際にURLのディレクトリ構造を見るほうが分析しやすい、あるいはページのカテゴライズをしやすいというのがあるのかもしれません。
確かにURLは機械にとってはサイトの階層をそのまま1行で表したものであり、データとして扱いやすく、サイト構造をすばやく把握するための手がかりにするのは当然のことでしょう。

例えば/ゲーム攻略/RPG/ゲームA/というURLを開いていたとします。
このページがどのような分類かはURLを見れば一目瞭然です。
しかし、/ゲーム攻略/ゲームA/だったらどうでしょう。
ゲームAの攻略ページであることは推測できますが、どのようなジャンルのゲームかは分かりません。
訪問ユーザーであれば、ゲームAがどのようなジャンルのゲームであるかは知っているかもしれません。
しかし検索エンジンには分からないため、ゲーム攻略に対する雑多な攻略サイトとして認識してしまうかもしれません。
その場合、「ゲーム攻略 RPG」というキーワードで検索した場合に、上位表示してくれない可能性があります。

ディレクトり階層は必要最低限で簡潔に

URLのディレクトリ階層を検索エンジンがサイトやページをカテゴライズのために参考にしていることは事実ですが、より詳細にカテゴライズしてもらった方が多くのキーワードでヒットして表示回数が増えるのでお得かと言えばそうでもありません。

確かにディレクトリ名もキーワードの要素として扱われる可能性がありますが、キーワードを詰め込み過ぎる（階層が深くなる＝キーワードが多くなる）とカテゴライズがぼやけてしまうかもしれません。

「検索エンジン最適化（SEO）スターターガイド」には以下のような記述があります。

特定のトピック領域に関するページが十分にあり、関連するページを紹介する別のページを作成するのが適当かどうか（たとえば、ルートページ -> 関連するトピックの一覧 -> 特定のトピック）、何百点もの異なる商品があり、複数のカテゴリとサブカテゴリのページに分類する必要があるかどうか、などを検討してください。
検索エンジン最適化（SEO）スターターガイド（https://support.google.com/webmasters/answer/7451184）より

検索エンジンは検索キーワードと記事内容の一致度（検索意図）を重視するため、複雑な階層構造のURL（様々なキーワードが含まれたURL）では専門性が薄れてしまい高く評価されない可能性があります。これはサイト全体のカテゴライズにも言える事ですが、ディレクトリ階層やディレクトリ名は必要最低限に絞り込むのが良いでしょう。