noindexとは？ホームページが検索に出てこない原因と確かめ方

インデックス拒否設定（noindex）とは？

インデックス拒否設定とは、noindex（ノーインデックス）という指示を使って、ページを検索エンジンのデータベース（インデックス）に登録させず、検索結果に表示させないようにする設定のことです。noindex は、ページの HTML の中か、サーバーがページと一緒に返す情報（HTTP ヘッダー）に書き込まれ、Google などの検索エンジンに「このページは検索結果に出さないでください」と伝えます。

Google の公式の説明では、Google のクローラー（Googlebot）がページの noindex を検出すると、ほかのサイトからリンクされているかどうかにかかわらず、そのページを Google 検索の結果から削除するとされています。検索に出したくないページには便利な仕組みですが、検索で見つけてほしいページに入っていると、そのページは検索の入口として働かなくなります。

この項目は、ガーディアンの無料のホームページ診断では、新・七つの大罪の「大罪-1 インデックス拒否設定」と、77's Check!! の「No.3 重要ページが index 可能」にあたります。どちらも、トップページやサービスのページなど、検索で見つけてほしいページに、この設定が間違って入っていないかを確かめる項目です。ほかの診断項目の解説は、ホームページ診断の項目解説の一覧から読めます。

検索結果に載るまでの3つの段階と、noindex が効く場所

noindex が効くのは、検索結果に載るまでの3つの段階のうち、2つ目の「インデックス登録」の段階です。Google は、ページの検索結果への表示を「クロール」「インデックス登録」「検索結果の表示」の3段階で説明しています。クローラーがページを読み込んだときに noindex を見つけると、そのページはデータベースに保存されず、すでに保存されていたページも外されます。

なお、Google は、基本的な決まりを守っているページでも、クロールされ、インデックスに登録され、検索結果に表示される保証はないと明記しています。noindex を外すことは検索結果に載るための前提であり、外せば必ず載る、という関係ではありません。

noindex の書き方は2つある

noindex の書き方には、ページの HTML に書く方法と、サーバーの設定で返す方法の2つがあり、どちらも効果は同じです。

1つ目は、ページの HTML の上部（<head> の中）に、robots メタタグとして <meta name="robots" content="noindex"> のように書く方法です。name="robots" はすべての検索エンジンが対象で、Google だけを対象にするときは name="googlebot" と書きます。content="none" と書かれている場合も、noindex と nofollow を同時に指定したのと同じ意味になります。

2つ目は、サーバーがページを返すときに、HTTP ヘッダーとして X-Robots-Tag: noindex を付ける方法です。PDF や画像のように HTML ではないファイルにも使え、サーバーの設定でサイト全体にまとめて適用することもできます。この方法はページのソースを見ても書かれていないため、自社で確かめるときに見落としやすい点を覚えておいてください。

robots.txt・nofollow との違い

ページを検索結果から外す指示は noindex で、robots.txt や nofollow は役割が違います。名前が似ているため混同されやすいのですが、特に robots.txt は「検索結果から隠す仕組みではない」と Google が明言している点が大切です。

もう1つ知っておきたいのが、robots.txt と noindex の組み合わせです。robots.txt でページの読み込みを止めていると、Google はそのページに書かれた noindex を読めず、指示は無視されます。検索から外したいページは「robots.txt で止めずに noindex を書く」、検索に出したいページは「robots.txt でも noindex でも止めない」というのが、Google の案内に沿った考え方です。

重要なページに noindex が入っていると、何が起きるか

トップページやサービスのページに noindex が入っていると、そのページは検索結果に出なくなり、検索から来るはずだった見込み客の入口が閉じます。しかもホームページの見た目は何も変わらないため、社内で気づくきっかけがほとんどありません。

影響の大きさは、どのページに入っているかで決まります。サイト全体に入っていれば、会社名で検索しても自社のホームページが出てこない状態になり、取引先や求職者が会社を確かめようとしたときに、公式の情報にたどり着けません。サービスのページ1枚だけに入っている場合は、会社名では見つかっても、「地域名＋サービス名」のような、これから取引を考える人が使う言葉では見つからなくなります。

気づきにくい理由は、noindex が入っていてもページは普通に開くことにあります。URL を直接入力した人、名刺の QR コードやメールのリンクから来た人、広告から来た人には、いつもどおりのページが表示されます。社内の人も、ブックマークや URL の直接入力で自社のホームページを開いていると、「検索すると出てこない」ことには気づけません。

この項目を先に確かめたいのは、ほかの改善の効果を左右するからです。文章を書き直す、事例を増やす、ブログを続けるといった取り組みも、そのページに noindex が入っていれば、検索から見つけてもらう効果は出ません。ホームページの見直しに時間や費用をかける前に、まず「検索に載る状態か」を確かめておくと、手戻りを防げます。

一方で、noindex は悪い設定ではありません。問い合わせの完了ページや制作中のテストページなど、検索に出す必要のないページにわざと入れるのは一般的な使い方です。Search Console のヘルプでも、登録させたくないページで noindex が検出されているなら「正しく機能している」と説明されています。問題になるのは、検索で見つけてほしいページに入っている場合だけです。

自社のホームページで確かめる方法

noindex が入っているかどうかは、パソコンとブラウザがあれば自分で確かめられます。Google Search Console を使える場合は、サーバーの設定（X-Robots-Tag）まで含めて確かめられるので、より確実です。パソコンだけでできる方法から順に紹介します。

1. Google で「site:自社のドメイン」と検索する
   Google の検索窓に「site:example.co.jp」のように、自社のドメインの前に「site:」を付けて検索してください。そのドメインで検索結果に出るページが並ぶので、トップページやサービスのページが見当たらなければ、noindex を疑うきっかけです。ただし Google は、この一覧はすべてを網羅したものではなく、登録済みのページが表示されないこともあると説明しています。あくまで入口の確認として使い、結論は次の手順で確かめます。
2. 重要なページのソースで「noindex」を探す
   確かめたいページをパソコンのブラウザ（Chrome など）で開き、ページの上で右クリックして「ページのソースを表示」を選びます（Windows では Ctrl＋U でも開けます）。開いた画面で Ctrl＋F を押して「noindex」と入力し、<meta name="robots" content="noindex"> のような行が見つかれば、そのページには noindex が入っています。トップ・サービス・会社概要・お問い合わせ・採用のページは、1枚ずつ確かめてください。
3. Search Console の URL 検査で「インデックス登録を許可？」を見る
   Search Console を開き、画面の上の検査欄に確かめたいページの URL をそのまま入力してください。結果の「ページのインデックス登録」の中にある「インデックス登録を許可？」が「いいえ」なら、そのページは noindex のタグかヘッダーを返しています。今の状態を確かめたいときは「公開 URL をテスト」を押すと、その場でページを取得して検査できます。URL 検査を使えるのは、Search Console にそのサイトが登録されていて、自分にその権限がある場合です。
4. 「ページのインデックス登録」レポートで、noindex のページの一覧を見る
   Search Console の左のメニューから「ページ」（ページのインデックス登録）を開き、登録されていない理由の一覧で「URL に noindex が指定されています」を選びます。noindex が検出されたページの URL が並ぶので、検索に出したいページが含まれていないかを確かめます。
5. WordPress で作ったサイトは「表示設定」を見る
   WordPress の管理画面で「設定」→「表示設定」を開き、「検索エンジンでの表示」の「検索エンジンがサイトをインデックスしないようにする」にチェックが入っていないかを見ます。チェックが入っていると、WordPress 5.3 以降ではサイトの全ページに noindex のタグが出力されます。

手順2でソースに noindex が見つからないのに、手順3で「いいえ」と表示される場合は、サーバーの設定で X-Robots-Tag が返されている可能性があります。また、robots.txt でページの読み込みを止めていると、Google は noindex を確かめられないため、「インデックス登録を許可？」は常に「はい」と表示されます。その場合は、同じ画面の「クロールを許可？」もあわせて見てください。

まとめて確かめたい場合は、無料診断で20項目を一度に確かめられます。インデックス拒否設定のほかに、スマホ対応や証明書の期限など、ホームページの基本となる項目をあわせて確かめられます。

noindex が入ってしまう、よくある原因

検索に出したいページに noindex が入る原因は、大きく分けて4つあります。どれも、設定を入れた人と、公開後にホームページを見ている人が違うために起きやすいもので、誰かの作業の質の問題というより、確認の受け渡しの問題です。

制作中に入れた noindex が、公開後も残っている

制作の途中では、できあがっていないページが検索に出ないように、noindex を入れておくことも珍しくありません。公開のときにこれを外す作業が抜けると、公開した日から検索に出ない状態が続きます。リニューアルで、テスト用の環境から本番の環境へページを移したときにも起きることがあります。公開やリニューアルの直後から検索に出てこない場合は、まずこの原因を疑ってください。

WordPress の「検索エンジンがサイトをインデックスしないようにする」にチェックが入っている

WordPress には、サイト全体を検索エンジンに登録させないための設定があり、制作中にチェックを入れて、そのまま残っていることがあります。この場合はトップページを含む全ページが対象になるので、会社名で検索しても出てこない状態になりやすいのが特徴です。見分けるには、「設定」→「表示設定」の画面を見るか、どのページのソースにも noindex が書かれていないかを確かめます。

CMS や SEO 用のプラグインの、ページごとの設定

CMS や SEO 用のプラグインには、ページごとに「検索結果に表示しない」を選べる設定を持つものがあり、ページを複製して新しいページを作ったときに元のページの設定が引き継がれたり、カテゴリやタグのページをまとめて非表示にする設定が、意図しないページにまで及んだりすることがあります。特定のページや、特定の種類のページだけが検索に出ない場合は、この原因が考えられます。

サーバーの設定で X-Robots-Tag が返されている

サーバーの設定ファイルや、配信を速くするサービス（CDN）の設定で、X-Robots-Tag の noindex が返されていることがあります。この方法はページのソースに書かれないため、ソースを見ても見つからないのが特徴です。ソースに noindex がないのに、Search Console の URL 検査で「インデックス登録を許可？」が「いいえ」になる場合は、サーバーの設定を制作会社やサーバーの管理会社に確かめてもらいます。

直し方（対策は3つ）

誤って入っている noindex は、入っている場所を特定して外し、Google に再確認を頼むことで直せます。そのうえで、同じことが起きないように、公開の手順と日々の確認に組み込みます。対策は、自社ですぐできること、制作会社に頼むこと、仕組みで防ぐことの3つです。

対策1：入っている場所を特定し、WordPress の設定なら自社で外す

最初にすることは、検索に出したいページの一覧を作り、どこに noindex が入っているかを特定することです。トップ・サービス（商品）・会社概要・お問い合わせ・採用・事例など、検索で見つけてほしいページを5〜10枚ほど書き出し、前の章の手順2（ソースの確認）と手順3（URL 検査）で1枚ずつ確かめます。結果は「ページ名／URL／noindex の有無／見つかった場所（タグ・ヘッダー・WordPress の設定）」の形で表に残しておくと、制作会社に相談するときにもそのまま使えます。

原因が WordPress の「検索エンジンがサイトをインデックスしないようにする」だった場合は、管理画面に入れる担当者がいれば、チェックを外して「変更を保存」を押すだけで直せます。ほかのページの設定やデザインには影響しません。管理画面に入れない場合や、原因がテンプレートやサーバーの設定だった場合は、対策2に進みます。

設定を外したら、Search Console の URL 検査で主要なページを1枚ずつ確かめ、「公開 URL をテスト」で「インデックス登録を許可？」が「はい」になったことを見てから、「インデックス登録をリクエスト」を押してください。リクエストには1日あたりの上限があり、ページの数が多い場合はサイトマップの送信が案内されています。Search Console のヘルプでは、リクエストしても検索結果に表示されるとは限らず、処理には1日ほどから1〜2週間かかることがあると説明されています。

目安として、ページの確認と記録は担当者1人で30分〜1時間ほど、WordPress の設定を外す作業は数分です。自社で行えば費用はかかりません。Search Console を自社で使えない場合は、この機会に自社の名義で登録しておくと、対策3の確認にも使えます。

対策2：テンプレートやサーバーの設定は、制作会社に外してもらう

noindex がページのテンプレート、CMS やプラグインの共通の設定、サーバーの設定（X-Robots-Tag）、robots.txt のどこかに入っている場合は、制作会社やサーバーの管理会社に外してもらいます。テンプレートやサーバーの設定は、1か所を直すとサイトの多くのページに影響するため、仕組みを分かっている人が作業するほうが安全です。

頼むときは、対策1で作った「検索に出したいページの一覧」と、あわせて「検索に出さなくてよいページ」を伝えます。問い合わせの完了ページ、テスト用のページ、社内向けのページなどは、noindex のままにしておくのが一般的です。すべてのページから一律に外すのではなく、出したいページだけを確実に外してもらうために、この2つの一覧が役に立ちます。

作業が終わったら、対策1と同じように URL 検査で「インデックス登録を許可？」が「はい」になったことを確かめ、インデックス登録をリクエストするところまでが一連の作業です。「ページのインデックス登録」レポートの「URL に noindex が指定されています」に重要なページが残っていた場合は、修正が済んだあとにその画面で「修正を検証」を押します。Google によると、検証には通常2週間ほどかかり、終わるとメールで知らせが届きます。

費用と手間は、原因の場所によって変わります。設定を1か所外すだけで済むこともあれば、テンプレートの作りを見直す必要があることもあるため、まずは原因の場所を確かめてもらい、そのうえで作業の範囲と費用を相談するのが確実です。保守の契約がある場合は、その範囲に含まれるかもあわせて確かめておきましょう。

対策3：公開とリニューアルの点検、日々の確認で再発を防ぐ

noindex の誤りは、ページの公開やリニューアル、テンプレートの変更のたびに起こり得ます。一度直して終わりにせず、確かめる仕組みを作っておくと、再発しても早く気づけます。

1つ目は、公開とリニューアルのときの点検項目に「検索に出したいページから noindex を外したか」「robots.txt で読み込みを止めていないか」を入れることです。制作会社と取り交わす公開前の確認表があれば、そこに1行加えてもらいます。公開した当日か翌日には、自社でも主要なページを URL 検査で確かめると安心です。

2つ目は、Search Console を自社でも見られる状態にしておくことです。登録が制作会社の名義だけになっていると、社内の誰も検索の状態を確かめられず、「修正を検証」の結果のようにメールで届く知らせも社内に届きません。自社の担当者もユーザーとして加えてもらい、社内で状態を確かめられるようにしておきます。

3つ目は、月に1回、「ページのインデックス登録」レポートを開き、「URL に noindex が指定されています」に検索に出したいページが増えていないかを見ることです。確認する人を決めておけば、5〜10分ほどで済みます。数字の変化に気づいたときに、原因の候補として noindex を最初に確かめる習慣がつくと、対応が早くなります。

制作会社に頼むときの伝え方

制作会社に頼むときは、「どのページを検索に出したいか」と「どこを確かめてほしいか」を具体的に伝えると、確認が早く進みます。noindex は、制作中には必要な設定でもあるため、公開のときに外す作業と、公開後に検索の状態を見る作業の担当が分かれていると、確認が抜けることがあります。頼めば直せる設定なので、責任を問うより、確かめてほしい点をはっきり伝えることを優先しましょう。

そのまま使える依頼文の例です。

あわせて、次の点を確かめてもらうと、直したあとの状態まで確実に把握できます。

• 検索に出したいページの HTML に、noindex や none を含む robots メタタグが入っていないか
• サーバーや CDN の設定で、X-Robots-Tag の noindex が返されていないか
• robots.txt で、検索に出したいページの読み込みを止めていないか
• CMS やプラグインの共通の設定（カテゴリやページの種類ごとの設定）で、検索に出したいページが非表示になっていないか
• 直したあとに、Search Console の URL 検査で「インデックス登録を許可？」が「はい」になったか

インデックス拒否設定とあわせて確かめたい項目

インデックス拒否設定は、検索エンジンに見つけてもらうための土台（サイト集客基礎力）の1つです。同じ土台に関わる、次の項目もあわせて確かめておくと、検索に載らない原因を取りこぼしにくくなります。

• XMLサイトマップ：サイト内のページの一覧を検索エンジンに渡せているか。新しいページを見つけてもらう手がかりになります。
• robots.txt：検索エンジンに読み込んでよい範囲を伝えるファイル。検索に出したいページの読み込みを止めていないかを確かめます。
• canonical（正規URLの指定）：同じ内容のページが複数あるときに、検索結果に出す URL を指定できているか。
• Search Console：Google から検索の状態や問題の知らせを受け取るための無料のツールを、自社で使える状態か。

診断の項目ごとの解説は、ホームページ診断の項目解説（サイト集客基礎力）にまとめています。

よくある質問

まとめ

• インデックス拒否設定（noindex）とは、ページを検索エンジンのデータベースに登録させず、検索結果に表示させないようにする設定のことです。
• 検索で見つけてほしいページに入っていると、見た目は変わらないまま、検索からの入口だけが閉じます。
• 確かめるには、ページのソースで「noindex」を探す方法と、Search Console の URL 検査で「インデックス登録を許可？」を見る方法が基本です。
• 直すときは、入っている場所を特定して外し、URL 検査でインデックス登録をリクエストします。テンプレートやサーバーの設定は制作会社に頼みます。
• 公開やリニューアルの点検項目に入れ、Search Console を自社で見られる状態にしておくと、再発に早く気づけます。

自社のホームページの重要なページが、今どの状態にあるかを一度確かめておくと、ほかの改善にも安心して取りかかれます。中小企業のホームページを制作し、公開後の運用と改善まで支える株式会社ガーディアンでは、インデックス拒否設定を含む基本の項目を確かめる無料のホームページ診断を用意しています。