新しいウェブサイトがGoogleに表示されない：新サイトをインデックスさせる方法

Googleのウェブクローラーであるgooglebotは、主にすでにクロールしてインデックスしたページからリンクをたどることで新しいページを発見します。これは新しいウェブサイトに根本的なブートストラップ問題を生み出します。インターネット全体に新しいドメインへのリンクを持つ既存のページが1つもない場合、googlebotは通常のクロールプロセスを通じてそれを見つける方法がありません。Googleがその存在を知らないまま、サイトは何ヶ月も存在し続けることができます。

これは、確立されたサイトが新しいページを追加するときに直面する状況とは根本的に異なります。Googleでの既存のプレゼンスがある確立されたサイトは定期的にクロールされます。新しいページを公開し、すでにインデックスされたページからリンクすると、Googleは通常、サイトの次のスケジュールされたクロール中に数時間または数日以内に新しいページを発見します。新しいサイトは、Googleがその存在を知らないため、スケジュールされたクロールがありません。

「ドメイン年齢」がインデックスに影響するという一般的な神話、特にGoogleが意図的に新しいドメインのインデックスを保護観察期間または「サンドボックス」の形として遅らせるという考えがあります。新しいドメインに対する公式のGoogleサンドボックスはありません。現実はもっと単純です。新しいドメインがインデックスされるのに時間がかかるのは、バックリンクがなく、クロール履歴がなく、権威シグナルがなく、Google Search Consoleの検証がないからです。これらのそれぞれは直接対処できます。

Google Search Consoleは、新しいサイトオーナーにとって最も重要な単一のツールです。Googleとの直接の通信チャネルを提供するからです。Search Consoleでドメインを検証し、サイトマップを送信することで、本質的にGoogleに次のように伝えています。「このサイトが存在します。ここにすべてのページがあります。クロールに来てください」。これにより、googlebotが外部リンクを通じてサイトを発見する必要がなくなります。Googleは通常、新しいSearch Consoleのサイトマップ送信を48〜72時間以内に処理しますが、コンテンツの量と品質シグナルによっては、すべてのページのインデックスにはさらに時間がかかる場合があります。

もう1つの発見チャネルは、IndexBoltのようなサービスがURLを直接送信するために使用するGoogleのインデックスAPIです。サイトマップを送信してGoogleが自身の都合でクロールするのを待つ受動的なアプローチとは異なり、APIベースのインデックスリクエストは、Googleに特定のURLを直ちに優先してクロールするよう指示します。新しいサイトの場合、これにより初期のインデックスタイムラインを数週間から数時間に圧縮できます。

Google Search Consoleの検証は、新しいウェブサイトにとって最優先のアクションです。サイトがSearch Consoleで検証されるまで、サイトマップを送信したり、特定のURLのインデックスをリクエストしたり、クロールとインデックスの問題を診断したりする方法はありません。

新しいドメインの場合は、URLプレフィックスタイプではなくドメインプロパティタイプを使用します。ドメイン検証は、すべてのURLバリエーション（HTTP、HTTPS、www、非www）とすべてのサブドメインを単一のプロパティの下でカバーします。これにより、1つのURLバリエーションのみを検証し、他のもののインデックスデータを見逃すという一般的な間違いを防ぎます。ドメイン検証では、ドメインのDNS設定にDNS TXTレコードを追加する必要があります。具体的なレコードは、検証プロセス中にSearch Consoleによって提供されます。

検証後、最初のアクションはXMLサイトマップを送信することです。左のサイドバーでサイトマップに移動し、サイトマップURLを入力します。ほとんどのCMSプラットフォームは、/sitemap.xmlにサイトマップを自動的に生成します。プラットフォームが自動的に生成しない場合は、サイトマップジェネレーターツールまたはプラグインを使用して作成します。サイトマップには、Googleにインデックスさせたいサイトのすべてのページが、各ページの最終更新日とともにリストされている必要があります。

ページ数が少ない（50未満）新しいサイトの場合は、URL検査ツールを使用して各ページのインデックスを個別にリクエストすることもできます。URLを入力し、検査が完了するのを待ってから、「インデックス登録をリクエスト」をクリックします。これにより、Googleに特定のURLを優先的にクロールするよう直接シグナルが送信されます。この方法では、1日に約10〜20の個別リクエストを送信できます。

サイトマップと個別のインデックスリクエストを送信した後、その後の数日間、Search Consoleのページレポートを監視します。ページが「検出」から「クロール済み」、そして「インデックス済み」のステータスに移行するのを確認できるはずです。ページが1週間以上「検出」ステータスのままである場合、Googleがサイトにクロールリソースを投資するのを妨げる品質または技術的な問題がある可能性があります。

新サイトオーナーの一般的な落とし穴の1つは、同じサイトに対して複数のSearch Consoleプロパティを作成することです。http://、https://、www、および非wwwバージョンに対して別々のプロパティを作成しないでください。すべてのバリエーションをカバーする単一のドメインプロパティを使用してください。複数のプロパティはデータを断片化し、問題の診断を困難にします。

初期ページをインデックスさせることは最初のステップにすぎません。サイトに新しいページを追加するにつれてインデックスのカバレッジを維持するには、Googleがあなたのドメインを定期的にクロールする価値があると判断するのに十分な権威を構築する必要があります。この持続的なクロールの関心がなければ、公開する新しい各ページには手動のインデックスリクエストが必要になる可能性があり、これは長期的にスケーラブルなアプローチではありません。

Googleの文脈では、権威は主にドメインを指す外部リンクの品質と数によって測定されます。バックリンクがゼロの新しいサイトは権威がほぼゼロであり、Googleが最小限のクロールリソースを割り当てることを意味します。関連性のある評判の良いソースからバックリンクを構築するにつれて、Googleはクロールバジェットを増やし、より頻繁にサイトを訪問し、新しいページをより速く発見してインデックスします。

新しいサイトの場合、最も効果的な権威構築戦略は、数より質に焦点を当てています。尊敬される業界の出版物からの単一のリンクは、低品質のディレクトリからの100のリンクよりも価値があります。あなたの業界の人々が実際にリンクしたくなるコンテンツを作成してください。オリジナルの研究、データ研究、包括的なガイド、または有用なツールです。あなたのコンテンツを参照する価値があると考えるかもしれない業界の連絡先、パートナー、補完的なビジネスに連絡してください。

もう1つの権威シグナルは、一貫したコンテンツの公開です。Googleはサイトが新しいコンテンツを公開する頻度を監視し、それに応じてクロールスケジュールを調整します。1つの新しいページを公開してから何ヶ月も静的なままの新しいサイトは、最小限の継続的なクロールの注目を受けます。毎週新しい高品質のコンテンツを公開する新しいサイトは、Googleがサイトが定期的にインデックスする価値のあるコンテンツを生み出すことを学ぶにつれて、時間とともにクロールレートが増加します。

権威要因として技術的なパフォーマンスを軽視しないでください。Googleのクローラーは、迅速かつ確実に応答するサイトにリソースを投資する意欲が高くなります。共有ホスティングプランで頻繁に503エラーを返すか、読み込みに5秒かかる新しいサイトは、サブ秒の応答時間を持つ信頼性の高いホスティングの新しいサイトよりも少ないクロール投資を受けます。初日からまともなホスティングに投資してください。これは、重要な初期月のインデックス速度に直接影響します。