開発やテスト目的でステージング ウェブサイトを使用する場合、ステージング サイトを Google にインデックスされないように保護するための最適な方法は何かという問題に直面することがあります。 WP Staging の最初のリリース以来、ステージング サイトは独自の認証ログイン プロンプトによって保護されています。これが Google によるステージング サイトへのアクセスを防ぐ唯一の信頼できる解決策であると、私たちは常に確信してきました。 アクセスできなければ、Google がステージング サイトのコンテンツをインデックス化するリスクはまったくありません。これは非常に重要です。なぜなら、重複コンテンツは最終的には検索エンジンでの順位低下につながる可能性があるからです。 ヘッダーの meta タグを noindex に設定する方法(これは WP Staging も行っています)や、robots.txt にエントリを追加してステージング サイトへのアクセスを防ぐ方法など、他のテクニックもあります。残念ながら、いずれの方法も十分に信頼できるものではなく、設定上のわずかな誤りでステージング ウェブサイトが公開状態になってしまう可能性があり、これは検索エンジンの結果にとって望ましくありません。 Google のウェブマスター トレンド アナリストである John Müller 氏が最近この質問に回答し、サーバー認証が最適な方法であると確認したことを嬉しく思います:
“理想的にやりたいことは、サーバー側で何らかのサーバー サイド認証を提供することです。そうすれば通常のユーザーがアクセスした際にコンテンツを見ることができないようにブロックされ、これには GoogleBot も含まれます。 これは IP アドレス単位で行うこともできますし、Cookie で行うこともできますし、サーバー上の通常の認証で行うこともできます。 あなたが正しい人物であり、そのコンテンツを実際に閲覧できることを証明する必要があるあらゆる仕組みです。 これがステージング サーバーにとって一般的に最良のアプローチだと思います……”
John Müller 氏の回答はこちらでご覧いただけます: このトピックの詳細はこちらをお読みください: https://www.searchenginejournal.com/how-to-block-google-staging-site/