403ページ、空白ページ、およびページリダイレクトは、検索ロボットによってインデックス付けされますか？

Question

disallowディレクティブを生成するページ上のロボットに発行する必要があるかどうか疑問に思っています：

1. 403禁止エラー。
2. 空白のページ、または
3. ページリダイレクト（たとえば、ページにログインする）。

そうすることで、サイトのSEOに影響はありませんか？

Answer 1

インデックスに登録されますか：

1. 403エラー –いいえ、ほとんどの検索エンジンはエラーページのインデックスを作成しません（正しいHTTPステータスコードが提供されていると仮定）
2. 空白ページ –ほぼ間違いなく、完全に空白（<title>なし、なし）と仮定します。
3. ページリダイレクト –通常、リダイレクトの宛先のみがインデックス付けされます（通常、これは意図した結果です）が、リダイレクトのタイプによって異なります。 301の場合、リダイレクトページのインデックスはデスティネーションページに優先されますが、302の場合、参照ページとデスティネーションページの両方のインデックスを作成し続けることができます。

SEOの影響

上記から、すべてが正しく構成されていると仮定すると、（1）および（3）の場合、これらのページのSEOへの影響を管理するために他に何もする必要がないことがわかります。

（2）の場合、真の空白ページに対しては他に何もする必要はないでしょうが、可能な限り空白ページを生成しないようにすることをお勧めします。そうでない場合、Disallowは何よりも優れています。また、"noindex"をHTMLまたはHTTPヘッダーを介してページに直接適用できる場合は、さらに優れています。