間違った方法を使用すると、ページが意図したとおりにインデックスから削除されないことがあるだけでなく、SEOに悪影響を及ぼすこともあります。
あなたがすぐにあなたのために最善である除去の方法を決定するのを助けるために、あなたは記事の関連するセクションにスキップすることが
この記事では、次のことを学びます:
- URLがインデックスされているかどうかを確認する方法
- GoogleからUrlを削除する五つの方法
- 削除の優先順位を付ける方法
- 避けるための一般的な削除ミス
- あなたのサイトにないコンテンツを削除する方法
- 画像を削除する方法
コンテンツがインデックスされているかどうかを確認するためにSEOsが行うことは、googleでsite:searchを使用することです。https://ahrefs.com
)。 サイト中: 検索は、通常のクエリではなく、ページがインデックスされているかどうかを実際に教えてくれないため、注意する必要があります。 彼らはGoogleに知られているページを表示することができますが、それは彼らがサイトなしで通常の検索結果に表示する資格があるわけではありません：
たとえば、site:検索では、別のページにリダイレクトまたは正規化されたページを表示できます。 特定のサイトを要求すると、Googleはそのドメインのページに、別のドメインのコンテンツ、タイトル、説明を表示することがあります。 例えばmoz.com これは以前はseomoz.org。ページにつながる通常のユーザークエリは、次のようになります。moz.com が表示されますmoz.com SERPsでは、一方site:seomoz.org が表示されますseomoz.org 以下に示すように、検索結果で。
これが重要な区別である理由は、SEOsが古いドメインのインデックスからUrlを積極的にブロックしたり削除したりするなど、Pagerankのようなシグナルの統合を防ぐためにミスを犯す可能性があることです。 私は、これらのページがまだ表示されているので、人々が移行中に間違いを犯したと思うドメイン移行の多くのケースを見てきましたsite:old-domain.com 検索し、問題を”修正”しようとしている間に積極的に自分のウェブサイトに害を与えることになります。
索引付けを確認するより良い方法は、Google Search Consoleのインデックスカバレッジレポート、または個々のURLのURL検査ツールを使用することです。 これらのツールは、ページのインデックスが作成されているかどうかを示し、Googleがページをどのように処理しているかについての追加情報を提供します。 これにアクセスできない場合は、Googleでページの完全なURLを検索するだけです。
Ahrefsでは、”Top pages”レポートやオーガニックキーワードのランキングでページを見つけた場合、通常は通常の検索クエリでランキングされている 私たちがそれらを見たときにページがインデックス化されたが、それは変更されている可能性があることに注意してください。 クエリのページが最後に表示された日付を確認します。
特定のURLに問題があり、インデックスから削除する必要がある場合は、記事の冒頭のフローチャートに従って正しい削除オプ
ページを削除し、404(not found)または410(gone)ステータスコードを提供すると、ページが再クロールされた直後にページがインデックスから削除されます。 削除されるまでは、検索結果にページが表示されることがあります。 また、ページ自体が利用できなくなった場合でも、ページのキャッシュされたバージョンが一時的に利用可能になる可能性があります。別のオプションが必要な場合：
- もっとすぐに削除する必要があります。 URL削除ツールのセクションを参照してください。私はリンクのような信号を統合する必要があります。 正規化のセクションを参照してください。私はユーザーが利用できるページが必要です。
- Noindexまたはアクセス制限セクションが状況に合っているかどうかを確認します。
削除オプション2: Noindex
noindex meta robotsタグまたはx‑robotsヘッダーレスポンスは、インデックスからページを削除するように検索エンジンに指示します。 Meta robotsタグは、X‑robots応答がページやPdfなどの追加のファイルタイプに対して機能するページに対して機能します。 これらのタグを表示するには、検索エンジンがページをクロールできる必要があります。txt。 また、インデックスからページを削除すると、リンクやその他の信号の統合が妨げられる可能性があることに注意してください。
メタロボットnoindexの例:
<meta name="robots" content="noindex">
ヘッダー応答のx‑robots noindexタグの例：
HTTP/1.1 200 OKX-Robots-Tag: noindex
別のオプションが必要な場合：
- ユーザーにこれらのペー アクセスの制限の項を参照してください。私はリンクのような信号を統合する必要があります。 正規化のセクションを参照してください。
削除オプション3：アクセスを制限する
一部のユーザーがページにアクセスできるようにしたいが、検索エンジンにはアクセスできな;
このタイプの設定は、内部ネットワー これにより、ユーザーのグループがページにアクセスできますが、検索エンジンはそれらにアクセスできず、ページのインデックスも作成されません。別のオプションが必要な場合：
- もっとすぐに削除する必要があります。 URL削除ツールのセクションを参照してください。 この特定のケースでは、非表示にしようとしているコンテンツがキャッシュされており、ユーザーがそのコンテンツを表示できないようにする必要があ
削除オプション4：URL削除ツール
googleからのこのツールの名前は、コンテンツを一時的に非表示にするため、少し誤解を招きます。 Googleはこのコンテンツを表示してクロールしますが、ユーザーにはページは表示されません。 この一時的な効果はGoogleでは6ヶ月間続きますが、Bingには3ヶ月間続く同様のツールがあります。 これらのツールは、セキュリティ上の問題、データ漏洩、個人を特定できる情報（PII）などの最も極端な場合に使用する必要があります。 Googleの場合は削除ツールを使用し、Bingの場合はUrlをブロックする方法を参照してください。
実際にページをより長い期間削除したり（noindexまたはdelete）、まだリンクがある場合にユーザーがコンテンツにアクセスできないようにするには、削除ツールを使 削除が処理する時間を持っている間、これはちょうどあなたのページを非表示にする高速な方法を提供します。 要求の処理には最大で1日かかる場合があります。
削除オプション5:正規化
ページの複数のバージョンがあり、リンクのような信号を単一のバージョンに統合したい場合は、何らかの形式の正規化 これは主に、ページの複数のバージョンを単一のインデックス付きURLに統合しながら、コンテンツの重複を防ぐためです。いくつかの正規化オプションがあります。
- 正規化タグ。 これは、正規のバージョンまたは表示するバージョンとして別のURLを指定します。 ページが重複しているか、非常に類似している場合、これは問題ありません。 ページがあまりにも異なる場合、canonicalはディレクティブではなくヒントであるため無視される可能性があります。
- リダイレクトします。 リダイレクトは、ユーザーと検索ボットをあるページから別のページに移動します。 301はSeoによって最も一般的に使用されるリダイレクトであり、最終的なURLを検索結果に表示されるURLにし、信号が統合される場所を検索エンジンに 302または一時的なリダイレクトは、元のURLをインデックスに残り、そこに信号を統合するものにしたい検索エンジンに指示します。
- URLパラメータの処理。 パラメータはURLの最後に追加され、通常はahrefs.com?this=parameterのような疑問符が含まれています。 たとえば、パラメータがページのコンテンツを変更するかどうか、または使用状況を追跡するためだけのものかどうかを指定できます。
Googleのインデックスから削除するページが複数ある場合は、それに応じて優先順位を付ける必要があります。
最も高い優先度:これらのページは、通常、セキュリティ関連または機密データに関連しています。 これには、個人データ（PII）、顧客データ、または専有情報を含むコンテンツが含まれます。
中優先度:これは通常、特定のユーザーグループ向けのコンテンツを含みます。 会社のイントラネットまたは従業員ポータル、メンバーのみを対象としたコンテンツ、ステージング、テスト、または開発環境。
低優先度：これらのページは、通常、いくつかの種類の重複したコンテンツを含みます。 これの例としては、複数のUrlから配信されるページ、パラメータを持つUrl、ステージング、テスト、または開発環境などがあります。
私は、通常、削除が間違って行われているのを見る方法と、各シナリオで何が起こるのかをカバーして、人々がなぜ機能しないのかを理解するのに役立
ロボットのNoindex。txt
Googleは非公式にロボットでnoindexをサポートしていましたが。txt、それは公式の標準ではなかったし、彼らは今正式にサポートを削除しました。 これを行っていたサイトの多くは、そう間違ってやって、自分自身を傷つけていました。
ロボットのクロールをブロックします。txt
クロールはインデックス作成と同じではありません。 Googleがページのクロールをブロックされていても、ページへの内部または外部リンクがある場合でも、インデックスを作成できます。 Googleはそれを這わないが、ページが存在し、ページへのリンクのアンカーテキストのような信号に基づいて調査の結果で示すためにタイトルを書くことを知
Nofollow
これは一般的にnoindexと混同され、ページレベルでページがインデックスされないことを期待して使用する人もいます。 Nofollowはヒントであり、もともとページ上のリンクとnofollow属性を持つ個々のリンクがクロールされないようにしていましたが、それはもはや当てはまりません。 彼らがしたい場合は、Googleは今、これらのリンクをクロールすることができます。 Nofollowは、特定のページにクロールからGoogleを停止しようとすると、PageRankの彫刻のために個々のリンクにも使用されました。 ここでも、nofollowはヒントなので、これはもはや機能しません。 過去には、ページに別のリンクがあった場合でも、Googleはこの代替クロールパスから検出できました。Ahrefsのサイト監査のページエクスプローラでこのフィルタを使用すると、nofollowedページを一括で見つけることができます。
ページ上のすべてのリンクをnofollowすることはめったに理にかなっていないので、結果の数はゼロまたはゼロ 一致する結果がある場合は、noindexの代わりにnofollowディレクティブが誤って追加されたかどうかを確認し、必要に応じてより適切な削除方法を選択するこ
リンクエクスプローラでこのフィルタを使用して、nofollowとマークされた個々のリンクを検索することもできます。
Noindexと別のURLに正規
これらの信号は競合しています。 Noindexはインデックスからページを削除すると言い、canonicalは別のページがインデックス化する必要があるバージョンであると言います。 Googleは通常、noindexを無視し、代わりにcanonicalをメイン信号として使用することを選択するため、これは実際に統合のために機能する可能性があります。 ただし、これは絶対的な動作ではありません。 アルゴリズムが関与しており、noindexタグが信号カウントされる可能性があるリスクがあります。 その場合、ページは適切に統合されません。
サイト監査のページエクスプローラーでこのフィルタセットを使用して、自己参照以外のcanonicalsを持つnoindexedページを見つけることができます。
Noindex、Googleがクロールするのを待ってからクロールをブロックする
これは通常起こる方法がいくつかあります。
- ページはすでにブロックされていますが、インデックスが作成され、人々はnoindexを追加し、googleがクロールしてnoindexを見ることができるようにブロックを解除し、ページが再びクロールされないようにします。
- ユーザーは、削除したいページにnoindexタグを追加し、Googleがnoindexタグをクロールして処理した後、ページのクロールをブロックします。
いずれにしても、最終状態はクロールからブロックされます。 あなたが覚えていれば、以前、私たちはクロールがインデックス作成と同じではない方法について話しました。 これらのページがブロックされていても、インデックスに終わる可能性があります。別のウェブサイトで使用されているコンテンツを所有している場合は、デジタルミレニアム著作権法（DMCA）に基づいて請求を行うことができます。
Googleの著作権削除ツールを使用して、著作権で保護された素材の削除を要求するDMCAテイクダウンと呼ばれることを行うことができます。それはあなたについてのコンテンツだが、あなたが所有しているサイトではない場合はどうなりますか？
あなたがEUにいる場合は、忘れられる権利の裁判所命令のおかげで、あなたに関する情報を含むコンテンツを削除することができます。
お客様は、EUプライバシー削除フォームを使用して個人情報の削除を要求することができます。
Googleから画像を削除するには、最も簡単な方法はロボットを使用することです。txt。 ページを削除するための非公式のサポートは、ロボットから削除されましたが。txt先に述べたように、単に画像のクロールを許可しないことは、画像を削除する正しい方法です。
単一の画像の場合：
User-agent: Googlebot-ImageDisallow: /images/dogs.jpg
すべての画像の場合：
User-agent: Googlebot-ImageDisallow: /
最終的な考え
Urlを削除する方法は いくつかのオプションについて説明しましたが、どちらが正しいかまだ混乱している場合は、最初のフローチャートを参照してください。また、コンテンツの削除のためにGoogleが提供する法的なトラブルシューティングツールを通過することができます。
p>質問がありますか？
質問がありますか？ 私はTwitterで知らせてください。