Googleインデックスからサイトまたはそのフラグメントを削除する方法

Googleが採用したインデックス作成の概念によれば、結果の発行時に、完全性、情報の客観性、検索クエリへの準拠が考慮されます。 違法コンテンツを含むサイトがインデックスに入った場合、またはそのサイトがスパムを目的としている場合、そのサイトのページは検索エンジンの一般データベースには表示されません。 検索結果によってサーバーから サイトを削除する方法 を学習 する ことが重要です。

Googleのゼロインデックス作成オプション

新しいリソースに関する情報を収集するプログラムであるクローラがページごとにサイトのページをスキャンすると、解析に関するGoogleのポリシーの要件を満たしていれば、インデックスが作成されます。 しかし、robots.txtを使用して検索エンジンのサイトや個々の断片を削除する方法についても説明します。これは、ポインタと同時に検索ターミネータです。

発行からリソース全体を除外するには、特定のテキストゾーンが、サイトが存在するサーバーのルートフォルダ（上記のrobots.txt）に作成されます。 このゾーンは検索エンジンによって処理され、読み取られた指示に従って動作します。

ユーザーが閲覧を許可されていない場合でも、Google検索エンジンはページのインデックスを作成します。 ブラウザが401または403の応答を発行すると、「アクセスは有効ではありません」というのは、この検索サーバーの収集プログラムではなく、訪問ユーザーのみに適用されます。

検索インデックスからサイトを削除する方法を理解するには、テキストポインタに次の行を入力する必要があります。

ユーザーエージェント：Googlebot

Disallow：/

これは、検索ロボットに、サイトのコンテンツ全体を索引付けすることが禁止されていることを示します。 サイト が検出された サイトの リストにリソースをキャッシュしないように 、 Google サイトを削除する方法 は次のとおりです。

異なるプロトコルのスキャンオプション

たとえば、 http / httpsハイパーテキストプロトコル用に個別にGoogleにインデックスを作成するための特定のルールを適用する個別の通信規格をリストする必要がある場合は、robots.txtに次のように記述する必要があります（例）。

（Http://yourserver.com/robots.txt） - サイトのドメイン名（any）

ユーザーエージェント：* - 任意の検索エンジン用

許可：/ - 完全なインデックス登録を許可する

発行からhttpsプロトコル用のサイトを完全に削除する方法

（Https://yourserver.com/robots.txt）：

ユーザーエージェント：*

Disallow：/インデックス作成の完全禁止

GoogleのGoogle検索からのリソースのURLの緊急削除

再インデックス作成を待たずにできるだけ早くサイトを非表示にする必要がある場合は、http：//services.google.com/urlconsole/controllerを使用することをおすすめします。 Pre-robots.txtは、既にサイトサーバーのルートディレクトリに配置されているはずです。 説明書はその中に書かれていなければなりません。

ポインタが何らかの理由でルートディレクトリで編集できない場合は、検索エンジンから非表示にするオブジェクトを含むフォルダ内にポインタを作成すれば十分です。 これを行い、ハイパーテキストアドレスの自動削除サービスに問い合わせると、robots.txtに記載されているフォルダはスキャンされません。

このような不可視期間は3ヶ月間固定されています。 この期間が過ぎると、発行されたディレクトリはGoogleサーバーによって再度処理されます。

部分的にスキャンするサイトを削除する方法

検索ボットがrobots.txtの内容を読み込み、その内容に基づいて特定の決定が行われます。 たとえば、anatomという名前のディレクトリ全体を表示から除外する必要があります。 これを行うには、次のような指示を書いてください。

ユーザーエージェント：Googlebot

Disallow：/ anatom

たとえば、.gifのようなすべての画像をインデックスに登録したくない場合などです。 これを行うには、次のリストを追加します。

ユーザーエージェント：Googlebot

Disallow：/*.gif$

別の例があります。 解析から動的に生成されたページに関する情報を削除して、次のエントリをポインタに追加してみましょう：

ユーザーエージェント：Googlebot

Disallow：/ *？

だから、おおよそ、検索エンジンのルールが規定されています。 もう一つのことは、METAタグを使用する方がずっと便利だということです。 そして、ウェブマスターはしばしば検索エンジンの操作を規制するような標準を使用します。 しかし、次の記事でこれについて話します。