クロールエラー:The Next Generation
Monday,March12,2012
クロールエラーはウェブマスターツールで最も人気のある機能の一つであり、今日はそれをさらに便利にするいくつかの非常に重要な機能拡張を展開しています。
私たちは現在、多くの新しいタイプのエラーを検出して報告しています。 新しいデータを理解しやすくするために、エラーをサイトエラーとURLエラーの2つの部分に分割しました。
サイトエラー
サイトエラーは、特定のURLに固有のエラーではなく、サイト全体に影響を与えるエラーです。 これには、DNS解決の失敗、webサーバーとの接続の問題、ロボットのフェッチの問題が含まれます。txtファイル。 私たちは、URLによってこれらのエラーを報告するために使用されますが、彼らは個々のUrlに固有のものではないので、それは多くの意味をなさなかった—実 代わりに、サイト全体のエラーの種類ごとに障害率を追跡するようになりました。 また、これらのエラーが頻繁に発生して注意が必要になった場合には、アラートを送信しようとします。
さらに、多くのサイトの場合のように、これらの分野で問題がない（そして最近はない）場合は、このセ 代わりに、私たちはちょうどあなたがすべてがhunky-doryであることを知らせるためにあなたにいくつかの友好的なチェックマークを表示します。
URLエラー
URLエラーは、特定のページに固有のエラーです。 これは、GooglebotがURLをクロールしようとしたときに、DNSを解決し、サーバーに接続し、ロボットを取得して読み取ることができたことを意味します。txtファイルを作成し、このURLを要求しますが、その後何かが間違っていました。 私たちは、エラーの原因に基づいて、URLエラーをさまざまなカテゴリに分類します。 サイトがGoogleニュースまたはモバイル（CHTML/XHTML）データを配信している場合は、それらのエラーのカテゴリが別々に表示されます。
Less is more
各タイプの最大100,000個のエラーを表示していました。 この情報をすべて消費しようとすると、消防車から飲むようなものであり、それらのエラーのどれが重要であるか（あなたのホームページがダウンしている）、またはそれほど重要ではないか（誰かの個人的なサイトがあなたのサイトへのリンクにタイプミスをした）を知る方法がありませんでした。 すべての100,000のエラーを表示する現実的な方法はありませんでした—ソート、検索、またはあなたの進捗状況をマークする方法はありませんでした。 この機能の新しいバージョンでは、最も重要なエラーのみを事前に提供することに焦点を当てました。 各カテゴリについて、私たちは1000の最も重要で実用的なエラーだと思うものをあなたに与えるでしょう。 これらのトップ1000エラーを並べ替えてフィルタリングし、修正したと思われるときにお知らせし、それらの詳細を表示することができます。
一部のサイトでは、特定のタイプのエラーが1000を超えるため、各タイプのエラーの総数と90日前の履歴データを示すグラフを見ることができます。 1000のエラーの詳細と合計集計数が十分ではないことを心配する人のために、私たちはあなたが持っているすべての最後のエラーをダウンロードできるよ
ロボットによってブロックされたページのリストも削除しました。txt、これらは時々あなたのロボットの問題を診断するために有用であることができますが、ので。txtファイルは、彼らは頻繁にあなたが意図的にブロックされたページです。 私たちは本当にエラーに焦点を当てたかったので、”サイト構成”の下の”クローラーアクセス”機能にすぐに表示されるroboted Urlに関する情報を探してください。
詳細に飛び込みます
メインリストから個々のエラー URLをクリックすると、最後にURLをクロールしようとした日時、最初に問題に気づいた日時、エラーの簡単な説明などの追加情報が表示される詳細ペインが表示されます。
詳細ペインから、エラーの原因となったURLのリンクをクリックして、アクセスしようとしたときに何が起こるかを確認できます。 また、エラーを”固定”としてマークすることもできます（詳細は後で！エラータイプのヘルプコンテンツを表示し、URLを含むサイトマップを一覧表示し、このURLにリンクしている他のページを参照し、GooglebotにURLを取得させてくださ
行動を起こせ！
この新しいバージョンのクロールエラー機能で本当に興奮していることの一つは、あなたが本当に最初に最も重要なものを修正することに焦点を当てることができるということです。 優先順位リストの一番上にあるエラーは、自分のサイトの壊れたリンクを修正したり、サーバーソフトウェアのバグを修正したり、サイトマップを更新して死んだUrlを削除したり、301リダイレクトを追加してユーザーを”実際の”ページに誘導したりするなど、何かできることがあるものになるようにエラーをランク付けしました。 これは、サイトマップにURLが含まれているかどうか、リンク元の場所の数（およびそれらのいずれかがサイトにもあるかどうか）、URLが最近検索からトラフ
問題を修正したと思ったら（URLをGooglebotとして取得することで修正をテストできます）、フルアクセス権限を持つユーザーであれば、エラーを”修正”としてマークする これにより、リストからエラーが削除されます。 将来的には、URLを再クロールしようとしたときに同じエラーが発生しない限り、修正済みとしてマークされたエラーはトップエラーリストに含まれません。
新しいクロールエラー機能には多くの作業が含まれているため、非常に役立つことを願っています。 私たちはあなたが何を考えて知ってみましょう、あなたが何か提案がある場合は、私たちのフォーラムをご覧ください！
クルトDresner、ウェブマスターツールチームによって書かれた