أفضل 5 إحصاءات لإحصاءات الزحف في Google Search Console

يوجد تقرير واحد في Google Search Console مفيد للغاية ويصعب العثور عليه ، خاصة إذا كنت قد بدأت للتو رحلة تحسين محركات البحث.

إنها واحدة من أقوى الأدوات لكل متخصص في تحسين محركات البحث ، على الرغم من أنه لا يمكنك الوصول إليها من داخل الواجهة الرئيسية لـ Google Search Console.

أنا أتحدث عن تقرير إحصائيات الزحف.

في هذه المقالة ، ستتعرف على سبب أهمية هذا التقرير ، وكيفية الوصول إليه ، وكيفية استخدامه لصالح تحسين محركات البحث.

كيف يتم الزحف إلى موقع الويب الخاص بك؟

تعد ميزانية الزحف (عدد الصفحات التي يمكن لبرنامج Googlebot الزحف إليها ويريد الزحف إليها) ضرورية لتحسين محركات البحث ، خاصةً للمواقع الكبيرة.

إذا كانت لديك مشكلات تتعلق بميزانية الزحف لموقعك على الويب ، فقد لا تقوم Google بفهرسة بعض صفحاتك القيمة.

وكما يقول المثل ، إذا لم يقم Google بفهرسة شيء ما ، فإنه لا وجود له.

يمكن لـ Google Search Console أن تعرض لك عدد صفحات موقعك التي يزورها Googlebot كل يوم.

مسلحًا بهذه المعرفة ، يمكنك العثور على الحالات الشاذة التي قد تسبب مشكلات تحسين محركات البحث لديك.

الغوص في إحصائيات الزحف الخاصة بك: 5 رؤى رئيسية

للوصول إلى تقرير إحصائيات الزحف ، سجّل الدخول إلى حساب Google Search Console وانتقل إلى الإعدادات> إحصائيات الزحف .

إليك جميع أبعاد البيانات التي يمكنك فحصها داخل تقرير إحصائيات الزحف:

1. المضيف

تخيل أن لديك متجرًا للتجارة الإلكترونية على shop.website.com ومدونة على blog.website.com.

باستخدام تقرير إحصائيات الزحف ، يمكنك بسهولة مشاهدة إحصائيات الزحف المتعلقة بكل مجال فرعي لموقعك على الويب.

لسوء الحظ ، لا تعمل هذه الطريقة حاليًا مع المجلدات الفرعية.

2. حالة HTTP

هناك حالة استخدام أخرى لتقرير إحصائيات الزحف وهي النظر في أكواد الحالة لعناوين URL التي تم الزحف إليها.

هذا لأنك لا تريد أن ينفق Googlebot الموارد في الزحف إلى الصفحات التي لا تتوافق مع HTTP 200. إنها مضيعة لميزانية الزحف الخاصة بك.

للاطلاع على تفاصيل عناوين URL التي تم الزحف إليها لكل رمز حالة ، انتقل إلى الإعدادات> إحصائيات الزحف> تفاصيل طلبات الزحف .

في هذه الحالة بالذات ، تم إجراء 16٪ من جميع الطلبات لصفحات مُعاد توجيهها.

إذا رأيت مثل هذه الإحصائيات ، فإنني أوصي بإجراء مزيد من التحقيق والبحث عن قفزات إعادة التوجيه والمشكلات المحتملة الأخرى.

في رأيي ، واحدة من أسوأ الحالات التي يمكنك رؤيتها هنا هي كمية كبيرة من أخطاء 5xx.

للاقتباس من وثائق Google: "إذا تباطأ الموقع أو استجاب لأخطاء الخادم ، فسيقل الحد ويزحف Googlebot بشكل أقل."

إذا كنت مهتمًا بهذا الموضوع ، فقد كتب Roger Montti مقالة مفصلة عن أخطاء 5xx في Google Search Console.

3. الغرض

يقسم تقرير إحصائيات الزحف غرض الزحف إلى فئتين:

• عناوين URL التي تم الزحف إليها لأغراض التحديث (إعادة الزحف إلى صفحات معروفة بالفعل ، على سبيل المثال ، يقوم Googlebot بزيارة صفحتك الرئيسية لاكتشاف روابط ومحتوى جديد).
• عناوين URL التي تم الزحف إليها لأغراض الاكتشاف (عناوين URL التي تم الزحف إليها لأول مرة).

هذا التقسيم مفيد بجنون ، وإليك مثال:

لقد صادفت مؤخرًا موقعًا على الويب به حوالي مليون صفحة مصنفة على أنها "تم اكتشافها - غير مفهرسة حاليًا".

تم الإبلاغ عن هذه المشكلة في 90٪ من جميع الصفحات على ذلك الموقع.

(إذا لم تكن معتادًا على ذلك ، فإن عبارة "تم الاكتشاف وليس الفهرس" تعني أن Google اكتشف صفحة معينة ولكن لم تزرها. إذا اكتشفت مطعمًا جديدًا في بلدتك ولكنك لم تجربه ، على سبيل المثال .)

كان أحد الخيارات هو الانتظار ، على أمل أن يقوم Google بفهرسة هذه الصفحات تدريجيًا.

كان هناك خيار آخر يتمثل في إلقاء نظرة على البيانات وتشخيص المشكلة.

لذلك قمت بتسجيل الدخول إلى Google Search Console وانتقلت إلى الإعدادات> إحصائيات الزحف> طلبات الزحف: HTML .

اتضح أن Google ، في المتوسط ​​، كانت تزور 7460 صفحة فقط على هذا الموقع يوميًا.

ولكن هناك شيء أكثر أهمية.

بفضل تقرير إحصائيات الزحف ، اكتشفت أن 35٪ فقط من 7460 عنوان URL تم الزحف إليها لأسباب تتعلق بالاكتشاف.

هذا فقط 2611 صفحة جديدة تكتشفها Google يوميًا.

2611 من أكثر من مليون.

سيستغرق الأمر 382 يومًا حتى تتمكن Google من فهرسة موقع الويب بالكامل بهذه الوتيرة.

كان اكتشاف ذلك بمثابة تغيير في قواعد اللعبة. تم تأجيل جميع تحسينات البحث الأخرى حيث ركزنا بشكل كامل على تحسين ميزانية الزحف.

4. نوع الملف

يمكن أن تكون إحصائيات الزحف GSC مفيدة لمواقع جافا سكريبت. يمكنك بسهولة التحقق من عدد المرات التي يزحف فيها Googlebot إلى ملفات JS المطلوبة للعرض الصحيح.

إذا كان موقعك مليئًا بالصور وكان البحث عن الصور أمرًا بالغ الأهمية لاستراتيجية تحسين محركات البحث لديك ، فسيساعدك هذا التقرير كثيرًا أيضًا - يمكنك معرفة مدى قدرة Googlebot على الزحف إلى صورك.

5. نوع Googlebot

أخيرًا ، يمنحك تقرير إحصائيات الزحف تصنيفًا تفصيليًا لنوع Googlebot المستخدم للزحف إلى موقعك.

يمكنك معرفة النسبة المئوية للطلبات التي تم إجراؤها بواسطة Googlebot للجوال أو لسطح المكتب وروبوتات الصور والفيديو والإعلانات.

معلومات مفيدة أخرى

تجدر الإشارة إلى أن تقرير إحصائيات الزحف يحتوي على معلومات لا تقدر بثمن لن تجدها في سجلات الخادم:

1. أخطاء DNS.
2. مهلات الصفحة.
3. مشكلات المضيف مثل مشكلات جلب ملف robots.txt.

استخدام إحصائيات الزحف في أداة فحص عنوان URL

يمكنك أيضًا الوصول إلى بعض بيانات الزحف الدقيقة خارج تقرير إحصائيات الزحف ، في أداة فحص عنوان URL.

لقد عملت مؤخرًا مع موقع إلكتروني كبير للتجارة الإلكترونية ، وبعد بعض التحليلات الأولية ، لاحظت مشكلتين ملحتين:

1. لم تتم فهرسة العديد من صفحات المنتجات في Google.
2. لم يكن هناك ارتباط داخلي بين المنتجات. كانت الطريقة الوحيدة لجوجل لاكتشاف المحتوى الجديد هي من خلال خرائط المواقع وصفحات الفئات المرقمة.

كانت الخطوة التالية الطبيعية هي الوصول إلى سجلات الخادم والتحقق مما إذا كان محرك بحث Google قد زحف إلى صفحات الفئات المرقمة.

لكن الوصول إلى سجلات الخادم غالبًا ما يكون صعبًا حقًا ، خاصةً عندما تعمل مع مؤسسة كبيرة.

جاء تقرير إحصائيات الزحف الخاص بـ Google Search Console في عملية الإنقاذ.

دعني أرشدك خلال العملية التي استخدمتها والتي يمكنك استخدامها إذا كنت تعاني من مشكلة مماثلة:

1. أولاً ، ابحث عن عنوان URL في أداة فحص عنوان URL. اخترت إحدى الصفحات المرقمة من إحدى الفئات الرئيسية للموقع.

2. ثم انتقل إلى التغطية> تقرير الزحف .

في هذه الحالة ، تم الزحف إلى عنوان URL آخر مرة منذ ثلاثة أشهر.

ضع في اعتبارك أن هذه كانت إحدى صفحات الفئات الرئيسية لموقع الويب التي لم يتم الزحف إليها لأكثر من ثلاثة أشهر!

لقد تعمقت أكثر وراجعت عينة من صفحات الفئات الأخرى.

اتضح أن Googlebot لم يزر العديد من صفحات الفئات الرئيسية مطلقًا. لا يزال الكثير منهم غير معروف لجوجل.

لا أعتقد أنني بحاجة إلى شرح مدى أهمية الحصول على هذه المعلومات عندما تعمل على تحسين رؤية أي موقع ويب.

يسمح لك تقرير إحصائيات الزحف بالبحث عن أشياء مثل هذه في غضون دقائق.

تغليف

كما ترى ، يعد تقرير إحصائيات الزحف أداة فعالة لتحسين محركات البحث على الرغم من أنه يمكنك استخدام Google Search Console لسنوات دون العثور عليها على الإطلاق.

سيساعدك هذا في تشخيص مشكلات الفهرسة وتحسين ميزانية الزحف الخاصة بك حتى تتمكن Google من العثور على المحتوى القيم الخاص بك وفهرسته بسرعة ، وهو أمر مهم بشكل خاص للمواقع الكبيرة.

لقد أعطيتك حالتين من حالات الاستخدام لتفكر فيها ، لكن الكرة الآن في ملعبك.

كيف ستستخدم هذه البيانات لتحسين ظهور موقعك؟

المزيد من الموارد:

• الزحف أولاً مُحسنات محركات البحث: دليل من 12 خطوة يجب اتباعه قبل الزحف
• 7 نصائح لتحسين ميزانية الزحف لكبار المسئولين الاقتصاديين
• كيف تعمل محركات البحث

اعتمادات الصورة

تم التقاط جميع لقطات الشاشة بواسطة المؤلف ، أبريل 2021