في عالم مثالي ، ستقوم Google بالزحف إلى موقعنا بالكامل. ستعثر Google على الصفحات المناسبة لوضعها أمام المستخدمين المستهدفين ، وستقوم بذلك بسرعة فورية. لكن Googlebot لا يعمل بهذه الطريقة. وبشكل أكثر تحديدًا ، ربما لا تسمح ميزانية الزحف لموقعك بذلك.
لا يمكنك تغيير كيفية عمل برنامج Googlebot، ولكن هل يمكن أن نفعل شيئا حيال الميزانية الزحف الخاص بك.
يوضح مستند Gary Illyes ، ” ما تعنيه ميزانية الزحف لبرنامج Googlebot ” ، تعريف Google لـ “ميزانية الزحف”. كما يوضح أيضًا بالتفصيل كيفية استخدام Googlebot لميزانية الزحف للموقع لتحديد ما / مقدار الزحف الذي يتم الزحف إليه. سنتعمق أكثر في الأمر قريبًا ، لكننا أردنا أن نشير إلى كيف يبدو أن المستند يرسل رسالتين متعارضتين:
- تحتاج المواقع الكبيرة فقط إلى القلق بشأن ميزانية الزحف ؛ و
- يعد الزحف إلى موقعك أمرًا بالغ الأهمية لنجاح موقع الويب
بالتأكيد ، يقول إيليس في المستند أن الزحف إلى الميزانية “ليس شيئًا يدعو معظم الناشرين إلى القلق بشأنه”. ولكن كيف يمكن أن يكون؟ قد لا يمتلك الكثير منا مواقع تحتوي على آلاف وآلاف من عناوين URL ، ولكن لا ينبغي التقليل من قيمة الحصول على زحف أكثر كفاءة. خاصة عندما نتمكن من الحصول عليها عن طريق تحسين موقعنا.
لتحسين ميزانية الزحف لدينا ، علينا أولاً فهمها. نحتاج إلى معرفة ما ينظر إليه Googlebot عند تحديده. عندها فقط يمكننا الحصول على زحف أكثر كفاءة لموقعنا.
تعريف Googlebot
في حالة نسيان ما يفعله Googlebot: “الزحف هو أولويته الرئيسية مع التأكد من أنه لا يقلل من تجربة المستخدمين الذين يزورون الموقع.”
وظيفة Googlebot هي الزحف إلى موقعك. ولكنه يريد أيضًا تقديم صفحات مفيدة للمستخدمين لعرضها. تساعد ميزانية الزحف على القيام بالأمرين معًا.
إذن ، ما هو بالضبط ” الزحف ب الميزانية؟ “
لقد رأينا العديد من التعريفات لميزانية الزحف على مر السنين. ولا أساء إلى أولئك الذين فعلوا ذلك من قبل ، لكننا سنأخذ تعريف Google على أي شخص آخر في أي يوم.
تحدد Google ميزانية الزحف على أنها عدد عناوين URL التي يمكن لبرنامج Googlebot الزحف إليها ويريد الزحف إليها.
هناك جزءان لهذا التعريف: 1) عدد عناوين URL التي يمكن لبرنامج Googlebot الزحف إليها ، و 2) عدد عناوين URL التي يريد Googlebot الزحف إليها . لفهم ذلك ، يتعين علينا النظر في العوامل التي تشكل ميزانية الزحف و “حد معدل الزحف” و “طلب الزحف”.
حد معدل الزحف
على الرغم من أن الغرض الوحيد لبرنامج Googlebot في الحياة هو الزحف والزحف والزحف ، إلا أنه لا يريد عرض كل صفحة في الموقع. لن يرغب الكثير من المستخدمين في ذلك. بدلاً من ذلك ، يفرض Googlebot حدًا – وهو الحد الأقصى لمعدل الجلب – يتكون من “عدد الاتصالات المتوازية المتزامنة التي قد يستخدمها Googlebot للزحف إلى الموقع”. وهذا مبني على شيئين:
- صحة الزحف
- حد معدل الزحف لـ Googlebot في Search Console
نعم ، يمكنك تحديد معدل الزحف إلى موقعك. على الرغم من أنك ربما ترغب فقط في خفضه في الحالات القصوى ، مثل إذا تعرض الخادم لعدد كبير جدًا من الطلبات.
طلب الزحف
هذا ما يريد Googlebot الزحف إليه. هناك شيئان يحددان طلب الزحف:
- شعبية
- جفاء
نأمل أن يكون لديك روابط مفيدة. يتم الزحف إلى الروابط المفضلة كثيرًا ، لذا فهي حديثة للفهرس. تعمل Google بنشاط على “منع عناوين URL من أن تصبح قديمة في الفهرس”.
يعتبر طلب الزحف أكثر أهمية بلا شك من حد معدل الزحف. إذا لم يكن موقعك يحتوي على روابط ممتازة لمطالبة Googlebot بالزحف إليه ، فلن يهم حد معدل الزحف – فسيقوم Googlebot بإيقاف الزحف.
ما هي العوامل التي تؤثر على ميزانية الزحف؟
يفيد Illyes بأن “وجود العديد من عناوين URL ذات القيمة المضافة المنخفضة يمكن أن يؤثر سلبًا على الزحف إلى الموقع وفهرسته”. روابط ضعيفة أو لا قيمة لها. إليك أنواع الروابط السيئة التي تريد تجنبها:
- التنقل الأوجه ومعرفات الجلسات (فكر في المرشحات على مواقع التجارة الإلكترونية)
- محتوى مكرر في الموقع
- صفحات الأخطاء اللينة
- الصفحات المخترقة
- المساحات والوكلاء اللانهائي
- جودة منخفضة ومحتوى غير مرغوب فيه
كيفية جعل Googlebot يزحف إلى موقعك بشكل أكثر كفاءة
أنت تعرف الآن كيف تحدد Google ميزانية الزحف. وأنت تعلم أن الروابط تلعب دورًا كبيرًا في الزحف الصحي. حان الوقت الآن لمعرفة ما يمكنك القيام به لتحسين ميزانية الزحف لموقعك.
اكتب محتوى A + (AKA ليس مكررًا ، وليس جودة منخفضة) . في حال احتجت إلى تذكير آخر ، فإن Google لا تحب المحتوى المكرر أو غير المرغوب فيه. يجب أن يساعد المحتوى الموجود على موقعك في الإجابة على استفسار المستخدم. فلماذا تضيع وقت Google في الزحف إلى نفس المحتوى بينما يمكنك توسيع سلطتك بإجابة مختلفة؟
إصلاح أخطاء الصفحة . يمكن أن تستهلك الصفحات التي تحتوي على أخطاء soft 404 وأخطاء أخرى ميزانية الزحف المخصصة لصفحات أفضل. حدد الصفحات التي بها أخطاء ثم اعمل على إصلاحها. على سبيل المثال ، يمكن لسلاسل إعادة التوجيه الطويلة أن تبطئ الزحف (لكنك تعلم ذلك بالفعل ). قم بقصها ، وستحصل على عملية زحف أكثر كفاءة لن يتم انسدادها أثناء القفز من صفحة إلى أخرى.
زيادة سرعة موقعك . تؤثر سرعة الموقع بشكل مباشر على سلامة الزحف ، والتي تعد عاملاً في حد معدل الزحف لموقعك. كلما كان موقع الويب الخاص بك أسرع ، زادت اتصالات Googlebot بموقعك. وبالنظر إلى أن المستخدمين سيغادرون موقعًا لا يتم تحميله في غضون 3 ثوانٍ ، فلديك الكثير من الأسباب لجعل موقعك سريعًا للغاية.
الميزانية الجيدة والفائدة
إن تحسين ميزانية الزحف وامتلاك موقع ويب جيد هو نفسه. يتطلب تحسين ميزانية الزحف نفس العمل الشاق الذي يصنع تجربة مستخدم جيدة. نظرًا لأنه حتى المواقع الصغيرة يجب أن تتبع إرشادات Google – وليس فقط المواقع الكبيرة – يجب أن يكون الجميع على دراية بميزانية الزحف الخاصة بهم وكيف يمكنهم تحسينها.