تدقيق ميزانية الزحف

محركات البحث تخصص قدرًا محدودًا من الزحف لأي موقع. في متجر أو موقع فيه تصفح متعدد الأوجه، تُصرف هذه الميزانية عادةً على روابط شبه مكررة بينما تنتظر الصفحات المهمة. هذه المهارة تكشف أين تذهب الميزانية وتستعيدها.

ملف المهارة

---
name: crawl-budget-audit
description: استخدمها عندما يكون لديك موقع كبير فيه صفحات تظل خارج الفهرس لأسابيع، أو عندما تُظهر ملفات الـ log أن الزواحف تقضي وقتها على الباراميترات والفلاتر وصفحات الترقيم بدل الصفحات التي تهمك.
---

# تدقيق ميزانية الزحف

محركات البحث تخصص قدرًا محدودًا من الزحف لأي موقع. في متجر أو موقع فيه تصفح متعدد الأوجه، تُصرف هذه الميزانية عادةً على روابط شبه مكررة بينما تنتظر الصفحات المهمة. هذه المهارة تكشف أين تذهب الميزانية وتستعيدها.

## ما تحتاجه أولًا

- سجلات الخادم لمدة 14 يومًا على الأقل، أو تقرير إحصاءات الزحف في Search Console
- جرد كامل للروابط (sitemap أو تصدير من زحف)
- robots.txt

## الطريقة

1. استخرج عدد زيارات الزحف لكل نمط URL من الـ logs، مع التجميع حسب مقطع المسار وباراميتر الاستعلام لا حسب كل رابط على حدة.
2. رتّب الأنماط حسب نصيبها من إجمالي زيارات الزحف. أي نمط يتجاوز 5% ولا تريد ترتيبه هو تسريب.
3. لكل تسريب، حدد الأداة الصحيحة: Disallow في robots.txt للروابط التي يجب ألا تُجلب أبدًا، canonical للمكرر الذي يجب أن يبقى متاحًا، noindex للصفحات التي يجب الزحف إليها دون إدراجها، وقواعد الباراميترات فقط حين لا تناسب الثلاثة السابقة.
4. ابحث عن مصائد الزحف: التقاويم اللانهائية، معرفات الجلسة داخل الروابط، وترتيبات الفرز التي تولّد تركيبات بلا حدود.
5. قارن تكرار الزحف بتواريخ آخر تعديل. الصفحات التي تتغير كثيرًا ويُزحف إليها نادرًا تحتاج ربطًا داخليًا أفضل، لا توجيهًا.
6. أعد القياس بعد 14 يومًا وتأكد أن النصيب المستعاد ذهب فعلًا إلى الصفحات التي قصدتها.

## ما الذي تنتجه

جدول مرتب بتسريبات الزحف مع التوجيه المحدد لكل منها، بالإضافة إلى مقارنة قبل/بعد لنصيب الزحف المصروف على الصفحات المدرّة للدخل.

## أين تخطئ عادةً

- حظر رابط في robots.txt وهو يحمل روابط بالفعل - يحتفظ بقيمته لكنه لا يستطيع تمريرها
- استخدام noindex على صفحات منعت الزحف إليها أيضًا، فلا يُرى الـ noindex أبدًا
- التعامل مع ميزانية الزحف كمشكلة في موقع من 200 صفحة، حيث لا تكون مشكلة تقريبًا أبدًا

---

من مكتبة مهارات QuQi - https://www.quqi.io/ar/skills/crawl-budget-audit

ما تحتاجه أولًا

• سجلات الخادم لمدة 14 يومًا على الأقل، أو تقرير إحصاءات الزحف في Search Console
• جرد كامل للروابط (sitemap أو تصدير من زحف)
• robots.txt

الطريقة

1. 01 استخرج عدد زيارات الزحف لكل نمط URL من الـ logs، مع التجميع حسب مقطع المسار وباراميتر الاستعلام لا حسب كل رابط على حدة.
2. 02 رتّب الأنماط حسب نصيبها من إجمالي زيارات الزحف. أي نمط يتجاوز 5% ولا تريد ترتيبه هو تسريب.
3. 03 لكل تسريب، حدد الأداة الصحيحة: Disallow في robots.txt للروابط التي يجب ألا تُجلب أبدًا، canonical للمكرر الذي يجب أن يبقى متاحًا، noindex للصفحات التي يجب الزحف إليها دون إدراجها، وقواعد الباراميترات فقط حين لا تناسب الثلاثة السابقة.
4. 04 ابحث عن مصائد الزحف: التقاويم اللانهائية، معرفات الجلسة داخل الروابط، وترتيبات الفرز التي تولّد تركيبات بلا حدود.
5. 05 قارن تكرار الزحف بتواريخ آخر تعديل. الصفحات التي تتغير كثيرًا ويُزحف إليها نادرًا تحتاج ربطًا داخليًا أفضل، لا توجيهًا.
6. 06 أعد القياس بعد 14 يومًا وتأكد أن النصيب المستعاد ذهب فعلًا إلى الصفحات التي قصدتها.

ما الذي تنتجه

جدول مرتب بتسريبات الزحف مع التوجيه المحدد لكل منها، بالإضافة إلى مقارنة قبل/بعد لنصيب الزحف المصروف على الصفحات المدرّة للدخل.

أين تخطئ عادةً

• حظر رابط في robots.txt وهو يحمل روابط بالفعل - يحتفظ بقيمته لكنه لا يستطيع تمريرها
• استخدام noindex على صفحات منعت الزحف إليها أيضًا، فلا يُرى الـ noindex أبدًا
• التعامل مع ميزانية الزحف كمشكلة في موقع من 200 صفحة، حيث لا تكون مشكلة تقريبًا أبدًا

المزيد في SEO التقني