تحليل ميزانية الزحف من ملفات السجل

أنت تحلل بيانات سجلات الخادم لفهم سلوك الزحف.

الموقع: {{SITE_URL}}
ملخص السجلات (الرابط أو المجلد، زيارات البوت، أكواد الحالة، النطاق الزمني): {{LOG_SUMMARY}}
بنية الموقع وأي أقسام تدرّ الدخل: {{SITE_STRUCTURE}}
إجمالي عدد الروابط القابلة للفهرسة: {{INDEXABLE_COUNT}}

أخرج:
1. جدول توزيع الزحف: القسم أو النمط | زيارات البوت | نصيبه من إجمالي الزحف | نصيبه من الروابط القابلة للفهرسة | القيمة التجارية (عالية / متوسطة / منخفضة) | الحكم (زحف ناقص / متوازن / مُهدر).
2. "إهدار الزحف" - الأنماط التي تستهلك زحفًا بلا قيمة، مرتبة حسب عدد الزيارات، كل واحدة مع الآلية (باراميترات، تصفح مفلتر، ترقيم صفحات، سلاسل إعادة توجيه، أخطاء 404 ناعمة، تقاويم، معرّفات جلسات).
3. "لم يُزحف إليها أبدًا رغم أهميتها" - الأقسام ذات القيمة بزيارات بوت منخفضة أو صفرية، مع السبب المرجّح.
4. قائمة إصلاحات: الإجراء | الطريقة (robots، noindex، canonical، معالجة الباراميترات، الربط الداخلي، الإزالة) | الأثر المتوقع على توزيع الزحف.

القيود:
- لا تخلط بين قلة الزحف وقلة الفهرسة. قل ما تظهره البيانات فعلًا.
- تحقق من أن هوية البوت مثبتة في البيانات قبل اعتبار الزيارات زحفًا حقيقيًا لمحركات البحث؛ لو كانت حالة التحقق غير معروفة، قل ذلك.
- لا توصِ بحجب نمط في robots.txt لو كانت الصفحات تحتاج إلى إزالة من الفهرس أولًا. اشرح الترتيب الصحيح.