التثبيت والإعدادات الأساسية
قد يبدو تثبيت Screaming Frog عملية بسيطة مثل “بضع نقرات على التالي”، ولكن أفاد بعض المستخدمين أن عدم الانتباه لتوافق النظام أثناء التثبيت أدى إلى بطء تشغيل نسخة الماك، حيث كانت سرعة الزحف أبطأ بنسبة 40% من المعتاد؛
كما قام البعض بضبط عمق الزحف بشكل عشوائي، مما أدى إلى استغراق ساعتين في زحف موقع صغير دون إنهاء الصفحات الأساسية.
التحضير قبل التثبيت
1. توافق النظام
يدعم Screaming Frog أنظمة Windows 10/11 (64 بت) و macOS 10.15 والإصدارات الأحدث. إذا كان جهازك يعمل بنظام Windows 7 أو macOS 10.14، فسيظهر تنبيه “غير متوافق” عند تحميل حزمة التثبيت، وقد يؤدي تشغيلها قسراً إلى الانهيار (أظهرت الاختبارات أن معدل الانهيار لمستخدمي Win7 يبلغ حوالي 35%).
2. مشاكل الصلاحيات
- Windows: يُنصح بالتثبيت باستخدام حساب مسؤول (انقر بزر الماوس الأيمن على حزمة التثبيت ← “تشغيل كمسؤول”)، وإلا فقد لا تتمكن الأداة من كتابة بيانات الزحف بسبب نقص الصلاحيات (خطأ شائع: “تعذر حفظ ملف السجل”).
- Mac: هل تحتاج إلى إغلاق “حماية تكامل النظام” (SIP)؟ لا، ولكن عند التشغيل لأول مرة، قد تحتاج إلى النقر على “فتح على أي حال” في “تفضيلات النظام ← الأمن والخصوصية”، وإلا فسيتم حظر البرنامج (يتوقف حوالي 20% من مستخدمي الماك عند هذه الخطوة).
3. بيئة الشبكة
أغلق برامج البروكسي (مثل VPN والمسرعات) قبل الزحف، حيث أن تأخر الشبكة المحلية لأكثر من 200 مللي ثانية سيؤدي إلى انخفاض سرعة الزحف بنسبة 50% (بالتجربة: عند تأخير 200 مللي ثانية، يتم زحف 10 روابط في الثانية؛ وعند 50 مللي ثانية، يتم زحف 25 رابطاً في الثانية).
التثبيت الرسمي
نظام Windows
- قم بزيارة موقع Screaming Frog الرسمي (www.screamingfrog.co.uk)، وانقر على “Download Free Version” (النسخة المجانية كافية للمواقع الصغيرة والمتوسطة)؛
- اختر “Windows Installer”، وبعد اكتمال التحميل انقر مزدوجاً للتشغيل؛
- اتبع التعليمات لاختيار مسار التثبيت (يُنصح بالمسار الافتراضي في القرص C لتجنب فقدان ملفات التكوين لاحقاً)، وحدد “إنشاء اختصار على سطح المكتب”، ثم انقر “تثبيت”؛
- بعد اكتمال التثبيت، ستظهر أيقونة عنكبوت خضراء على سطح المكتب، انقر مزدوجاً لفتحها.
نظام macOS
- قم بالتحميل من الموقع الرسمي نفسه، واختر “macOS DMG”؛
- انقر مزدوجاً على ملف .dmg المحمل، واسحب أيقونة “Screaming Frog SEO Spider” إلى مجلد “التطبيقات”؛
- عند الفتح لأول مرة، قد ينبه النظام بأنه “لا يمكن فتحه لأنه من مطور غير معروف”، توجه إلى “تفضيلات النظام ← الأمن والخصوصية” وانقر “فتح على أي حال”.
4 إعدادات أساسية
بعد اكتمال التثبيت، تحتاج عند فتح البرنامج لأول مرة إلى تكوين معلمات “العنكبوت” (Spider).
إذا تم الضبط بشكل خاطئ، فقد تكون جميع بيانات الزحف اللاحقة عديمة الفائدة.
وكيل المستخدم (User Agent)
- الوظيفة: إخبار خادم الموقع “من أنا”، وكيل مستخدم زاحف جوجل هو “Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)”.
- طريقة الضبط: انقر على القائمة العلوية “Configuration ← Spider”، وفي القائمة المنسدلة لـ “User Agent” اختر “Googlebot” (الافتراضي هو “Screaming Frog”).
- لماذا هو مهم: إذا استخدمت وكيل المستخدم الافتراضي، فقد تحظر بعض المواقع الزاحف (مثلاً بإعداد “Disallow: /screamingfrog”)، مما يؤدي للفشل في سحب المحتوى؛ استخدام “Googlebot” يحاكي زاحف جوجل الحقيقي للحصول على بيانات أقرب للواقع (بالتجربة: ارتفع معدل نجاح زحف موقع تجارة إلكترونية من 65% إلى 92% بعد التغيير).
عمق الزحف (Crawl Depth)
- التعريف: بدءاً من الصفحة الرئيسية، ما هو أقصى عدد من نقرات الروابط (مثلاً: الرئيسية ← صفحة القسم ← صفحة المنتج تعتبر 3 طبقات).
- نصائح الضبط:
- المواقع الصغيرة والمتوسطة (أقل من 1000 صفحة): يضبط على 5 طبقات (يغطي أكثر من 90% من الصفحات الأساسية)؛
- المواقع الكبيرة (أكثر من 1000 صفحة): يضبط على 10 طبقات، ولكن يجب أن يقترن بـ “تحديد عدد الروابط” لتجنب طول وقت الزحف.
تحديد عدد الروابط (Max URLs to Crawl)
- الوظيفة: منع البرنامج من الزحف المستمر دون توقف بسبب كثرة الروابط (مثل المنتديات أو صفحات التمرير اللانهائي).
- طريقة الضبط: في “Configuration ← Spider” حدد “Limit number of URLs to crawl” وأدخل القيمة (يُنصح بـ 5000-10000 للمواقع المتوسطة).
- عواقب عدم الضبط: قام أحد المستخدمين بزحف موقع تجارة إلكترونية يحتوي على روابط ديناميكية للمنتجات المقترحة، وبسبب عدم تحديد العدد، استمر البرنامج 24 ساعة وسحب 230 ألف رابط (80% منها كانت صفحات تفاصيل منتجات مكررة).
استبعاد المعلمات (Exclude Parameters)
- المشكلة: تحتوي روابط العديد من المواقع على معلمات زائدة (مثل utm_source)، مما يجعل البرنامج يعتبرها روابط مختلفة ويؤدي للزحف المكرر.
- طريقة الضبط: انقر “Configuration ← Exclude”، وفي “Query Parameters” أدخل المعلمات المراد تصفيتها مفصولة بفاصلة.
- الأثر: قلل موقع تعليمي عدد الروابط المزحوفة من 12 ألفاً إلى 4500 بعد تصفية 12 معلمة تتبع، مما قلل وقت الزحف بنسبة 40%.
إجراء “زحف صغير” للصفحة الرئيسية
بعد الإعداد، لا تتعجل في زحف الموقع كاملاً – أدخل رابط الرئيسية أولاً واجرِ اختباراً محدوداً (100 رابط) للتحقق من 3 أشياء:
- هل تم إغفال صفحات أساسية: مثل “من نحن” أو “اتصل بنا” (ابحث في تقرير Internal)؛
- هل توجد روابط مكررة: ابحث عن نسخ مختلفة لنفس الصفحة في تقرير URL؛
- هل هناك أخطاء 404: تأكد من عدم زحف صفحات محذوفة في تقرير Response Codes.
بدء زحف أساسي سريع
يعتقد الكثيرون أن “النقر على بدء” هو كل شيء، ولكن في الواقع 30% من الأشخاص يحصلون على بيانات غير صالحة بسبب تجاهل التفاصيل.
3 فحوصات قبل البدء
1. التأكد من اكتمال الإعدادات الأساسية (وكيل المستخدم، عمق الزحف، استبعاد المعلمات).
2. اختبار استقرار الشبكة (يُفضل أن يكون التأخير أقل من 100 مللي ثانية).
3. التأكد من إمكانية الوصول للموقع الهدف (فتحه في المتصفح للتأكد من عدم وجود حظر).
العملية في 4 خطوات
1. إدخال الرابط الهدف: يجب أن يكون الرابط كاملاً (يحتوي على http أو https).
2. ضبط شروط التحديد (اختياري ولكن يُنصح به).
3. النقر على “Start” ومراقبة الحالة.
4. معالجة المشاكل أثناء الزحف (مثل توقف الزحف المفاجئ).
تفسير تقارير السيو (ركز على هذه الـ 6)
يقول خبراء السيو إن “البيانات لا تكذب”، ومن بين عشرات تقارير Screaming Frog، توجد المعلومات المؤثرة على ترتيب جوجل في 6 تقارير أساسية.
تقرير رموز استجابة الحالة
يسجل هذا التقرير رموز HTTP لكل صفحة، فإذا كان الرمز خاطئاً، فقد يتخطى الزاحف صفحتك تماماً.
- 200 (طبيعي): يجب أن تكون النسبة أكثر من 85%.
- 404 (رابط معطل): قم بتصدير القائمة وحذف الروابط أو عمل تحويل 301.
تقرير طول وهيكل الروابط (URL)
صبر زاحف جوجل على الروابط الطويلة محدود، فكلما زاد طول الرابط، قل احتمال زحفه بالكامل.
تقرير وسوم العنوان (Title Tags)
العنوان هو الأساس الذي يحكم به جوجل على موضوع الصفحة، والعناوين المكررة أو غير الفعالة ستؤدي مباشرة إلى انخفاض الترتيب.
تقرير الوصف التعريفي (Meta Description)
لا يؤثر الوصف مباشرة على الترتيب، ولكنه يحدد ما إذا كان المستخدم سينقر على صفحتك أم لا.
تقرير وسم H1
وسم H1 هو العنوان الرئيسي للصفحة، ومن خلاله يعرف جوجل المحتوى الجوهري (يُفضل وجود H1 واحد فقط لكل صفحة).
تقرير سمة Alt للصور
سمة Alt هي الوصف النصي للصورة، وفقدانها أو حشو الكلمات المفتاحية فيها يضيع حركة المرور من بحث الصور.
فحص مشاكل الروابط الداخلية بالجملة
تشير الإحصاءات إلى أن المواقع التي لا تفحص روابطها الداخلية تعاني من عدم فهرسة 15-20% من صفحاتها؛ وبعد إصلاح هذه المشاكل، يمكن أن تزيد كمية الزحف بنسبة تزيد عن 30%.
الروابط الداخلية المعطلة
هي الروابط التي تشير لصفحات محذوفة (404). المستخدم سيغادر الموقع فور نقره عليها، والزاحف سيقلل من زحفه للموقع عند مواجهة الكثير من أخطاء 404.
الصفحات اليتيمة
هي صفحات تحتوي على محتوى ولكن لا يوجد أي رابط داخلي يشير إليها. احتمالية أرشفتها أقل بنسبة 60% من الصفحات المرتبطة.
تركيز الوزن (Link Equity)
يشير إلى كثرة الروابط في الرئيسية مما يشتت “انتباه” الزاحف عن الصفحات الهامة الأخرى.
3 نصائح للمعالجة الجماعية
- استخدام Excel لتصفية المشاكل المتكررة.
- إعطاء الأولوية لإصلاح روابط الصفحات ذات الوزن العالي (مثل الرئيسية).
- المراجعة الدورية (كل أسبوعين مثلاً).
أخيراً، الأدوات هي مجرد مساعد، فجوهر تصدر نتائج جوجل يظل دائماً هو “المحتوى الذي يحتاجه المستخدم“
