هل ترتيبك في محركات البحث في خطر؟ هل انتهى ترتيب جوجل، رغم أن كل شيء يبدو على ما يرام؟ - صورة: Xpert.Digital
حل منطقي لمشكلة فهرسة محركات البحث - ما وراء ذلك هذه المرة؟
خلال الأيام القليلة الماضية، لاحظتُ أمرًا مُقلقًا: مقالاتي الأخيرة لم تعد تُفهرس في أخبار جوجل، وحركة الزيارات من جوجل ديسكوفر في انخفاض مُطرد. بطبيعة الحال، هذه التطورات لا تُفارقك. راودتني تخميناتٌ مُتضاربة، لكنني قررتُ تجاهلها والتعامل مع المشكلة بعقلانية.
عندما أرسلتُ صفحاتي يدويًا إلى جوجل، فهرستها وعُرضت على الفور. مع ذلك، لم يحدث شيء حتى بعد انتظاري. لاحظتُ هذه الظاهرة على مدار يومين، لذا حان الوقت لإجراء تحقيق شامل لمعرفة السبب.
الخطوة 1: مراجعة التغييرات الأخيرة
أولاً، سألتُ نفسي: ما آخر شيء تغيّر في الموقع؟ يُعدّ تحديد التغييرات الحديثة أمرًا أساسيًا لتضييق نطاق مصادر الخطأ المحتملة. في حالتي، قمتُ مؤخرًا بتعديل نظام التخزين المؤقت.
الخطوة 2: تحديد الأخطاء الخفية أو التفكير الخاطئ
قد يكون لإصلاح التخزين المؤقت آثار جانبية غير مقصودة. هل هناك أي أخطاء أو عيوب خفية في المنطق؟ بدأتُ بمراجعة الإعدادات الجديدة والبحث عن أي تعارضات محتملة.
الخطوة 3: ابحث عن السبب
بعد تحليل شامل، اكتشفتُ السبب: تعريف بوت جديد في إعدادات الأمان لديّ أدى وظيفته بكفاءة عالية، للأسف. في هذه الأيام، يجوب الإنترنت عدد لا يُحصى من البوتات، ولتقليل حمل الخادم، غالبًا ما تُحظر البوتات غير الضرورية. مع ذلك، صُنِّف بوت جوجل خطأً على أنه "بوت غير ضروري". إهمال بسيط ذو عواقب وخيمة.
ملاحظات من أدوات مشرفي المواقع من Microsoft Bing
تم تأكيد شكوكى من خلال التقارير الواردة من أدوات مشرفي المواقع Bing:
- بعض صفحاتك المهمة المنشورة مؤخرًا لم تُرسَل عبر IndexNow. تعرّف على أهمية إرسالها عبر IndexNow.
- بعض صفحاتك الجديدة المهمة غير مدرجة في خرائط موقعك.**
كما نبهتني وحدة تحكم بحث جوجل إلى فهرسة صفحات لا تحتوي على محتوى. أظهرت هذه المؤشرات بوضوح أن محركات البحث تواجه صعوبة في الوصول إلى محتواي.
خاتمة
كان إدراكي مُفاجئًا: أرى صفحات لا يراها جوجل. لكي تُفهرس محركات البحث صفحاتي، تحتاج روبوتاتها إلى وصول غير مُقيّد. إذا حُظر روبوت جوجل، فسيظل محتواي غير مرئي.
كيف تتحقق مما يراه برنامج Googlebot؟
لضمان قدرة برنامج جوجل بوت على الزحف إلى موقعي الإلكتروني بشكل صحيح، أردتُ عرض الصفحات من منظوره. هناك عدة طرق لزيارة موقع إلكتروني بنفس طريقة جوجل بوت.
1. استخدام أدوات مطوري Google Chrome
إحدى الطرق البسيطة هي استخدام أدوات المطور الخاصة بـ Google Chrome:
- لفتح أدوات المطور: اضغط على `Ctrl + Shift + I` (Windows) أو `Cmd + Shift + I` (Mac).
- انتقل إلى علامة التبويب "الشبكة": هنا سترى كافة أنشطة الشبكة.
- لضبط وكيل المستخدم: انقر على النقاط الثلاث في الزاوية العلوية اليمنى، ثم اختر "أدوات إضافية"، ثم "شروط الشبكة". عطّل خيار "تحديد وكيل المستخدم تلقائيًا"، ثم اختر "Googlebot" من القائمة.
- إعادة تحميل الصفحة: تؤدي إعادة تحميل الصفحة إلى عرضها كما يراها Googlebot.
تتيح هذه الطريقة إمكانية تحديد مشكلات العرض المحتملة أو الموارد المحظورة.
2. استخدام مُبدِّل وكيل المستخدم
بدلاً من ذلك، يمكن استخدام ملحق المتصفح مثل "User-Agent Switcher":
- لتثبيت الامتداد: ابحث عن "User-Agent Switcher" في متجر Chrome الإلكتروني وقم بتثبيته.
- تحديد Googlebot كوكيل المستخدم: بعد التثبيت، يمكنك تحديد وكيل المستخدم المطلوب.
- زيارة الموقع: يتم الآن عرض الصفحة من منظور Googlebot.
يعد هذا مفيدًا بشكل خاص للاختبارات السريعة وعندما تريد التبديل بين وكلاء المستخدم المختلفين بشكل متكرر.
3. استخدام Screaming Frog SEO Spider
للحصول على تحليلات أكثر تعمقًا، فإن "Screaming Frog SEO Spider" مناسب:
- ضبط وكيل المستخدم: انتقل إلى "التكوين > وكيل المستخدم" وحدد Googlebot.
- بدء عملية الزحف: تقوم الأداة بالبحث في موقع الويب وتُظهر كيفية رؤيته لبرنامج Googlebot.
- تحليل النتائج: تحديد مشكلات الزحف المحتملة أو الموارد المحظورة.
تعتبر هذه الأداة مثالية لمواقع الويب الكبيرة وعمليات تدقيق تحسين محركات البحث التفصيلية.
4. استخدام Google Search Console
توفر Google Search Console أيضًا رؤى قيمة:
- التحقق من عنوان URL: أدخل عنوان URL المطلوب وابدأ الاختبار المباشر.
- تحليل النتائج: يمكنك معرفة ما إذا كانت الصفحة مفهرسة وما إذا كانت هناك أي مشاكل في الزحف إليها.
- جلب البيانات كما يفعل Google: تتيح لك هذه الميزة رؤية كيفية عرض Googlebot للصفحة.
يساعد هذا في تحديد المشكلات المحددة التي قد تمنع الروبوت من الزحف إلى الصفحة بشكل صحيح.
حل المشكلة
باستخدام هذه الأدوات، تأكدتُ من حظر برنامج Googlebot. لحل المشكلة، اتبعتُ الخطوات التالية:
1. ضبط تعريفات الروبوت
لقد قمت بتحديث تكوين الأمان بحيث لم يعد يتم حظر Googlebot وغيره من روبوتات محرك البحث المهمة.
2. تحقق من ملف robots.txt
تأكدت من أن الملف لا يحتوي على أي تعليمات من شأنها تقييد الوصول.
3. تحديث خرائط المواقع
تم تحديث خرائط الموقع وإرسالها إلى أدوات مشرفي المواقع.
4. المراقبة
في الأيام التالية، قمت بمراقبة الفهرسة وحركة المرور للتأكد من أن كل شيء يعمل بسلاسة مرة أخرى.
التدابير الوقائية للمستقبل
لتجنب مثل هذه المشاكل في المستقبل، اتخذت بعض القرارات:
- المراجعة الدورية لتكوينات الأمان: بعد كل تغيير، يجب التحقق من تأثيره على وظائف موقع الويب.
- المراقبة المستمرة: يساعد استخدام أدوات مثل Google Search Console في تحديد المشكلات في وقت مبكر.
- توثيق واضح للتغييرات: يجب توثيق جميع التغييرات التي تطرأ على الموقع الإلكتروني حتى يتمكن من الاستجابة بشكل أسرع في حالة حدوث أخطاء.
- التدريب: إن الفهم الأفضل لكيفية عمل محركات البحث والروبوتات الخاصة بها يساعد على تجنب التكوينات الخاطئة.
البصيرة من هذا
كان ينبغي عليّ أن أكون أكثر وعيًا وحذرًا عند معالجة ذاكرة التخزين المؤقت. لكن تركيزي على التفاصيل سيطر عليّ. تم تحديد المشكلة، وحلها، وتجاوزها، وسأتابع الأمر باهتمام أكبر.
يمكن للأخطاء التقنية أن تؤثر بشكل كبير على ظهور الموقع الإلكتروني. في حالتي، أدى تعريف خاطئ لبرنامج بوت إلى حظر برنامج جوجل بوت، مما حال دون فهرسة محتواي.
الإدراك: حتى التغييرات الصغيرة يمكن أن يكون لها عواقب كبيرة.
من خلال استكشاف الأخطاء وإصلاحها بشكل منهجي واستخدام الأدوات المناسبة، تمكنتُ من تحديد المشكلة وحلها. من الضروري التحقق بانتظام من كيفية رؤية محركات البحث لموقعك الإلكتروني.
آمل أن تساعد تجاربي مشرفي المواقع الآخرين على تجنب مشاكل مماثلة أو حلها بسرعة أكبر. يُعدّ ظهور الموقع في محركات البحث أمرًا بالغ الأهمية لنجاحه، لذا يجب مراقبة حالته الفنية باستمرار.
مناسب ل: