كيفية إصلاح مشاكل الفهرسة في Google Search Console لتحسين ظهور موقعك

هل سبق لك أن نشرت محتوى عالي الجودة على موقعك، ثم اكتشفت أنه لا يظهر في نتائج البحث؟ قد يكون ذلك بسبب مشاكل الفهرسة التي تمنع Google من الزحف إلى صفحاتك أو إضافتها إلى فهرسه. في عالم تحسين محركات البحث (SEO)، لا يكفي فقط إنشاء محتوى رائع، بل يجب التأكد من أن محركات البحث قادرة على العثور عليه وفهرسته بالشكل الصحيح.

Google Search Console هي إحدى خدمات جوجل المجانية بالكامل لمراقبة حالة تحسين محرك البحث لموقع ما. يستخدمها المتخصصون في تحسين محرك البحث والمسوقون الرقميون لمراقبة الأداء وحل الأخطاء والمشكلات على موقع الويب. تساعد سيرش كونسول في تحديد الأخطاء الموجودة وتصحيحها من خلال تقديم تقارير مفصلة عن ظهور موقع الويب في صفحة النتائج وتجارب المستخدم للزوار.

تتضمن أهم ميزات GSC مراقبة حالة صفحات الويب “الزاحفة” و”الفهرسة” وتحديد الأخطاء المرتبطة بكل منها، والتحكم في أداء الروابط الداخلية والخارجية، والتحقق من حالة عرض موقع الويب على الأجهزة المحمولة، وإرسال طلب لفهرسة الصفحات المحدثة. إن فهم مشاكل الفهرسة في جوجل سيرش كونسول وكيفية إصلاحها يسمح لنا باستخدام الخدمة بنجاح أكبر. لهذا السبب، في دليل وسام ويب هذا، سنتناول مشاكل الفهرسة في Search Console وكيفية حلها.

ما هي جوجل سيرش كونسول أو أدوات مشرفي المواقع من Google؟

جوجل سيرش كونسول (المعروفة سابقًا باسم Google Webmaster Tools) هي أداة مجانية تقدمها Google لأصحاب مواقع الويب لمساعدتهم على تحسين مواقعهم لمحركات البحث. تقدم هذه الأداة المريحة ثروة من المعلومات المفيدة لك.

يمكنك استخدام هذه الأداة لإرسال خريطة موقعك (sitemap) حتى تتمكن محركات البحث من فهم الروابط الخاصة بك ببساطة. خريطة الموقع عبارة عن ملف يحتوي على جميع عناوين URL للصفحات الموجودة على موقع ويب، بالإضافة إلى معلومات حول كل صفحة، مثل متى تم تغييرها آخر مرة وأولويتها.

يمكن أن تتضمن التقارير التي يمكن أن تعرضها لنا Search Console ما يلي:

• أخطاء ومشكلات الصفحة
• عدم فهرسة عناوين URL للموقع
• عدد النقرات والترتيب والانطباعات ومعدل النقر الإجمالي للموقع وصفحاته في فترات مختلفة
• تقديم الموقع إلى Google
• تحذيرات أمان الموقع
• تقرير ربط الموقع
• تقرير أداء الموقع في فترات مختلفة
• حذف بعض صفحات الموقع
• عرض صفحات الخطأ 404
• فهرسة يدوية لعناوين URL

هذه الأداة سهلة الاستخدام، وحتى إذا كنت تفتقر إلى المهارات الفنية، يمكنك استخدامها لاكتشاف وحل مشاكل الفهرسة بموقعك. بالإضافة إلى ما سبق، توفر هذه الأداة القيمة مزيدًا من المعلومات وتقارير أداء الموقع الشاملة، مع زيادة كمية المعلومات المقدمة مع كل تحديث.

• مقالة ذات صلة: جوجل سيرش كونسول: تعلم كيفية الإستفادة من أدوات مشرفي الموقع Search Console

لماذا تعد فهرسة جوجل مهمة؟

إذا كنت تبحث عن إيصال موقعك إلى الجمهور المستهدف من خلال محركات البحث، فإن فهرسة جوجل هي الخطوة الأساسية التي لا يمكن تجاهلها. فبدون فهرسة وأرشفة موقعك، لن يتمكن محرك البحث من اكتشاف صفحاتك أو عرضها في نتائج البحث، سواء في الصفحة الأولى أو حتى في الصفحة الألف. ببساطة، الفهرسة هي البوابة التي تفتح الطريق لظهور موقعك في عالم البحث الرقمي الواسع.

لنفترض أنك تعمل في تصميم مواقع الويب في دبي، وتريد أن يجدك العملاء عندما يبحثون عن “أفضل مصمم مواقع في دبي”. إذا لم يتم فهرسة موقعك بشكل صحيح، فلن تتمكن من الظهور في نتائج البحث، مما يعني تفويت فرص قيمة للتواصل مع العملاء المحتملين. الفهرسة ليست مجرد خطوة تقنية؛ إنها الأساس الذي يتم بناء حركة المرور العضوية عليه، وزيادة الإيرادات، والنجاح الرقمي لعملك.

باختصار، فهرسة جوجل هي المفتاح لضمان أن موقعك ليس فقط موجودًا عبر الإنترنت، بل وأيضًا مرئيًا لأولئك الذين يبحثون عن خدماتك.

فهم عملية الفهرسة في Google

لكي يظهر موقعك في نتائج بحث Google، يمر بثلاث مراحل أساسية: الزحف، الفهرسة، والترتيب. كل مرحلة تلعب دورًا حاسمًا في تحديد ما إذا كانت صفحاتك ستتم أرشفتها وترتيبها في نتائج البحث أم لا. تابع القراءة لفهم كيفية عمل كل مرحلة بالتفصيل.

المرحلة الأولى: الزحف Crawling

يبدأ التفاعل الأول بين Google وموقعك عندما يقوم برنامج الزحف (Googlebot) بزيارته. يمكن لـ Google اكتشاف موقعك بعدة طرق، تُعدّ معالجة خريطة الموقع (Sitemap) بصيغة XML إحدى أكثر الطرق شيوعًا لاكتشاف مواقع الويب. إلى جانب التقنيات الأخرى، يمكن لـ Google العثور على المواقع من خلال تتبع الروابط الداخلية والروابط الخارجية. بمجرد العثور على موقعك، يقوم برنامج الزحف بفحصه بالكامل لاكتشاف المحتوى، الهيكل، الصور، ومقاطع الفيديو، وتحليل كيفية تفاعل المستخدمين معه.

• لإضافة خريطة للموقع الخاص بك ، أدخل عنوان URL هنا لموقعك لإنشاء sitemap.

المرحلة الثانية: الفهرسة Indexing

بعد الزحف، تأتي مرحلة الفهرسة، وهي الأكثر أهمية. عندما يكتشف Google موقعًا ما، فإنه يضيفه إلى قائمة الزحف. أثناء الزحف، يجمع برنامج Googlebot البيانات الوصفية وعلامات العنوان وعلامات alt وغيرها من المعلومات لأغراض الفهرسة.. هناك عدة عوامل قد تمنع Google من فهرسة صفحاتك، مثل:

• وسم “noindex”: إذا استخدمت علامة “noindex” في كود HTML، فأنت تخبر Google بعدم فهرسة هذه الصفحة.
• المحتوى ضعيف القيمة: الصفحات التي لا تقدم محتوى ذا قيمة للمستخدمين قد لا تتم فهرستها.
• المحتوى المكرر: إذا كانت الصفحة تحتوي على محتوى مكرر بالكامل، فقد يتجاهلها Google.
• عدم وجود خريطة موقع XML: إرسال خريطة موقع إلى Google يساعد في تسريع عملية الفهرسة.
• استخدام “Canonical” غير صحيح: إذا أشرت إلى صفحة معينة على أنها الإصدار الأساسي (Canonical)، فإن Google قد يتجاهل الإصدارات الأخرى.

إذا لم تواجه صفحتك أي من مشاكل الفهرسة، فسيضيف Google محتواها إلى فهرس البحث، مما يجعلها مؤهلة للظهور في نتائج البحث.

المرحلة الثالثة: الترتيب Ranking

الترتيب (Ranking) هو الخطوة الثالثة والأخيرة في هذه الخطوات. يبحث جوجل في قاعدة بياناته للعثور على المساحة في الصفحات الأكثر صلة ببحث المستخدم عندما يقوم بالبحث. سيصنف جوجل موقعك الإلكتروني إذا ظهر في أحد هذه المواقع. بطبيعة الحال، فإن استهداف أقصى مستوى من تحسين العملية هو إنجاز رائع في حد ذاته. ومع ذلك، يمكنك بدء عملية التحسين بعد فهرسة الموقع.

لكن الوصول إلى المراتب العليا في Google يتطلب استراتيجية SEO قوية تتضمن تحسين سرعة الموقع، جودة المحتوى، الروابط الخلفية، وتحسين تجربة المستخدم.

تعد الفهرسة جزءًا أساسيًا من نجاح أي موقع إلكتروني في نتائج البحث، لذا من الضروري فهم كيفية عملها والتأكد من أن موقعك مهيأ بشكل صحيح للزحف، الفهرسة، والترتيب لضمان ظهوره في نتائج Google وتحقيق أقصى قدر من الوصول للجمهور المستهدف.

أنواع مشاكل الفهرسة في Google Search Console

حتى هذه المرحلة، ندرك أن Google Search Console هو أحد الأدوات الأساسية لتحليل أداء SEO لصفحات المواقع الإلكترونية، حيث يوفّر بيانات تفصيلية من خلال عدة تقارير رئيسية، مثل الأداء والفهرسة وسهولة الاستخدام عبر الهاتف المحمول.

يوفر تقرير الأداء Performance معلومات حول عدد النقرات (Clicks)، وعدد مرات الظهور (Impressions)، ومعدل النقر إلى الظهور (CTR – Click-Through Rate)، إضافةً إلى متوسط ترتيب الموقع في نتائج محركات البحث (SERP). أما تقرير فهرسة الصفحات Page indexing، فيتضمن بيانات حول عملية الزحف والفهرسة، وينقسم إلى قسمين رئيسيين:

• Indexed: يعرض الصفحات التي تمت فهرستها بنجاح.
• Not indexed: يوضح الأخطاء التي منعت Googlebot من فهرسة بعض الصفحات.

من ناحية أخرى، يقدم تقرير Experience تفاصيل حول الصفحات التي تعاني من مشكلات في العرض على الأجهزة المختلفة، مما يستدعي تحسينها لضمان تجربة مستخدم أفضل. وباستثناء تقرير الأداء، يمكن تصنيف أخطاء Google Search Console ضمن أربع فئات رئيسية:

1. أخطاء الزحف (Crawl Errors)
2. أخطاء الفهرسة (Indexing Errors)
3. أخطاء توافق الصفحة مع الجوال (Mobile Usability Errors)
4. أخطاء علامات البيانات المنظمة (Schema Markup Errors)

يساعد هذا التصنيف على فهم طبيعة كل خطأ وتأثيره على ترتيب صفحات الموقع في نتائج البحث. في الأقسام التالية، سنستعرض بالتفصيل كل نوع من الأخطاء مع الحلول المقترحة لمعالجتها.

كيفية إصلاح مشاكل الفهرسة في جوجل سيرش كونسول

مع تحديث خوارزمية Google في أكتوبر 2024، أصبحت عملية الفهرسة أكثر تعقيدًا، وأصبح جوجل مهتمًا بشكل متزايد بفهرسة المعلومات الجديدة على المواقع. لذا، إذا كنت تواجه مشكلات مع فهرسة جوجل لعناصر موقعك وصفحاته ومقالاته، فيجب عليك اتخاذ إجراء لحل المشكلة. قد تكون هناك أسباب مختلفة لعدم فهرسة موقع ما، وسنتناول كل مشكلات الفهرسة بالتفصيل، بالإضافة إلى كيفية معالجة المشكلة.

1. خطأ الخادم (5xx)

خطأ الخام 5xx من أكثر مشكلات الفهرسة في جوجل شيوعًا التي قد تظهر في تقرير Pages داخل Google Search Console. تحدث هذه الأخطاء عندما يتعذر على الخادم الاستجابة لطلب تحميل الصفحة الذي ترسله روبوتات الزحف (Crawlers) الخاصة بجوجل. ونتيجةً لذلك، لا يتمكن محرك البحث من الوصول إلى الصفحة أو الزحف إليها أو فهرستها.

هناك عدة أنواع مختلفة من مشكلات الخادم – ولكن الأكثر شيوعًا هو أن الخادم يستغرق وقتًا طويلاً للإجابة. ينتظر برنامج Googlebot مدة زمنية محددة مسبقًا حتى يتم تحميل الخادم عندما يقوم بفحص صفحة. سيستسلم Googlebot وسيتوقف الطلب إذا استغرق وقتًا طويلاً. لن تتم فهرسة الموقع لأن الروبوت غير قادر على فحصه.

فيما يلي أبرز ثلاثة أنواع من أخطاء الخادم الشائعة:

1. خطأ الخادم الداخلي (500) – Internal Server Error
   يحدث هذا الخطأ عندما تواجه مشكلات تقنية داخلية في الخادم تمنعه من معالجة طلب الزحف خلال المدة الزمنية المحددة. بمعنى آخر، إذا تأخر الخادم في الاستجابة لطلب روبوت البحث، فلن يتمكن Googlebot من الزحف أو فهرسة الصفحة. غالبًا ما يكون السبب وراء هذا الخطأ أكواد غير صحيحة في نظام إدارة المحتوى (CMS) أو أخطاء في أكواد PHP الخاصة بالموقع.
2. خطأ البوابة السيئة (502) – Bad Gateway Error
   يظهر هذا الخطأ عندما يتلقى الخادم الرئيسي استجابة غير صالحة من خادم آخر. كما هو الحال مع الخطأ السابق، يؤدي هذا الخلل إلى تأخير في استجابة الخادم لروبوتات البحث. يُعزى هذا الخطأ غالبًا إلى مشكلات في نظام ووردبريس أو في إعدادات الاستضافة.
3. خطأ الخدمة غير متوفرة (503) – Service Unavailable Error
   يحدث هذا الخطأ عندما يكون الخادم مزدحمًا أو معطلاً مؤقتًا. يشير هذا إلى أن الخادم خارج الخدمة بشكل مؤقت، لكنه سيعود للعمل قريبًا. قد يظهر هذا الخطأ عند إجراء صيانة للخادم أو في حالات الضغط العالي على الموقع.

على الرغم من أن أخطاء الخادم لا تقتصر على هذه الحالات الثلاث، إلا أنها الأكثر شيوعًا، ويجب التعرف عليها جيدًا. غالبًا ما تحدث هذه الأخطاء أثناء مرحلة الزحف (Crawling)، حيث يتمكن روبوت جوجل من العثور على عنوان الصفحة لكنه لا يحصل على استجابة من الخادم في الوقت المناسب، مما يجعله يتوقف عن الزحف ويغادر الصفحة.

في القسم التالي، سنناقش طرق إصلاح هذه الأخطاء لضمان تحسين وحل مشاكل الفهرسة للموقع في جوجل.

كيفية إصلاح خطأ الخادم 5XX في Google Search Console

تعد أخطاء الخادم من المشكلات التي يجب التعامل معها بسرعة ودقة، لأنها قد تؤثر بشكل سلبي على تحسين محركات البحث (SEO) لموقع الويب. إذا لم يتم إصلاح هذه الأخطاء في الوقت المناسب، فقد تؤدي إلى فقدان فهرسة الصفحات، مما يؤدي إلى انخفاض ترتيبها في نتائج البحث.

الخطوات الأساسية لحل أخطاء الخادم

أول خطوة لحل المشكلة هي التأكد من أن روبوتات الزحف الخاصة بجوجل يمكنها الاتصال بـ DNS الخاص بالموقع. إذا كان الاتصال ناجحًا، فهذا يعني أن جوجل لا يواجه مشكلة في التعرف على الموقع، وأن الخطأ يحدث أثناء عملية الزحف وليس في مرحلة التعرف على الموقع. بعد ذلك، يجب التحقق من كود الخطأ الظاهر في تقرير Search Console لمعرفة نوع المشكلة وتحديد الطريقة المناسبة لحلها.

أهم الطرق لإصلاح أخطاء الخادم

إعادة تحميل الصفحة: يمكن إدخال رابط الصفحة في المتصفح للتحقق مما إذا كانت تعمل بشكل طبيعي. في بعض الحالات، بمجرد تحميل الصفحة مجددًا، يتم إصلاح الخطأ تلقائيًا دون الحاجة إلى أي تدخل إضافي.

مسح ذاكرة التخزين المؤقت للمتصفح: قد يكون السبب وراء الخطأ هو ملفات الكاش المخزنة في المتصفح، مما يؤدي إلى ظهور مشكلة غير حقيقية في Search Console. يمكن حذف ذاكرة التخزين المؤقت وملفات تعريف الارتباط، ثم إعادة تحميل الصفحة للتأكد من اختفاء المشكلة.

فحص نظام إدارة المحتوى: قد يكون الخطأ ناتجًا عن ملفات تالفة أو غير متوافقة داخل قاعدة بيانات ووردبريس أو أي نظام إدارة محتوى آخر. يمكن إعادة تثبيت القوالب والإضافات أو تحديثها، وإذا لزم الأمر، إعادة تثبيت ووردبريس بالكامل. يجب أيضًا التحقق من عدم وجود أخطاء في أكواد JavaScript أو CSS، حيث قد تؤدي بعض الأسطر البرمجية غير الصحيحة إلى حدوث خطأ في الخادم.

مراجعة استهلاك ذاكرة PHP: إذا كان الموقع يستهلك الحد الأقصى من ذاكرة PHP المسموح بها، فقد يؤدي ذلك إلى توقف الخادم عن الاستجابة وظهور الخطأ. يمكن زيادة حد ذاكرة PHP من خلال ملف .htaccess أو php.ini، أو التواصل مع مزود الاستضافة لطلب زيادة الموارد المخصصة للموقع.

التواصل مع مزود الاستضافة: إذا لم تنجح أي من الطرق السابقة، فقد يكون السبب في المشكلة هو خادم الاستضافة نفسه. يمكن التواصل مع الدعم الفني لمزود الخدمة للتحقق مما إذا كانت هناك مشكلات في الخادم أو قيود على الاستجابة لروبوتات البحث.

قد لا تكون هذه الحلول الوحيدة لمعالجة أخطاء الخادم، لكنها تعد الخطوات الأساسية التي يوصى باتباعها أولًا. بعد حل هذه المشكلة، سيكون من الضروري مراجعة الأخطاء الأخرى مثل أخطاء إعادة التوجيه، والتي سيتم تناولها في القسم التالي.

• مقالة ذات صلة: ما هو خطأ الخادم (5xx) في Google Search Console؟

2. خطأ إعادة التوجيه (Redirect Error) من مشاكل الفهرسة الهامة

يُعد خطأ إعادة التوجيه من مشاكل الفهرسة الشائعة التي قد تظهر في تقرير Pages ضمن GSC، وغالبًا ما يحدث ذلك عند إعادة توجيه عنوان URL عدة مرات بشكل متكرر. ورغم أن حل هذه المشكلة ليس معقدًا، إلا أنها قد تؤثر سلبًا على أداء موقعك في نتائج البحث إذا لم يتم التعامل معها بشكل صحيح.

أسباب حدوث خطأ إعادة التوجيه

• إنشاء “حلقات إعادة التوجيه” (Redirect Loop):
  • تحدث هذه المشكلة عندما يتم إعادة توجيه عناوين URL بين بعضها البعض بشكل دائري، بحيث يعود العنوان النهائي إلى العنوان الأول في السلسلة. على سبيل المثال، إذا تمت إعادة توجيه العنوان A إلى العنوان B، ثم تمت إعادة توجيه B مرة أخرى إلى A، فستقع روبوتات جوجل في حلقة لا نهائية، مما يمنعها من الزحف إلى الصفحة.
• وجود “سلسلة إعادة توجيه” (Redirect Chain) طويلة:
  • حتى في حالة عدم وجود حلقة مغلقة، فإن استخدام عدد كبير من عمليات إعادة التوجيه المتتالية يمكن أن يؤدي إلى بطء في استجابة الخادم. إذا استغرقت عملية التوجيه وقتًا طويلاً، فقد تتوقف روبوتات البحث عن متابعة الزحف إلى الموقع، مما يؤدي إلى عدم فهرسة الصفحات المستهدفة.
• وجود رابط معطل أو فارغ في سلسلة إعادة التوجيه:
  • عند تنفيذ عمليات إعادة التوجيه، يجب أن تكون جميع عناوين URL المستخدمة صحيحة وسليمة. في حال كان هناك رابط خاطئ أو مفقود داخل سلسلة التوجيه، فإن روبوتات جوجل ستتوقف عن الزحف عند هذه النقطة، مما يؤدي إلى ظهور خطأ إعادة التوجيه في Search Console.
• تجاوز الحد المسموح به لطول عنوان URL المُعاد توجيهه:
  • إذا كان عنوان URL المستخدم في عملية إعادة التوجيه أطول من الحد المسموح به من قِبل محركات البحث، فقد يتم تجاهله، مما يؤدي إلى توقف عملية الزحف وفشل الصفحة في الظهور بنتائج البحث.

كيف يتم إصلاح مشكلات إعادة التوجيه في Search Console؟

للحل مشكلة إعادة التوجيه التي قد تؤثر على فهرسة موقعك، من الضروري أولًا تحديد مسار إعادة التوجيه ومعرفة العناوين التي تمر بها عملية التوجيه حتى تصل إلى الوجهة النهائية. يمكن أن تؤدي عمليات التوجيه المتكررة أو المعقدة إلى حدوث سلسلة من عمليات إعادة التوجيه (Redirect Chains) أو حلقات إعادة التوجيه (Redirect Loops)، مما يمنع عناكب البحث من فهرسة الصفحة بشكل صحيح.

كيفية التحقق من مسار إعادة التوجيه وحل المشكلة

1. استخدام أدوات تحليل الروابط: يمكنك استخدام أدوات مثل Screaming Frog أو Sitebulb لمراقبة جميع عمليات إعادة التوجيه على موقعك ومعرفة المسار الكامل لها.
2. تحديد المشكلة بدقة: تأكد مما إذا كانت هناك سلسلة طويلة من عمليات إعادة التوجيه أو إعادة توجيه دائرية تعيد المستخدم إلى الصفحة نفسها دون الوصول إلى الوجهة النهائية.
3. تقليل عدد عمليات التوجيه: إذا كان لديك عدة عمليات إعادة توجيه متتالية، فمن الأفضل تقليلها عن طريق توجيه الرابط الأول مباشرة إلى الوجهة النهائية، بدلاً من المرور بعدة خطوات.
4. إصلاح عمليات إعادة التوجيه غير الضرورية: في بعض الأحيان، يتم ترك عمليات إعادة توجيه قديمة دون فائدة. تأكد من إزالة أي عمليات توجيه زائدة لا تخدم تجربة المستخدم أو الفهرسة.
5. استخدام عمليات التوجيه الصحيحة: استخدم 301 Redirect لإعادة التوجيه الدائمة، و302 Redirect إذا كانت مؤقتة، لضمان توجيه محركات البحث بالشكل الصحيح.
6. تصحيح الروابط المعطلة: يجب فحص جميع عناوين URL داخل سلاسل إعادة التوجيه للتأكد من أنها تعمل بشكل سليم.
7. الالتزام بطول URL المسموح به: يجب التأكد من أن جميع عناوين URL ضمن الحد المسموح به لتجنب أي مشاكل أثناء عملية الزحف والفهرسة.

نصيحة مهمة: حاول دائمًا الحفاظ على مسار إعادة التوجيه بأقصر عدد ممكن من الخطوات، لأن روبوتات Google لا تقضي وقتها في تتبع المسارات الطويلة والمعقدة. لذا، تأكد من أن كل عملية إعادة توجيه تخدم غرضًا محددًا ولا تعيق الوصول إلى المحتوى المطلوب.

إذا لم يتمكن مشرف الموقع من حل المشكلة باستخدام هذه الطرق، فمن الأفضل الاستعانة بمطور ويب أو التواصل مع مزود الاستضافة للتحقق من المشكلات التقنية التي قد تكون سببًا في حدوث هذا الخطأ.

• مقالة ذات صلة: ما هي إعادة التوجيه Redirect؟ 8 أنوع من عمليات اعادة التوجيه و7 نصائح لاستخدامها

3. خطأ تم الحظر باستخدام robots.txt في مشاكل الفهرسة

يُعد هذا الخطأ من مشاكل الفهرسة الشائعة التي قد تظهر في سيرش كونسول، ويحدث عندما لا يتمكن روبوت جوجل من الوصول إلى صفحة أو عدة صفحات داخل موقعك بسبب إعدادات ملف robots.txt، التي تمنع الزحف إلى تلك الصفحات.

ما هو ملف robots.txt؟

robots.txt هو ملف نصي يحتوي على مجموعة من التعليمات التي تُوجّه روبوتات محركات البحث حول كيفية الزحف إلى محتوى الموقع. يمكن استخدامه لمنع محركات البحث من الوصول إلى صفحات معينة، مثل صفحات الإدارة أو صفحات البيانات الحساسة.

أسباب ظهور خطأ “URL محظور بواسطة robots.txt”

عادةً ما يحدث هذا الخطأ لسببين رئيسيين:

1. خطأ غير مقصود في إعدادات ملف robots.txt

• في بعض الأحيان، قد يتم تقييد الوصول إلى صفحات مهمة عن طريق الخطأ عند ضبط إعدادات ملف robots.txt.
• هذا الخطأ شائع في المواقع التي تستخدم إضافات SEO مثل Yoast SEO أو Rank Math، حيث يمكن أن يؤدي تهيئة خاطئة إلى منع الزحف إلى صفحات ضرورية.

2. استخدام توجيه “Disallow” داخل ملف robots.txt

• قد يتم إدراج أمر Disallow في ملف robots.txt لمنع محركات البحث من الزحف إلى صفحات معينة، مما يؤدي إلى ظهور هذا الخطأ في Google Search Console.
• على سبيل المثال، إذا تم إدخال التوجيه التالي في ملف robots.txt:

User-agent: Googlebot  
Disallow: /category/

• فإن هذا سيمنع جوجل من الزحف إلى جميع الصفحات الموجودة ضمن دليل /category/.

كيف يمكن إصلاح خطأ URL محظور بواسطة robots.txt في GCS؟

لحل هذه المشكلة، انتقل إلى ملف robots.txt وحدد عنوان URL لصفحة الويب التي يعرض عليها Search Console الخطأ. إذا تم كتابة أمر Disallow بشكل غير صحيح لهذا العنوان، فقم بإزالته وإعادة تحميل ملف Robots.txt إلى Google. يمكن القيام بذلك يدويًا وباستخدام أداة اختبار robots.txt. بالطبع، قد يكون ملف Robots.txt نفسه قد عطل قسم الارتباط الفريد لهذه الصفحة، وفي هذه الحالة يجب عليك تحديد موقعه باستخدام بادئة المجال.

ملاحظة مهمة: هناك جانب أساسي آخر لهذا الخطأ. إذا كنت لا تريد أن تتم فهرسة صفحة الويب بواسطة جوجل واستخدام أمر Disallow بشكل مناسب في ملف Robots.txt، ولكن عنوان URL المعني موجود بالفعل في ملف خريطة موقع XML الخاص بك، فأنت ترسل إشارتين متناقضتين إلى روبوتات جوجل. يحدث هذا عادةً عندما تضيف مكونات WordPress الإضافية مواقع إلى خريطة الموقع بشكل غير صحيح لا تحتاج إلى المسح الضوئي. لحل هذه المشكلة، قم بحذف عنوان URL من قائمة خريطة الموقع.

خطوات إصلاح خطأ “URL محظور بواسطة robots.txt”

لحل هذه المشكلة، يمكنك اتباع الخطوات التالية:

• التحقق من ملف robots.txt:
  • انتقل إلى عنوان yourwebsite.com/robots.txt
  • تأكد من عدم وجود أوامر Disallow تمنع الزحف إلى الصفحات المهمة.
• تحليل الأخطاء في Google Search Console:
  • توجه إلى Google Search Console → Pages
  • حدد خطأ URL محظور بواسطة robots.txt لمعرفة الصفحات المتأثرة.
• تعديل ملف robots.txt:
  • إذا كنت تريد السماح لمحركات البحث بالزحف إلى الصفحة، يمكنك إزالة أمر Disallow أو تعديله بالشكل التالي:

User-agent: Googlebot  
Allow: /your-page-url/

• إعادة اختبار الزحف:
  • بعد تعديل الملف، استخدم أداة URL Inspection في Google Search Console لاختبار إمكانية الزحف إلى الصفحة من جديد.

4. خطأ تم استثناء الصفحة من الفهرسة بواسطة علامة “noindex”

تم استثناء الصفحة من الفهرسة بواسطة علامة “noindex” هو خطأ شائع من مشاكل الفهرسة في جوجل، ولكن من السهل نسبيًا إصلاحه مقارنة بمشاكل الفهرسة الأخرى. يحدث هذا الخطأ لأنك تريد أن يقوم جوجل بفهرسة الصفحة (على سبيل المثال، قمت بإضافتها إلى خريطة الموقع)، ولكن هناك عناصر في الصفحة تمنع روبوتات البحث من فهرسة الصفحة. يعني هذا الموقف إرسال إشارات متضاربة إلى Google ويحدث عادةً لأحد سببين:

الأسباب الشائعة لخطأ “تم وضع علامة Noindex على عنوان URL”

1. وجود وسم <meta name="robots" content="noindex"> في كود HTML
   • يُضاف هذا الوسم داخل وسم <head> لمنع الصفحة من الفهرسة.
   • الحل: قم بحذفه أو تعديله ليصبح index, follow بدلاً من noindex, nofollow.
2. وجود توجيه “X-Robots-Tag” في ترويسة HTTP
   • يتم تعيينه عبر الخادم لمنع الفهرسة.
   • الحل: تحقق من إعدادات الخادم (Apache أو NGINX) واحذف هذا التوجيه.

كيفية إصلاح الخطأ

• ✔ التحقق من كود HTML للصفحة وإزالة أي وسم noindex
• ✔ استخدام Google Search Console لفحص ترويسة HTTP
• ✔ إعادة إرسال الصفحة للفهرسة بعد التعديل

إذا كنت ترغب في منع الفهرسة عمدًا، فاحتفظ بوسم noindex، أما إذا كانت الصفحة مهمة لمحركات البحث، فإزالته هو الخيار الأفضل لضمان ظهورها في نتائج البحث.

5. خطأ Soft 404 في مشاكل الفهرسة بسيرش كونسول

من بين أكثر مشاكل الفهرسة التي قد تسبب ارتباكًا في سيرش كونسول هو خطأ Soft 404. يحدث هذا الخطأ عندما تكون الصفحة غير موجودة أو غير قابلة للوصول، لكن بدلاً من أن يعرض الخادم رمز الحالة 404 (الذي يشير إلى أن الصفحة مفقودة)، فإنه يعرض رمز 200 (الذي يشير إلى أن الصفحة تعمل بشكل طبيعي).

مثال توضيحي: تخيل أنك زرت صفحة على موقع ما للبحث عن منتج معين، لكنك وجدت رسالة تفيد بأن المنتج غير متوفر. مع ذلك، لم يتم إعادة توجيهك إلى صفحة أخرى ولم يظهر لك خطأ 404، بل استمر المتصفح في تحميل الصفحة وكأنها موجودة بشكل طبيعي.

لماذا يعتبر هذا من مشاكل الفهرسة؟ برامج الزحف الخاصة بـ Google تفسر هذه الإشارات المتضاربة على أن الصفحة لا تحتوي على محتوى مفيد، لذا تتجاهلها ولا تقوم بفهرستها. وهذا قد يؤثر سلبًا على ظهور موقعك في نتائج البحث.

أسباب حدوث خطأ Soft 404

• وجود صفحات فارغة أو بدون محتوى حقيقي، مثل صفحات التصنيفات التي لم يتم إضافة أي محتوى إليها بعد.
• إنشاء صفحات تلقائية غير ضرورية بواسطة قالب الموقع، كما هو الحال في بعض قوالب ووردبريس التي تنشئ روابط جديدة تلقائيًا عند إضافة وسوم أو تصنيفات جديدة، والتي قد تتم إضافتها إلى Sitemap مما يؤدي إلى اكتشافها من قبل جوجل.
• ضعف المحتوى الموجود في الصفحة أو عدم وجود قيمة فعلية فيه، حيث تعتبر جوجل الصفحات التي تحتوي على نصوص قليلة جدًا أو غير مفيدة على أنها غير ذات قيمة، مما يمنع فهرستها.

كيفية إصلاح خطأ Soft 404

• إذا كانت الصفحة غير ضرورية، فمن الأفضل استخدام كود 404 أو 410 لإعلام جوجل بعدم الحاجة إليها.
• إذا كانت الصفحة مهمة، يجب تحسينها وإضافة محتوى عالي الجودة حتى لا تعتبرها جوجل صفحة فارغة.
• في حالة وجود صفحة بديلة مناسبة، يُفضل استخدام إعادة التوجيه 301 إلى صفحة ذات صلة بدلاً من ترك الصفحة بدون محتوى.
• مراجعة ملفات Sitemap و Robots.txt للتأكد من عدم فهرسة صفحات غير ضرورية أو ضعيفة المحتوى.

باتباع هذه الخطوات، سيتم تحسين أداء الموقع في محركات البحث، ومنع إهدار ميزانية الزحف على صفحات غير مفيدة.

6. خطأ تم الحظر بسبب طلب غير مصرح به (401)

يشير هذا الخطأ من مشاكل الفهرسة إلى أن روبوتات جوجل غير قادرة على الزحف، الفهرسة، وتصنيف الصفحة بسبب قيود أمنية. ومع ذلك، قد يتمكن المستخدمون من الوصول إلى الصفحة وعرض محتواها بشكل طبيعي رغم ظهور الخطأ 401 في التقارير. يحدث هذا الأمر عادةً بسبب إعدادات جدار الحماية (Firewall) أو نظام الأمان الداخلي للموقع، والتي قد تعتبر طلبات جوجل غير مصرح بها، مما يؤدي إلى حظرها. كما قد تواجه خطأ 403 عند استخدام أدوات فحص المواقع مثل Screaming Frog.

أسباب حدوث خطأ 401

• محاولة جوجل فهرسة صفحات تتطلب تسجيل الدخول أو محمية بكلمة مرور.
• حظر روبوتات جوجل بسبب إعدادات جدار الحماية أو أنظمة الحماية المطبقة في السيرفر.
• وجود قيود في إعدادات Robots.txt تمنع الروبوتات من الوصول إلى الصفحات.
• إدراج صفحات غير متاحة للعامة داخل ملف Sitemap، مما يؤدي إلى محاولة جوجل فهرستها بدون صلاحيات كافية.

كيفية إصلاح خطأ 401 من مشاكل الفهرسة لموقعك

1. إزالة الروابط التي تؤدي إلى صفحات محمية
   • ابحث عن الروابط التي قادت روبوتات جوجل إلى هذه الصفحات وقم بإزالتها، خاصةً إذا لم يكن من الضروري فهرستها.
   • تحقق من ملف Sitemap واحذف أي صفحات محمية أو تتطلب تسجيل دخول.
2. منح جوجل حق الوصول إذا كانت الفهرسة ضرورية
   • إذا كنت بحاجة إلى فهرسة هذه الصفحات، قم بتحديث إعدادات جدار الحماية (Firewall) أو أنظمة الحماية الداخلية للسماح لروبوتات جوجل بالزحف إليها.
   • يمكنك استخدام Google Search Console لتقديم طلب فهرسة يدوية بعد تعديل الإعدادات.
3. مراجعة إعدادات Robots.txt وملفات .htaccess
   • تأكد من أن ملف Robots.txt لا يحتوي على تعليمات تمنع Googlebot من الزحف إلى هذه الصفحات.
   • راجع ملف .htaccess أو أي إعدادات أخرى قد تمنع وصول الروبوتات.
4. استخدام علامة “noindex” إذا كنت لا تريد فهرسة الصفحة
   • إذا لم تكن بحاجة إلى هذه الصفحات في نتائج البحث، يمكنك استخدام علامة noindex بدلاً من حظرها بالكامل، مما يتيح لجوجل الزحف إليها دون إضافتها للفهرس.

يعد خطأ 401 مشكلة شائعة عند محاولة جوجل الوصول إلى صفحات محمية أو محظورة، لذا يجب تحديد ما إذا كانت الصفحة بحاجة إلى الفهرسة أم لا، ثم اتخاذ الإجراء المناسب سواء بإزالة الروابط المؤدية إليها أو تعديل الإعدادات الأمنية للسماح لروبوتات البحث بالوصول إليها.

7. خطأ تم الحجب بسبب خطأ حظر الوصول (403)

يظهر خطأ “تم الحجب بسبب خطأ حظر الوصول (403)” في مشاكل الفهرسة المتعلقة بـ Google Search Console عندما يكون الوصول إلى الصفحة محظورًا بالكامل لكلٍّ من المستخدمين وروبوتات البحث. يحدث هذا الخطأ نتيجة الخطوات التالية:

1. يتلقى الخادم الطلب ويدرك موقع الصفحة.
2. يرسل المتصفح أو روبوت البحث طلبًا للوصول إلى الصفحة.
3. يرفض الخادم الطلب بسبب عدم السماح للروبوتات بالوصول إلى هذه الصفحة.

كيفية إصلاح خطأ 403 في فهرسة جوجل

عندما تحاول روبوتات جوجل الزحف إلى صفحة، فإنها لا تقدم أي بيانات تحقق صالحة للخادم. لإصلاح هذا الخطأ، يمكنك اتباع الحلول التالية:

• التحقق من ملف .htaccess:
  هذا الملف مسؤول عن تكوين استجابات الخادم، وقد يتسبب خطأ فيه في ظهور خطأ 403. يُفضل مراجعته وإصلاح أي مشكلات فيه، أو إنشاء ملف جديد إذا لزم الأمر.
• مراجعة إضافات ووردبريس:
  قد يكون أحد Plugins المثبتة على ووردبريس هو السبب وراء هذا الخطأ. قم بتعطيل الإضافات مؤقتًا، ثم إعادة تفعيلها واحدة تلو الأخرى لمعرفة أي منها يسبب المشكلة، ثم تحديثها أو استبدالها.
• التحقق من صحة عنوان IP:
  إذا تم تعيين عنوان IP غير صحيح للنطاق، فقد يؤدي ذلك إلى خطأ 403. تأكد من صحة A Record في إعدادات DNS عبر مزود الاستضافة الخاص بك.
• البحث عن وجود برمجيات ضارة (Malware):
  إذا لم يكن أيٌّ مما سبق سببًا في الخطأ، فمن المحتمل أن يكون موقعك قد تعرض للاختراق أو يحتوي على Malware يمنع الوصول إلى الصفحة. استخدم أدوات الحماية للكشف عن أي تهديدات وإزالتها.

8. خطأ لم يتم العثور عليها (404)

يُعد خطأ 404 أحد أكثر مشاكل الفهرسة والأخطاء شيوعًا في Search Console، وهو يشير إلى أن روبوتات جوجل تحاول الزحف إلى صفحة لم تعد موجودة. يحدث هذا عندما يتم حذف الصفحة دون إعادة توجيهها إلى عنوان جديد، مما يؤدي إلى فقدانها تمامًا من الفهرسة.

طريقة إصلاح خطأ 404

1. تأكد من صحة الرابط (URL):

• تحقق من أن الرابط الذي أدخلته صحيح ولا يحتوي على أخطاء إملائية.
• إذا كنت قد نقلت الصفحة إلى موقع آخر، تأكد من تحديث الرابط.

2. تحقق من وجود الملف أو الصفحة:

• تأكد من أن الملف أو الصفحة المطلوبة موجودة فعليًا على الخادم.
• إذا كنت تدير الموقع، تحقق من مجلدات الخادم للتأكد من وجود الملف.

3. إعادة توجيه (Redirect) الصفحة:

• إذا كانت الصفحة قد تم نقلها إلى عنوان جديد، يمكنك إعداد إعادة توجيه 301 من الرابط القديم إلى الرابط الجديد.

4. تحقق من إعدادات الخادم:

• إذا كنت تدير الخادم، تحقق من إعدادات الخادم مثل ملف .htaccess (في حالة استخدام Apache) أو إعدادات Nginx للتأكد من أنها لا تمنع الوصول إلى الصفحة.

5. تحقق من قاعدة البيانات (إذا كان الموقع يعتمد على قاعدة بيانات):

• إذا كان الموقع يعتمد على نظام إدارة المحتوى (CMS) مثل WordPress، تحقق من أن الروابط في قاعدة البيانات صحيحة ولم يتم تغييرها.

6. مسح ذاكرة التخزين المؤقت (Cache):

• إذا كنت تستخدم نظام تخزين مؤقت، قد يكون الخطأ ناتجًا عن نسخة قديمة من الصفحة. قم بمسح ذاكرة التخزين المؤقت وحاول مرة أخرى.

7. تحقق من أذونات الملفات:

• تأكد من أن الملفات والمجلدات لديها الأذونات الصحيحة للوصول إليها. عادةً ما تكون الأذونات 644 للملفات و755 للمجلدات.

8. تحقق من إعدادات DNS:

• إذا كنت قد قمت بتغيير إعدادات DNS مؤخرًا، تأكد من أن التغييرات قد تم تطبيقها بشكل صحيح.

9. استخدم أداة فحص الروابط:

• يمكنك استخدام أدوات فحص الروابط مثل Google Search Console أو Online Broken Link Checker للعثور على الروابط المعطلة وإصلاحها.

10. اتصل بالدعم الفني:

• إذا لم تتمكن من إصلاح الخطأ بنفسك، قد تحتاج إلى الاتصال بالدعم الفني لاستضافة الموقع أو المطور الذي يعمل على الموقع.

11. إنشاء صفحة 404 مخصصة:

• إذا كنت تدير الموقع، يمكنك إنشاء صفحة 404 مخصصة لتوجيه المستخدمين إلى الصفحة الرئيسية أو صفحات أخرى مفيدة بدلاً من عرض رسالة الخطأ الافتراضية.

باتباع هذه الخطوات، يمكنك عادةً إصلاح خطأ 404 أو على الأقل توجيه المستخدمين بشكل أفضل عند حدوثه.

9. خطأ تم حظر عنوان URL بسبب مشكلة 4xx أخرى

يظهر هذا الخطأ في مشاكل الفهرسة عندما يواجه Googlebot مشكلة تتعلق بإحدى رموز استجابة HTTP فئة 4xx، ولكن لا يمكنه تحديد المشكلة بدقة. لحل هذا الخطأ، يجب تشخيص نوع المشكلة يدويًا وفقًا للحالات التالية:

• خطأ 404:
  يعني أن الصفحة لم تعد موجودة. الحل يكمن في إما حذف الرابط من Sitemap أو تنفيذ 301 Redirect إذا كان هناك عنوان جديد.
• خطأ 400:
  يشير إلى أن الخادم لم يتمكن من فهم الطلب بسبب بيانات غير صحيحة. قد يكون السبب تحديثًا في الخادم أو أخطاء في كود الصفحة، لذا تحقق من صحة الخادم وكود المصدر.
• خطأ 403:
  يعني أن الصفحة تتطلب إذنًا خاصًا للوصول إليها. قد يكون السبب وجود جدار حماية، حماية بكلمة مرور، أو حظر عبر بوابة الدفع. تحقق من إعدادات الأمان والتصاريح الخاصة بالموقع.

تعرفنا على بعض أبرز مشاكل الفهرسة التي قد تؤثر على موقعك في Google Search Console، وكيفية التعامل معها لتحسين ظهور موقعك في نتائج البحث. في القسم التالي، سنتناول بعض الأخطاء الأخرى المتعلقة بالفهرسة، والتي تظهر أيضًا في تبويب Pages داخل Search Console.

10. خطأ تم حظره بواسطة أداة إزالة الصفحة

الخطأ التالي في مشاكل الفهرسة هو “تم حظره بواسطة أداة إزالة الصفحة”. تحدث هذه المشكلة في سيرش كونسول عندما يتم تقديم طلب باستخدام أداة Removals إزالة صفحة أو صفحات معينة مؤقتًا من موقع الويب (حتى 6 أشهر). يمكنك استخدام هذه الأداة لإخطار سيرش كونسول مباشرةً بحذف عنوان URL لموقع ويب أو صفحات من فهرس Google لفترة زمنية محدودة.

كيفية التعامل مع هذا الخطأ

• عند ظهور هذا الخطأ، فهذا يعني أن الصفحة قد تم استبعادها من الفهرس مؤقتًا، ولن تتم فهرستها حتى انتهاء فترة الحظر.
• إذا كنت ترغب في إعادة الصفحة إلى الفهرس قبل انتهاء المدة، يمكنك حذف الطلب من قسم Removals في Google Search Console وإعادة تقديم طلب فهرستها يدويًا.
• تجدر الإشارة إلى أن هذا الخطأ سيختفي تلقائيًا بمجرد أن تعيد جوجل الزحف إلى الصفحة بعد انتهاء الفترة المحددة.

11. خطأ تم الزحف إلى الصفحة – لم تتم فهرستها حاليًا

الخطأ التالي في مشاكل الفهرسة بصفحات سيرش كونسول هو “تم الزحف إلى الصفحة – لم تتم فهرستها حاليًا“، مما يعني أن روبوت البحث الخاص بـ Google قام بالزحف إلى الرابط الفريد دون مشكلة، لكنه لم يفهرسه بعد، وبالتالي لا يتم عرض الصفحة للمستخدمين على صفحة نتائج Google.

يشير نشاط روبوتات البحث هذا إلى أن الصفحة ومحتواها ليسا بجودة كافية ليتم تضمينهما في فهرس Google لعدة أسباب. بالطبع، هناك احتمال أن تتم إضافة الصفحة إلى فهرس جوجل في المستقبل. لحسن الحظ، هناك استراتيجيات مختلفة ممكنة لتصحيح هذه المشكلة، والتي سنناقشها في القسم التالي.

كيفية إصلاح خطأ تم الزحف إلى الصفحة – لم تتم فهرستها حاليًا

• إضافة روابط داخلية إلى الصفحة:
  تزيد الروابط الداخلية من قيمة الصفحة في نظر جوجل، مما قد يساعد في تحسين فرص فهرستها. كما يمكن أن يكون الحصول على Backlinks من مواقع خارجية أكثر فعالية في هذا السياق.
• تحسين جودة المحتوى:
  تحقق مما إذا كان المحتوى مفيدًا، ذا قيمة، ويتماشى مع معايير E-E-A-T (الخبرة، الخبرة العميقة، الموثوقية، الثقة). اجعل المحتوى أكثر تفصيلًا وأضف عناصر مرئية مثل الصور والفيديوهات لتعزيز تجربة المستخدم.
• تحليل قصد البحث (User Search Intent):
  تأكد من أن محتوى الصفحة يتماشى مع نية المستخدم عند البحث. حاول تحسين العناوين، والأوصاف، وهيكل الصفحة لتوفير إجابات دقيقة وشاملة للأسئلة المحتملة.

12. خطأ تم اكتشاف الصفحة – لم تتم فهرستها حتى الآن

خطأ “تم اكتشاف الصفحة – لم تتم فهرستها حتى الآن” يعني هذا الخطأ أن Google تعرف أن هذا الرابط الفريد موجود، لكنها لم تقم بعد بفحصه وفهرسته. ربما حدث هذا للأسباب التالية:

• مشكلات فنية تؤثر على قدرة جوجل على الزحف إلى الصفحة.
• انخفاض ميزانية الزحف (Crawl Budget)، مما يجعل جوجل تؤجل فهرسة بعض الصفحات.
• ضعف بنية الموقع أو وجود مشاكل في الروابط الداخلية.
• تصميم الصفحة أو تحميلها البطيء قد يؤدي إلى تجاهلها من قبل محركات البحث.
• تخزين موارد الموقع بشكل يمنع روبوتات البحث من فهرسة المحتوى بشكل صحيح.

كيفية إصلاح خطأ اكتشاف الصفحة – لم تتم فهرستها حتى الآن

• استخدام أداة فحص عنوان URL:
  قم بإدخال URL الصفحة في أداة فحص عنوان URL داخل سيرش كونسول، ثم اضغط على “طلب الفهرسة” لطلب فهرستها يدويًا.
• التحقق من قدرة الخادم على تحمل الزحف:
  قد يؤدي الضغط العالي على الخادم إلى تأخير فهرسة الصفحات. يمكنك مراجعة ملفات السجلات (Logs) للخادم للتحقق مما إذا كان هناك أي مشاكل في استجابة الخادم لطلبات جوجل.
• مراجعة ملف Sitemap:
  تأكد من أن URL الصفحة موجود في ملف Sitemap.xml. إذا لم يكن كذلك، قم بإضافته وأعد إرسال الملف عبر Google Search Console لتحفيز جوجل على الزحف إليه.

13. خطأ صفحة بديلة تتضمن علامة أساسية مناسبة

الخطأ المهم التالي في مشاكل الفهرسة التي تمنع الصفحة من الظهور هو “صفحة بديلة تتضمن علامة أساسية مناسبة”، وهو ما يشير إلى أن Google قد اكتشف أن المحتوى داخل هذا الرابط الفريد مكرر أو متشابه للغاية، كما أنه يدرك أن العلامة الأساسية تم استخدامها بشكل صحيح في الصفحة. إذا نظرنا إلى الموقف بعقلانية، فإن هذا الخطأ ليس خطأ لأننا لم نرغب في فهرسة الصفحة بسبب المحتوى المكرر في المقام الأول، ولهذا السبب استخدمنا العلامة canonical فيها.

كيفية التعامل مع هذا الخطأ؟

إذا كنت تريد أن تتم فهرسة الصفحة:

• قم بإزالة تاج الكانونيكال من الصفحة.
• أضف محتوى جديدًا أو مميزًا لجعل الصفحة مختلفة عن النسخة الأصلية.
• استخدم أداة URL Inspection في Google Search Console واطلب إعادة الزحف إلى الصفحة.
• قد يظهر خطأ جديد “مكرر بدون ملف أساسي محدد من قبل المستخدم” بعد إزالة الكانونيكال، وسنناقشه لاحقًا.

إذا لم يكن لديك حاجة لفهرسة الصفحة:

• لا تفعل شيئًا، فهذا السلوك طبيعي ولا يؤثر سلبًا على موقعك.

14. خطأ مكرر بدون ملف أساسي محدد من قبل المستخدم

رسالة خطأ أخرى تظهر أن الصفحة غير مفهرسة في سيرش كونسول هي “مكرر بدون ملف أساسي محدد من قبل المستخدم“. يشير هذا الخطأ إلى أن Google عثرت على مادة مكررة على موقع الويب الخاص بك لا تتضمن علامة أساسية. عادةً، تواجه مواقع الويب الكبيرة جدًا هذه المشكلة من مشاكل الفهرسة في Search Console.

نظرًا لأن وجود مادة مكررة على موقع ويب يمكن أن يكون له تأثير سلبي على درجة تحسين محرك البحث لموقع الويب الخاص بك، فمن الأهمية بمكان أن تجعل الصفحات التي تحتوي على معلومات متطابقة أو مكررة عنصرًا أساسيًا بعناية وفعالية. لحل هذا الخطأ، استخدم علامة أساسية لعرض النسخة الأصلية من العنصر على جوجل.

كيفية إصلاح هذا الخطأ؟

✔ حدد الصفحة الأساسية:

• حدد الصفحة التي تحتوي على المحتوى الأكثر أهمية وكمالًا ليتم اعتمادها كصفحة رئيسية.
• أضف تاج كانونيكال ذاتي (Self-referential canonical tag) إلى الصفحة الأساسية، أي:

<link rel="canonical" href="https://example.com/main-page">

قم بتحديث الصفحات المكررة:

• أضف تاج كانونيكال يشير إلى الصفحة الأساسية في جميع الصفحات المكررة، مثل:

<link rel="canonical" href="https://example.com/main-page">

• استخدم أدوات مثل Screaming Frog أو OnCrawl لتحديد الصفحات المتكررة بسهولة.

✔ أعد إرسال الصفحات إلى جوجل:

• استخدم أداة فحص عنوان URL لطلب إعادة الزحف إلى الصفحات بعد إصلاح المشكلة.

15. خطأ مكرر، اختارت جوجل عنوانًا أساسيًا مختلفًا عن المستخدم

يحدث هذا الخطأ عندما يختار Google صفحة مختلفة عن تلك التي حددتها كصفحة أساسية (Canonical). ويحدث ذلك عادةً عندما يرى Google أن الصفحة التي تم تعيينها ليست الأكثر صلة أو عند وجود مشكلة في هيكلة الموقع.

كيف تتعامل مع هذا الخطأ؟

✔ إذا كانت الصفحة التي اختارها جوجل صحيحة:

• لا داعي للقلق، ولكن يفضل إضافة تاج كانونيكال ذاتي إليها لتعزيز وضوحها لمحركات البحث.

✔ إذا اختار جوجل صفحة خاطئة:

• تأكد من استخدام تاج كانونيكال بشكل صحيح في الصفحة الأساسية والصفحات المكررة.
• تحقق مما إذا كانت هناك مشكلات أخرى مثل الروابط الداخلية الضعيفة التي تشير إلى الصفحة غير الصحيحة.
• قم بطلب إعادة الزحف إلى الصفحة بعد التعديلات عبر Google Search Console.

التعامل مع أخطاء الكانونيكال في Google Search Console مهم جدًا لضمان فهرسة صفحاتك بالشكل الصحيح.
إذا لم يتم التعامل مع هذه الأخطاء بشكل صحيح، فقد تؤثر على ترتيب موقعك في نتائج البحث. احرص دائمًا على:

• تعيين تاج كانونيكال بشكل صحيح.
• تجنب المحتوى المكرر الذي قد يربك جوجل.
• استخدام Google Search Console لمراقبة حالة الفهرسة.

16. خطأ “تم فهرستها على الرغم من حظرها بواسطة robots.txt”

الخطأ التالي يعالج مشكلة مختلفة تمامًا من مشاكل الفهرسة. تشير مشكلة “تم فهرستها على الرغم من حظرها بواسطة robots.txt” في GSC إلى أن جوجل قامت بفهرسة صفحة الويب على الرغم من منعها من الفهرسة في ملف robots.txt. وهذا يعني أن الأشخاص يرون صفحة الويب في صفحات نتائج البحث (SERP) بدون وصف تعريفي (Meta Description). يحدث هذا لأن ملف robots.txt المحظور يمنع جوجل من زحف موقع الويب ورؤية عنصر الوصف التعريفي الخاص به.

كيفية إصلاح خطأ “تم فهرستها على الرغم من حظرها بواسطة robots.txt”؟

قبل اتخاذ أي إجراء، عليك الإجابة على السؤال الأساسي:

هل ترغب في فهرسة الصفحة أم لا؟

١. إذا كنت تريد فهرسة الصفحة:

• تحقق من سبب منع الزحف إلى الصفحة، هل تم حظرها عن قصد في ملف robots.txt أم أن هناك مشكلة تقنية أخرى؟
• قم بإزالة أي توجيهات في robots.txt تمنع الزحف إلى الصفحة، خاصة إذا لم تكن هناك أسباب تمنع عرضها في نتائج البحث.
• استخدم أداة فحص عنوان URL داخل سيرش كونسول، ثم انقر على طلب الفهرسة لطلب إعادة الفهرسة يدويًا.

٢. إذا كنت لا تريد فهرسة الصفحة:

• أضف وسم “noindex” إلى كود HTML الخاص بالصفحة، حتى تخبر جوجل بعدم أرشفتها.
• تأكد من السماح بالزحف إلى الصفحة، لأن جوجل بحاجة إلى الوصول إليها لقراءة وسم “noindex” وتنفيذ التوجيهات.
• إذا كانت هناك صفحات مشابهة بمحتوى متطابق، استخدم الوسم Canonical للإشارة إلى الصفحة الرئيسية التي تريد فهرستها.
• يمكنك أيضًا إزالة جميع الروابط الداخلية المؤدية إلى الصفحة، أو حمايتها بكلمة مرور، أو حتى حذفها نهائيًا ليتم عرض خطأ 404 عند محاولة الوصول إليها.

كيفية إصلاح مشكلات الفهرسة قسم صفحات الفيديو في Google Search Console

إذا قمت بتحميل مقاطع فيديو إلى موقع الويب الخاص بك، فسيتم إنشاء قسم منفصل يسمى صفحات الفيديو في “تقرير الفهرسة” في Search Console حيث يمكنك رؤية التقارير المتعلقة بالفيديوهات. في هذا القسم، سنلقي نظرة على الأخطاء الأكثر شيوعًا المتعلقة بهذا القسم في Google Search Console بالإضافة إلى كيفية إصلاحها.

1. خطأ لم يتم توفير رابط الصورة المصغرة” أو “حقل مفقود “thumbnailUrl

الصورة المصغرة (Thumbnail) هي الصورة الترويجية الرئيسية للفيديو، والتي تؤثر بشكل مباشر على قرار المستخدم بالنقر على الفيديو أو تجاهله. عند تضمين فيديو في موقعك، يجب عليك إضافة “Video Schema“ ليتمكن جوجل من التعرف على الصورة المصغرة والمعلومات الأساسية الأخرى للفيديو.

إذا لم يتم تحديد رابط الصورة المصغرة في بيانات “VideoObject Schema”، فإن Google Search Console سيُظهر هذا الخطأ.

طريقة الحل:

• تأكد من أن بيانات Video Schema تحتوي على رابط مباشر للصورة المصغرة في حقل “thumbnailUrl”.

2. خطأ “خطأ الفيديو خارج نطاق العرض”

ترى هذا الخطأ في Search Console عندما يظهر جزء من الفيديو خارج “خارج النطاق المرئي للمستخدم (Viewport)” عند تحميل الصفحة. لإصلاح هذا الخطأ، تأكد من وضع جميع مقاطع الفيديو ضمن منطقة المحتوى الرئيسي للصفحة وعرضها بالكامل للمستخدم عند تحميل الصفحة.

طريقة الحل:

• تأكد من أن كامل إطار الفيديو مرئي داخل القسم الأساسي من الصفحة دون الحاجة إلى تمرير الشاشة لمشاهدته.
• استخدم CSS Responsive Design لضبط الفيديو تلقائيًا حسب حجم الشاشة.

3. خطأ تنسيق الفيديو غير المدعوم

هناك مشكلة أخرى في Search Console سنعمل على حلها وهي “تنسيق الفيديو غير المدعوم”، وهو ما يشير إلى أن تنسيق الفيديو غير مدعوم من قِبل جوجل. لحل هذه المشكلة، يجب عليك استخدام تنسيقات الفيديو المدعومة من Google مثل mp4 أو mpeg أو mpeg أو webm. كما يجب تجنب استخدام الأحرف غير الضرورية في نهاية اسم ملف الفيديو.

طريقة الحل:

• استخدم صيغ الفيديو المدعومة من جوجل، مثل:
  • MP4 (مع ترميز H.264)
  • WebM
  • MPEG
• تجنب استخدام امتدادات غريبة أو إضافة رموز غير ضرورية إلى اسم الملف.

4. خطأ عدم إمكانية الوصول إلى الصورة المصغرة

يحدث هذا الخطأ عندما يتعذر على جوجل الوصول إلى الصورة المصغرة للفيديو عبر الرابط المحدد.

طريقة الحل:

• تأكد من أن رابط الصورة المصغرة يعمل بشكل صحيح ولا يتطلب تسجيل دخول أو مصادقة.
• تجنب وضع الصورة في مسار محمي بكلمة مرور أو ملفات “Disallow” في robots.txt.

5. خطأ حقل مفقود “uploadDate

يحدث هذا الخطأ عند عدم تضمين تاريخ تحميل الفيديو داخل بيانات “VideoObject Schema”، وهو عنصر أساسي لفهم توقيت نشر المحتوى.

طريقة الحل:

• أضف حقل “uploadDate” عند إنشاء بيانات Video Schema، وتأكد من تنسيقه بطريقة صحيحة، مثل:

"uploadDate": "2024-02-10T12:00:00Z"

أهمية تصحيح هذه الأخطاء

• معالجة هذه الأخطاء تساعد في:
• تحسين ظهور الفيديوهات في نتائج البحث.
• زيادة فرص إدراجها في نتائج البحث الغنية (Rich Results).
• تحسين تجربة المستخدم وتعزيز نسبة النقر إلى الظهور (CTR).

6. خطأ الفيديو غير مضمَّن في صفحة مشاهدة

خطأ “الفيديو غير مضمَّن في صفحة مشاهدة” في Google Search Console يحدث عندما لا يتمكن Google من العثور على الفيديو في الصفحة بالطريقة المتوقعة، مما يؤثر على فهرسته وظهوره في نتائج البحث.

أسباب حدوث الخطأ:

1. عدم تضمين الفيديو داخل الصفحة بشكل صحيح – مثل وجوده في iframe غير قابل للفهرسة.
2. عدم توافق البيانات المنظمة (Structured Data) – عدم استخدام كود Schema المناسب للفيديو.
3. الفيديو محجوب بواسطة robots.txt – يمنع جوجل من الزحف إليه.
4. تأخير تحميل الفيديو – إذا كان الفيديو يتم تحميله ديناميكيًا، فقد لا يكتشفه Googlebot.

طريقة إصلاح الخطأ:

• تأكد من أن الفيديو مضمن مباشرة داخل HTML الصفحة.
• استخدم بيانات منظمة متوافقة مع VideoObject Schema.
• تحقق من إعدادات robots.txt وملف noindex لضمان عدم حجب الفيديو.
• استخدم أدوات مثل URL Inspection Tool في GSC لمعرفة كيفية رؤية Google للفيديو.

نصيحة: تأكد من أن الفيديو يظهر للمستخدمين ولجوجل بنفس الطريقة، واختبر الفهرسة باستخدام أدوات اختبار البيانات المنظمة.

• مقالة ذات صلة: كيفية إصلاح خطأ الفيديو غير مضمن في صفحة مشاهدة من فهرسة سيرش كونسول

مشاكل الفهرسة المتعلقة بإمكانية الاستخدام عبر الهاتف المحمول في سيرش كونسول

مع تزايد استخدام الأجهزة المحمولة في التصفح، من الضروري التأكد من أن موقعك متوافق مع هذه الأجهزة لضمان تجربة مستخدم سلسة وسريعة. عندما يواجه Google Search Console مشاكل في سهولة الاستخدام على الجوال، فإنه يُظهر مجموعة من الأخطاء التي قد تؤثر على أداء صفحاتك في نتائج البحث. فيما يلي أبرز الأخطاء المتعلقة بـ Mobile Usability وطريقة إصلاحها.

لقد ذكرنا هذه الأخطاء في القائمة أدناه:

• خطأ استخدام المكونات الإضافية غير المتوافقة
• خطأ “العناصر القابلة للنقر قريبة جدًا من بعضها البعض”
• خطأ عدم تعيين Viewport
• “خطأ عدم تعيين Viewport على “device-width””
• خطأ المحتوى أوسع من الشاشة
• خطأ في النص صغير جدًا بحيث لا يمكن قراءته

سنناقش أدناه كل الأخطاء المذكورة أعلاه وكيفية إصلاحها.

1. خطأ يستخدم مكونات إضافية غير متوافقة

يحدث هذا الخطأ عندما تحتوي الصفحة على مكونات إضافية (Plugins) غير مدعومة على الأجهزة المحمولة، مثل Adobe Flash، مما يمنع عرض المحتوى بشكل صحيح.

طريقة الحل:

• استخدم تقنيات حديثة مثل HTML5 بدلاً من المكونات القديمة.
• تأكد من أن جميع العناصر التفاعلية تعمل بدون الحاجة إلى Plugin خارجي.

2. خطأ “العناصر القابلة للنقر قريبة جدًا من بعضها البعض”

يشير هذا الخطأ من مشاكل الفهرسة إلى أن العناصر القابلة للنقر مثل الأزرار والروابط قريبة جدًا من بعضها البعض، مما يؤدي إلى صعوبة التفاعل معها على الشاشات الصغيرة.

طريقة الحل:

• اجعل الحد الأدنى لحجم العناصر القابلة للنقر ٤٨ بكسل وفقًا لإرشادات Google.
• تأكد من وجود مسافة لا تقل عن ٨ بكسل بين العناصر القابلة للنقر.

3. خطأ لم يتم تعيين منفذ العرض

يظهر هذا الخطأ عندما لا يتم تحديد خاصية Viewport في الصفحة، مما يؤدي إلى عدم ضبط عرض الموقع بشكل صحيح على الأجهزة المختلفة.

طريقة الحل:

• أضف الكود التالي داخل <head> في HTML لضبط Viewport بشكل ديناميكي:

<meta name="viewport" content="width=device-width, initial-scale=1.0">

4. خطأ لم يتم ضبط Viewport على عرض الجهاز

عندما لا تحدد سمة Viewport لصفحة الويب الخاصة بك، يعرض سيرش كونسول رسالة تحذير “لم يتم تعيين Viewport”. يشير Viewport إلى المنطقة القابلة للعرض لصفحة الويب على أجهزة مختلفة. يؤدي تعيين Viewport لموقع الويب الخاص بك إلى إخبار المتصفح بالأبعاد المقبولة لعرض الصفحة على الأجهزة المحمولة واللوحية وأجهزة الكمبيوتر المكتبية. بدون Viewport، لا يتمكن المتصفح من تعديل أبعاد الصفحة أو تغيير حجمها لتناسب الشاشة.

طريقة الحل:

• استخدم تصميمًا متجاوبًا (Responsive Design) وتأكد من ضبط قيمة العرض على device-width يمكنك إضافة الكود التالي إلى القسم < head > أضف كود الصفحة الرئيسية:

<meta name="viewport" content="width=device-width, initial-scale=1.0">

5. خطأ المحتوى أوسع من الشاشة

يظهر هذا الخطأ عندما يكون المحتوى أوسع من الشاشة، مما يجبر المستخدمين على التمرير أفقيًا لرؤية كامل الصفحة، وهو أمر غير مريح.

طريقة الحل:

• استخدم وحدات نسبية مثل ٪ أو vw بدلًا من القيم الثابتة مثل px في CSS.
• تأكد من أن جميع الصور والعناصر داخل الصفحة مقاسة بوحدات متجاوبة مثل:

img {
  max-width: 100%;
  height: auto;
}

6. خطأ النص صغير جدًا بحيث لا يمكن قراءته

تحدث هذه المشكلة عندما يكون جزء من المحتوى على موقع ويب صغيرًا جدًا مقارنة بعرض الصفحة بحيث يتعين على المشاهدين تكبير الشاشة لقراءتها. وهذا يجعل عرض محتوى الصفحة صعبًا على الأجهزة المحمولة ويؤثر سلبًا على قابلية استخدام موقع الويب. لاستكشاف هذا الخطأ بشكل أكبر وتحديد الجزء المعيب من النص، اختبر إصدارات متعددة من موقع الويب على أجهزة مختلفة.

طريقة الحل:

• استخدم وحدات em أو rem لضبط حجم الخط بدلًا من القيم الثابتة px، مثل:

body {
  font-size: 1rem;
}

تأكد من ضبط Viewport بشكل صحيح حتى يتمكن النص من التكيف تلقائيًا مع مختلف الشاشات.

أهمية إصلاح أخطاء Mobile Usability

• تحسين تجربة المستخدم على الأجهزة المحمولة.
• تقليل معدل الارتداد وزيادة التفاعل مع الموقع.
• تحسين ترتيب الصفحات في نتائج البحث على الهواتف المحمولة.

إذا كنت ترغب في تحسين أداء موقعك على الأجهزة المحمولة، تأكد من مراجعة Google Search Console بانتظام وإصلاح أي مشاكل متعلقة بسهولة الاستخدام.

إصلاح مشاكل الفهرسة المتعلقة بأخطاء سكيمَا المنتجات في جوجل سيرش كونسول

إذا كنت تدير متجرًا إلكترونيًا، فمن الضروري التأكد من صحة سكيمَا المنتجات حتى تظهر بيانات المنتجات بشكل صحيح في نتائج البحث. تُعرض هذه الأخطاء عادةً في تقارير التسوق أو منتجات داخل سيرش كونسول، ويمكنك الرجوع إلى موقع Schema.org للتحقق من بناء الجملة الصحيح لكل نوع من أنواع البيانات المنظمة.

أبرز أخطاء سكيمَا المنتجات في GSC:

1. خطأ “يجب تحديد “العروض” أو “المراجعة” أو “التقييم المجمع“
2. خطأ “السعر في الحقل المفقود‘”
3. خطأ “التقييم يفتقد إلى القيم الأفضل و/أو الأسوأ المطلوبة”
4. خطأ “يجب أن تكون القيمة في “ratingCount” للعقار موجبة”

شرح كل خطأ وكيفية إصلاحه:

1. خطأ يجب تحديد العروض أو المراجعة أو التقييم المجمع

يجب أن تحتوي كل صفحة تقوم بإنشائها لمنتجاتك في متجرك عبر الإنترنت على أحد عناصر المخطط “العرض” أو “المراجعة” أو “التقييم التجميعي” المحدد بالكامل. من الواضح أنه لإصلاح هذا الخطأ، تحتاج إلى إضافة عنصر واحد على الأقل من العناصر المذكورة أعلاه إلى الكود الرئيسي للصفحة أو قالب HTML الخاص بها. كل عنصر من العناصر المذكورة أعلاه هو عناصر المخطط الرئيسية، والتي هي عناصر فرعية مثل النوع أو عنوان URL أو قيمة التقييم أو reviewCount.

لذلك، يحدث هذا الخطأ عندما لا تتضمن صفحة المنتج أحد العناصر الأساسية في سكيمَا المنتجات، وهي:

• Offers (لعرض تفاصيل السعر والتوافر)
• Review (لإظهار المراجعات)
• aggregateRating (لإظهار التقييمات المجمعة)

• كيفية إصلاحه:
  • تأكد من إضافة على الأقل واحدًا من هذه العناصر إلى كود الصفحة داخل HTML أو JSON-LD. عند إدراج أيٍّ من هذه العناصر، يجب تضمين البيانات الفرعية مثل: type، url، ratingValue، reviewCount.

2. خطأ السعر في الحقل المفقود

يظهر هذا الخطأ عندما يتم إغفال إدراج سعر المنتج في السكيمَا أو إذا لم يُكتب بالصيغة الصحيحة.

كيفية إصلاحه:

• يجب تحديد السعر باستخدام الصيغة الصحيحة (##.##)، مثال:

"price": "199.99"

إذا كان الموقع لا يعرض أسعار المنتجات، يمكن تجاهل هذا الحقل تمامًا بدلاً من تركه فارغًا.

3. خطأ التقييم يفتقد إلى القيم الأفضل و/أو الأسوأ المطلوبة

من بين جميع مشاكل الفهرسة وأخطاء سيرش كونسول المتعلقة بمخطط المنتج، يعد هذا الخطأ هو الأكثر إثارة للاهتمام ويحدث عندما تستخدم مخطط تقييم المنتج والمراجعة ولكنك لم تحدد نطاق الحد الأقصى والأدنى للتقييم.

🔹 كيفية إصلاحه:

• يجب تضمين أفضل وأسوأ تقييم عند استخدام عنصر التقييم، مثل:

"bestRating": "5",
"worstRating": "1"

القيمة الأكثر شيوعًا هي 5 كأعلى تقييم و1 كأدنى تقييم، ويجب الالتزام بهذه القيم لضمان التوافق مع محركات البحث.

4. خطأ يجب أن تكون القيمة في “ratingCount” للعقار موجبة

يحدث هذا الخطأ عند استخدام مخطط ratingCount وعدم تحديد العدد الإجمالي للتقييمات على صفحة المنتج كرقم موجب. النقطة المهمة هنا هي أنه في حالة عدم وجود مراجعات للمنتج، فإن أقل رقم يجب تحديده لهذه الخاصية هو صفر، ولا يمكن أن تكون هذه الخاصية رقمًا سالبًا أبدًا.

كيفية إصلاحه:

• يجب التأكد من أن عدد التقييمات رقم موجب وليس سالبًا أو فارغًا، مثل:

"ratingCount": "25"

إذا لم تكن هناك تقييمات بعد، يمكن تعيين القيمة 0، ولكن لا يمكن استخدام رقم سلبي أبدًا.

نصائح إضافية لتجنب أخطاء سكيمَا المنتجات:

• استخدم أدوات اختبار البيانات المنظمة مثل Rich Results Test للتحقق من صحة السكيمَا.
• قم بتحديث بيانات المنتجات بانتظام للتأكد من أنها متوافقة مع متطلبات Google.
• تجنب إدخال بيانات ناقصة أو غير دقيقة، حيث يمكن أن يؤدي ذلك إلى عدم ظهور المقتطفات المنسّقة في نتائج البحث.

الخاتمة

يُعد تحسين فهرسة موقعك في Google Search Console خطوة أساسية لضمان ظهوره في نتائج البحث وزيادة فرص الوصول إلى جمهور أوسع. من خلال التعرف على مشاكل الفهرسة الـ 31 خطأ شائعًا ومعرفة كيفية إصلاحها، يمكنك تحسين أداء موقعك وتجنب العقبات التي قد تعيق ظهوره. سواء كانت المشاكل تتعلق بإعادة التوجيه، أو أخطاء Soft 404، أو مشكلات Canonical، فإن فهم الأسباب الجذرية لكل خطأ واتخاذ الإجراءات التصحيحية المناسبة سيؤدي إلى تحسين تجربة المستخدم وتعزيز ترتيب موقعك في محركات البحث.

إن مواكبة تحديثات Google وتحليل تقارير الفهرسة بشكل دوري سيساعدك على اكتشاف المشكلات مبكرًا ومعالجتها بكفاءة. ومع تطور تقنيات البحث، هل يمكن أن تتغير استراتيجيات الفهرسة في المستقبل؟ وما الأدوات الجديدة التي قد تقدمها Google لمساعدة مشرفي المواقع؟ التفكير في هذه الأسئلة والاستمرار في التعلم سيمكنك من تحسين موقعك باستمرار ومواكبة أحدث معايير تحسين محركات البحث.