الطريقة الصحيحة ل Noindex صفحة

نشرت: 2022-12-02

قد يبدو الأمر غير منطقي ، ولكن لا يجب أن تظهر كل صفحة على موقع الويب الخاص بك في نتائج البحث. يسعى تحسين محركات البحث (SEO) إلى زيادة رؤية البحث وحركة المرور العضوية - وفي بعض الأحيان ، يمكنك تحقيق هذا الهدف بشكل أفضل عن طريق تقييد المحتوى الذي يمكن أن يظهر في نتائج البحث.

إذا كنت تحك رأسك أو تستدعي خدعتي ، فتابع القراءة لاكتشاف قيمة noindexing لصفحة أو دليل فرعي وكيفية تنفيذ علامات noindex.

ماذا يعني Noindex؟

مصطلح "noindex" هو توجيه خاص في علامة تعريف برامج الروبوت التي تخبر برامج زحف البحث باستبعاد الصفحة من صفحات نتائج محرك البحث (SERPs). هذا يعني أن الباحثين لن يتمكنوا من الوصول إلى الصفحة عبر البحث.

تُعد العلامات الوصفية لبرامج الروبوت جزءًا مهمًا من أي إستراتيجية تقنية لتحسين محركات البحث ، حيث تسمح لك باستبعاد الصفحات التي لا تقدم قيمة للباحثين أو التي تحتوي على معلومات لا تريد ظهورها في نتائج البحث ، مثل:

  • صفحات التأكيد والشكر
  • صفحات تسجيل الدخول
  • صفحة سياسة الخصوصية أو شروط الخدمة
  • محتوى مسور
  • رسائل خاطئة

العلامة الوصفية لبرامج الروبوت مقابل ملف Robots.txt مقابل علامة X-Robots

غالبًا ما يتم الخلط بين العلامة الوصفية لبرامج الروبوت وملف robots.txt وعلامة x-robots. يقدم الثلاثة تعليمات للبحث في برامج الزحف حول الصفحات وهي جزء من بروتوكول استبعاد برامج الروبوت (REP). بعبارة أكثر بساطة: إنهم يخبرون Google بما يجب وضعه في بحث Google وما يجب تجنبه ، بالإضافة إلى الصفحات التي يجب الزحف إليها. ومع ذلك ، لا يمكن ولا ينبغي استخدامها بالتبادل.

العلامة الوصفية للروبوتات

تتم إضافة علامة وصفية لبرامج الروبوت إلى قسم <head> لصفحة ويب معينة وتمرير التعليمات الخاصة بهذه الصفحة المحددة فقط. غالبًا ما تسمى علامة noindex أو علامة noindex الوصفية ، يمكن للعلامة الوصفية لبرامج الروبوت أن تفعل أكثر من مجرد إخبار زاحف البحث بعدم فهرسة صفحة.

يمكن استخدامه أيضًا لمطالبة برامج الزحف بعدم تتبع الروابط أو ترجمة صفحة أو حظر روبوت بحث معين أو منع ظهور رابط مخبأ في SERPs.

تتضمن توجيهات العلامات الوصفية الشائعة لبرامج الروبوت ما يلي:
  • Noindex ، nofollow - <meta name = ”robots” content = ”noindex ، nofollow”>
    قد يقوم Googlebot وبرامج زحف الويب الأخرى بالوصول إلى الصفحة ، لكن لا ينبغي عليهم فهرستها أو اتباع روابطها.
  • Noindex ، تابع - <meta name = ”robots” content = ”noindex”>
    قد يقوم Googlebot وبرامج زحف الويب الأخرى بالوصول إلى الصفحة وتتبع الروابط الموجودة عليها ، لكن لا ينبغي لهم فهرسة الصفحة نفسها. لست بحاجة إلى تضمين "متابعة" في العلامة الوصفية لأن هذا هو الإعداد الافتراضي.

ملف robots.txt

Robots.txt هو ملف يسمح لمالكي المواقع بإخبار محركات البحث بأجزاء مواقعهم التي لا يريدون الزحف إليها. إنها مثل علامة عدم الإزعاج الشخصية لموقع الويب الخاص بك معلقة في الدليل الجذر لنطاقك أو مجالك الفرعي.

يعد ملف robots.txt هو الأفضل لمنع الوصول إلى الدلائل الفرعية بأكملها والزحف إليها بدلاً من الصفحات الفردية. استخدمه لمنع برامج زحف البحث من الوصول والفهرسة:

  • صفحات البحث الداخلي
  • معلمات URL
  • المنتديات حيث يمكن أن يتسبب البريد العشوائي الذي ينشئه المستخدم في حدوث مشكلات
  • الدلائل الداخلية ، مثل تلك الخاصة بالموظفين فقط

اتبع هذه الخطوات لإنشاء ملف robots.txt ، وتأكد من الارتباط بخريطة موقع XML.

إذا قمت بالارتباط بصفحة مضمنة في ملف robots.txt الخاص بك ، فقد ترغب في إضافة علامة تعريف برامج الروبوت إليها أيضًا للتأكد من عدم ظهورها في نتائج البحث. تذكر أن ملف robots.txt يمنع فقط برامج الزحف من الوصول إلى الصفحة ، وليس من فهرستها. إذا تلقت الصفحات التي تغطيها توجيهات ملف robots.txt روابط خارجية ، فقد تقوم محركات البحث بفهرستها. استخدم علامة وصفية لبرامج الروبوت جنبًا إلى جنب مع ملف robots.txt لتجنب ذلك.

علامة X-Robots

لمنع ظهور ملف PDF أو فيديو أو صورة في SERPs ، استخدم علامة x-robots. يتم استخدام نفس التوجيهات المحددة للعلامات الوصفية لبرامج الروبوت لـ x-robots. ومع ذلك ، على عكس العلامة الوصفية لبرامج الروبوت ، التي توجد في رأس HTML للصفحة ، يتم وضع علامة x-robots في استجابة رأس HTTP.

يبدو التوجيه كما يلي:

 X-Robots-Tag: noindex

متى يتم Noindex صفحة

مؤشر كبح سخام

يحدث تضخم الفهرس عندما يقوم Google بفهرسة الصفحات ذات القيمة القليلة أو المعدومة للباحثين. هذه الصفحات الدخيلة تنتقص من الموارد من الصفحات الأكثر قيمة. استخدم علامة وصفية لبرامج الروبوت لإدارة الصفحات التي تظهر في نتائج البحث.

القضاء على تفكيك الكلمات الرئيسية

يحدث تفكيك الكلمات الرئيسية عندما تشترك صفحتان في كلمة رئيسية ونية بحث متشابهة ، مما يتسبب في تنافسهما مع بعضهما البعض في SERPs.

إذا كان لديك صفحتان تفكك بعضهما البعض وترغب في الاحتفاظ بهما دون تغيير المحتوى الخاص بهما ، فلا يوجد فهرس واحد. ومع ذلك ، يجب عليك القيام بذلك فقط إذا كانت الصفحة التي تستخدم noindexing لا تجلب الزيارات من الكلمات الرئيسية التي لا تقوم بها الصفحة الأخرى. في مثل هذه الحالة ، قد تحتاج إلى إعادة صياغة المحتوى في إحدى الصفحتين أو كلتيهما لحل مشكلة تفكيك اللحوم.

حماية الصفحات المقصودة ذات البوابات

عندما تقدم موردًا عالي القيمة للعملاء مقابل معلومات الاتصال ، تأكد من أنه لا يمكن الوصول إليه بأي طريقة أخرى. أضف علامة وصفية لبرامج الروبوت إلى noindex الصفحة وامنعها من الظهور في SERPs.

استبعاد المنتجات غير الشائعة من البحث

غالبًا ما تحمل مواقع التجارة الإلكترونية منتجات لخدمة عملاء معينين على الرغم من عدم وجود طلب كبير عليها. على سبيل المثال ، قد يكون لدى بائع تجزئة لقطع غيار السيارات أو شركة تقنية أخرى منتجات لطرازات معينة أو معدات نادرة. إذا كانت صفحات المنتج أو الفئات هذه لا تجذب زيارات عضوية ، فيمكن عمومًا أن تكون noindexed.

كيفية Noindex صفحة ويب

يتم وضع علامة noindex الوصفية في رأس HTML للصفحة. الرمز ليس حساسًا لحالة الأحرف ويبدو كالتالي:

 <meta name="robots" content="noindex">

"الروبوتات" تعني أن الأمر ينطبق على أي برنامج زاحف ، ولكن يمكنك تمييز برامج الزحف عن طريق استبدال "الروبوتات" بأسماء برامج الزاحف المعروفة ، مثل "Googlebot" أو "bingbot".

ستستمر برامج الزحف في تتبع الارتباطات الموجودة على الصفحة ما لم تقم أيضًا بإضافة أمر nofollow. يمكنك القيام بذلك لمنع تدفق الروابط عبر الصفحة أو لمنع الزاحف من اتباع رابط إلى محتوى مسور.

لإضافة قيمة nofollow ، افصلها عن أمر noindex بفاصلة.

 <meta name="robots" content="noindex, nofollow">

كيفية إضافة علامة تعريف الروبوتات إلى كود HTML الخاص بك

  1. افتح الكود المصدري للصفحة التي تريد noindex.
  2. ابحث عن العنوان في الجزء العلوي من الصفحة. يبدأ بـ <head> وينتهي بـ </head>. من المحتمل أن يكون هناك رمز آخر في الرأس أيضًا.
  3. أضف العلامة الوصفية لبرامج الروبوت في سطر جديد ، مع التأكد من ظهورها بين علامتي <head> و </head>.

هذا هو! إذا كانت صفحتك مفهرسة بالفعل ، فيمكنك مطالبة Google بإعادة الزحف إليها عن طريق لصق عنوان URL الخاص بها في أداة فحص عنوان URL.

مفهرسة بالفعل؟ استخدم أداة إزالة عناوين URL

عند إضافة علامة noindex إلى صفحة محتوى جديدة ، سيرى Googlebot التوجيه عندما يقوم بالزحف إلى الصفحة ، ولن يقوم بفهرستها.

ومع ذلك ، إذا كنت تضيف العلامة إلى صفحة تمت فهرستها بالفعل ، فستستمر الصفحة في الظهور في نتائج البحث حتى تتم إعادة الزحف إليها وترى برامج التتبع تعليمات noindex الجديدة. يمكنك أن تطلب من Google إعادة الزحف إلى عنوان URL في Google Search Console عبر أداة فحص عنوان URL ، ولكنها لن تزيل الصفحة على الفور من SERPs.

إذا كنت بحاجة إلى إزالة صفحة من SERP على الفور ، فاستخدم أداة الإزالة في Google Search Console. سيؤدي هذا إلى إبقاء الصفحات خارج نتائج بحث Google لمدة ستة أشهر تقريبًا. بحلول ذلك الوقت ، من المفترض أن تعمل العلامة الوصفية noindex.

كيفية Noindex صفحة على وورد

يتم فهرسة كل صفحة في WordPress بشكل افتراضي. يمكنك استخدام المكون الإضافي Yoast SEO من أجل noindex صفحة في WordPress دون كتابة رمز. إليك الطريقة.

انقر فوق علامة التبويب "خيارات متقدمة" في مربع التعريف Yoast SEO.

حدد "متقدم" في المكون الإضافي yoast seo إلى noindex a page

أسفل السؤال ، "هل تسمح لمحركات البحث بإظهار هذه المشاركة في نتائج البحث؟" حدد "لا" من مربع القائمة المنسدلة.

صفحة noindexing في وورد

بينما يوجه هذا الإعداد محرك بحث Google إلى عدم فهرسة المنشور ، ستظل برامج الروبوت تتبع الروابط الموجودة على الصفحة تلقائيًا للزحف إلى الصفحات الأخرى.

إذا كنت تريد إضافة أمر nofollow ، فحدد الزر "لا" أسفل السؤال: "هل يجب أن تتبع محركات البحث الروابط الموجودة في هذا المنشور؟"

الأسئلة الشائعة حول العلامات الوصفية للروبوتات

هل تخضع جميع محركات البحث لتوجيه noindex؟

يمكنك أن تتوقع أن تلتزم Google و Bing ومحركات البحث الشرعية الأخرى بعلامة تعريف الروبوتات.

هل يمكنني الارتباط بصفحات noindexed؟

نعم. تخبر علامة noindex برامج الروبوت عن كيفية التعامل مع الصفحة عند الزحف والفهرسة. لا يؤثر على قدرتك على الارتباط بصفحة. يمكن أن يكون هذا مفيدًا لصفحات الفئات في المدونة ، والتي يجب ألا تظهر في نتائج البحث ولكن يمكنها تزويد الروبوتات بروابط لصفحات قيّمة يجب أن تكون كذلك.

متى يجب علي استخدام علامة وصفية لبرامج الروبوت؟

إذا كانت لديك صفحة لا تقدم أي قيمة للباحثين ، مثل صفحة شكر أو صفحة قابلة للطباعة ، فقم بفهرستها بعلامة تعريف برامج الروبوت لمنعها من الظهور في SERPs.

متى يجب ألا أستخدم أمر noindex؟

يمكنك حل مشكلات المحتوى المكرر تقنيًا وبعض مشكلات ميزانية الزحف باستخدام توجيهات noindex ، ولكن هذه ليست أفضل طريقة للقيام بذلك. من الأفضل التعامل مع المحتوى المكرر باستخدام العلامات الأساسية ، والتي تركز على ملكية الرابط من التكرارات على الصفحة الأساسية. إذا كنت تحاول الحفاظ على ميزانية الزحف ، فيجب عليك استخدام ملف robots.txt لمنع الزحف إلى هذا القسم من الموقع.

هل الصفحات noindexed تمر عبر حقوق الارتباط؟

نعم. على الرغم من عدم فهرسة الصفحة ، لا يزال بإمكانها مشاركة أي سلطة تصنيف تم إنشاؤها. ومع ذلك ، يجب أن تتمتع برامج زحف البحث بالقدرة على متابعة الروابط الموجودة على الصفحة حتى تتدفق قيمة الارتباط عبرها. إذا تم تعيين الصفحة على noindex و nofollow ، فلن تتمكن من تمرير حقوق ملكية الرابط.

هل noindexing صفحة يزيلها تلقائيًا من Google SERPs؟

إذا كانت صفحتك مفهرسة بالفعل ، فلن تؤدي إضافة علامة وصفية لبرامج الروبوت إلى حذفها تلقائيًا من نتائج البحث. يستغرق الأمر بعض الوقت حتى تختفي الصفحات المفهرسة بالفعل من SERPs. تحتاج روبوتات البحث إلى إعادة الزحف إلى الصفحات لرؤية علامة noindex. للحصول على نتائج أسرع ، اطلب من Google إعادة الزحف إلى الصفحة واستخدام أداة إزالة عنوان URL.

كشف الصفحات الإشكالية من خلال تدقيق تحسين محركات البحث

لا تدع المحتوى الرقيق أو المكرر يؤثر على رؤية البحث. تأكد من أنك تمنح صفحاتك أفضل فرصة للترتيب. علامات تدقيق تحسين محركات البحث التي تزيد عن 200 نقطة لدينا ، مثل المحتوى المكرر ، وملف robots.txt المفقود ، والعلامات الوصفية لبرامج الروبوت التي تم إساءة تطبيقها ، ونفخ الفهرس ، والمزيد. اشترك للحصول على استشارة مجانية لكبار المسئولين الاقتصاديين لترى كيف يمكن لخدمة تدقيق تحسين محركات البحث لدينا أن تزيد من ظهورك على الإنترنت وتساعد عملك على النمو.