يحاول كل مشرف موقع تقريبًا تحسين صفحات موقعه بطريقة تحصل على أكبر عدد ممكن من العناصر المفهرسة. لكن في بعض الحالات ، على العكس من ذلك ، تحتاج إلى إخفاء بعض الصفحات ، على سبيل المثال ، نموذج لإدخال بيانات التسجيل ، واستعادة كلمات المرور ، وما إلى ذلك.
انه ضروري
تحرير ملف Robots.txt
تعليمات
الخطوة 1
أسهل طريقة لإغلاق فهرسة أقسام متعددة أو موقع كامل محدد هي عمل الإدخالات المناسبة في ملف robots.txt. يتم استخدامه كدليل لمحركات البحث. عند دخول صفحات الموقع ، يشير روبوت البحث إلى هذا الملف ، إذا لم يكن موجودًا ، فإنه يقوم بفهرسة الموقع بالكامل ، وإلا فإنه يتبع التوصيات المحددة في هذا الملف.
الخطوة 2
إذا أنشأت موقعك بنفسك ، ولم يكن لديك مثل هذا التطبيق ، في شكل مستند نصي يشير إلى المحظورات ، فمن السهل إنشاءه بنفسك. افتح مستندًا نصيًا جديدًا ، على سبيل المثال ، باستخدام برنامج المفكرة. ضع الأسطر التالية في نص المستند: User-agent: * Disallow: /file.htmlDisallow: / directory /
الخطوه 3
الآن دعنا نتعرف على ما طلبته من محرك البحث كمهمة. تعني علامة "*" المقابلة لـ User-agent أنه يجب تنفيذ هذه التعليمات بواسطة جميع أنظمة الملفات تمامًا. على سبيل المثال ، إذا كتبت "Yandex" بدلاً من "*" ، فسيتم قراءة هذا النداء فقط بواسطة الروبوت الخاص بمحرك بحث Yandex. تمنع عبارات Disallow فهرسة قسم معين (دليل) أو ملف (ملف.html).
الخطوة 4
بعد تجميع ملف robots.txt ، يمكنك الانتقال مباشرة إلى النصوص الموجودة على صفحات الموقع. كما تعلم ، لا تحب محركات البحث وجود أكثر من 3 روابط خارجية نشطة على صفحاتك. ماذا لو كنت بحاجة إلى نزيف في الأنف ولكن عليك نشر 5 روابط أو أكثر. في هذه الحالات ، يمكنك استخدام سمة أو علامة.
الخطوة الخامسة
لإغلاق الروابط من الفهرسة بواسطة محرك بحث Google ، تحتاج إلى إحضار الرابط في النموذج التالي: روابط الارتساء. يجب إدخال نص السمة في أي جزء من الرابط ، مع عدم نسيان فصله بمسافة ، أي يمكن وضع السمة بين "a" و "href" أو بين الارتباط والمرتكز الخاص به.
الخطوة 6
لإغلاق الروابط من الفهرسة بواسطة محرك بحث Yandex ، تحتاج إلى إحضار الرابط في النموذج التالي: رابط الربط. يتم وضع العلامة في بداية الارتباط ونهايته. لا تنس أن هذه العلامة مقترنة: الجزء الثاني ، بخلاف الأول ، يأتي بعلامة "/".
