يتم الزحف إلى صفحات كل موقع بشكل منتظم بواسطة روبوتات البحث ، والتي تعالج المعلومات الموجودة على الموقع بحيث تكون متاحة بناءً على طلب المستخدمين في محركات البحث. لزيارات الزوار من محركات البحث تأثير إيجابي على حركة المرور في الموقع وتحفيز تنمية المورد. ولكن ، إذا كانت هناك صفحات على الموقع ، فإن المعلومات عنها ليست مخصصة لجمهور الإنترنت (على سبيل المثال ، الصفحات الشخصية للمستخدمين أو صفحة التسجيل) ، فلا داعي للانتقال من محركات البحث إلى هذه الصفحات ولن يكون ذلك ضروريًا. من الأفضل منع هذه المعلومات من الفهرسة.
ضروري
- - لديك موقع الويب الخاص بك
- - معرفة الروابط المؤدية للصفحات التي يحظر فهرستها.
- - على الأقل معرفة أساسية بـ HTML
تعليمات
الخطوة 1
لمنع روبوت البحث من فهرسة صفحات معينة من الموقع ، تحتاج إلى إجراء تغييرات على ملف robots.txt ، إذا كان موجودًا بالفعل على موقعك ، أو إنشاء هذا الملف.
الخطوة 2
إذا تم تحميل ملف robots.txt بالفعل إلى الموقع وكان من الممكن تحرير هذا الملف مباشرة من لوحة التحكم في الموارد ، فافتح ملف robots.txt من خلال خدمة الويب للتحرير.
الخطوه 3
إذا لم تكن هناك طريقة لإجراء تغييرات على الملف المطلوب مباشرةً من لوحة التحكم ، فافتح ملف robots.txt في مستعرض بالنقر فوق الارتباط المؤدي إلى هذا الملف. انسخ جميع البيانات من الصفحة التي تفتح والصقها على الورقة في المفكرة.
الخطوة 4
إذا لم يكن هناك ملف robots.txt على الموقع ، فافتح برنامج "المفكرة" ، في المستند الجديد الذي ستحتاج إلى إدخال الرمز اللازم منه.
الخطوة الخامسة
على ورقة فارغة من المستند النصي ، اكتب السطر الأول المطلوب:
وكيل المستخدم: *
الخطوة 6
ثم انتقل إلى السطر التالي بالضغط على مفتاح Enter واكتب الرمز التالي:
Disallow: / index / page3Disallow: يشير إلى عدم وجود فهرسة ، و / index / page3 هو رابط لصفحة لا تحتاج إلى فهرستها. بدلاً من الارتباط / الفهرس / الصفحة 3 ، أدخل ارتباطًا لصفحة موقعك التي تريد حظرها للمعالجة بواسطة برامج الروبوت.
الخطوة 7
لاحظ أن اسم المجال نفسه مفقود في بداية الارتباط ؛ وجوده في الإدخال يعني وجود الشرطة المائلة للأمام. عند الزحف إلى موقع ما ، يقوم روبوت البحث تلقائيًا بإدراج اسم النطاق في هذه الروابط. لذلك ، اكتب روابط للصفحات الضرورية بهذه الطريقة.
الخطوة 8
بعد Disallow: لا يمكنك وضع رابط إلى صفحة معينة فحسب ، بل يمكنك أيضًا وضع رابط إلى أي قسم أو دليل بالموقع. وبالمثل ، يمكنك حظر فهرسة الجزء المطلوب من الموقع.
الخطوة 9
إذا كان من الضروري حظر المعالجة بواسطة الروبوتات لعدة أقسام مختلفة من المورد ، فاكتب رابطًا لكل قسم أو صفحة في سطر جديد ، في البداية لا تنسَ وضع Disallow: entry.
الخطوة 10
لإكمال تغيير ملف robots.txt ، انقر فوق الزر "حفظ" أثناء تحرير الملف في لوحة التحكم ، أو احفظ مستندًا نصيًا بإدخالات تحت الاسم robots.txt وقم بتحميل هذا الملف إلى الموقع.
