ألا تريد أن تعرف ما هو الغرض من Custom Robots.txt وكيفية إعداده على بلوجر ؟ أنت في المكان الصحيح.
في هذه المقالة، ستتعرف على ما هو Custom Robot.txt، وكيفية إعداد ملف Robots.txt مخصص مثالي في بلوجر ، وكيفية إضافة خريطة الموقع في بلوجر باستخدام Custom robot.txt.
ما هو ملف robots.txt المخصص؟
يستخدم مالكو مواقع الويب ملف ملف robots.txt المخصص للإبلاغ تقوم روبوتات الويب بتحديد عناوين URL والأدلة وصفحات موقع الويب التي سيتم الزحف إليها.
تُعرف روبوتات الويب أيضًا باسم Spiders أو Crawlers، وهي برامج تجتاز/تزحف إلى الويب تلقائيًا. تستخدمها محركات البحث مثل Google وBing وغيرها لفهرسة محتوى الويب.
عندما يزور روبوت الويب موقع الويب الخاص بك، فإنه ينتقل إلى ملف robots.txt المخصص ويتحقق من الصفحات أو الدلائل أو المجلدات أو عناوين URL المسموح بالزحف إليها لأننا في بعض الأحيان لا نريد أن تقوم الروبوتات بالزحف إلى الصفحات غير الضرورية أو المجلدات والأدلة غير العامة مثل عناوين URL أو الدلائل من جانب المسؤول.
يوجد أدناه رمز Robot.txt المخصص لمدونة بلوجر الخاصة بك. يجب عليك نسخ هذا الرمز ولصقه في Custom Robots.txt، كما هو موضح أدناه في كيفية إعداد Custom Robots Txt في Blogger.
في ملف Sitemap، استبدل "example" باسم النطاق الفرعي الخاص بك في Blogger مثل "https://techguroo.blogspot.com".
————————————————————
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://example.blogspot.com/sitemap.xml
—————————————————————
- "وكيل المستخدم: *" يعني أن هذا القسم ينطبق على جميع برامج الروبوت.
- وكيل المستخدم: Mediapartners-Google & عدم السماح يسمح بعرض إعلانات Google AdSense على أي صفحة في مدونتك.
- يعني عدم السماح: /search تجاهل جميع عناوين URL التي تحتوي على كلمة رئيسية /search/label/Blogger./search/ مثل https://www.example.com
- يتم استخدام التوجيه allow لتجاوز توجيهات عدم السماح في نفس ملف robots.txt. هنا Allow:/ يرشد روبوتات الويب إلى إمكانية الزحف إلى أي صفحة/عنوان URL لموقع الويب باستثناء الصفحات غير المسموح بها.
- إن خريطة الموقع عبارة عن ملف XML يسرد صفحات مدونتك، مع التأكد من أن Google ومحركات البحث الأخرى يمكنها العثور عليها جميعًا والزحف إليها.< /أ>
كيفية إعداد ملف Robots Txt في بلوجر ؟
في هذا القسم، سأرشدك حول كيفية إعداد ملف robot.txt المخصص في بلوجر .
- قم بتسجيل الدخول إلى حسابك في Blogger.
- انتقل إلى الشريط الجانبي وانقر على الإعدادات.
- قم بالتمرير لأسفل إلى قسم برامج الزحف والفهرسة.
- قم بتشغيل تمكين ملف robots.txt المخصص عن طريق سحب شريط التمرير نحو اليمين.
- انقر على "ملف robots.txt مخصص".
- الآن انسخ & الصق رمز Robot.txt المخصص هنا.
- انقر على حفظ.
حان الوقت الآن لاختبار ملف robots.txt المخصص لديك. أضف /robots.txt في نهاية عنوان URL لمدونتك واضغط على Enter، مثل:
- https://www.example.blogspot.com/robots.txt
سيُظهر لك نفس الرمز الذي أضفته في ملف robots.txt المخصص.
- تمتع بإمكانية الوصول إلى جميع برامجنا التعليمية في بلوجر .
- إذا أعجبك هذا المنشور فلا تنسى مشاركته مع أصدقائك. شارك بتعليقاتك في قسم التعليقات أدناه.