اليوم من خلال مصطلح تدوين مفيد للغاية ويجب أن أعرفه وهو Robots.txt.
في Blogger ، يُعرف باسم Custom Robots.txt مما يعني أنه يمكنك الآن تخصيص هذا الملف وفقًا لاختيارك.
في البرنامج التعليمي اليوم ، سنناقش هذا المصطلح بعمق ونتعرف على استخدامه وفوائده. سأخبرك أيضًا بكيفية إضافة ملف robots.txt مخصص في Blogger.
لذلك دعونا نبدأ الدليل.
ما هو Robots.txt ؟
Robots.txt هو ملف نصي يحتوي على بضعة أسطر من التعليمات البرمجية البسيطة.
يتم حفظه على موقع الويب أو خادم المدونة الذي يوجه برامج زحف الويب إلى كيفية فهرسة مدونتك والزحف إليها في نتائج البحث.
هذا يعني أنه يمكنك تقييد أي صفحة ويب على مدونتك من برامج زحف الويب بحيث لا يمكن فهرستها في محركات البحث مثل صفحة علامات المدونة الخاصة بك أو صفحتك التجريبية أو أي صفحات أخرى ليست مهمة لفهرستها.
تذكر دائمًا أن برامج زحف البحث تفحص ملف robots.txt قبل الزحف إلى أي صفحة ويب.
تحتوي كل مدونة مستضافة على blogger على ملف robots.txt الافتراضي الذي يشبه الشكل التالي :
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://ab-expert.blogspot.com/feeds/posts/default?orderby=UPDATED
شرح كيفية إضافة ملف Robots.txt مخصص لمدونات بلوجر
ينقسم هذا الرمز إلى ثلاثة أقسام. دعنا أولاً ندرس كل منها بعد ذلك سنتعلم كيفية إضافة ملف robots.txt مخصص في مدونات blogspot.
User-agent: Mediapartners-Google
هذا الرمز مخصص لروبوتات Google Adsense التي تساعدهم على تقديم إعلانات أفضل على مدونتك. إما أن تستخدم Google Adsense على مدونتك أو لا تتركها ببساطة كما هي.
User-agent: *
هذا لجميع الروبوتات التي تحمل علامة النجمة (*). في الإعدادات الافتراضية ، يتم تقييد ارتباطات تسميات المدونة الخاصة بنا بالفهرسة بواسطة برامج زحف البحث ، مما يعني أن برامج زحف الويب لن تقوم بفهرسة روابط صفحات التسميات الخاصة بنا بسبب الكود أدناه.
Disallow: /search
هذا يعني أنه سيتم تجاهل الروابط التي تحتوي على البحث عن الكلمات الرئيسية بعد اسم النطاق مباشرة. انظر أدناه مثال وهو رابط لصفحة التسمية المسمى SEO.
https://ab-expert.blogspot.com/search/label/SEO
وإذا أزلنا Disallow: / search من الكود أعلاه ، فستقوم برامج الزحف بالوصول إلى مدونتنا بأكملها لفهرسة وتصفح جميع محتوياتها وصفحات الويب الخاصة بها.
سماح هنا: / يشير إلى الصفحة الرئيسية مما يعني أن برامج زحف الويب يمكنها الزحف إلى صفحة مدونتنا الرئيسية وفهرستها.
Disallow Particular Post
لنفترض الآن إذا كنا نريد استبعاد منشور معين من الفهرسة ، فيمكننا حينئذٍ إضافة سطور أدناه في الكود.
Disallow: /yyyy/mm/post-url.html
يشير yyyy و mm هنا إلى سنة النشر وشهر النشر على التوالي. على سبيل المثال ، إذا قمنا بنشر منشور في عام 2013 في شهر مارس ، فعلينا استخدام التنسيق أدناه.
Disallow: /2020/03/post-url.html
لتسهيل هذه المهمة ، يمكنك ببساطة نسخ عنوان URL المنشور وإزالة اسم المدونة من البداية.
Disallow Particular Page
إذا احتجنا إلى عدم السماح بصفحة معينة ، فيمكننا استخدام نفس الطريقة المذكورة أعلاه. ما عليك سوى نسخ عنوان URL للصفحة وإزالة عنوان المدونة منه والذي سيبدو كما يلي:
Disallow: /p/page-url.html
ملف
Sitemap: http://example.blogspot.com/feeds/posts/default؟orderby=UPDATED
يشير هذا الرمز إلى خريطة موقع مدونتنا.
بإضافة رابط ملف Sitemap هنا ، نحن ببساطة نحسن معدل الزحف إلى مدونتنا.
يعني عندما تقوم برامج الزحف على الإنترنت بفحص ملف robots.txt الخاص بنا ، فإنها ستجد طريقًا إلى خريطة الموقع الخاصة بنا حيث توجد جميع روابط منشوراتنا المنشورة.
سوف تجد برامج زحف الويب سهولة الزحف إلى جميع منشوراتنا.
وبالتالي ، هناك فرص أفضل لأن تقوم برامج زحف الويب بالزحف إلى جميع منشورات المدونة الخاصة بنا دون تجاهل واحدة.
ملاحظة: لن يخبر ملف Sitemap هذا برامج زحف الويب إلا عن آخر 25 مشاركة. إذا كنت ترغب في زيادة عدد الوصلات في ملف Sitemap الخاص بك ، فاستبدل خريطة الموقع الافتراضية أدناه. وسوف تعمل لأول 500 وظيفة الأخيرة.
ملف
Sitemap: http://example.blogspot.com/atom.xml؟redirect=false&start-index=1&max-results=500
إذا كان لديك أكثر من 500 مشاركة منشورة في مدونتك ، فيمكنك استخدام ملفي خريطة موقع كما يلي:
ملف Sitemap: http://example.blogspot.com/atom.xml؟redirect=false&start-index=1&max-results=500Sitemap: http://example.blogspot.com/atom.xml؟redirect=false&start-index=500&max- النتائج = 1000
كيفية إضافة ملف Robots.txt مخصص لمدونات بلوجر
الآن الجزء الرئيسي من هذا البرنامج التعليمي هو كيفية إضافة ملف robots.txt مخصص في Blogger. حتى أدناه هي خطوات لإضافته.
انتقل إلى مدونتك الإلكترونية في بلوجر ⇦ إنتقل إلى الإعدادات ⇦ تفضيلات البحث ⇦ برامج الزحف والفهرسة ⇦ Custom robots.txt⇦ تحرير ⇦ نعم
الآن قم بلصق رمز ملف robots.txt في المربع.
انقر على زر حفظ التغييرات.
لقد انتهيت!
الكلمات المفتاحية :
Blogger
BloggerWidgets
Written by you: Technical blogger AMER BACHIR
URL Of Post:
HTML Code Of Post:
0 التعليقات لموضوع "كيفية إضافة ملف Robots.txt مخصص لمدونات بلوجر كتبها: المدون التقني - الخبير عامر بشير"
ما يلفظ من قول إلا وعليه رقيب
الابتسامات الابتسامات