يتفاعل كل روبوت زحف لمحرك البحث أولاً مع ملف robots.txt وقواعد الزحف الخاصة بموقع الويب.هذا يعني أن ملف robots.txt يلعب دورًا مهمًا في تحسين محرك البحث لمدونة Blogger.تشرح هذه المقالة كيفية إنشاء ملف robots.txt مخصص مثالي في Blogger وتحسين المدونة لمحركات البحث.
ما هي وظائف ملف robots.txt؟
يُعلم ملف robots.txt محرك البحث بالصفحات التي يجب أو لا ينبغي الزحف إليها.ومن ثم يسمح لنا بالتحكم في عمل روبوتات محرك البحث.
في ملف robots.txt ، نعلن عن وظائف وكيل المستخدم ، والسماح ، وعدم السماح ، ووظائف خريطة الموقع لمحركات البحث مثل Google ، و Bing ، و Yandex ، وما إلى ذلك. دعونا نفهم معنى كل هذه المصطلحات.
عادةً ما نستخدم العلامات الوصفية لبرامج الروبوت لجميع محركات البحث التي تزحف إلى برامج الروبوت لفهرسة منشورات المدونة والصفحات عبر الويب.ولكن إذا كنت تريد حفظ ميزانية الزحف ، وحظر روبوتات محرك البحث في بعض أقسام موقع الويب ، فيجب أن تفهم ملف robots.txt لمدونة Blogger.
تحليل ملف Robots.txt الافتراضي لمدونة Blogger
لإنشاء ملف robots.txt مخصص مثالي لمدونة Blogger.أولاً ، علينا فهم بنية مدونة Blogger وتحليل ملف robots.txt الافتراضي.
يعلن السطر الأول (User-Agent) من هذا الملف عن نوع الروبوت.هذا هو Google AdSense ، وهو غير مسموح به لأي شخص (معلن في السطر الثاني).هذا يعني أن إعلانات AdSense يمكن أن تظهر في جميع أنحاء موقع الويب.
وكيل المستخدم التالي هو * ، مما يعني أن جميع روبوتات محرك البحث غير مسموح بها / صفحات البحث.وهذا يعني أنه غير مسموح به لجميع صفحات البحث والتصنيف (نفس بنية عنوان URL).
والسماح بتعريف العلامة بأنه سيسمح لجميع الصفحات بخلاف قسم عدم السماح بالزحف.
يحتوي السطر التالي على خريطة موقع النشر لمدونة Blogger.
يعد هذا ملفًا مثاليًا تقريبًا للتحكم في روبوتات محرك البحث وتقديم إرشادات للصفحات للزحف أو عدم الزحف.يرجى ملاحظة ، هنا ، أن ما يُسمح بالزحف إليه لن يضمن فهرسة الصفحات.لكن هذا الملف يسمح بفهرسة صفحات الأرشيف ، مما قد يتسبب في مشكلة محتوى مكرر.هذا يعني أنه سينشئ محتوى غير هام لمدونة Blogger.
قم بإنشاء ملف robots.txt مخصص مثالي لمدونة Blogger.
لقد فهمنا كيفية قيام ملف robots.txt افتراضيًا بأداء وظيفته لمدونة Blogger.فلنقم بتحسينه للحصول على أفضل مُحسنات محركات البحث.يسمح ملف robots.txt الافتراضي للأرشيف بالفهرسة التي تسبب مشكلة المحتوى المكرر.يمكننا منع مشكلة المحتوى المكرر عن طريق منع الروبوتات من الزحف إلى قسم الأرشيف.من أجل هذا،
/ search * سيعطل الزحف إلى كل صفحات البحث والتسميات.
طبق قاعدة Disallow / 20 * في ملف robots.txt لإيقاف الزحف إلى قسم الأرشيف.
ستحظر القاعدة / 20 * الزحف إلى جميع المشاركات ، لذا لتجنب ذلك ، يتعين علينا تطبيق قاعدة سماح جديدة لقسم /*.html تسمح للروبوتات بالزحف إلى المشاركات والصفحات.
تتضمن خريطة الموقع الافتراضية منشورات وليست صفحات.لذا يتعين عليك إضافة خريطة موقع للصفحات الموجودة ضمن https://example.blogspot.com/sitemap-pages.xml أو https://www.example.com/sitemap-pages.xml للمجال المخصص.يمكنك إرسال خرائط مواقع Blogger إلى Google Search Console للحصول على نتائج جيدة.لذا سيبدو ملف robots.txt المخصص الجديد المثالي لمدونة Blogger بهذا الشكل.
User-agent: Mediapartners-Google
Disallow:
#below lines control all search engines, and blocks all search, archieve and allow all blog posts and pages.
User-agent: *
Disallow: /search*
Disallow: /20*
Allow: /*.html
#sitemap of the blog
Sitemap: https://www.example.com/sitemap.xml
Sitemap: https://www.example.com/sitemap-pages.xml
يجب عليك استبدال www.example.com بنطاق Blogger أو اسم المجال المخصص. على سبيل المثال ، افترض أن اسم المجال المخصص الخاص بك هو www.iashindu.com ، فإن خريطة الموقع ستكون على
https://www.iashindu.com/sitemap.xml
بالإضافة إلى ذلك ، يمكنك التحقق من ملف robots.txt الحالي على
https://www.example.com/robots.txt
أعلى الملف ، الإعداد هو أفضل ممارسة لملف robots.txt كما هو الحال مع تحسين محركات البحث.سيؤدي هذا إلى حفظ ميزانية الزحف لموقع الويب ومساعدة مدونة Blogger في الظهور في نتائج البحث.يجب عليك كتابة محتوى صديق لكبار المسئولين الاقتصاديين لتظهر في نتائج البحث
ولكن إذا كنت تريد السماح لبرامج الروبوت بالزحف إلى موقع الويب الكامل ، فإن أفضل إعداد ممكن لـ robots.txt والعلامة الوصفية لبرامج الروبوت ، جرب العلامة الوصفية المتقدمة لبرامج الروبوت وملف robots.txt.المزيج هو أحد أفضل الممارسات لتعزيز مُحسّنات محرّكات البحث في مدونة Blogger.
كيف يتم تحرير ملف robots.txt الخاص بمدونة Blogger؟
يوجد ملف Robots.txt هذا في المستوى الجذر لموقع الويب. لكن في Blogger ، لا يوجد وصول إلى الجذر ، فكيف يتم تعديل ملف robots.txt هذا؟
يوفر Blogger جميع إعدادات ملف الجذر في قسم الإعدادات مثل ملفات robots.txt و ads.txt. يجب عليك تسجيل الدخول إلى حساب Blogger وتحرير ملف robots.txt.
انتقل إلى Blogger Dashboard وانقر على خيار الإعدادات ،
قم بالتمرير لأسفل إلى قسم برامج الزحف والفهرسة ،
قم بتمكين ملف robots.txt المخصص عن طريق زر التبديل.
انقر فوق ملف robots.txt المخصص ، وسيتم فتح نافذة ولصق ملف robots.txt وتحديثه.
بعد تحديث ملف robots.txt المخصص لمدونة Blogger ، تحقق منه بزيارة https://www.example.com/robots.txt ، حيث يجب استبدال www.example.com بعنوان المجال الخاص بك.
خاتمة
لقد فهمنا وظيفة ملف robots.txt وأنشأنا ملف robots.txt مخصصًا مثاليًا لمدونة Blogger.يمكن لمستخدمي مدونة Blogger إعداد ملف robots.txt أعلاه للحصول على أفضل النتائج.في ملف robots.txt الافتراضي ، يُسمح أيضًا لقسم الأرشيف بالزحف ، مما يتسبب في حدوث مشكلات مكررة في المحتوى لمحرك البحث.ومن ثم يتم الخلط بين محرك البحث حول ما سيتم عرضه في نتيجة البحث ولا تنظر في صفحاتك لنتيجة البحث.هذا يعني أن علامات الروبوتات ضرورية لتحسين محركات البحث لموقع الويب.يمكنك التفكير في الجمع بين كل من ملف robots.txt والعلامة الوصفية لبرامج الروبوت في مدونة Blogger للحصول على أفضل النتائج.يمكنك أيضًا تنزيل قوالب مستجيبة وصديقة لكبار المسئولين الاقتصاديين لمدونة Blogger.أتمنى أن تعجبك هذه المقالة.في حالة وجود أي شكوك أو أسئلة بخصوص Blogger ، يمكنك التعليق أدناه.
تعليقات
إرسال تعليق
تذكر دائمًا أن هناك إنسانًا آخر ، شخص يشبهك كثيرًا ، على الجانب الآخر من تلك الشاشة. كن لطيفا في تعليقاتك!