هل تريد أن تتحكم في زحف محركات البحث إلى مدونتك على بلوجر؟ إذا كنت تدير مدونة على بلوجر وتسعى لتحسين ظهورها في نتائج جوجل، فإن ملف robots.txt هو أهم ملف تقني ستستخدمه!
هذا الملف البسيط يُحدد لمحركات البحث الصفحات التي يُسمح بفهرستها وتلك التي يجب إخفاؤها، مما يُسهم بشكل مباشر في تحسين سيو مدونتك وزيادة فرص تصدرها في النتائج الأولى.
لكن كيفية إعداد robots.txt في بلوجر قد تبدو غامضة للمبتدئين! لا تقلق، في هذا الدليل الشامل على موقع المتميزون، سنشرح لك خطوة بخطوة طريقة إنشاء الملف، وتعديله، وتجنب الأخطاء الشائعة التي تُعيق فهرسة مدونتك.
سواء كنت تريد منع فهرسة صفحات معينة (مثل الأرشيف أو التاجات) أو ضبط إعدادات الزحف لتحقيق أفضل أداء SEO، ستجد كل الإجابات هنا!
ملف الروبوتكست لمدونات بلوجر
ملف robots.txt هو ملف إرشادات خفي يوجه محركات البحث (مثل جوجل) إلى الصفحات المسموح لها بالزحف إليها أو منعها في مدونتك. من خلال إعداد هذا الملف بدقة، تتحكم في عملية فهرسة محتواك، مما يجعلك تتجنب إهدار “ميزانية الزحف” على صفحات غير مهمة، وتركز على تعزيز ظهور الصفحات الاستراتيجية في نتائج البحث!
أهم مميزات ملف الروبوتكست:
- حماية الصفحات الخاصة: يمكنك من منع محركات البحث من أرشفة الصفحات غير المهمة مثل سياسة الخصوصية أو صفحة “اتصل بنا”.
- توجيه العناكب: يساعدك في تحديد الصفحات التي يجب على محركات البحث الزحف إليها، مما يعزز من كفاءة الأرشفة.
- تحسين الأرشفة: من خلال إدارة الزحف بشكل دقيق، يمكنك تسريع عملية الأرشفة وضمان جودة فهرسة المحتوى الخاص بك.
كيف أعرف ملف الروبوتكست الذي يجب علي استخدامه
عند استخدام ملف robots.txt لمدونة بلوجر، يجب أن تُركز على اختيار إعدادات الملف المناسبة لنوع مدونتك لتحقيق أفضل أداء في محركات البحث.
المدونات باستخدام دومين مدفوع (مثل .com أو .net):
هنا يمكنك تخصيص ملف robots.txt لبلوجر بشكل متقدم، مما يمنحك:
- تحكم كامل في زحف محركات البحث نحو الصفحات المهمة (مثل المقالات عالية الكثافة الكلمات المفتاحية).
- تسريع فهرسة المحتوى الجديد عبر توجيه العناكب إلى الأقسام الاستراتيجية.
- منع فهرسة الصفحات غير المرغوب فيها (مثل صفحات الإعدادات الداخلية)، مما يُحسّن كفاءة أرشفة المدونة.
المدونات المجانية على بلوجر (blogspot):
يُنصح بالالتزام بـ إعدادات robots.txt الافتراضية لبلوجر لتجنب:
- تعارض الإعدادات الذي قد يُسبب مشاكل في فهرسة المدونة.
- منع الزحف إلى صفحات حساسة عن طريق الخطأ (مثل صفحات الأرشيف أو التاجات).
- تضييع ميزانية الزحف على صفحات غير مؤثرة في ترتيب SEO مدونتك.
ملف الروبوتكست الصحيح للمدونات التي تعمل على بلوجر
إذا كنت تنشئ مدونة بلوجر مجانية (بدومين blogspot)، فمن الضروري تعطيل ملف robots.txt المعدل والالتزام بـ الإعدادات الافتراضية لبلوجر لتجنب:
- منع أرشفة الصفحات الحساسة (مثل صفحات تسجيل الدخول) عن طريق الخطأ.
- مشاكل فهرسة مدونة بلوجر بسبب تعارض الملفات.
- تضييع ميزانية الزحف على صفحات غير مؤثرة في ترتيب موقعك على جوجل.
أما إذا كنت تستخدم مدونة بلوجر بدومين مدفوع (مثل .com أو .net)، فيمكنك تخصيص ملف robots.txt لبلوجر بحرية لتحقيق:
- تسريع فهرسة المحتوى الجديد عبر إدارة ذكية لزحف العناكب.
- تحسين سيو بلوجر عبر توجيه محركات البحث إلى الصفحات الاستراتيجية (مثل المقالات عالية المنافسة).
- منع فهرسة الصفحات غير المرغوب فيها (مثل صفحات الإعلانات أو الأرشيف القديم).
تعديل ملف الروبوتكست للمدونات المجانية
إذا كنت تستخدم مدونة بلوجر مجانية على نطاق blogspot، عليك التأكد من أنك تستخدم ملف الروبوتكست الافتراضي. في حال قمت بإضافة ملف آخر عن طريق الخطأ، يجب عليك اتباع الخطوات التالية:
- قم بالدخول إلى إعدادات بلوجر.
- اذهب إلى خيار “ملف الروبوتكست” واضغط عليه.
- امسح الملف الموجود وأضف الملف الذي سأقدمه لك في الأسفل.
- تأكد من إدخال رابط مدونتك في المكان المخصص.
- احفظ الملف وتأكد من عدم إغلاقه بعد التعديل.
بعد هذه الخطوات، اذهب إلى صفحة اختبار ملف الروبوتكست وتأكد من أن كل شيء يعمل كما يجب.مح لها بالدخول لكل الصفحات.
طريقة منع عناكب بحث جوجل من أرشفة الصفحات وصفحات التسميات
لا تشيل هم الأمر فهو سهل وبسيط جدًا. كل اللي عليك تسويه هو تدخل على إعدادات بلوجر وبعدين تنزل لخيار تفعيل علامات رؤوس مخصصة لبرامج الروبوت. بعدين تأكد أنك تفعل هذا الخيار وطبق اللي موجود في الصور عشان تضمن إنه ما تصير أي أخطاء في مدونتك.
علامات الصفحة الرئيسية
علامات صفحات الأرشيف والبحث
علامات المشاركات والصفحات
وها قد انتهيت من جميع الخطوات. الآن تحتاج تنتظر على الأقل أسبوع لتلاحظ التغييرات في أداء مدونتك المجانية على بلوجر.
كيفية اضافة ملف الروبوتكست في مدونات بلوجر
في الشرح السابق كنا نتحدث عن كيفية إضافة وتغيير إعدادات مدونة بلوجر للمدونات المجانية. اليوم راح أوضح الأمور أكثر للمدونات اللي تستخدم دومين مدفوع سواء كان دوت نت أو كوم. أنصحكم باستخدام ملف الروبوتكس المعدل لأنه راح يحسن سرعة أرشفة مدونتك.
هذا الملف يتضمن إضافات كثيرة ومن ضمنها تحديد عدد كبير من المواضيع اللي تسمح لجوجل بأرشفتها. كمان يحتوي على أوامر أكثر مرونة شوي مقارنة بالملف التلقائي. رح أضعه لكم تحت، ودلوقتي هنتكلم عن خطوات تركيب الملف.
- أول شيء نعمله هو نروح على منصة بلوجر وندخل على الإعدادات.
- بعدين ننزل لتفعيل محتوى ملف robots.txt الخاص.
- نفعّل الخيار ونلصق الملف مع التأكد إن الرابط موجود بعد كلمة sitemap.xml.
- وأخيرًا، نعمل حفظ للملف.
أخيرا انتهينا من شرح كيفية تركيب ملف الروبوت تكست. إذا كنت حابب تعرف مكونات هذا الملف أو معنى الرموز الموجودة فيه، أتمنى تشوف شرح مكوناته.
شرح مكونات ملف الروبوتكست
لكي تفهم ملف الروبوتكس robots.txt كويس لازم تعرف شوية مكونات مهمة عشان تقدر تشتغل بيه بالطريقة اللي تحبها. هقولك دلوقتي عن المكونات دي واحدة واحدة علشان تقدر تكتشفها بسهولة. هيا بنا نبدأ.
رمز User-agent
هذا الكود يتيح لعناكب البحث الدخول إلى المدونة عشان تقدر تأرشفته ويظهر في محرك بحث جوجل.
رمز Disallow
هذا الرمز يساعد جوجل على أرشفة كل صفحات المدونة. تلاقي علامة سلاش / وبعدها كلمة search عشان يتجنب أرشفة صفحات سياسة الخصوصية واتفاقية الاستخدام وصفحة الاتصال بنا.
الرمز Allow
رمز Allow يمنع عناكب البحث من فهرسة الصفحات المهمة زي صفحة اتصل بنا وسياسة الخصوصية وأرشيف المؤلفين. لكنه يعمل على حمايتها عن طريق إضافة سلاش / قدام الرمز.
رمز Sitemap
هُوَ مِلَفّ يُعرف موقعك لجوجل من خلال ملف السايت ماب. هذا الملف يحسب عدد المقالات الموجودة أو اللي ناوي تنشرها على مدونتك. عشان كده، ما نقدرش نستغنى عنه في ملف الروبوتكس.
ملف الروبوتكست التلقائي
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: رابط مدونتك/sitemap.xmlملف الروبوتكست المعدل
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: رابط مدونتك/atom.xml?redirect=false&start-index=1&max-results=500هنا نكون خلصنا شرح ملف الروبوتكست robots.txt وقدمنا لكم المعلومات اللي تحتاجونها عن هالملفات. كل اللي عليك هو اختيار اللي يناسب مدونتك. إذا كانت مدفوعة تستخدم التلقائي أو المعدل. أما إذا كانت مجانية يعني بمدونة بلوج سبوت تختار التلقائي واغلق الملف بعد ما تصححه في صفحة اختبار ملف الروبوتكست. أتمنى لكم التوفيق والنجاح ودمتم بخير.
المصادر:
- المصدر الأول: مركز مساعدة Search Console
- المصدر الثاني: google Search Central
