مولد ومدقق ملف Robots.txt
أنشئ قواعد الزاحف وأضف توجيهات خريطة الموقع وتحقق من صحة بنية ملف robots.txt محليًا قبل نشر الملف على جذر موقع الويب الخاص بك.
نتائج التحقق من الصحة
- أنشئ محتوى ملف robots.txt أو الصقه، ثم تحقق من صحته.
توليد قاعدة الزاحف
أنشئ توجيهات وكيل المستخدم والسماح وعدم السماح وخريطة الموقع وتوجيهات المضيف الاختيارية دون حفظ تنسيق ملف robots.txt.
التحقق من صحة بناء الجملة
تحقق من الأخطاء الشائعة مثل وكلاء المستخدم المفقودين، وعناوين URL لخريطة الموقع النسبية، والمسارات المشوهة، والقواعد المكررة، وأسماء التوجيه غير المدعومة.
المعالجة المحلية الخاصة
يتم تشغيل المولد والمدقق في متصفحك. لا يتم تحميل محتوى Robots.txt إلى خوادم Convertr.
الأسئلة المتكررة
هل تم تحميل ملف robots.txt الخاص بي للتحقق من صحته؟
لا، يتم تشغيل الإنشاء والتحقق في متصفحك باستخدام JavaScript. لا يتم إرسال النص الذي تدخله إلى خوادم Convertr.
أين يجب أن أضع ملف robots.txt؟
ضع ملف robots.txt في جذر المضيف الذي ينطبق عليه، مثل https://example.com/robots.txt.
هل يقوم ملف robots.txt بإزالة الصفحات من Google؟
لا، يتحكم ملف Robots.txt في وصول الزاحف. استخدم توجيهات noindex على الصفحة أو قم بإزالة الصفحة إذا كنت بحاجة إلى إلغاء الفهرسة.