مولد robots.txt
قم بإنشاء قواعد الزاحف وفقًا لمسارات السماح والحظر ، ويمكنك إرفاق عنوان Sitemap.
مولد robots.txt دليل المستخدم
- املأ المعلمات أو حدد الملف وفقًا للنموذج ، وتحقق من الوحدة والتنسيق أولاً.
- يحظر ملء / خاص / للمسار ، والسماح للمسار بالملء /.
- انقر فوق الزر معالجة لعرض النتائج ، يمكنك نسخها أو تنزيلها وحفظها.
طريقة الحساب وقواعد المعالجة
ينشئ صفوف السماح وإلغاء السماح والاختيارية لـ User-Agent المحدد.
نطاق الاستخدام
لا تستطيع الروبوتات حماية الخصوصية أو حظر الوصول الضار ، ولا يعني ذلك أن الفهرسة محظورة.
هل سيتم حفظ محتوى الإدخال على الخادم؟
تعالج هذه الأداة المدخلات في المتصفح ، ولا تقوم بتحميل الملفات أو إنشاء محتوى. يتم حفظ درجات ممارسة الكتابة فقط في المتصفح الأصلي.
لماذا قد تكون النتيجة مختلفة عن الأدوات الأخرى؟
لا تستطيع الروبوتات حماية الخصوصية أو حظر الوصول الضار ، ولا يعني ذلك أن الفهرسة محظورة. يرجى مقارنة وحدة الإدخال وطريقة التقريب والقواعد المعمول بها وإصدار البيانات أولاً.