شعار Loona AutomationLoona أدوات المطوّرين
الرئيسية › أدوات المطوّرين › منشئ Robots.txt

منشئ Robots.txt - قواعد زاحف دون أفخاخ الصياغة

باختصار: يبني منشئ Robots.txt ‏robots.txt صالحاً من إعدادات مسبقة وقواعد لكل وكيل - مسارات سماح وحظر لكل زاحف، بالإضافة إلى سطر خريطة موقعك - ويشغّل فحوص سلامة على النتيجة قبل شحنها.

سطر خاطئ واحد في robots.txt قد يخفي موقعاً بأكمله عن Google - أو يفشل في إخفاء أي شيء أصلاً. ابنِه هنا، مع إعدادات مسبقة للحالات الشائعة وفحوص على الناتج.

خاص بالتصميم: كل شيء في هذه الأداة يحدث 100% في متصفحك عبر JavaScript. إدخالك لا يُرفع إلى خادم أبداً، لا يُخزّن أبداً ولا نراه أبداً - أغلق علامة التبويب وكل شيء يختفي.

كيفية استخدام منشئ Robots.txt

  1. اختر إعداداً مسبقاً، أو ابدأ من السماح بكل شيء وخصّص.
  2. أضف مجموعة لأي زاحف محدد (على سبيل المثال GPTBot) بقواعده الخاصة.
  3. اسرد مسارات الحظر والسماح، واحد لكل سطر - المسارات تبدأ بـ /.
  4. أضف رابط خريطة موقعك وانقر إنشاء.
  5. اعبر ملاحظات فحص السلامة، ثم ضع الملف على yourdomain.com/robots.txt.

كيف يعمل

ملف robots.txt هو مجموعة من المجموعات: كل مجموعة تسمّي وكيل مستخدم واحد أو أكثر (زواحف) تليها قواعد مسارات Disallow وAllow التي تنطبق عليها. وDisallow الفارغة تعني أن كل شيء مسموح؛ Disallow: / يحظر الموقع بأكمله لذلك الوكيل. تُطابق القواعد بالبادئة، ويدعم Google أيضاً Allow لاستثناء استثناءات من Disallow أوسع. يصدر هذا المنشئ مجموعات بالتنسيق القياسي، يلحق سطر Sitemap، ثم يفحص سلامة ناتجه الخاص: الحقول المجهولة، المسارات التي لا تبدأ بـ /، وأسطر خرائط المواقع التي ليست روابط كاملة كلها تُعلَّم. تذكّر robots.txt طلب، لا قفل - الزواحف حسنة التصرف تطيعه، الخبيثة قد لا تطيعه، فلا تعتمد عليه أبداً لحماية الأسرار.

الأسئلة الشائعة

هل هذا المنشئ مجاني؟

نعم - مجاني بالكامل، دون تسجيل.

أين يذهب robots.txt؟

في جذر نطاقك: https://yourdomain.com/robots.txt - لا يُقرأ أي مكان آخر.

هل يحظر robots.txt الصفحات من نتائج البحث تماماً؟

يحظر الزحف، لا الفهرسة: رابط محظور قد يظهر في النتائج (دون وصف) إذا ربطت به مواقع أخرى. استخدم وسم noindex لإبقاء صفحة خارجاً تماماً.

هل أستطيع حظر زواحف الذكاء الاصطناعي؟

إعداد AI المسبق يضيف مجموعات تحظر GPTBot وCCBot وGoogle-Extended. الزواحف المتوافقة تكرّمه؛ لا يستطيع إيقاف الكاشطات التي تتجاهل robots.txt.

هل يُرفع أي شيء؟

لا. الإنشاء والفحوص تعمل في متصفحك.

أدوات مطوّرين ذات صلة

ضمّن هذه الأداة على موقعك — مجاناً

أضف هذه الأداة إلى موقعك أو مدونتك الخاصة — فهي مجانية تماماً، لا تحتاج تسجيلاً، وتظهر دائماً بأحدث إصدار. انسخ الكود أدناه والصقه في صفحتك حيث تريد أن تظهر الأداة. الحفاظ على سطر الاعتماد الصغير “مقدَّم من Loona Automation” تحت التضمين يساعد في إبقاء هذه الأداة مجانية — لكنك حرّ في تنسيقه أو إزالته؛ فالأداة تعمل في كلتا الحالتين.