تخطَّ إلى المحتوى

مولد robots.txt لزواحف الذكاء الاصطناعي: قرّر من يقرأ موقعك.

مجانًا، بدون تسجيل، وتعمل في متصفحك.

كيف أسمح لزواحف الذكاء الاصطناعي أو أمنعها من موقعي؟

عبر ملف robots.txt في جذر موقعك: تضيف لكل زاحف، مثل GPTBot من OpenAI أو ClaudeBot من Anthropic أو PerplexityBot، قاعدة سماح أو منع. تساعدك هذه الأداة على اختيار الزواحف وكتابة القواعد بلا أخطاء، ثم تنسخ الملف وترفعه. منع الزواحف قد يقلل ظهورك في إجابات أدوات الذكاء الاصطناعي.

مولد robots.txt لزواحف الذكاء الاصطناعي

Search engines (Google, Bing, Naver, Yandex, Apple…)
AI search & answer engines (ChatGPT search, Claude, Perplexity, Gemini agents, Meta AI…)
AI model training (GPTBot, ClaudeBot, Google-Extended, CCBot…)
SEO & comparison crawlers (Ahrefs, Semrush, Majestic…)
# Generated with the free robots.txt generator by Marketing Studio by UshbaTech: https://marketing.ushbatech.com/tools/ai-robots-txt-generator

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /cart/
Disallow: /account/

User-agent: Googlebot
User-agent: Bingbot
User-agent: Applebot
User-agent: DuckDuckBot
User-agent: YandexBot
User-agent: Yeti
User-agent: Daum
User-agent: Baiduspider
User-agent: SeznamBot
User-agent: PetalBot
Allow: /
Disallow: /admin/
Disallow: /cart/
Disallow: /account/
Content-Signal: search=yes, ai-input=yes, ai-train=yes

User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: OAI-AdsBot
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Google-Agent
User-agent: meta-webindexer
User-agent: meta-externalfetcher
User-agent: Amzn-SearchBot
User-agent: DuckAssistBot
User-agent: MistralAI-User
User-agent: MistralAI-Index
User-agent: YouBot
Allow: /
Disallow: /admin/
Disallow: /cart/
Disallow: /account/
Content-Signal: search=yes, ai-input=yes, ai-train=yes

User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Applebot-Extended
User-agent: CCBot
User-agent: meta-externalagent
User-agent: Amazonbot
User-agent: Bytespider
User-agent: cohere-training-data-crawler
User-agent: AI2Bot
User-agent: DeepSeekBot
Allow: /
Disallow: /admin/
Disallow: /cart/
Disallow: /account/
Content-Signal: search=yes, ai-input=yes, ai-train=yes

User-agent: AhrefsBot
User-agent: SemrushBot
User-agent: MJ12bot
User-agent: DotBot
User-agent: DataForSeoBot
Allow: /
Disallow: /admin/
Disallow: /cart/
Disallow: /account/
Content-Signal: search=yes, ai-input=yes, ai-train=yes

Sitemap: https://example.com/sitemap.xml

Bot names are current as of November 2026. A named group does not inherit the rules of “User-agent: *”, so every group repeats your private paths.

كيف تستخدم مولد robots.txt لزواحف الذكاء الاصطناعي؟

  1. 1

    الخطوة 1

    اختر الزواحف

    حدد ما تسمح له وما تمنعه.

  2. 2

    الخطوة 2

    أضف خريطة الموقع

    رابط sitemap.xml لتسهيل الاكتشاف.

  3. 3

    الخطوة 3

    انسخ وارفع

    استبدل ملف robots.txt الحالي أو ادمج القواعد معه بحذر.

الأسئلة الشائعة حول مولد robots.txt لزواحف الذكاء الاصطناعي

هل لديك سؤال آخر؟ تحدّث مع فريقنا بالعربية

هل منع GPTBot يخفيني من ChatGPT؟

يقلل استخدام محتواك الجديد، وقد يقلل ظهورك في الإجابات؛ القرار يعتمد على أولوياتك.

#

هل يضر ملف robots.txt لزواحف الذكاء الاصطناعي بترتيبي في Google؟

لا، ما دمت لا تمنع Googlebot نفسه. منع زواحف التدريب مثل GPTBot أو رمز Google-Extended لا يؤثر في فهرسة Google أو ترتيبك في البحث. راجع القواعد قبل النشر، وتأكد أن صفحاتك المهمة مسموحة لمحركات البحث.

#

وظّف فريق التسويق بالذكاء الاصطناعي اليوم

فعّل بريدك الإلكتروني واحصل على رصيد مجاني، ودع المدرّب الذكي يتعرّف على نشاطك في محادثة واحدة. كل المزايا مفتوحة من اليوم الأول.

ابدأ مجانًا برصيد ترحيبيتحسين محركات البحث

بدون بطاقة ائتمان للبدء، وألغِ متى شئت.