Skip to main content
Toolzer — Free Online Tools

مولّد ملف robots.txt

قم بإنشاء ملف robots.txt مع قواعد السماح/الرفض وخريطة موقعك.

عن الأداة

أداة توليد ملف robots.txt الاحترافي لموقعك بواجهة سهلة بدون الحاجة لمعرفة قواعد الملف. اختر أي زواحف (Googlebot، Bingbot، وكل الزواحف) تريد السماح لها أو منعها من الوصول لأي مسارات، حدّد مسار Sitemap، وأضف تأخير الزحف (Crawl-delay). الأداة تُنتج ملف robots.txt جاهز للنسخ ورفعه في جذر موقعك (yourdomain.com/robots.txt). مثالية لمحترفي SEO، مسؤولي المواقع، ومطوري الويب الذين يريدون التحكم في كيفية زحف محركات البحث لموقعهم لتحسين ميزانية الزحف (Crawl Budget) وحماية الصفحات الحساسة.

الأسئلة الشائعة

ما فائدة robots.txt؟

يُخبر محركات البحث بالصفحات المسموح والمحظورة على الزحف، ما يحسن SEO ويوفر ميزانية الزحف.

هل يمنع فهرسة الصفحات؟

لا يمنع الفهرسة تمامًا؛ استخدم وسم noindex في الصفحة نفسها لضمان عدم الفهرسة.

أين أضع الملف؟

في جذر موقعك: yourdomain.com/robots.txt

هل يمكن إضافة عدة Sitemaps؟

نعم، الأداة تدعم إضافة عدة روابط Sitemap.

هل يفهم Googlebot كل التوجيهات؟

Google يدعم Disallow وAllow وSitemap، ويتجاهل Crawl-delay.