ملف Robots.txt هو أول ملف تبحث عنه عناكب البحث (مثل Googlebot) عند زيارة موقعك لمعرفة المسارات المسموح بفهرستها والمسارات المحظورة. خطأ بسيط فيه قد يمنع موقعك بالكامل من الظهور على جوجل.
واجهة بناء ملف robots.txt في منصة HOKSys