robotstxt

السلام عليكم ورحمة الله وبركاته كثير منا يحتار في افضل طريقة لضبط ملف الربوتس فوجدت ان افضل شي اشوف موقع عليه اقبال شديد وهذا يعني ان عناكب البحث توصل له بكل سهولة فعلى طول خطر في بالي ترايدنت هذا ملف robots.txt مثل اللي في ترايدنت حمل من هنا

السلام عليكم ورحمة الله و بركاتة أخواني شد انتباهي تقنية robots.txt المستخدمة في كثير من المواقع الأجنبية فأحببت ان ألخص لكم ما فهمته ة ما استطعت تحصيلة من مواقع الانترنت الاجنبية ولبحث يوم كامل و اعطيكم الخلاصة على طبق من ذهب... بسم الله الرحمن الرحيم أولا الروبوتس هو عبارة عن ملف نصي يوضع...