برچسب: نحوه استفاده از فایل robots.txt در سایت

این فایل در ریشه سایت قرار می گیرد و نه در جایی دیگر! کاربرد درست و نادرست در دو مثال زیر نشان داده شده است.