آموزش کامل ساختن فایل Robots.txt برای سایت (+ نکات)
فایل robots.txt یکی از مهم ترین فایل ها برای ارتباط با موتورهای جستجوگر است. خزنده های جستجوگر توسط این فایل خواهند فهمید که به چه بخش هایی از سایت شما باید دسترسی باشند و چه بخش هایی را نباید بررسی […]