آرشیو آموزش - | لرن مارکتینگ | آموزش بازاریابی و بازاریابی اینترنتی

آموزش جامع فایل robots.txt و بهینه سازی فایل وردپرس robots.txt

 فایل robots.txt چیست؟

فایل robots.txt فایلی است که توسط وب مستران و مدیران سایت برای راهنمایی موتورهای جستجو نظیر گوگل و بینگ استفاده می‌شود. این سایت به گوگل و سایر موتورهای جستجو می‌گوید که چطور محتوای سایت را پیمایش و ذخیره کنند.

همچنین این فایل مشخص می‌کند که گوگل و سایر موتورهای جستجو می‌توانند یک صفحه را ذخیره کنند و یا خیر. به صورت کلی دو عمل برای موتورهای جستجو وجود دارد. Allow و disallow که به ترتیب مشخص کننده اجازه دادن و اجازه ندادن است. ادامه مطلب