ربات‌ها txt یک فایل متنی است که در فهرست اصلی وردپرس شما قرار دارد. با باز کردن URL your-website.com/robots.txt در مرورگر خود می‌توانید به آن دسترسی داشته باشید. این به ربات های موتورهای جستجو اجازه می‌دهد تا بدانند کدام صفحات در وب سایت شما باید بررسی شوند.