Сглобява коректен файл от готов набор или по мярка, с копиране и сваляне.
Изберете готов набор или си направете свой — файлът се сглобява веднага, докато пишете, и нищо не излиза от браузъра ви.
Готовите набори не са преписани от форумите. Например правилата за WordPress НЕ спират /wp-includes/: това е стара практика, която днес вреди, защото Google рисува страницата, за да я оцени, и без стиловете я вижда счупена.
Изберете готов набор или си направете свой. Файлът се сглобява веднага, докато пишете.
Google не чете тази директива. Ползвайте я само ако Bing или Yandex ви натоварват сървъра.
Файлът се качва в корена на сайта, тоест да се отваря на
вашият-сайт.bg/robots.txt. В подпапка не се чете.