Установив движок Ghost внутри Docker контейнера я задался вопросом, а как, собственно. сделать свой robots.txt со своими правилами. В этом движке есть собственный генератор этого файла, но его можено переопределить. Если вы не знаете что такое robots.txt или хотите посмотреть примеры, то рекомендую к прочтению страницу на Wikipedia

Для установки собственного файла robots.txt в ваш блог вам необходимо сначала создать у себя сам файл, а дальше просто добавить его в папку с используемой темой и перезапустить Ghost. Ниже расположен пример, в случае которого для всех поисковых систем будет запрет на индексацию вашего блога.

User-agent: *
Disallow: /

Ну а расположение файла в случае использования темы Casper, например, будет таким:

Ghost-robots-txt-1

Комментарии