Яндекс повідомив, що файла не існує. Але при переході за адресою robots.txt виникає помилка 403 – доступ заборонений.

Виявилось, що справа у правах доступу до файлів. Змінив їх просто в FTP-клієнті, у програмі FileZilla.

Щоб змінити права на доступ до файлів чи директорій на сервері, потрібно у програмі FileZilla клацнути на потрібний файл (у мене картинці видно, що зараз дозволи файлу – 0600).

Потім у меню обираємо «Дозволи файла» і змінюємо атрибути у відповідному віконці (картинка нижче).

Установив, що файл може читати будь-хто (значення 0644) і натиснув кнопку «Добре». Тепер файл robots.txt чудово завантажується.