Найти robots.txt можно, задав в адресной строке браузера фразу - /имя_вашего_сайта/robots.txt (рис.1).
Рис.1 Найти файл robots txt можно через браузер
Откроется страница с содержимым файла robots txt (рис.2).
Рис.2 Найти robots txt и посмотреть можно в браузере.
Так вы можете найти и просмотреть файл robots.txt.
Конечно, файл robots.txt должен быть предварительно создан и помещен в корневую папку сайта на сервере, где он собственно и находится.
Таким способом вы можете найти robot txt, но не сможете его изменить.
Для того, чтобы внести изменения в файл, нужно его найти и открыть непосредственно на сервере.
Находится файл robots.txt в корневой папке сайта на сервере. Обычно название папки совпадает с именем вашего сайта. В ней находятся все файлы, в том числе и файл robots.txt.
Итак, файл robots.txt находится в корневой папке на сервере провайдера. Соответственно, для того чтобы найти его, нужно войти в панель управления на сервере, далее открыть корневую папку вашего сайта и... найти файл robots.txt.
Здесь, в корневой папке, находятся все файлы вашего сайта, в том числе и файл robots.txt (рис. 3)
Рис.3 Где находится файл robots.txt – корневая папка сайта.
Таким образом, если нужно найти и просто просмотреть файл robots txt, то это можно сделать через браузер, задав адрес имя_сайта/rodots.txt.
Если вам нужно не только просмотреть, но и изменить файл robots.txt, то нужно зайти на сервер провайдера и открыть корневую папку сайта, где и находится файл robots.txt.
Найдя и открыв файл robots.txt, можно будет его изменить. Наиболее часто подвергается изменению директива disallow robots txt.
