А теперь давайте проясним ситуацию.
Есть robots.txt, который просто текстовый файл, который просто лежит в корне сайта, конфигурационным файлом для серверного ПО он не является.
Ходят легенды о том, что ПС его читают, слушают и повинуются написанным командам.
Как думаете, сколько правды в том, что любой движок ПС будет слушаться? Насколько проблематично положить на него болт?