... потоптался и ушел.
Спросил только главную страницу и robots.txt, которого у меня сроду не было.
Вы не знаете, чего это он? И кто за него сайт индексировать будет?