Работает с robots.txt, если файла нет, создает его.
Имеется карта сайта выводит каталоги и сайты.
Также список в который входит адрес сайта, ip регистриревшего сайт и его e-mail.
» Выгрузил: skif88 (7 Янв 2016 в 15:52) » Скачали: 49 раз(a) » Последнее скачивание: 5 Ноября 2023 в 02:07
» Размер: 1.59 KB » Рейтинг: (+0/-0) » Импорт: