Сообщение от dim-2g

На Ubuntu и впрочем любом Linux дистрибутиве, скачивание всего сайта Wget без учета robots.txt

wget -r -k -l 7 -p -E -nc -nv -e robots=off http://site.ru/