Многие вебмастера пользуются веб-архивом. Скачать сайт с web archive org, в принципе, довольно просто: если сайт есть в веб-архиве и не запрещена индексация в robots.txt, можно вывести все сохранённые страницы и по очереди загрузить. Но здесь возникают две проблемы. Даже три.
1. Если страниц слишком много, то скачивать очень долго, ведь и сам архив работает медленно.
2. Страницы скачиваются со встроенными скриптами веб-архива и изменёнными ссылками, и их чистить приходится вручную — это очень трудно и долго.
3. После определённого количества страниц скачивание перестаёт происходить, создаётся впечатление, что web archive org не работает, но это на самом деле вас забанили на некоторое время; правда от этой проблемы иногда помогает чистка куки и смена браузера, даже IP менять не обязательно.
Естественно, возникает вопрос: как скачать с web archive org автоматически, с помощью какой-нибудь программы, которая плюс ко всему чистила бы из скачиваемых файлов левые скрипты.
Есть известная программа web archive downloader, которую я приобретал около года назад на свой страх и риск, так как в то время не нашёл о ней много отзывов. Русскоязычная версия официального сйта программы вот: http://www.webarchivedownloader.com/ru/
Что можно сказать. В основном ожидания программа оправдала. Инструкция написана просто и доходчиво, программа помещает все файлы в том же порядке, в котором они были на сайте, в папку с названием по имени домена. Восстановить сайт при этом оказывается довольно просто. Все левые скрипты вычищаются, ссылки меняются из «вебархивовских» на первоначальные.
Есть, конечно, и недостатки небольшие.
1. Программа платная (около $20).
2. Не скачиваются большие сайты. Точно не знаю как работает webarchive downloader в других операционных системах, у меня Windows 7 x64 — так вот, когда число файлов примерно 2000 и более — при скачивании программа наглухо зависает. Через некоторое время появляется стандартное окно об ошибке «Программа такая-то не отвечает — завершить работу или искать решение проблемы в Интернете». Вполне может быть, что это тоже из-за забанивания со стороны сайта web archive org, но вручную удаётся скачать ещё меньше.
Ну а вообще, эта программа меня часто выручает. Ломаной рабочей версии программы web archive downloader я не видел. Перед покупкой можете ознакомиться с FAQ-ом по программе, который находится здесь.
Кстати, если вам надо скачать несколько сайтов, и не хочется ради этого покупать программу — можете воспользоваться моими услугами, скачиваю сайты по цене 1 рубль за один файл. Скачанный сайт передаётся «как есть». Пожалуйста, обращайтесь на адрес mybtaddr[at]gmail{dot}com.
Вот, пожалуй, это весь мой отзыв о Web Archive Downloader, дополнительные вопросы можно задать в комментариях.
Спасибо за статью на моём сайте! Ну и сразу вопрос, что значит «все файлы в том же порядке, в котором они были на сайте», то есть, чтобы восстановить сайт, нужно просто это скачанное содержимое записать на хостинг, подключить домен — и сайт будет работать?
Сразу хорошо работать будет вряд ли, так как страницы в архиве часто сохраняются не все, то есть на сайте будет много не работающих ссылок. А ещё плохо сохраняются картинки в архиве, т.е. много картинок будет отсутствовать. Но, чаще всего, скачанный сайт довольно просто можно привести в порядок.
У меня эта прога совсем не работает. Хорошо, что есть триал и можно убедиться в этом не выкидывая деньги.
Запустил прогу, вбил адрес сайта, на получении урлов ушел в рекурсию до отвала процесса.
У меня в основном всегда работает. Иногда на некоторых сайтах «вылетает» по непонятной причине, но создаётся впечатление, что это происходит тогда, когда временно забанили в веб-архиве. Ещё плохо скачиваются сайты, когда много урлов. до 1000 — вообще нормально. А ещё нравится, что небольшие сайты скачиваются очень часто «под ключ» — со стилями, рисунками, т.п. Их сразу закидываешь на хостинг — и работают. Демоверсию, если честно, не пробовал — не додумался
. А может и к лучшему.
Я сама не стала покупать, но, когда надо скачать из веб-архива сайт, пользуюсь услугами знакомого, у которого тоже эта программа. А ещё можно с помощью сайта r-tools.org скачивать, процедура платная, но качает нормально.
Можете и моими услугами пользоваться для скачивания из веб-архива. Кстати, я ошибся в цене, которую указал в сообщении. Не 1 руб, а 0,1 руб (10 копеек) за один скачанный файл. Так что милости прошу, адрес тот же: