Я работаю фрилансером , зачастую моей задачей является сделать копию сайта,причем конечной целью заказчика является установка этого сайта на свой сервер.
Эта статья написано для обычного пользователя и простым языком,прошу профи не судить строго за терминологию..
Наверное, Вы знаете известные отличные парсеры,такие как:
Команда wget, datacol, A-Parser и другие ....
Но иногда бывает сайт защищён,для таких случаев я недавно стал использовать
Причем этот движок выискивает пути для парсинга под личиной дружественного агента и частями качает нужную структуру, а в конечном итоге ещё и сохраняет скачанный сайт по Вашему желанию даже в готовый шаблон,переадресовав нужные ссылки в каждом файле и в коде сайта.