Как сделать копию любого сайта
Как скопировать чужой сайт и загрузить на хостинг?
Бывает так, что встречается хороший веб-ресурс с необычным дизайном и хочется понять, как в нём сделаны те или иные элементы, какие используются теги и стили. Особенно удобно иметь файлы нужного сайта на жёстком диске своего ПК или в хранилище dropbox. Просмотреть его код можно в любое время, вне зависимости от того есть интернет или нет.
На самом деле любой сайт — всего лишь код, который интерпретируется твоим браузером и приходит по запросу от хоста. Увы, но не каждый лендинг получится скопировать. Тем не менее, 70-80% из общего числа можно стянуть, что не может не радовать.
Предупреждаю сразу – воровать, таким образом, чужие проекты нельзя! Но для того чтобы сделать резервную копию своего сайта или посмотреть на то как свёрстан тот или другой элемент понравившегося вам ресурса, такой подход может быть использован.
Установка и настройка софта для копирования
Работать будем с бесплатной программой Wget, которую можно скачать по ссылке: https://sourceforge.net/projects/tumagcc/files/
Переходишь на сайт и скачиваешь архив с программой.
Подробно об этой программе написано в Википедии и сейчас нет необходимости расписывать все нюансы её работы. Далее создаешь папку по следующему пути: C:\Program Files\Wget
Извлекаешь из архива файлы в папку, созданную в предыдущем пункте. После в проводнике жмешь правой кнопкой мыши по «Этот компьютер» → «Свойства» → «Дополнительные параметры системы» → «Переменные среды»:
В «Системных переменных» идешь в → «Path»:
Там нажимаешь «Создать» и указываешь путь к папке с Wget. Во всех окнах жмешь «ОК». Готово, установка выполнена.
Проверим, все ли сделано так, как необходимо. Для этого сочетанием клавиш win+R вызовем окошко «Выполнить», введем в него «cmd» (без кавычек), откроется командная строка. В ней пишем «wget» (так же, без кавычек), и, если видишь такое же сообщение как на скрине ниже, то инсталляция прошла успешно:
Копирование сайта на компьютер
Допустим, ты нашел сайт, копию которого хочешь получить. Сперва обрати внимание на адрес. Если там присутствуют символы из кирилицы (www.сауны.рф), то необходимо будет их конвертировать в корректный для работы Wget вид с помощью http://wwhois.ru/punycode.php :
Жмем «Enter», и запускается процесс копирования. После его завершения будет выведено соответствующее сообщение:
Исходники сайта хранятся в папке по пути: C:\Users\имя_пользователя\название_домена
В нашем случае – это C:\Users\имя_пользователя\kinder-big.ru
Регистрация на хостинге и залив сайта
Проходим простую регистрацию, заполняем все поля которые хостер просит и вводим свой номер телефона, на него придет СМС с кодом подтверждения регистрации.
После этого, введешь код из сообщения, тебя перекинет на страницу, где указаны данные для авторизации. Письмо с ними же придет на почту.
Нажимаем кнопку «Начать работу» и попадаем в панель управления нашим хостингом.
Следующим шагом будет регистрация домена. Придумываем название доменного имени, вводим все свои паспортные данные и регистрируем на том же хостинге. Еще как альтернативу можно использовать другой хостинг для домена или напрямую у регистраторов.
Перенос файлов на хостинг
Дальше стандартная процедура установки, можешь не вникать в подробности и просто жать «ОК». Далее нужно будет подключиться к хосту.
В поле «Хост:» вводишь адрес сервера из технической информации. В «Имя пользователя:» и «Пароль:» – данные, которые приходили на почту при регистрации:
После жмешь на «Быстрое соединение», клиент выполнит подключение и ты получишь возможность загружать файлы без предварительной упаковки в архив. Для этого в левой части окна переходишь в папку с исходниками, а в левой — в папку с именем зарегистрированного домена. Перемещаешь все исходники из левой части в правую, ждешь, пока выполнится загрузка и можешь проверять результат:
Какие есть ограничения у копий
Хочу внести ясность, что скопированный проект, даже если он точь-в-точь будет выглядеть как оригинал, это не означает что будут работать все функции. Не будет работать функционал, который исполняется на сервере, т.е. различные калькуляторы, опросы, подбор по параметрам — работать не будут 99%. Если функционал реализован с помощью Javascript, то будет работать.
Подборка видеоуроков из интернетов
КАК СКОПИРОВАТЬ САЙТ НА ВОРДПРЕССЕ
Онлайн сервисы для копирования простых сайтов
В сети существуют сервисы, которые копируют лендинг, чистят и изменяют его. Нужно указать целевой сайт, а сервис его скачает, очистит скопированную страницу от лишнего кода и чужих ссылок. Клиент получит новый одностраничник в виде готового архива для загрузки на хостинг.
Примеры таких сервисов:
copysta.ru — вы указываете адрес «донора» и сервис полностью скачивает лендинг, очищает его от лишнего кода, меняются контакты, формы заявок перестраиваются на почту заказчика, устанавливается админка для управления лендингом на хостинге заказчика. Стоимость услуг: 1 500-3 000 рублей. В самый дорогой тариф входит редактирование контента, стилей, замена изображений с целью сделать новый лендинг уникальным;
copyland.pro – предлагает сделать копию лендинга любой сложности с очисткой от старых контактов, ссылок, счетчиков веб статистики и перестройку реквизитов, форм и счетчиков для заказчика. Стоимость услуг от 500 рублей; xdan.ru/copysite/ позволяет сделать локальную копию сайта. При этом можно очистить HTML от счетчиков, заменить ссылки или домен в ссылках, заменять указанные слова, всего 11 настроек. Минимальная подписка — 75 рублей на 24 часа.
Это лишь примеры сервисов. Таких подобных можно найти сотни если поискать.
Как скачать сайт целиком — обзор способов и средств
В наше время, когда интернет доступен практически в любой момент, иногда возникает необходимость скачать сайт целиком. Зачем это нужно? Причины могут быть разные: и желание сохранить важную информацию на будущее, и необходимость получить доступ к нужным данным при отсутствии доступа в сеть, и возможность ознакомиться с тем, как сверстаны страницы. Могут быть и другие резоны. Важно знать, как выполнить эту задачу, и далее мы покажем несколько способов как сделать копию сайта для последующего его использования в оффлайн режиме.
Способ 1. Постраничное сохранение
Самый простой способ о котором все знают, даже если ни разу не пользовались. Эта возможность есть в любом браузере. Достаточно лишь нажать комбинацию клавиш «Ctrl»+«S», после чего в открывшемся окне отредактировать название сохраняемой страницы и указать папку, в которую ее следует поместить.
Хорошо, если сайт маленький, или состоит всего из одной страницы, а если нет? Придется выполнять это действие для каждый из них. В общем, работа для усидчивых и целеустремленных, не знающих об одном из основных двигателей прогресса.
Способ 2. Использование онлайн-сервисов
Вот оно, самое простое решение. Сейчас много есть полезных онлайн-ресурсов для перекодирования файлов, редактирования аудиофайлов и т. п. Среди достоинств этого метода – кроссплатформенность, отсутствие необходимости захламлять свою операционную систему утилитами, которые, возможно, понадобятся лишь однажды.
Всего делов-то, зайти на такой ресурс, ввести в строку адрес интересующего сайта, нажать кнопку запуска процесса скачивания и подставить «емкость», в которую польется интересующая информация…
В теории так, но, к сожалению, подобных онлайн-ресурсов, позволяющих скачать сайт целиком, раз, два, три и… И, пожалуй, все, если говорить о бесплатной возможности сохранить копию сайта на компьютер. А за все остальное придется платить, или мириться с урезанным функционалом.
Но давайте рассмотрим примеры поближе.
Site2Zip.com
Перестал работать в начале 2019 года.
Едва ли не единственный бесплатный и русскоязычный ресурс. Интерфейс предельно прост. В строке вводим адрес интересующего сайта, вводим капчу, нажимаем кнопку «Скачать» и ждем…
Webparse.ru
Условно-бесплатный ресурс, позволяющий один раз воспользоваться его услугами бесплатно, после чего за скачивание сайтов придется платить.
Другие ресурсы
Среди других способов можно отметить ресурс Web2PDFConvert.com, создающий PDF-файл со страницами скачиваемого сайта. Естественно, часть функционала сайта будет утеряна. Если это допустимо, то воспользоваться данным ресурсом можно.
Способ 3. Специализированные программы
Использование утилит для скачивания файлов — пожалуй, наиболее функциональный вариант, позволяющий добиться своей цели. Придется смириться с тем, что в системе появятся дополнительные программы, одна часть из которых бесплатна, а другая – более меркантильна и требует за выполнение тех же функций поощрение. Причем, бесплатные программы (иногда их еще называют оффлайн-браузерами) по возможностям практически не уступают платным аналогам.
В отличие от онлайн-сервисов, подобная программа работает гораздо быстрее, хотя придется искать подходящую под вашу ОС версию этого ПО. Некоторые программы можно найти не только для ОС Windows, но и для других.
Рассмотрим несколько примеров таких программ.
WinHTTrack WebSite Copier
Одна из самых популярных программ, предназначенных для создания оффлайн-копий сайтов. Справедливости ради надо сказать, что бесплатных аналогов практически нет.
Для того, чтобы пользоваться программой, надо скачать с сайта разработчика подходящую версию, проинсталлировать ее в свою систему и запустить. В первом окне будет предложено выбрать язык интерфейса. Среди всех вариантов есть и русский.
Интерфейс программы прост и запутаться в нем не получится. В первом окне надо указать имя и категорию проекта, а также указать место, где будет храниться скачиваемый сайт.
Теперь папку с проектом можно скачивать на любой носитель и просматривать там, где это удобно.
Cyotek WebCopy
Англоязычная программа с солидно выглядящим интерфейсом и большими возможностями по настройке процедуры скачивания сайта. Достаточно только вести адрес интересующего ресурса, указать папку, в которую сохранить скачанные данные и нажать кнопку «Copy Website».
Из недостатков можно отметить только отсутствие русификации, а также то, что Cyotek WebCopy работает только на ОС Windows, начиная с версии Vista. Версий под другие ОС нет.
Teleport Pro
Одна из старейших программ, к сожалению, платная. Имеется тестовый период. После установки и запуска появится главное окно, где необходимо указать режим скачивания сайта. Это может быть полная копия, можно сохранить только определенный тип файлов и т. п.
Offline Explorer
Еще одна платная, но весьма функциональная программа. Есть русифицированная версия. Триальная версия работает 30 дней, при этом есть ограничение на количество скачиваемых файлов – 2000. Программа существует разновидностях Standard, Pro и Enterprise. Самая дешевая версия стоит 59.95$, а самая дорогая – 599.95$.
Как и в других программах, работа начинается с того, что необходимо создать новый проект и указать адрес интересующего сайта. Доступно большое количеств настроек, при помощи которых можно отфильтровать ненужную информацию, задать глубину просмотра сайта и т. п.
Webcopier
Платная программа с 15-дневным триальным периодом. Существует в версиях для Windows и Mac OS. Алгоритм работы не отличается оригинальностью, что, впрочем, является плюсом. Для скачивания сайта надо создать новый проект, ввести URL.
Заключение
Возможностей создать локальную коллекцию нужных сайтов для их просмотра достаточно. Есть и онлайн-ресурсы, есть и специализированное ПО. Каждый из вариантов имеет свои достоинства и недостатки. К сожалению, большинство программ платные, и готовы ли вы раскошелиться за более широкий функционал или достаточно того, что умеют бесплатные утилиты – решать каждому самостоятельно.
Прежде чем отдавать предпочтение тому или иному решению, следует попробовать их все, благо даже платные программы имеют тестовый период, пусть и с некоторыми ограничениями. Это позволит оценить возможности этого ПО, понять, необходим ли вам весь этот функционал, насколько корректно производится скачивание сайтов.
Всё пропало! Или нет? Часть I. Как сделать резервную копию сайта
Все платные хостинги автоматически делают резервное копирование файлов, которые содержат частичную или полную информацию о сайте. Это важно: если что-то случится с сайтом — всё можно будет вернуть. Да, автоматические бэкапы помогают, но лучше уметь делать это самостоятельно, чтобы не зависеть от обстоятельств. Сейчас мы вам всё расскажем.
Что такое бэкап сайта и зачем он нужен
Бэкап (от англ. backup — «резервная копия») — это резервная копия данных, которая содержит всю информацию о сайте от оформления до текстов и хранится на компьютере, сервере или в облачном хранилище. Эти данные нужны на случай, если что-то случится с основной версией.
В RU-CENTER мы делаем резервное копирование ежедневно и храним бэкапы в течение 7 дней, после чего они удаляются. Резервное копирование электронных писем не делаем, но вы можете настроить его в самом почтовом сервисе или перенаправлять письма на другую почту.
Если на сайте планируются технические работы, смена шаблона, сервера или хостинга — для перестраховки лучше самостоятельно сделать копию сайта и сохранить её на компьютере. Она пригодится, если захотите протестировать, например, работу сайта на новом хостинге.
Восстановление бэкапа поможет, если ваш сайт атаковали вирусы: вернувшись к чистой резервной копии, вы избавитесь от вредителей. Это также выручит, если вы захотите отменить изменения или случайно что-то удалите.
Словарь терминов
Составили для вас список терминов, которые будут встречаться в статье.
FTP (File Transfer Protocol) — это протокол, который используется для передачи файлов.
Доступ по FTP — это один из возможных способов доступа к файлам на сервере. Обычно используется для обновления информации на сайтах при помощи специальных FTP-клиентов, а также для доступа к какой-либо удалённой папке сервера, чтобы загружать и выгружать нужные вам файлы.
FTP-сервер — это любой сервер, который поддерживает FTP.
FTP-клиент — это программа для простого доступа к удалённому FTP-серверу. Может работать в режиме текстовой консоли, пересылая команды пользователя и файлы. Или же отображать файлы на удалённом сервере, как если бы они были на вашем компьютере. А может выполнять и оба сценария одновременно.
Панель управления хостингом — это программа с графическим интерфейсом, с помощью которой можно управлять сервером через интернет в визуальном режиме. Проще говоря, через неё вы получаете доступ к сайту.
SSH (Secure SHell) — это сетевой протокол, чтобы соединяться с удалённым сервером, выполнять на нём команды и загружать файлы. Ключевая особенность — шифрование передаваемой информации.
MySQL — система управления базами данных, которая работает с большой скоростью и устойчивостью и которую легко использовать.
Что важно учесть при резервном копировании
Во время копирования сайт может работать немного медленнее — не стоит заниматься этим в пик посещаемости.
По FTP чаще всего происходит заражение сайта — работайте в FTP-клиенте на защищённом от вирусов компьютере.
Подготовьте место для бэкапа файлов и дампа базы данных сайта — на компьютере, удалённом FTP-cервере или облачном хранилище (Dropbox, Google Drive, Облако Mail.ru и другие). Весить они будут почти столько же, сколько сам сайт (чуть меньше, но всё же).
Как сделать резервное копирование
Резервное копирование делается по-своему для файлов сайта и базы данных (дамп базы данных). В обоих случаях это можно сделать несколькими способами.
Резервное копирование файлов сайта
Можно сделать через панель управления хостингом, FTP-клиент FileZilla и SSH-доступ.
Через панель управления хостингом
Панель обычно идёт вместе с хостингом, отдельно её оплачивать не нужно. Во всех панелях управления есть инструмент для резервного копирования. Все примеры в этой статье — на панели управления виртуальным хостингом RU-CENTER.
Шаг 1. В панели управления хостингом зайдите в раздел «Резервные копии». Вы автоматически окажетесь во вкладке «Файлы» — она нам и нужна. Выберите подходящий день на календаре (1), в который делались резервные копии, и нажмите на название сайта (2).
Шаг 2. Нажмите на «Восстановить полностью», а в открывшемся окне — «Восстановить с сохранением». Копия файлов будет сохранена в каталоге /home/login/tmp/DATE, где DATE — дата и время резервного копирования, например, 202010210135.
Шаг 3. Чтобы скачать копию файлов сайта, зайдите в раздел «Файловый менеджер» на панели. Откройте папку tmp.
Шаг 4. Зайдите в папку от нужной даты (в примере — 202010210135). Поставьте галочку рядом с папкой с названием вашего сайта (скорее всего, она там единственная), нажмите на «Архиватор» и в появившемся меню выберите «Добавить в архив».
Шаг 5. В открывшемся окне введите название архива, например, «Бэкап_20201021». Нажмите на кнопку «Архивировать».
Шаг 6. Обновите страницу, и в списке появится архив с бэкапом в формате rar. Нажмите на него, чтобы скачать, — или поставьте галочку рядом с файлом и в появившемся меню нажмите на «Скачать».
Больше информации о работе с файловым менеджером в этой инструкции.
Через FTP-клиент FileZilla
Логин, пароль и адрес сервера для доступа по FTP найдёте в письме хостинг-провайдера, а также в панели управления. Зайдите в раздел «FTP и SSH», вы автоматически окажетесь во вкладке FTP.
Нажмите на FTP-пользователя, откроется страница с данными. Чтобы узнать пароль, нажмите на кнопку «Сбросить пароль» — и увидите его во всплывающем окне. Также вы можете получить его на почту, поставив галочку рядом с «Выслать пароль на почту» и нажав на ту же кнопку.
Шаг 1. Установите FileZilla. Скачайте программу на официальном сайте, нажав на кнопку Download FileZilla Client. Стандартной версии будет достаточно.
Шаг 2. Авторизуйтесь. Введите данные для доступа к сайту в верхней панели: хост (адрес сервера), имя пользователя и пароль. В поле «Порт» впишите «21» — это стандартный порт FTP.
Что делать, если при авторизации возникает ошибка «Невозможно подключиться к серверу»
1. Нажмите на кнопку в верхнем левом углу (1) для запуска «Менеджера сайтов». В разделе «Общие»:
2. Введите логин и пароль для доступа к сайту и нажмите «Ок». В открывшемся окне нажмите также «Ок».
После авторизации окно программы FileZilla станет выглядеть так:
Шаг 3. Создайте папку для бэкапа на своём компьютере. Назовите её так, чтобы вы смогли её потом опознать, например «Бэкап_Название сайта_Дата бэкапа». Откройте папку в левой части проводника FileZilla, выбрав в открывающемся меню или введя вручную (место расположения папки можно посмотреть в свойствах).
Шаг 4. Сделайте бэкап. Выберите файлы и папки сайта в правой части окна, кликните правой кнопкой мыши и нажмите «Скачать» — или перетяните их в левую часть проводника (там где созданная вами папка на компьютере). Программа начнёт копировать файлы — это займёт некоторое время.
Через SSH-доступ
Данные для подключения к серверу по SSH вы найдёте в разделе «FTP и SSH», вкладка SSH панели управления или в письме от хостинг-провайдера. Чтобы узнать пароль, нажмите на кнопку «Сбросить пароль» — и увидите его во всплывающем окне. Также вы можете получить его на почту, поставив галочку рядом с «Выслать пароль на почту» и нажав на ту же кнопку.
Это вариант для продвинутых пользователей или администраторов, которые знают, как работать с командной строкой. В большинстве случаев для бэкапа файлов сайта достаточно панели управления или FTP-клиента — их мы рассмотрели выше. А если хотите узнать больше о работе с хостингом по SSH — прочтите нашу инструкцию.
Резервное копирование базы данных
Через панель управления хостингом
Шаг 1. Зайдите в раздел «Резервные копии», вкладка «Базы данных». Выберите нужный вам день на календаре (1), в который делались резервные копии, и нажмите на «Резервная копия от (время)» (2).
Шаг 2. Нажмите на «Выберите операцию», далее «Сохранить в виде файла». Дамп базы данных сохранится в папке tmp и станет доступен для скачивания.
Шаг 3. Чтобы скачать дамп базы данных, зайдите в раздел «Файловый менеджер» на панели. Откройте папку tmp.
Шаг 4. Зайдите в папку от нужной даты и выберите из списка дамп базы данных login_db.sql. Нажмите на него, чтобы скачать, — или поставьте галочку рядом с файлом и в появившемся меню нажмите на «Скачать».
Через phpMyAdmin
Логин и адрес сервера для доступа к MySQL найдёте в письме от хостинг-провайдера, а также в панели управления хостингом в разделе «Базы данных». Перейдите во вкладку «Пользователи» и нажмите на имя пользователя.
Чтобы получить пароль, нажмите на кнопку «Сбросить пароль» — и увидите его во всплывающем окне. Также вы можете получить его на почту, поставив галочку рядом с «Выслать пароль на почту» и нажав на ту же кнопку. Если что, вот мини-инструкция для подключения к серверу MySQL.
Шаг 1. Откройте phpMyAdmin. Для этого зайдите в панель управления хостингом в раздел «Базы данных» и нажмите на PHPMyAdmin. В результате откроется окно авторизации.
Шаг 2. Авторизуйтесь. Окно станет выглядеть так:
Шаг 3. Слева на странице выберите нужную базу данных (1) и нажмите на вкладку «Экспорт» (2). Окно станет выглядеть так:
Через SSH-доступ
Данные для подключения к серверу по SSH вы найдёте в разделе «FTP и SSH», вкладка SSH панели управления или в письме от хостинг-провайдера. Чтобы узнать пароль, нажмите на кнопку «Сбросить пароль» — и увидите его во всплывающем окне. Также вы можете получить его на почту, поставив галочку рядом с «Выслать пароль на почту» и нажав на ту же кнопку.