Копирую, копирую, копирую…

Сколько времени приходится тратить на копирование данных, перед тем как приступить к их модификации, перенос или восстановление? Много. А его можно сэкономить, зная инструменты, специально созданные для копирования и восстановления данных.

Существует достаточно обширный перечень инструментов восстановления данных.

Первый способ, - копирование данных «родными» инструментами CMS или других веб-приложений.

Например, в Drupal есть модуль «Backup and Migrate», в Joomla компонент «Akeeba Backup», в Worpress плагин «UpdraftPlus Backup» или попросту «PhpMyAdmin»!

Все из них достаточно удобны, но копировать и восстанавливать данные указанными способами не всегда получается из ограничения хостинга!

Да и времени уходит гораздо больше, нужно зайти в админ раздел, подождать выполнение скрипта и скачивание архивного файла. Некоторые пользователи иногда начинают через «PhpMyAdmin» копировать частями таблицы, так как всю сразу базу не получается экспортировать и сохранить. Поэтому эти способы второстепенны.

Второй способ, - mysqldump.

Для копирования данных есть более удобный способ использовать команду mysqldump, а для восстановления команда mysql, но если у Вас есть доступ к SHH.

Создать копию базы «drupal7» в /var/www/fromniigata/data/www/

mysqldump -uroot -p drupal7 > /var/www/fromniigata/data/www/backup-drupal7.sql

Опции

-uroot -p

Пользователь «root» пароль ****

Далее создать резервный файл в сжатом виде:

tar cvzf backup-drupal7.gz backup-drupal7.sql

Сейчас создать резервною копию сайта вместе с sql дампом:

tar cvzf backup.tar.gz * --exclude=backup-a14860_indivip.sql

Если вам нужен только дамп базы с её последующим сжатием, можно использовать следующую команду:

mysqldump -u username -h localhost -p database_name | gzip -9 > backup_db.sql.gz

(этот способ является самым быстрым и экономящим время на сегодняшний день, и выбранный мной в качестве наилучшего средства резервного копирования данных!)

Однако, если Вы попытаетесь обычным способом восстановить полученный файл, например, через «phpMyadmin», у Вас вряд ли что-то получится. К тому же открыть и прочитать этот файл так же не всегда возможно.

Для этого нужно использовать команду mysql, указав базу и файла дампа:

Восстанавливаем базу данных:

mysql -u username -p test < /var/www/fromniigata/data/www/backup-drupal7.sql

Эта команда создаст в базе test таблицы из backup-drupal7.sql

Можно оптимизировать весь процесс резервного копирования через cron:

15 2 * * * root mysqldump -u root –p PASSWORD --all-databases | gzip > /mnt/disk2/base.sql.gz

Команды для копирования файлов

Создать копию текущей директории с исключением из архива всех файлов "/pathtoexclude/*"

sudo tar cvzf backup.tar.gz * --exclude=/pathtoexclude/*

Создать копию директории /home/jquery в архив "archivefile3.zip":

zip -r archivefile3 /home/jquery

Аналог предыдущей команды:

zip -r archivefile3 .

PHP скрипты для копирования.

Ещё в качестве способа оптимизации резервного копирования можно использовать PHP:

<?php // Создание резервной копии данных // данные нужно изменить под ваши нужды $dbhost = "localshot"; $dbuser = "yourusername"; $dbpass = "yourpassword"; $dbname = "yourdb"; $sendto = "Webmaster <webmaster@yourdomain.com>"; $sendfrom = "Automated Backup <backup@yourdomain.com>"; $sendsubject = "Daily Mysql Backup"; $bodyofemail = "Here is the daily backup."; // don't need to edit below this section $backupfile = $dbname . date("Y-m-d") . '.sql'; system("mysqldump -h $dbhost -u $dbuser -p$dbpass $dbname > $backupfile"); // Mail the file include('Mail.php'); include('Mail/mime.php'); $message = new Mail_mime(); $text = "$bodyofemail"; $message->setTXTBody($text); $message->AddAttachment($backupfile); $body = $message->get(); $extraheaders = array("From"=>"$sendfrom", "Subject"=>"$sendsubject"); $headers = $message->headers($extraheaders); $mail = Mail::factory("mail"); $mail->send("$sendto", $headers, $body); // После отправки файла можно его удалить unlink($backupfile); ?>

Иногда заказчик просит переводить резервную копию на облачный сервис, для этого я использую следующий скрипт на drupal, который можно быстро приспособить под резервное копирование но только на Drupal 7 и при условии работы вместе с модулем «Backup and Migrate»:

<?php function all_linsoft_ui_manual_backup_perform($settings) { $ydl = variable_get("yandex_disk_login", 0); $ydp = variable_get("yandex_disk_password", 0); $yde = variable_get("yandex_disk_enabled", 0); $yds = variable_get("yandex_disk_secretkey", ''); var_dump($settings->key); if($yds !==md5($settings->key)) return false; // Peform the actual backup. if(!extension_loaded('openssl')) { watchdog('Yandex Disk! Error!', 'php openssl dll not found'); //drupal_set_message('Ошибка при создании файла резервной базы! Нет такого файла "'.$pathtofile.'"'); return false; } if(!extension_loaded('zip')) { watchdog('Yandex Disk! Error!', 'php zip dll not found'); //drupal_set_message('Ошибка при создании файла резервной базы! Нет такого файла "'.$pathtofile.'"'); return false; } $file = backup_migrate_perform_backup($settings); $pathtofile = $_SERVER['DOCUMENT_ROOT'].'/sites/default/files/backup_migrate/manual/'.$file->file_info['filename'].'.mysql.'.$file->type['extension']; $name = $file->file_info['filename'].'.mysql.'.$file->type['extension']; if(!is_file($pathtofile)) { watchdog('debug', 'Ошибка при создании файла резервной базы! Нет такого файла "'.$pathtofile.'"'); //drupal_set_message('Ошибка при создании файла резервной базы! Нет такого файла "'.$pathtofile.'"'); return false; } all_linsoft_include('zipclass'); all_linsoft_include('class_webdav_client'); $the_folder = $_SERVER['DOCUMENT_ROOT'].'/sites'; $zip_file_name = $_SERVER['DOCUMENT_ROOT'].'/sites/default/files/fuulsitearchive.zip'; if(is_file($zip_file_name)) { if(unlink($zip_file_name)) { watchdog('debug', 'Oldest files to Yandex disk was to delete!'); } else { watchdog('error', 'Oldest files to Yandex disk was not delete! You have not access!'); } } $za = new FlxZipArchive; $res = $za->open($zip_file_name, ZipArchive::CREATE); if($res === TRUE) { $za->addDir($the_folder, basename($the_folder), array('manual','scheduled')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/includes', basename($_SERVER['DOCUMENT_ROOT'].'/includes'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/misc', basename($_SERVER['DOCUMENT_ROOT'].'/misc'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/mlsqrpt', basename($_SERVER['DOCUMENT_ROOT'].'/mlsqrpt'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/modules', basename($_SERVER['DOCUMENT_ROOT'].'/modules'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/scripts', basename($_SERVER['DOCUMENT_ROOT'].'/scripts'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/profiles', basename($_SERVER['DOCUMENT_ROOT'].'/profiles'), array('manual')); $za->addDir($_SERVER['DOCUMENT_ROOT'].'/themes', basename($_SERVER['DOCUMENT_ROOT'].'/themes'), array('manual')); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/index.php','index.php'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/cron.php','cron.php'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/update.php','update.php'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/xmlrpc.php','xmlrpc.php'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/Sitemap.xml','sitemap.xml'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/googleac3b7a35d73c4def.html','googleac3b7a35d73c4def.html'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/yandex_79ba9c61de64ea6f.html','yandex_79ba9c61de64ea6f.html'); $za->addFile($_SERVER['DOCUMENT_ROOT'].'/.htaccess','.htaccess'); $za->addFile($pathtofile,$name); $za->close(); watchdog('debug', 'Zip arhive to Yandex disk was :created!'); } else watchdog('error', 'Zip arhive to Yandex disk was not created! Error!'); if(!is_file($zip_file_name)) { watchdog('error', 'Where file?!'); return false; } if(is_file($pathtofile)) { if(unlink($pathtofile)) { watchdog('debug', 'Backup SQL dump delete!'); } else { watchdog('error', 'Backup SQL dump not delete!'); } } //error_reporting( -1 ); //ini_set("display_errors", 1); if ( !class_exists( 'webdav_client' ) ) { require('class_webdav_client.php'); } $wdc = new webdav_client(); $wdc->set_server( 'ssl://webdav.yandex.ru' ); $wdc->set_port( 443 ); $wdc->set_user( $ydl ); $wdc->set_pass( $ydp ); // use HTTP/1.1 $wdc->set_protocol( 1 ); // enable debugging $wdc->set_debug( false ); if ( !$wdc->open() ) { watchdog('debug', 'Error: could not open server connection <br /> \r\n'); exit; } // check if server supports webdav rfc 2518 if ( !$wdc->check_webdav() ) { print 'Error: server does not support webdav or user/password may be wrong <br /> \r\n'; exit; } $http_status = $wdc->mkcol( "/linsoft" ); $http_status = $wdc->put_file( "/linsoft/" . $name, $zip_file_name ); //print 'webdav server returns ' . $http_status. "<br/ > \r\n"; watchdog('debug', 'webdav server returns ' . $http_status. '<br/ > \r\n'); $urlToThePublishedFile = $wdc->filePublish( "/linsoft/$name" ); //print 'link to the published file: ' . $urlToThePublishedFile. "<br/ > \r\n"; $fileUnpublishinStatus = $wdc->fileUnPublish( "/linsoft/$name" ); if ( $fileUnpublishinStatus ) { echo "File UnPublished correctly <br /> \r\n"; } else { echo "Some errors occured on file UnPublish <br /> \r\n"; } if ( $wdc->get_file( "/soutcast/woman/gogo/2_1.jpg", "1.jpg" ) ) { Echo "returned true <br /> \r\n"; } else { Echo "returned false <br />\r\n"; } if ( $wdc->get_file( "/soutcast/woman/gogo/2_2.jpg", "2.jpg" ) ) { Echo "returned true <br />\r\n"; } else { Echo "returned false <br />\r\n"; } if ( $wdc->get_file( "/soutcast/woman/gogo/1arhiv.rar", "1arhiv.rar" ) ) { Echo "returned true <br />\r\n"; } else { Echo "returned false <br />\r\n"; } $wdc->close(); flush(); } ?>

Этот скрипт можно приспособить под любые нужды при копировании данных на Яндекс диск. Для этого скачайте класс PHP «class_webdav_client.php» с адреса phpYandexDisk, класс FlxZipArchive общедоступен, один из его вариантов:

/** * FlxZipArchive, Extends ZipArchiv. * Add Dirs with Files and Subdirs. * * <code> * $archive = new FlxZipArchive; * // ..... * $archive->addDir( 'test/blub', 'blub' ); * </code> */ class FlxZipArchive extends ZipArchive { /** * Add a Dir with Files and Subdirs to the archive * * @param string $location Real Location * @param string $name Name in Archive * @author Nicolas Heimann * @access private **/ public function addDir($location, $name) { $this->addEmptyDir($name); $this->addDirDo($location, $name); } // EO addDir; /** * Add Files & Dirs to archive. * * @param string $location Real Location * @param string $name Name in Archive * @author Nicolas Heimann * @access private **/ private function addDirDo($location, $name) { $name .= '/'; $location .= '/'; // Read all Files in Dir $dir = opendir ($location); while ($file = readdir($dir)) { if ($file == '.' || $file == '..') continue; // Rekursiv, If dir: FlxZipArchive::addDir(), else ::File(); $do = (filetype( $location . $file) == 'dir') ? 'addDir' : 'addFile'; $this->$do($location . $file, $name . $file); } } // EO addDirDo(); }

Рассмотренные варианты наиболее удобны при копировании данных.