Cообщество пользователей SMF

Резервное копирование базы данных. Восстановление бд.
1. Для резервного копирования и восстановления базы данных, мы рассмотрим утилиту Sypex Dumper. Данная утилита универсальная и у нее нет привязки к какому-либо движку форума или cms. Также некоторым владельцам форума SMF думаю будет интересен мод основанный на Sypex Dumper
2. Резервное копирование базы данных, бэкап
а.) Скачиваем утилиту Sypex Dumper с официального сайта программы
б.) Распаковываем архив и заливаем в удобную для вас папку на хосте.
в.) Запускаем Dumper в броузере. В моем случае это будет http://localhost/sxd
г.) Первым пунктом при использовании утилиты у нас будет авторизация.

Данные для подключение к бд в нашем случае можно взять из файла Settings.php. Основное что нас интересует в данном файле:

$db_server = '****';
$db_name = '****';
$db_user = '****';
$db_passwd = '****';

Теперь рассмотрим что за что отвечает:
$db_server –сервер где располагается база данных. Обычно это localhost, но модет и отличаться.
$db_name -  имя(название) базы данных
$db_user – имя пользователя базы данных
$db_passwd – пароль пользователя базы данных
Теперь смотрим скрин как это соотнести к форме авторизации Sypex Dumper

Итак мы видим как заполняются поля авторизации нашей утилиты. Следует учесть, что во время авторизации нужно указывать так же и порт по которому будет соединяться наша утилита с базой данных. В стандарте используется порт 3306 в некоторых случаях может отличаться.
3. Интерфейс утилиты Sypex Dumper . Что нужно сделать для того чтобы выполнить резервное копирование базы данных.
После авторизации утилита позволяет производить непосредственные действия с базой данных.
Рассмотрим первый пункт программы Экспорт – Он же для нас и резервное копирование базы данных. Я думаю, что стоит обратить внимание только на несколько вещей:
а.) Сжатие- на некоторых серверах сжатие может работать не правильно, поэтому прежде чем наладить резервное копирование "на поток", сделайте пробный бэкап базы данных нажав на кнопку Выполнить. После выполнения данного задания, скачайте себе на компьютер резервную копию и попробуйте ее распаковать. Если распаковка проходит нормально, то значит у вас все работает нормально.
б.) Кодировка- это пожалуй самое главное во всем деле создания резервной копии базы данных. Если вы точно знаете кодировку базы данных можете указать ее выбрав из меню. Как и в предыдущем случае стоит проверить резервную копию базы данных после создания бэкапа. После выполнения резервной копии базы данных, скачайте на компьютер копию, распакуйте, попробуйте открыть редактором и посмотреть читаемая ли база данных. Если резервная копия базы данных не будет читаемой, то толку от такой копии практически не будет. Для начала пробуй перебрать кодировки бд, так же не стоит пренебрегать пунктом авто кодировка. В общем пересмотрите данные настройки. Читаемый бэкап залог успешного восстановления в случае потери данных. 
4. Восстановление базы данных из резервной копии(пункт меню "Импорт". На что хотелось бы обратить внимание, по возможности восстанавливайте резервную копию в новую базу данных. Большинство пользователей не владеют достаточными знаниями для работы с базой данных. Как это обычно бывает, восстанавливают из резервной копии в текущую базу данных, без создания резервной копии текущей базы данных, в результате чего часть данных может быть утерена. Далеко не всегда у пользователя есть актуальная резервная копия базы данных. Пользователь не всегда знает, за какое число восстанавливает резервную копию, как результат в отдельных случаях при восстановлении базы данных, может быть утеряна часть данных. Второй вариант развития событий, это восстановление резервной копии из нечитаемого бэкапа. Приводит это к тому, что все данные в базе невозможно прочесть. В отдельных случаях без плясок с бубном не получится вообще стандартными средствами, восстановить данные, а без помощи специалиста, так и вообще можете забыть про вашу базу данных.

Некоторые рекомендации по использованию Sypex Dumper:
1. Ограничьте доступ к папке с утилитой (Как ограничить доступ к папке)
2. Перед восстановление резервной копии всегда проверяйте читаемость бэкапа(по возможности)
3. По возможности производите восстановление бд из резервной копии в новую базу данных. В случае выполнения данной рекомендации у Вас всегда будет исходный материал бд и если произойдет неудачное восстановление или резервной копия будет тем или иным способом повреждена и вы сможете продолжить работу форума хотя бы с текущими данными пусть и в ограниченном виде.

Я бы дописал ещё пунктик.
Восстанавливать базу если бекапили Sypex Dumper, лучше используя его же. Гораздо меньше гемора будет.

Но утилита просто супер, использую несколько лет. Возможности растут и качество всегда на высоте.

угу по поводу качества самой утилиты спору нет! даже кривой дамп можно залить по нормальному если знать как лить

Цитата: Mavn от 18 августа 2010, 21:03:21
...
1. Ограничьте доступ к папке с утилитой (Как ограничить доступ к папке)
...

Как ограничить доступ к папке если это ссылка, то отсутствует линк.

файлом .htaccess например можно ограничить доступ. Как по ip, так и по паролю

Цитата: Mavn от 17 сентября 2010, 06:11:39
файлом .htaccess например можно ограничить доступ. Как по ip, так и по паролю

Это понятно. Я говорю о том, что в скобках фраза выглядит как название темы, в которой описывается, как ограничить доступ. Соответственно, должна быть ссылка. Если это не так, то замечание снимается.

в  скобках и не активно ибо документацию еще не опубликовал

И сейчас Sypex Dumper пользуются или возможностями форума сейчас лучше пользоваться? Ну, теми, которые Админ/Обслуживание форума/База данных/

ЦитироватьРезервные копии базы данных

Скачать резервную копию базы данных на случай аварийной ситуации.

Сохранить структуру таблиц.
Сохранить все данные из таблиц (только самое важное).
Сжать файл gzip.

1. "возможностями форума" с большой бд не воспользуешься.
2. если есть утилита которая делает валидную копию и при этом же еще и может ее восстановить в случае необходимости то почему бы не использовать данную утилиту.
3. Есть мод который встраивает Sypex Dumper в интерфейс форума.

Mavn, спасибо за ответ, а в резервное копирование входит сохранение файлов, например, галереи и вложенных файлов?

ну если вы не заметили то тема называется резервное копирование базы данных а не всего и вся
если есть доступ по ssh то архивируйте папку с данными и скидывайте на комп если нет то скидывайте как есть на комп, или через панель управления если есть возможность делаете резервную копию. Теоретически можно конечно и php скриптом делать резервную копию файлов..

Можно к Вам обратиться для такого копирования, как только файлов накопится, а то я сам напортачу? Ну, за деньги конечно.

Цитата: Mavn от 17 марта 2011, 17:04:16
ну если вы не заметили то тема называется резервное копирование базы данных а не всего и вся
если есть доступ по ssh то архивируйте папку с данными и скидывайте на комп если нет то скидывайте как есть на комп, или через панель управления если есть возможность делаете резервную копию. Теоретически можно конечно и php скриптом делать резервную копию файлов..

я через Handy Backup тяну...
программа позволяет по расписанию подключатся к фтп и копировать на жесткий диск содержимое

Цитата: gorelov от 17 марта 2011, 17:09:16
Можно к Вам обратиться для такого копирования, как только файлов накопится, а то я сам напортачу? Ну, за деньги конечно.

обратится можно, поможем чем сможем

Как автоматизировать резервное копирование? Я знаю есть возможность запуска SypexDumper из командной строки, из crona. Это в теории, на практике выдаёт ошибку, обращение к данной странице возможно только администратора форума? Но как вообще запустить его с правами администратора из командной строки непонятно.

Обычно на нормальном хостинге уже включено резервное копирование по умолчанию.

Цитата: FreeS от 17 сентября 2011, 20:03:04
Как автоматизировать резервное копирование? Я знаю есть возможность запуска SypexDumper из командной строки, из crona. Это в теории, на практике выдаёт ошибку, обращение к данной странице возможно только администратора форума? Но как вообще запустить его с правами администратора из командной строки непонятно.

http://sypex.net/ru/products/dumper/docs/
используйте для этой цели только чистый SD, мой мод для этой цели непригоден

Спасибо за тему.

А можно узнать подробнее про

Цитата: Mavn от 17 сентября 2010, 06:11:39
файлом .htaccess например можно ограничить доступ. Как по ip, так и по паролю

?
Если возможно, то направьте по ссылке в тему, если такая есть.
Поиском не нашёл, возможно делал неправильный запрос.
Спасибо за помощь.

Если здесь не можете найти, ищите в сети — информации море.

Сейчас новый вышел, 2.0.9 вроде.

Цитата: karavan от 01 февраля 2012, 09:20:02
Сейчас новый вышел, 2.0.9 вроде.

а что изменилось кроме версии в рамках данной документации ??

Исправили несколько косяков...

Улушена безопасность.
Исправлена работа по https.
Улучшена обработка "чужих" дампов.
Небольшие мелкие правки.

Я остался на старой версии 2.0.8 (влом менять, все настроено на автобэкап).

в рамках данной документации ничего не изменилось )
тем более что я дал ссылку от куда скачать данную утилиту

Цитата: Mavn от 18 августа 2010, 21:03:21Некоторые рекомендации по использованию Sypex Dumper:
1. Ограничьте доступ к папке с утилитой (Как ограничить доступ к папке)

А как ограничить? Где написано про это? Спасибо.

Самый простой способ .htaccess
Order deny,allow
Deny from all
Allow from 1.2.3.4
где 1.2.3.4 твой ip удобство в том что по фтп ты можешь каждый раз спокойно менять данный файл подставляя свой ip если он динамический

или же сделать авторизацию при помощи все того же .htaccess
AuthGroupFile /dev/null
AuthName "Nekotoroe privetsvie"
AuthType Basic
AuthUserFile /home/.htpasswd
require valid-user
.htpasswd - в данном файле содержится запись пользователь:зашифрованный пароль

Цитата: Mavn от 01 февраля 2012, 20:04:09
а что изменилось кроме версии в рамках данной документации ??

Воспользовался только что...
Прелесть!
Указываешь пользователя БД и пароль, остальное прога делает сама, предложив выбрать нужный вариант префикса или копировать БД целиком. Затем скачиваешь бэкап себе и всё!
Сжатием не пользовался.

Очередная благодарность Mavn за подробные инструкции и знание мест, где лежат ништяки...

У меня данный скрипт отказывается работать! На локале работает. Если перейти по адресу http://guitardriver.ru/sxd/ то просто пусто. Если по http://guitardriver.ru/sxd/index.php то можно залогиниться и опять пусто! Что делать?

как минимум для начала посмотреть логи апача, скорее всего там найдете ответ почему так происходит

На некоторых хостингах сторонние программы для работы с БД запрещены, они разрешают делать бекапы только со своей панели управления аккаунтом. Возможно это и ваш случай, спросите техподдержку хостера.

Цитата: plintus от 30 сентября 2012, 03:11:28
У меня данный скрипт отказывается работать! На локале работает. Если перейти по адресу http://guitardriver.ru/sxd/ то просто пусто. Если по http://guitardriver.ru/sxd/index.php то можно залогиниться и опять пусто! Что делать?

После залогинивания опять перейти на http://guitardriver.ru/sxd/index.php или sxd добавить в список исключений в pretty urls.

Всё равно как-то косячно переходит.

Mysqldump -u dbusername -p databasename > dump.sql
MySQL -u dbusername -p databasename < dump.sql

осталось поиметь доступ к ssh

Цитата: Mr. Anviss от 30 сентября 2012, 19:06:34
Mysqldump -u dbusername -p databasename > dump.sql
MySQL -u dbusername -p databasename < dump.sql

И это, кстати, не гарантирует отсутствие проблем с теми же кодировками, например.

Если есть ssh то не проще ли взять и перенести /var/lib/mysql/databasename/ на новый хост как есть, а если нет ssh то пусть хостер отдаст?

я не стал бы переносить бинарники
1. версии мускула могут отличаться и могут возникнуть проблемы
хостер отдаст ровно то что есть в бд т.е. кракозябли а вот приводить в порядок нужно руками. как минимум попровать снять дамп сайпексом в разных кодировках, с коррекцией кодировки
ясный перец что по отдельности и то и другое пользовать

Цитата: Mavn от 18 августа 2010, 21:03:211. Ограничьте доступ к папке с утилитой (Как ограничить доступ к папке)

Если я доступ к папке закрою паролем через .htaccess, то при запуске автоматического бэкапа через cron, он сможет достучаться до скрипта или же .htaccess будет блокировать это дело?

Сам себе отвечу: всё работает нормально, из браузера запрашивает пароль, бэкапы через крон делаются.

вот эта конструкция

RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /([^/]+/)*index\.php\ HTTP/
RewriteRule ^(([^/]+/)*)index\.php$ http://сайт/$1 [R=301,L]


предназначенная для обрезания индексов, ясное дело не дает открываться во фрейме и index.php, который в папке SypexDumper. как бы его добавить в исключения?

Если база данных большая и PHP упирается в лимиты тогда лучшим решением будет
бесплатная программа для работы с базами данных dbForge Studio for MySQL.
Она позволяет безопасно подключаться к базе данных по SSH.

если есть ssh то лучше дамп делать средствами mysql  а не сторонних программ

На сайте Sypex Dumper новогодняя акция до 11 января 2015, можно купить бессрочную лицензию на версию PRO 2.0.11 со скидкой до 70 % (мне дало 50 %, то есть 5 wmz купил вчера). https://sypex.net/ru/news/14/12/20/120

Добрый день

Если нужно восстановить частичные данные из бэкапа, как это сделать? Например в текущей базе потерялись некоторые данные, но они есть в бэкапе, как их оттуда достать и импортировать в текущую базу?

Если данные находятся в одной таблице, то я бы попробовал сделать импорт-экспорт этой таблицы в текущую БД.

Цитата: system1024 от 14 января 2015, 09:35:58
Добрый день
Если нужно восстановить частичные данные из бэкапа, как это сделать? Например в текущей базе потерялись некоторые данные, но они есть в бэкапе, как их оттуда достать и импортировать в текущую базу?

Например развернуть бекап в другом месте и перенести вручную нужные данные? В каком виде хранится бекап? Какие данные нужно восстановить?

Цитата: Mavn от 14 января 2014, 18:11:31если есть ssh

SSH доступ есть, дамп только mysql .  Потребности в  Sypex Dumper  пока нет,  устраивает.
ssh - шаблон "Минимал" > 60 Mb.  есть  bash, coreutils (sed, grep, awk, find и т.д), mc, архиваторы, mysql-client, mysqldump.  

Спасибо Mavn! полезная статья.

SMF 2.1.3
Ранее пользовался встроенной утилитой. Сейчас установил форум с нуля и захотел развернуть резервную копию. С удивлением обнаружил, что встроенная утилита отсутствует. Так и должно быть?

Цитата: Strangeman от 11 февраля 2023, 16:13:27SMF 2.1.3
Ранее пользовался встроенной утилитой. Сейчас установил форум с нуля и захотел развернуть резервную копию. С удивлением обнаружил, что встроенная утилита отсутствует. Так и должно быть?

Функция выгрузки базы убрана в SMF 2.1