Пропустить определенные таблицы с mysqldump
есть ли способ ограничить определенные таблицы из команды mysqldump?
например, я бы использовал следующий синтаксис для дампа только table1 и table2:
mysqldump -u username -p database table1 table2 > database.sql
но есть ли аналогичный способ сбросить все таблицы за исключением table1 и table2? Я ничего не нашел в документации mysqldump, так что brute-force (указав все имена таблиц) - единственный способ пойти?
7 ответов
можно использовать --ignore-table. Так что вы могли бы сделать
mysqldump -u USERNAME -pPASSWORD --ignore-table=database.table1 > database.sql
нет пробелов после -p
(это не опечатка).
Если вы хотите игнорировать несколько таблиц, вы можете использовать простой скрипт вроде этого
#!/bin/bash
PASSWORD=XXXXXX
HOST=XXXXXX
USER=XXXXXX
DATABASE=databasename
DB_FILE=dump.sql
EXCLUDED_TABLES=(
table1
table2
table3
table4
tableN
)
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done
echo "Dump structure"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE} > ${DB_FILE}
echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
основываясь на ответе от @Brian-Fisher и отвечая на комментарии некоторых людей на этом посту, у меня есть куча огромных (и ненужных) таблиц в моей базе данных, поэтому я хотел пропустить их содержимое при копировании, но сохранить структуру:
mysqldump -h <host> -u <username> -p <schema> --no-data > db-structure.sql
mysqldump -h <host> -u <username> -p <schema> --no-create-info --ignore-table=schema.table1 --ignore-table=schema.table2 > db-data.sql
результирующие два файла структурно здоровы, но сброшенные данные теперь ~500MB, а не 9GB, намного лучше для меня. Теперь я могу импортировать эти файлы в другую базу данных для тестирования, не беспокоясь о манипулировании 9 Гб данных или исчерпании дискового пространства.
для нескольких баз данных:
mysqldump -u user -p --ignore-table=db1.tbl1 --ignore-table=db2.tbl1 --databases db1 db2 ..
еще один пример игнорирования нескольких таблиц
/usr/bin/mysqldump -uUSER -pPASS --ignore-table={db_test.test1,db_test.test3} db_test> db_test.sql
используя --ignore-table
и создать массив из таблицы, с syntaxs как database.table
--ignore-table={db_test.table1,db_test.table3,db_test.table4}
ссылки с информацией, которая поможет вам
сжатие вывода mysqldump
Примечание: протестировано в ubuntu server с mysql Ver 14.14 Distrib 5.5.55
импорт базы данных
mysql -uUSER -pPASS db_test < db_test.sql
исключить некоторую таблицу сведения, но не в таблице структура. Вот как я это делаю:
дамп структура базы данных всех таблиц, без каких-либо данных:
mysqldump -u user -p --no-data database > database_structure.sql
затем сбросьте базу данных с данными, кроме исключенных таблиц, и не сбрасывайте структуру:
mysqldump -u user -p --no-create-info \
--ignore-table=database.table1 \
--ignore-table=database.table2 database > database_data.sql
затем загрузить его в новую базу данных:
mysql -u user -p newdatabase < database_structure.sql
mysql -u user -p newdatabase < database_data.sql
дамп всех баз данных со всеми таблицами, но пропустить определенные таблицы
на github:https://github.com/rubo77/mysql-backup.sh/blob/master/mysql-backup.sh
#!/bin/bash
# mysql-backup.sh
if [ -z "" ] ; then
echo
echo "ERROR: root password Parameter missing."
exit
fi
DB_host=localhost
MYSQL_USER=root
MYSQL_PASS=
MYSQL_CONN="-u${MYSQL_USER} -p${MYSQL_PASS}"
#MYSQL_CONN=""
BACKUP_DIR=/backup/mysql/
mkdir $BACKUP_DIR -p
MYSQLPATH=/var/lib/mysql/
IGNORE="database1.table1, database1.table2, database2.table1,"
# strpos []
# strpos haystack needle [optional offset of an input string]
strpos()
{
local str=
local offset=
if [ -n "${offset}" ]; then
str=`substr "${str}" ${offset}`
else
offset=0
fi
str=${str/*/}
if [ "${#str}" -eq "${#1}" ]; then
return 0
fi
echo $((${#str}+${offset}))
}
cd $MYSQLPATH
for i in */; do
if [ $i != 'performance_schema/' ] ; then
DB=`basename "$i"`
#echo "backup $DB->$BACKUP_DIR$DB.sql.lzo"
mysqlcheck "$DB" $MYSQL_CONN --silent --auto-repair >/tmp/tmp_grep_mysql-backup
grep -E -B1 "note|warning|support|auto_increment|required|locks" /tmp/tmp_grep_mysql-backup>/tmp/tmp_grep_mysql-backup_not
grep -v "$(cat /tmp/tmp_grep_mysql-backup_not)" /tmp/tmp_grep_mysql-backup
tbl_count=0
for t in $(mysql -NBA -h $DB_host $MYSQL_CONN -D $DB -e 'show tables')
do
found=$(strpos "$IGNORE" "$DB"."$t,")
if [ "$found" == "" ] ; then
echo "DUMPING TABLE: $DB.$t"
mysqldump -h $DB_host $MYSQL_CONN $DB $t --events --skip-lock-tables | lzop -3 -f -o $BACKUP_DIR/$DB.$t.sql.lzo
tbl_count=$(( tbl_count + 1 ))
fi
done
echo "$tbl_count tables dumped from database '$DB' into dir=$BACKUP_DIR"
fi
done
С небольшой помощью https://stackoverflow.com/a/17016410/1069083
он использует lzop, который намного быстрее, see:http://pokecraft.first-world.info/wiki/Quick_Benchmark:_Gzip_vs_Bzip2_vs_LZMA_vs_XZ_vs_LZ4_vs_LZO
Мне нравится решение Rubo77, я не видел его, прежде чем я изменил пола. Это будет резервное копирование одной базы данных, исключая любые таблицы, которые вы не хотите. Затем он будет gzip его и удалить любые файлы в течение 8 дней. Я, вероятно, буду использовать 2 версии этого, которые делают полную (минус таблица журналов) один раз в день, а другой, который просто создает резервные копии самых важных таблиц, которые меняются каждый час, используя пару заданий cron.
#!/bin/sh
PASSWORD=XXXX
HOST=127.0.0.1
USER=root
DATABASE=MyFavoriteDB
now="$(date +'%d_%m_%Y_%H_%M')"
filename="${DATABASE}_db_backup_$now"
backupfolder="/opt/backups/mysql"
DB_FILE="$backupfolder/$filename"
logfile="$backupfolder/"backup_log_"$(date +'%Y_%m')".txt
EXCLUDED_TABLES=(
logs
)
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done
echo "Dump structure started at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE} > ${DB_FILE}
echo "Dump structure finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
gzip ${DB_FILE}
find "$backupfolder" -name ${DATABASE}_db_backup_* -mtime +8 -exec rm {} \;
echo "old files deleted" >> "$logfile"
echo "operation finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "*****************" >> "$logfile"
exit 0