Ignorar determinadas tabelas com o mysqldump

558

Existe uma maneira de restringir certas tabelas do comando mysqldump?

Por exemplo, eu usaria a seguinte sintaxe para despejar apenas a tabela1 e a tabela2:

mysqldump -u username -p database table1 table2 > database.sql

Mas existe uma maneira semelhante de despejar todas as tabelas, exceto table1 e table2? Eu não encontrei nada na documentação do mysqldump, então a força bruta (especificando todos os nomes de tabela) é o único caminho a percorrer?

Zac
fonte

Respostas:

940

Você pode usar a opção --ignore-table . Então você poderia fazer

mysqldump -u USERNAME -pPASSWORD DATABASE --ignore-table=DATABASE.table1 > database.sql

Não há espaço em branco depois -p (isso não é um erro de digitação).

Se você deseja ignorar várias tabelas, pode usar um script simples como este

#!/bin/bash
PASSWORD=XXXXXX
HOST=XXXXXX
USER=XXXXXX
DATABASE=databasename
DB_FILE=dump.sql
EXCLUDED_TABLES=(
table1
table2
table3
table4
tableN   
)

IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE} > ${DB_FILE}

echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
Paul Sheldrake
fonte
4
Obrigado! Funcionou perfeitamente ... Não sei como senti falta disso.
Zac
20
existe alguma maneira de pular o conteúdo da tabela? a estrutura que eu quero fazer backup.
Andres SK
5
Você pode usar a opção --no-data = true, mas não sei se é possível fazer isso em um nível por tabela.
27580 Brian Brian Fisher
60
se o nome do banco de dados não estiver definido para cada --ignore-table, você receberá o erro 'Uso ilegal da opção --ignore-table = <database>. <table>'. Certifique-se de sempre declarar o banco de dados!
supajb
26
se você quiser ignorar alguns dados tabelas, mas ainda despejar sua estrutura, você pode executar mysqldump novamente fo aquelas mesas, e concatenar-lo para o backup que você acabou de criar
carpii
119

Com base na resposta de @ Brian-Fisher e nos comentários de algumas das pessoas nesta postagem, tenho várias tabelas enormes (e desnecessárias) no meu banco de dados, então eu queria pular o conteúdo delas ao copiar, mas manter a estrutura :

mysqldump -h <host> -u <username> -p <schema> --no-data > db-structure.sql
mysqldump -h <host> -u <username> -p <schema> --no-create-info --ignore-table=schema.table1 --ignore-table=schema.table2 > db-data.sql

Os dois arquivos resultantes são estruturalmente sólidos, mas os dados despejados agora são ~ 500 MB em vez de 9 GB, muito melhores para mim. Agora posso importar esses dois arquivos para outro banco de dados para fins de teste sem ter que me preocupar em manipular 9 GB de dados ou ficar sem espaço em disco.

DuffJ
fonte
Testado e usado no MySQL 5.5.43 (para debian-linux-gnu (x86_64)) Obrigado
Abdel
Simples e elegante. Uma ótima solução.
precisa
4
ótima solução. Eu tive que adicionar --skip-gatilhos para a segunda instrução para o despejo de trabalho mais tarde (supondo que você tem gatilhos), mas de outra forma: perfeito
Rainer Mohr
Obrigado, isso está funcionando e é muito útil.
Himalaya Garg
59

para vários bancos de dados:

mysqldump -u user -p --ignore-table=db1.tbl1 --ignore-table=db2.tbl1 --databases db1 db2 ..
user1219736
fonte
5
Já existe uma resposta a este tópico que diz isso, melhor.
Alxgb # 6/13
19
Isso mesmo, mas esta solução funciona com vários bancos de dados.
27413 Alex
Interessante - pensei primeiro mysqlde mysqldumpseria o mesmo programa.
Martin Thoma
4
é isso que estou procurando - uma resposta de uma linha com a solução que não me obriga a ler algo por 2 a 3 minutos: P
jebbie
43

Outro exemplo para ignorar várias tabelas

/usr/bin/mysqldump -uUSER -pPASS --ignore-table={db_test.test1,db_test.test3} db_test> db_test.sql

usando --ignore-tablee criando uma matriz de tabelas, com sintaxes comodatabase.table

--ignore-table={db_test.table1,db_test.table3,db_test.table4}

Links com informações que ajudarão você

comprimir saída mysqldump

Nota: testado no servidor ubuntu com mysql Ver 14.14 Distrib 5.5.55

Importar banco de dados

 mysql -uUSER  -pPASS db_test < db_test.sql

Script simples para ignorar tabelas

#!/bin/bash

#tables to ignore
_TIGNORE=(
my_database.table1
my_database.table2
my_database.tablex
)

#create text for ignore tables
_TDELIMITED="$(IFS=" "; echo "${_TIGNORE[*]/#/--ignore-table=}")"

#don't forget to include user and password
/usr/bin/mysqldump -uUSER -pPASSWORD --events ${_TDELIMITED} --databases my_database | gzip -v > backup_database.sql.gz
DarckBlezzer
fonte
Ótima maneira de evitar o uso de um script quando você deseja ignorar várias tabelas. Essa resposta deve receber mais "+1"
svfat 7/01/19
resposta perfeita !!! +1 fez o meu dia :)
SagarPPanchal
7

Para excluir alguns dados da tabela , mas não a estrutura da tabela . Aqui está como eu faço isso:

Despejar a estrutura do banco de dados de todas as tabelas, sem nenhum dado:

mysqldump -u user -p --no-data database > database_structure.sql

Em seguida, despeje o banco de dados com dados, exceto as tabelas excluídas, e não despeje a estrutura:

mysqldump -u user -p --no-create-info \
    --ignore-table=database.table1 \
    --ignore-table=database.table2 database > database_data.sql

Em seguida, para carregá-lo em um novo banco de dados:

mysql -u user -p newdatabase < database_structure.sql
mysql -u user -p newdatabase < database_data.sql
Benedikt Köppel
fonte
1

Você pode usar o mysqlpumpcomando com o

--exclude-tables=name

comando. Ele especifica uma lista separada por vírgula de tabelas a serem excluídas.

A sintaxe do mysqlpump é muito semelhante ao mysqldump, mas tem um desempenho muito superior. Mais informações sobre como usar a opção de exclusão, você pode ler aqui: https://dev.mysql.com/doc/refman/5.7/en/mysqlpump.html#mysqlpump-filtering

ThorstenC
fonte
0

Despejar todos os bancos de dados com todas as tabelas, mas pular determinadas tabelas

no github: https://github.com/rubo77/mysql-backup.sh/blob/master/mysql-backup.sh

#!/bin/bash
# mysql-backup.sh

if [ -z "$1" ] ; then
  echo
  echo "ERROR: root password Parameter missing."
  exit
fi
DB_host=localhost
MYSQL_USER=root
MYSQL_PASS=$1
MYSQL_CONN="-u${MYSQL_USER} -p${MYSQL_PASS}"
#MYSQL_CONN=""

BACKUP_DIR=/backup/mysql/

mkdir $BACKUP_DIR -p

MYSQLPATH=/var/lib/mysql/

IGNORE="database1.table1, database1.table2, database2.table1,"

# strpos $1 $2 [$3]
# strpos haystack needle [optional offset of an input string]
strpos()
{
    local str=${1}
    local offset=${3}
    if [ -n "${offset}" ]; then
        str=`substr "${str}" ${offset}`
    else
        offset=0
    fi
    str=${str/${2}*/}
    if [ "${#str}" -eq "${#1}" ]; then
        return 0
    fi
    echo $((${#str}+${offset}))
}

cd $MYSQLPATH
for i in */; do
    if [ $i != 'performance_schema/' ] ; then 
    DB=`basename "$i"` 
    #echo "backup $DB->$BACKUP_DIR$DB.sql.lzo"
    mysqlcheck "$DB" $MYSQL_CONN --silent --auto-repair >/tmp/tmp_grep_mysql-backup
    grep -E -B1 "note|warning|support|auto_increment|required|locks" /tmp/tmp_grep_mysql-backup>/tmp/tmp_grep_mysql-backup_not
    grep -v "$(cat /tmp/tmp_grep_mysql-backup_not)" /tmp/tmp_grep_mysql-backup

    tbl_count=0
    for t in $(mysql -NBA -h $DB_host $MYSQL_CONN -D $DB -e 'show tables') 
    do
      found=$(strpos "$IGNORE" "$DB"."$t,")
      if [ "$found" == "" ] ; then 
        echo "DUMPING TABLE: $DB.$t"
        mysqldump -h $DB_host $MYSQL_CONN $DB $t --events --skip-lock-tables | lzop -3 -f -o $BACKUP_DIR/$DB.$t.sql.lzo
        tbl_count=$(( tbl_count + 1 ))
      fi
    done
    echo "$tbl_count tables dumped from database '$DB' into dir=$BACKUP_DIR"
    fi
done

Com uma pequena ajuda de https://stackoverflow.com/a/17016410/1069083

Ele usa o lzop, que é muito mais rápido, veja: http://pokecraft.first-world.info/wiki/Quick_Benchmark:_Gzip_vs_Bzip2_vs_LZMA_vs_XZ_vs_LZ4_vs_LZO

rubo77
fonte
O documento que você compartilha diz que o gzip é mais rápido que o lzop.
jrosell
0

Gosto da solução de Rubo77, não a tinha visto antes de modificar a de Paul. Este fará backup de um único banco de dados, excluindo as tabelas que você não deseja. Ele irá compactá-lo e excluir todos os arquivos com mais de 8 dias de idade. Provavelmente usarei duas versões disso que fazem uma (tabela de logs menos) completa uma vez por dia e outra que apenas faz backup das tabelas mais importantes que mais mudam a cada hora, usando alguns trabalhos cron.

#!/bin/sh
PASSWORD=XXXX
HOST=127.0.0.1
USER=root
DATABASE=MyFavoriteDB

now="$(date +'%d_%m_%Y_%H_%M')"
filename="${DATABASE}_db_backup_$now"
backupfolder="/opt/backups/mysql"
DB_FILE="$backupfolder/$filename"
logfile="$backupfolder/"backup_log_"$(date +'%Y_%m')".txt

EXCLUDED_TABLES=(
logs
)
IGNORED_TABLES_STRING=''
for TABLE in "${EXCLUDED_TABLES[@]}"
do :
   IGNORED_TABLES_STRING+=" --ignore-table=${DATABASE}.${TABLE}"
done

echo "Dump structure started at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} --single-transaction --no-data --routines ${DATABASE}  > ${DB_FILE} 
echo "Dump structure finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "Dump content"
mysqldump --host=${HOST} --user=${USER} --password=${PASSWORD} ${DATABASE} --no-create-info --skip-triggers ${IGNORED_TABLES_STRING} >> ${DB_FILE}
gzip ${DB_FILE}

find "$backupfolder" -name ${DATABASE}_db_backup_* -mtime +8 -exec rm {} \;
echo "old files deleted" >> "$logfile"
echo "operation finished at $(date +'%d-%m-%Y %H:%M:%S')" >> "$logfile"
echo "*****************" >> "$logfile"
exit 0
Alan
fonte
0

Por uma questão de completude, eis um script que realmente pode ser uma linha para obter um backup de um banco de dados, excluindo (ignorando) todas as visualizações. O nome do banco de dados é considerado empregado:

ignore=$(mysql --login-path=root1 INFORMATION_SCHEMA \
    --skip-column-names --batch \
    -e "select 
          group_concat(
            concat('--ignore-table=', table_schema, '.', table_name) SEPARATOR ' '
          ) 
        from tables 
        where table_type = 'VIEW' and table_schema = 'employees'")

mysqldump --login-path=root1 --column-statistics=0 --no-data employees $ignore > "./backups/som_file.sql"   

Você pode atualizar a lógica da consulta. Em geral, use group_concate concatvocê pode gerar quase qualquer string ou comando de shell desejado.

hpaknia
fonte