MySQL é morto pelo SO a cada 25 dias ou mais

9

Há cerca de 4 meses, migramos do MS SQL Server para o MySQL 5.5 . Desde então, estamos enfrentando um problema aproximadamente uma vez a cada 25 dias, desde que o CentOS fica sem memória e, como resultado, mata o MySQL. O MySQL safe reinicia o mysql para que o banco de dados fique completamente inativo por um ou dois minutos, mas podemos sofrer perdas de desempenho e conectividade por horas antes que o CentOS termine o encadeamento do mysqld.

Geralmente, vemos problemas das 1h às 5h , mas nunca durante o dia em que o tráfego é mais alto, o que é realmente desconcertante nessa situação. Apesar de normalmente ocorrerem problemas de conectividade e desempenho das 01:00 às 05:00, o servidor mysql normalmente é eliminado por volta das 04:00 ou 05:00, ao mesmo tempo em que o mysqldump é executado.

Nós pensamos que mysqldumppode ter sido o culpado. No entanto, começa às 04:00 diariamente, mas vemos problemas logo às 01:00 em algumas noites. Também mysqldumpestá sendo executado com o --optswitch, portanto, ele não deve armazenar em buffer muitos dados durante o processo de despejo.

Também consideramos o aplicativo de backup que usamos, que obtém os arquivos de despejo e os faz backup em fita. Alteramos o horário em que é executado para 6h e o problema não foi alterado.

Temos vários trabalhos que são executados periodicamente durante a noite, mas nenhum consome muito recursos e não demora muito para ser executado.

Aqui estão algumas estatísticas sobre o que estamos trabalhando e as entradas atuais no my.cnfarquivo. Qualquer ajuda ou sugestão de coisas que possamos tentar seria muito apreciada.

ESTATÍSTICAS DO SERVIDOR :

  • CPU Intel (R) Xeon (E) E5530 a 2.40GHz
  • núcleos da CPU: 4
  • Memória: 12293480 (12 GB)

SO :

  • CentOS 5.5
  • Linux 2.6.18-274.12.1.el5 # 1 SMP Ter 29 de novembro 13:37:46 EST 2011 x86_64 x86_64 x86_64 GNU / Linux

MY.CNF:

[client]
port = 3306
socket = /var/lib/mysql/mysql.sock

[mysqld]
port = 3306
socket = /var/lib/mysql/mysql.sock

skip-name-resolve

ssl-ca=<file location>
ssl-cert=<file location>
ssl-key=<file location>

back_log = 50
max_connections = 500
table_open_cache = 2048
table_definition_cache = 9000
max_allowed_packet = 16M
binlog_cache_size = 1M
max_heap_table_size = 64M
read_buffer_size = 2M
read_rnd_buffer_size = 16M
sort_buffer_size = 8M
join_buffer_size = 8M
thread_cache_size = 130
thread_concurrency = 16
query_cache_size = 64M
query_cache_limit = 1M
ft_min_word_len = 4
default-storage-engine=INNODB
thread_stack = 192K
transaction_isolation = REPEATABLE-READ
tmp_table_size = 64M
log-bin=/log/mysql/mysql-bin
expire_logs_days=7
binlog_format=mixed
key_buffer_size = 32M
bulk_insert_buffer_size = 64M
myisam_sort_buffer_size = 128M
myisam_max_sort_file_size = 10G
myisam_repair_threads = 1
myisam_recover
innodb_additional_mem_pool_size = 16M
innodb_buffer_pool_size = 7G
innodb_thread_concurrency = 16
innodb_flush_log_at_trx_commit = 2
innodb_log_file_size = 256M
innodb_log_files_in_group = 3
innodb_max_dirty_pages_pct = 70
innodb_lock_wait_timeout = 120

[mysql]
no-auto-rehash

[mysqld_safe]
open-files-limit = 8192
bahamat
fonte
Configurar o log de erro dev.mysql.com/doc/refman/5.5/en/error-log.html e verificar se algo é registrado quando o problema acontece
Eu usei este site omh.cc/mycnf e determinei que o problema é mais provável com a própria configuração. Vou ajustar muitos dos pools de conexão relacionados ao myisam e ver se isso ajuda no consumo de memória.
2
O CentOS 5.5 não é atual. 5.8 é (se você se preocupa com a segurança OS)
Nils
11
A solução seria interessante. Você pode publicá-lo como resposta à sua própria pergunta?
Nils
post duplicado no thread do reddit onde foi resolvido. também foi publicado nos fóruns do MySQL
Mark McKinstry

Respostas:

2
  1. Você deve verificar o log de erros do MySQL

  2. Verifique se esse valor é o mesmo que ulimit -aos arquivos abertos:

    int my.cnf 
    [mysqld_safe]
    open-files-limit = 8192
    
Bill Xie
fonte
0

Sua configuração é incorreta.

Aqui use esta ferramenta . Ele diz quanta memória RAM você precisa para sua configuração personalizada?

Sua RAM atual como você mencionou é, 12GBmas você precisa 31.6GBde 500 conexões MySQL ativas.

Session variables
max_allowed_packet 16.0 MB
sort_buffer_size 8.0 MB
net_buffer_length 16.0 KB
thread_stack 192.0 KB
read_rnd_buffer_size 16.0 MB
read_buffer_size 2.0 MBSession variables
max_allowed_packet 16.0 MB
sort_buffer_size 8.0 MB
net_buffer_length 16.0 KB
thread_stack 192.0 KB
read_rnd_buffer_size 16.0 MB
read_buffer_size 2.0 MB
join_buffer_size 8.0 MB
Total (per session)50.2 MB
Global variables
innodb_log_buffer_size 1.0 MB
query_cache_size 64.0 MB
innodb_buffer_pool_size 7.0 GB
innodb_additional_mem_pool_size 16.0 MB
key_buffer_size 32.0 MB
Total 7.1 GB
Total memory needed (for 500 connections): 31.6 GB
Ahmad Awais
fonte