MySQL забивається ОС кожні 25 днів або близько того


9

Близько 4 місяців тому ми перейшли з MS SQL Server до MySQL 5.5 . З тих пір ми стикаємося з проблемою один раз приблизно за 25 днів, з тих пір, коли у CentOS не вистачає пам'яті, і в результаті це вбиває MySQL. Безпечний MySQL перезавантажує mysql, тому база даних повністю повністю знищена на хвилину-дві, але ми можемо зазнати втрат продуктивності та підключення протягом годин, перш ніж CentOS вбиває нитку mysqld.

Зазвичай ми бачимо проблеми з 1 ранку до 5 ранку , але ніколи вдень, коли трафік найбільший, що насправді турбує цю ситуацію. Незважаючи на те, що зазвичай спостерігаються проблеми з підключенням та продуктивністю з 1 ранку до 5 ранку, сервер mysql, як правило, вбивається близько 4 ранку або 5 ранку, приблизно в той же час, коли запущений mysqldump.

Ми думали, що mysqldumpможе бути винуватцем. Однак вона починається о 4 ранку щодня, але ми бачимо проблеми вже в 1 ночі в деякі ночі. Також mysqldumpпрацює з --optкомутатором, тому він не повинен буферувати багато даних під час демпінгу.

Ми також розглядали додаток резервного копіювання, який використовує, який отримує файли дамп і створює резервні копії на стрічку. Ми змінили час роботи на 6 ранку, і проблема не змінилася.

У нас є кілька робочих місць, які періодично працюють протягом ночі, але жодна не вимагає великих ресурсів і зовсім не займає багато часу.

Ось декілька статистичних даних щодо того, з чим ми працюємо, та поточних записів у my.cnfфайлі. Будемо дуже вдячні за будь-яку допомогу чи пропозиції щодо речей, які ми можемо спробувати.

СЕРВЕРСЬКІ СТАНЦІЇ :

  • Процесор Intel (R) Xeon (R) E5530 при 2,40 ГГц
  • ядра процесора: 4
  • Пам'ять: 12293480 (12 концертів)

ОС :

  • CentOS 5.5
  • Linux 2.6.18-274.12.1.el5 # 1 SMP вт 29 листопада 13:37:46 EST 2011 x86_64 x86_64 x86_64 GNU / Linux

MY.CNF:

[client]
port = 3306
socket = /var/lib/mysql/mysql.sock

[mysqld]
port = 3306
socket = /var/lib/mysql/mysql.sock

skip-name-resolve

ssl-ca=<file location>
ssl-cert=<file location>
ssl-key=<file location>

back_log = 50
max_connections = 500
table_open_cache = 2048
table_definition_cache = 9000
max_allowed_packet = 16M
binlog_cache_size = 1M
max_heap_table_size = 64M
read_buffer_size = 2M
read_rnd_buffer_size = 16M
sort_buffer_size = 8M
join_buffer_size = 8M
thread_cache_size = 130
thread_concurrency = 16
query_cache_size = 64M
query_cache_limit = 1M
ft_min_word_len = 4
default-storage-engine=INNODB
thread_stack = 192K
transaction_isolation = REPEATABLE-READ
tmp_table_size = 64M
log-bin=/log/mysql/mysql-bin
expire_logs_days=7
binlog_format=mixed
key_buffer_size = 32M
bulk_insert_buffer_size = 64M
myisam_sort_buffer_size = 128M
myisam_max_sort_file_size = 10G
myisam_repair_threads = 1
myisam_recover
innodb_additional_mem_pool_size = 16M
innodb_buffer_pool_size = 7G
innodb_thread_concurrency = 16
innodb_flush_log_at_trx_commit = 2
innodb_log_file_size = 256M
innodb_log_files_in_group = 3
innodb_max_dirty_pages_pct = 70
innodb_lock_wait_timeout = 120

[mysql]
no-auto-rehash

[mysqld_safe]
open-files-limit = 8192

Налаштуйте журнал помилок dev.mysql.com/doc/refman/5.5/en/error-log.html і перевірте, чи щось зареєстровано, коли проблема виникає

Я використовував цей сайт omh.cc/mycnf і визначив, що проблема, швидше за все, з самою конфігурацією. Я збираюсь відрегулювати багато пулів підключення, пов'язаних з myisam, і побачити, чи це допомагає у споживанні пам'яті.

2
CentOS 5.5 не є поточним. 5.8 є (якщо ви дбаєте про безпеку ОС)
Нілс

1
Рішення було б цікавим. Чи можете ви опублікувати це як відповідь на власне запитання?
Нілс

дубльований пост у редакції reddit, де воно було вирішено. це також було розміщено на форумах MySQL
Марк МакКінстрі

Відповіді:


2
  1. Ви повинні перевірити журнал помилок MySQL

  2. Перевірте, чи є це значення таким же, як ulimit -aу відкритих файлах:

    int my.cnf 
    [mysqld_safe]
    open-files-limit = 8192
    

0

Ваша конфігурація баггі.

Тут використовуйте цей інструмент . Це говорить про те, скільки оперативної пам’яті пам'яті потрібно для вашої користувальницької конфігурації?

Ваша поточна ОЗУ, як ви згадували, 12GBале вам потрібна 31.6GBдля 500 активних підключень MySQL.

Session variables
max_allowed_packet 16.0 MB
sort_buffer_size 8.0 MB
net_buffer_length 16.0 KB
thread_stack 192.0 KB
read_rnd_buffer_size 16.0 MB
read_buffer_size 2.0 MBSession variables
max_allowed_packet 16.0 MB
sort_buffer_size 8.0 MB
net_buffer_length 16.0 KB
thread_stack 192.0 KB
read_rnd_buffer_size 16.0 MB
read_buffer_size 2.0 MB
join_buffer_size 8.0 MB
Total (per session)50.2 MB
Global variables
innodb_log_buffer_size 1.0 MB
query_cache_size 64.0 MB
innodb_buffer_pool_size 7.0 GB
innodb_additional_mem_pool_size 16.0 MB
key_buffer_size 32.0 MB
Total 7.1 GB
Total memory needed (for 500 connections): 31.6 GB
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.