Пошкодження MySQL INNODB після збоїв на сервері під час одночасної команди скорочення


9

Сьогодні мій сервер вийшов з ладу, я думаю, через одночасну команду таблиці усікання на одній з наших таблиць INNODB. Сервер можна перезапустити, але після його запуску, кожного разу, коли я намагаюся видати команду SQL, я отримую таку помилку:

ERROR 2006 (HY000): MySQL server has gone away

Ось що трапилося в журналах:

121206 01:11:12  mysqld restarted
121206  1:11:13  InnoDB: Started; log sequence number 275 559321759
InnoDB: !!! innodb_force_recovery is set to 1 !!!
121206  1:11:13 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution
InnoDB: Error: trying to load index PRIMARY for table 
InnoDB: but the index tree has been freed!
121206  1:11:37 - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help diagnose
the problem, but since we have already crashed, something is definitely wrong
and this may fail.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x9900950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x46353fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x9900950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x993e500 =
thd->thread_id=1
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Я шукав в Інтернеті, і я розумію, що це помилка MySQL, але я не маю уявлення, як її вирішити. Я використовую MySQL версії 5.0.95.

Здається, що мені потрібно створити нову базу даних і скинути старі дані в нову, але як це зробити, якщо я навіть не можу видавати жодні команди SQL до поточної?

--- ОНОВЛЕННЯ ---
Версія: 'socket' 5.0.95-log ':' /var/lib/mysql/mysql.sock 'порт: 3306 Розподіл джерела InnoDB: Помилка: спроба завантаження індексу PRIMARY для таблиці InnoDB: але дерево індексу було звільнено! 121206 4:13:41 - mysqld отримав сигнал 11; Це може бути тому, що ви потрапили на помилку. Можливо також, що цей двійковий файл або одна з бібліотек, з якими він був пов'язаний, пошкоджені, неправильно побудовані або неправильно налаштовані. Ця помилка також може бути викликана несправністю апаратного забезпечення. Ми спробуємо зробити все можливе, щоб викреслити інформацію, яка сподівається допомогти діагностувати проблему, але оскільки ми вже зазнали аварії, щось напевно не так, і це може не вдатися.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x17fb8950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x464a3fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x17fb8950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x17ff6500 =
thd->thread_id=3
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Number of processes running now: 0
121206 04:13:41  mysqld restarted
InnoDB: The log sequence number in ibdata files does not match
InnoDB: the log sequence number in the ib_logfiles!
121206  4:13:42  InnoDB: Database was not shut down normally!
InnoDB: Starting crash recovery.
InnoDB: Reading tablespace information from the .ibd files...
InnoDB: Restoring possible half-written data pages from the doublewrite
InnoDB: buffer...
121206  4:13:43  InnoDB: Started; log sequence number 275 559323148
121206  4:13:43 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution

Відповіді:


6

АСПЕКТ №1

Перше, що кинуло мене в очі - ця лінія

InnoDB: Помилка: спроба завантажити індекс PRIMARY для таблиці /

Це означає, що у вас є таблиця, що використовує механізм зберігання InnoDB

Що цікаво про InnoDB - це спосіб зберігання PRIMARY KEY Він зберігається у структурі, що називається gen_clust_index , або більш відомій як Індекс кластера .

Моя безпосередня здогадка полягає в тому, що певний запис ОСНОВНОГО КЛЮЧУ занадто великий

Будь ласка, розгляньте кілька статей про хороше, погане та потворне використання довгих ОСНОВНИХ КЛЮЧІВ:

потім подивіться, чи <DB Hidden>.<Table Hidden>потрібно переробляти.

АСПЕКТ №2

З точки зору вашої думки щодо паралельної таблиці усікання, це здається небезпечним. Чому? InnoDB виконує TRUNCATE TABLE як DDLні DML. Я про це писав раніше:

АСПЕКТ №3

Деякі пропозиції щодо налаштування

Додайте до my.ini

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0

Почати mysql

В іншому сеансі запустіть tail -f <errorlogfile>і перегляньте InnoDB Crash Recovery.

Якщо повністю запущено резервне копіювання mysql і відновлення аварії в InnoDB завершено, спробуйте негайно вимкнути mysql. Можливо, вам буде потрібно змінити розмір ваших журналів транзакцій InnoDB.

Вибачте за ці дикі пропозиції, але я тут сліпую.

Будь ласка, опублікуйте у запитанні:

  • весь ваш my.cnf
  • скільки оперативної пам’яті на борту

ОНОВЛЕННЯ 2012-12-05 12:09 EDT

Будь ласка, виконайте наступне:

КРОК 01) Додайте ці зміни до my.cnf

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0
innodb_thread_concurrency=0

КРОК 02) service mysql restart

щоб переконатися, що з'являється mysql

КРОК 03) Вам потрібно змінити розмір ib_logfile0 та ib_logfile1 (24М може бути занадто маленьким)

service mysql stop
cd /var/lib/mysql
mv ib_logfile0 ib_logfile0.bak
mv ib_logfile1 ib_logfile1.bak

КРОК 04) Додайте ці зміни до my.cnf

[mysqld]
innodb_log_file_size=512M
innodb_log_buffer_size=8M

КРОК 05) service mysql start

mysqld відтворить ib_logfile0 та ib_logfile1 512M кожен

Тепер спробуйте і подивіться, що станеться….

ОНОВЛЕННЯ 2012-12-05 12:18 EDT

Тим часом, будь ласка, прочитайте мою публікацію ServerFault на панелі mysql та її наслідки щодо розмірів стосовно innodb_log_file_size та innodb_log_buffer_size, як я дізнався з чужого домену ServerFault .

ОНОВЛЕННЯ 2012-12-05 14:28 EDT

Я редагував усі посилання на таблиці клієнтів з цього питання.

Першопричиною стала пошкоджена сторінка ibdata1із змішаними всередині даними та покажчиками. Я допоміг Ендрю перенести дані, відтворив ibdata1 за допомогою innodb_file_per_table , і Ендрю перезавантажив дані.


Дякуємо за ваші коментарі Роландо. Я обов'язково перегляну структуру первинного ключа. Тим часом я перегляну ваші статті та побачу, чи можу я відновити наш сервер як можна швидше.
Андрій

Деяка частина ibdata1 має пошкоджену сторінку. Я багато разів бачив цю умову зі своїми клієнтами-хостингами.
RolandoMySQLDBA


За запитом я видалив усі свої коментарі, щоб приховати конфіденційну інформацію.
RolandoMySQLDBA

@RolandoMySQLDBA, Ви можете, будь ласка, пояснити, як ви виявили першопричину, я маю на увазі, як ви це зрозуміли? І які кроки ви зробили, щоб виправити це?
Bhupesh Pant
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.