MySQL INNODB corruzione dopo arresto anomalo del server durante il comando truncate simultaneo


9

Oggi il mio server si è bloccato a causa di un comando simultaneo di tabella troncata su una delle nostre tabelle INNODB. È possibile riavviare il server, ma dopo l'avvio, ogni volta che provo a emettere un comando SQL, viene visualizzato il seguente errore:

ERROR 2006 (HY000): MySQL server has gone away

Questo è ciò che è accaduto nei registri:

121206 01:11:12  mysqld restarted
121206  1:11:13  InnoDB: Started; log sequence number 275 559321759
InnoDB: !!! innodb_force_recovery is set to 1 !!!
121206  1:11:13 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution
InnoDB: Error: trying to load index PRIMARY for table 
InnoDB: but the index tree has been freed!
121206  1:11:37 - mysqld got signal 11 ;
This could be because you hit a bug. It is also possible that this binary
or one of the libraries it was linked against is corrupt, improperly built,
or misconfigured. This error can also be caused by malfunctioning hardware.
We will try our best to scrape up some info that will hopefully help diagnose
the problem, but since we have already crashed, something is definitely wrong
and this may fail.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x9900950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x46353fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x9900950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x993e500 =
thd->thread_id=1
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Ho cercato online e ho capito che si tratta di un bug di MySQL, ma non ho idea di come risolverlo. Sto usando MySQL versione 5.0.95.

Sembra che debba creare un nuovo database e scaricare i vecchi dati in quello nuovo, ma come posso farlo se non riesco nemmeno a inviare comandi SQL a quello attuale?

--- AGGIORNAMENTO ---
Versione: socket '5.0.95-log': porta '/var/lib/mysql/mysql.sock': 3306 Distribuzione sorgente InnoDB: errore: tentativo di caricare l'indice PRIMARY per la tabella InnoDB: ma il l'albero degli indici è stato liberato! 121206 4:13:41 - mysqld ha ricevuto il segnale 11; Questo può essere perché hai trovato un bug di sistema. È anche possibile che questo binario o una delle librerie a cui era collegato sia corrotto, costruito in modo errato o configurato in modo errato. Questo errore può anche essere causato da un malfunzionamento dell'hardware. Faremo del nostro meglio per raccogliere alcune informazioni che si spera possano aiutare a diagnosticare il problema, ma dal momento che ci siamo già schiantati, qualcosa è decisamente sbagliato e questo potrebbe non riuscire.

key_buffer_size=134217728
read_buffer_size=1048576
max_used_connections=1
max_connections=400
threads_connected=1
It is possible that mysqld could use up to
key_buffer_size + (read_buffer_size + sort_buffer_size)*max_connections = 950272 K
bytes of memory
Hope that's ok; if not, decrease some variables in the equation.

thd=0x17fb8950
Attempting backtrace. You can use the following information to find out
where mysqld died. If you see no messages after this, something went
terribly wrong...
Cannot determine thread, fp=0x464a3fa0, backtrace may not be correct.
Stack range sanity check OK, backtrace follows:
(nil)
New value of fp=0x17fb8950 failed sanity check, terminating stack trace!
Please read http://dev.mysql.com/doc/mysql/en/using-stack-trace.html and follow instructions on how to resolve the stack trace. Resolved
stack trace is much more helpful in diagnosing the problem, so please do
resolve it
Trying to get some variables.
Some pointers may be invalid and cause the dump to abort...
thd->query at 0x17ff6500 =
thd->thread_id=3
The manual page at http://dev.mysql.com/doc/mysql/en/crashing.html contains
information that should help you find out what is causing the crash.

Number of processes running now: 0
121206 04:13:41  mysqld restarted
InnoDB: The log sequence number in ibdata files does not match
InnoDB: the log sequence number in the ib_logfiles!
121206  4:13:42  InnoDB: Database was not shut down normally!
InnoDB: Starting crash recovery.
InnoDB: Reading tablespace information from the .ibd files...
InnoDB: Restoring possible half-written data pages from the doublewrite
InnoDB: buffer...
121206  4:13:43  InnoDB: Started; log sequence number 275 559323148
121206  4:13:43 [Note] /usr/libexec/mysqld: ready for connections.
Version: '5.0.95-log'  socket: '/var/lib/mysql/mysql.sock'  port: 3306  Source distribution

Risposte:


6

ASPETTO # 1

La prima cosa che ha attirato la mia attenzione è stata questa linea

InnoDB: errore: tentativo di caricare l'indice PRIMARY per la tabella /

Questo indica che hai una tabella usando il motore di archiviazione InnoDB

La cosa interessante di InnoDB è il modo in cui è memorizzata una CHIAVE PRIMARIA. È memorizzato in una struttura chiamata gen_clust_index , o più comunemente noto come Clustered Index.

La mia ipotesi immediata è che una certa voce PRIMARY KEY sia troppo grande

Ti preghiamo di prendere in considerazione alcuni articoli sui buoni, i cattivi e i brutti dell'uso di TASTI PRIMARI lunghi:

quindi vedere se è <DB Hidden>.<Table Hidden>necessario riprogettare.

ASPETTO # 2

In termini di congetture riguardanti una tavola troncata parallela, sembra un po 'pericoloso. Perché? InnoDB esegue TRUNCATE TABLE come DDLno DML. Ho scritto su questo prima:

ASPETTO # 3

Alcuni suggerimenti di ottimizzazione

Si prega di aggiungere quanto segue a my.ini

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0

Inizia mysql

In un'altra sessione, esegui tail -f <errorlogfile>e guarda InnoDB Crash Recovery.

Se mysql è stato completamente riavviato e il ripristino da crash di InnoDB è stato completato, provare a chiudere immediatamente mysql. Potrebbe essere necessario ridimensionare i registri delle transazioni di InnoDB.

Mi dispiace per questi suggerimenti selvaggi, ma sto volando alla cieca qui.

Si prega di inviare quanto segue nella domanda:

  • il tuo intero my.cnf
  • quanta RAM è presente a bordo

AGGIORNAMENTO 2012-12-05 12:09 EDT

Si prega di fare quanto segue:

PASSAGGIO 01) Aggiungi queste modifiche a my.cnf

[mysqld]
max_allowed_packet=1G
innodb_fast_shutdown=0
innodb_thread_concurrency=0

PASSO 02) service mysql restart

per assicurarsi che mysql arrivi

PASSAGGIO 03) È necessario ridimensionare ib_logfile0 e ib_logfile1 (24M potrebbe essere troppo piccolo)

service mysql stop
cd /var/lib/mysql
mv ib_logfile0 ib_logfile0.bak
mv ib_logfile1 ib_logfile1.bak

PASSAGGIO 04) Aggiungere queste modifiche a my.cnf

[mysqld]
innodb_log_file_size=512M
innodb_log_buffer_size=8M

PASSO 05) service mysql start

mysqld creerà ib_logfile0 e ib_logfile1 512M ciascuno

Ora, prova a vedere cosa succede ....

AGGIORNAMENTO 2012-12-05 12:18 EDT

Nel frattempo, leggi il mio post ServerFault sul pacchetto mysql e le sue implicazioni sul dimensionamento per quanto riguarda innodb_log_file_size e innodb_log_buffer_size come ho appreso dal post ServerFault di qualcun altro .

AGGIORNAMENTO 2012-12-05 14:28 EDT

Ho modificato tutti i riferimenti alle tabelle dei clienti da questa domanda.

La causa principale era una pagina danneggiata ibdata1con dati e pagine indice mescolati all'interno. Ho aiutato Andrew a migrare i dati, a ricreare ibdata1 con innodb_file_per_table e Andrew ha ricaricato i dati.


Grazie per i tuoi commenti Rolando. Riconsidererò sicuramente la struttura della chiave primaria. Nel frattempo, esaminerò i tuoi articoli e vedrò se riesco a riavviare il nostro server ed eseguirlo al più presto.
Andrew,

Alcune parti di ibdata1 hanno una pagina danneggiata. Ho visto questa condizione molte volte con i miei client di hosting.
RolandoMySQLDBA


Come richiesto, ho cancellato tutti i miei commenti per nascondere informazioni sensibili.
RolandoMySQLDBA il

@RolandoMySQLDBA, potresti per favore elaborare come hai rilevato la causa principale, intendo come hai capito? E quali passi hai preso per risolvere questo problema?
Bhupesh Pant,
Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.
Licensed under cc by-sa 3.0 with attribution required.