Omlouvám se za výpadek

3. 8. 2017 14:05:59

Omlouvám se za dnešní výpadek Webtrhu. Jedna databázová tabulka se porouchala takovým způsobem, že bylo potřeba kvůli opravě odstavit celý web.

Při opravě jsme bohužel museli použít půlnoční zálohu, takže se ztratila data z dnešního dopoledne. Všechny peněžní pohyby jsou v pořádku, ale pokud jste posílali zprávy nebo diskuse, pošlete je prosím znovu.

Dejte mi vědět, jestli potřebujete něco nahradit.

Nyní se probíráme logem a zjišťujeme, proč se tabulka poškodila.

Omlouvám se a děkuji za pochopení.

3. 8. 2017 14:05:59

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293349

Miroslav Kašpar

(5 hodnocení)

3. 8. 2017 14:10:13

V pohodě. ;-)

3. 8. 2017 14:10:13

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293348

David Musil

(69 hodnocení)

3. 8. 2017 14:12:27

Kdyz se poskodi tabulka, co to znamena? Ze se ztrati nejaka data, nebo spadnou nejake vazby?

Zajimalo by me to klidne do detailu a podrobne :)

Ale bylo to smutne dopoledne bez WT :D

3. 8. 2017 14:12:27

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293347

tomve

(22 hodnocení)

3. 8. 2017 14:14:16

Napsal musil.david;1402507
Kdyz se poskodi tabulka, co to znamena? Ze se ztrati nejaka data, nebo spadnou nejake vazby?

Data zůstanou, většinou, jen se prostě poškodí - nejde přečíst.

Zrovna v po jsem opravoval tabulku.

3. 8. 2017 14:14:16

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293346

Rudolf Kovařík

(2 hodnocení)

3. 8. 2017 14:16:25

Díky za info, jdu poslat zprávy znova :)

3. 8. 2017 14:16:25

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293345

David Procházka

(39 hodnocení)

3. 8. 2017 14:19:59

taky by mě zajímalo o co slo. pral jsem se jednou s poskozenyma innodb a nevyhral no

3. 8. 2017 14:19:59

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293344

hnidopich

(1 hodnocení)

3. 8. 2017 14:23:56

Sakra, to se dneska stihlo práce :D ;-)

3. 8. 2017 14:23:56

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293343

Martin Schlemmer

(36 hodnocení)

3. 8. 2017 14:30:31

Přesně tak, šlo o InnoDB poškozenou pádem MariaDB.

Jestli jste tu byli včera večer, víte, že byla odstávka. Updatovali jsme Nginx a MariaDB kvůli plánovaným novinkám.

Poté jsme projeli všechny tabulky, vše bylo v pořádku. Webtrh běžel, šel jsem spát.

Jenže v 1:05 v noci nová MariaDB spadla kvůli buffer overflow.

To poškodilo tabulku s hodnocením. Ta je celkem složitá, má hodně foreign keys, drží pohromadě víc tabulek.

Od té chvíle, jakmile přišel jakýkoliv dotaz na tabulku s hodnocením, databáze spadla, zrestartovala se a pokusila se obnovit.

To se projevovalo ráno tak, že se jedna stránka načetla (když jste se trefili do toho, kdy DB jela) a další stránka byla bílá (když DB nejela).

Bohužel nešlo na tabulku vůbec sáhnout, i pouhé CHECK TABLE databázi shodilo, takže jsem musel Webtrh úplně odstavit.

Pořád nevíme, proč přesně MariaDB v noci spadla, a je možné, že to bude ještě vyžadovat zásah.

3. 8. 2017 14:30:31

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293342

David Procházka

(39 hodnocení)

3. 8. 2017 14:36:12

jj neco podobneho jsem zazil taky (akorat na mysql). tak hlavne ze se podarilo, drzim palce at je to ok :)

3. 8. 2017 14:36:12

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293341

Martin Schlemmer

(36 hodnocení)

3. 8. 2017 14:36:34

Děkuju.

3. 8. 2017 14:36:34

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293340

Deaktivovany ucet

(21 hodnocení)

3. 8. 2017 14:37:14

Napsal Martin Schlemmer;1402512
Přesně tak, šlo o InnoDB poškozenou pádem MariaDB.

Já kdysi innodb zkoušel a byl to hrozněj opruz. Dávál jsem do toho sice dost dat ale to aby mě restart mysqld trval hodinu opravdu nepotřebuju :) Zlatý myisam.

3. 8. 2017 14:37:14

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293339

Tomáš

(27 hodnocení)

3. 8. 2017 16:37:03

V 0:12 mi přišel email o příhozu do jedné z mých aukcí a tento příhoz je nyní ztracen a ani nevím od koho byl.

Dá se tento příhoz dohledat? Zároveň bych chtěl svoje aukce prodloužit o 1 den, vzhledem k výpadku Webtrhu, je to možné? Děkuji

3. 8. 2017 16:37:03

https://webtrh.cz/diskuse/omlouvam-se-za-vypadek#reply1293338

Martin Schlemmer

(36 hodnocení)

3. 8. 2017 18:09:11