Zabbix problém - mnoho zápisů na disk

darklogic

Mám problém se serverem, na kterém mi běží nový Zabbix 6.0. Jde o virtuální stroj na VMware s nejnovějším Debianem. Nic víc na tom neběží. Všiml jsem si, že se pravidělně provádí hromada zápisů na disk, viz graf:

Ověřil jsem si, že za tím opravdu stojí Zabbix. Pokud na serveru vypnu službu zabbix-server, zápisy ustanou. Pomocí utility "iotop" v linuxu jsem zjistil, že zápisy provádí proces "mysqld [ib_pg_flush_co]", tedy jedná se o zápisy ze Zabbixu do Mysql databáze.

Statistiky, kolik toho Zabbix monitoruje, jsou zde:

Není to sice úplně málo, ale prakticky to stejné mi monitoruje starší server se Zabbixem 2.0.5, kde rozhodně takové množství zápisů na disk není. Bohužel takové množství zápisů se odraží na odezvách systému a i sám Zabbix si pak někdy stěžuje: "Disk read/write request responses are too high (read > 20 ms for 15m or write > 20 ms for 15m)"

Našel jsem prakticky stejný popis problému, ale bez řešení:
https://www.reddit.com/r/zabbix/comments/r1x7cg/high_sql_writessec/

Netuší někdo, co by mohlo pomoci?

iTomB

darklogic No to nebude problem zabbixu, ale databaze. Zkus si zvysit cache pro mysql a zkusit se podivat na nastaveni zpozdenych zapisu (nevim zda nejak podporuje). Ale z duvodu uspory by mohl, ale zase je problem se zachovanim dat pri vypadku. Pripadne poradne SSD, pokud tam mas klasicky disk, tak bych se nedivil ...

krb

darklogic My jsme se s tim setkali po prechodu na 6.0.0 z 5.4.x
Problem zpusobil zabbix, ale reseni bylo az nejaka uprava v db. Co presne nevim, resil to kolega.

darklogic

Nejde o to, co je to za disky...ostatně borec, co popisuje stejný problém, na který jsem odkazoval, tak tam dle popisu SSDčka má. Problém je v tom, že se zapisuje nějaká hromada dat cca. 32-80 Mb/s, která vůbec nemá opodstatnění. Samotný síťový provoz (sběr dat ze zařízení) je ani ne 0,5 Mb/s, takže mi nehraje ten nepoměr, že se zapisuje 64x - 160x více, než se získává.

iTomB

darklogic Ale hraje, protoze zalezi co vse ma zabbix prepocitavat a aktualizovat v databazi ...

ekrajnak

Pri tom druhom obrazku (System information): co sa ukryva v tej spodnej casti po zoscrollovani?

darklogic

ekrajnak Už jen jedna položka: "High availability cluster: Disabled"

darklogic

iTomB Hele, disk fakt není příčina problému. Věc, co řeším je, že těch zápisů nemá být takové množství.

darklogic

krb A mohl bys to prosím tě od kolegy zjistit, co konkrétně bylo potřeba upravit?

ekrajnak

darklogic Mozu tam byt hlasky typu "Unsupported charset or collation", preto som sa pytal

Ked spustis slowquery log alebo len vseobecne query log, neopakuje sa tam nieco? Pripadne len v real-time show processlist; co ukazuje? Bezia tam nejake dopyty?

dacesilian

darklogic Minimálně se tam mají vytvořit nové tabulky pro historii (postup tady), ale to (asi) nesouvisí s tímhle problémem zápisů.

skrivy

Povedlo se ti to vyřešit? My teď nasazujeme na zabbix mysql 8.0 a uvítala nás hromada nepříjemných novinek. Jedna z nich jsou poměrně náročné redo logy.

darklogic

Ne, zatím jsem se k tomu nedostal. Resp. hledal jsem řešení neúspěšně předtím, než jsem psal sem. Tady se nějaké jasné řešení taky neobjevilo, takže mi trochu dochází nápady.

darklogic

Resp. řešením by mohla být migrace z Mysql do Postgresql, ale do toho jsem se zatím neodhodlal.

darklogic

ŘEŠENÍ:
Pomohlo editovat soubor /etc/mysql/my.cnf a přidat tam:

[mysqld]
innodb_log_file_size=512M
innodb-buffer-pool-size=2G

Zápisy na disk najednou klesly na cca. 1 MB/s. Celé to byla moje chyba, protože tyto parametry jsem se snažil tunit ještě před dotazem tady, ale bohužel jsem to zapisoval do jiného konfiguračního souboru, na který Mysql, jak se zdá, nebral zřetel.

iTomB

darklogic Takze jsem mel pravdu 😉