mariadbのgeneral.logのエラーについて
いつもお世話になっております。
以下のようなエラーが出るのですがどういう状態かご教授いただけますでしょうか。
■mariadb general.log
77 Query insert into history_log (itemid,clock,ns,timestamp,source,severity,value,logeventid) values (61737,1534135131,739575190,0,'',0,'< 2018-08-13 13:38:30.322 JST >ERROR: 重複キーが一意性制約"pk_hshdt_audit_basic"に違反しています',0),(43196,1534135512,875998293,0,'',0,'< 2018-08-13 13:42:08.839 JST >ERROR: 現在のトランザクションがアボートしました。トランザクションブロックが終わるまでコマンドは無視されます',0)
■mariadb mariadb.log log_warnings=4
180813 16:49:33 [Warning] Aborted connection 102448 to db: 'zabbix' user: 'zabbix' host: 'localhost' (CLOSE_CONNECTION)
調べ始めた経緯としては、zabbixのアイテム値が取得できない事象が発生したためです。
上記エラーがアイテムの取得に関係しているのかわかりませんがどういう状態になっているのか確認したいので質問させていただきました。
【環境】
zabbixバージョン 3.4.7
CentOS Linux release 7.3.1611 (Core)
MariaDB 5.5.52
以上、よろしくお願いします。
yk_taiko - 投稿数: 184
general.log に記載されているのは監視対象のログ内容じゃないですか?
監視対象サーバでそのようなログはでていませんか。
シマダ - 投稿数: 8
■mariadb general.logのエラーは監視しているPostgreSQLのログ監視の内容ですね、、、
アイテム値が取得できないことが非常に困っています。
何を調査していけばよいかご教授願います。
Zabbixサーバーの起動 はい localhost:10051
ホスト数 (有効/無効/テンプレート) 1233 1062 / 40 / 131
アイテム数 (有効/無効/取得不可) 29479 27836 / 1593 / 50
トリガー数 (有効/無効 [障害/正常]) 12375 10509 / 1866 [26 / 10483]
ユーザー数 (オンライン) 11 2
1秒あたりの監視項目数(Zabbixサーバーの要求パフォーマンス) 237.53
zabbix_server.logを確認したところスロークエリーやデッドロックを発見しました。
12331:20180812:040815.213 slow query: 8.028462 sec, "insert into history_uint (itemid,clock,ns,value) values (61160,1534014206,485257710,1),(27207,1534014206,485257710,1),(51695,1534014215,593747712,0),(61115,1534014215,595454655,13024),(41615,1534014215,596649415,0),(60995,1534014215,596759841,9848),(29915,1534014215,597402269,1290323),(60935,1534014215,597537690,0),(60875,1534014215,597747723,0),(61715,1534014215,598058725,33240),(53615,1534014215,598190208,0),(53195,1534014215,598462830,2904),(31115,1534014215,598736061,22724501504),(41735,1534014215,599188820,608),(50315,1534014215,599220232,0),(51755,1534014215,599368763,0),(45575,1534014215,599482457,520),(41315,1534014215,599502820,0),(49715,1534014215,599592276,0),(40175,1534014215,599807876,11704),(63095,1534014215,599923130,1),(50915,1534014215,600319359,16844320768),(44015,1534014215,600777887,0),(41255,1534014215,600915040,0),(47795,1534014215,601327974,1),(41675,1534014215,601434347,2728),(45395,1534014215,601484615,37808),(41195,1534014215,601961388,0),(30215,1534014215,602002037,0),(30755,1534014215,602011140,1),(41135,1534014215,602197593,0),(31715,1534014215,602256260,6749424),(60095,1534014215,602551942,0),(61295,1534014215,603332197,60080),(47915,1534014215,604429289,659096),(54155,1534014215,604625527,1602731),(27215,1534014215,604772177,193),(48515,1534014215,605836055,1),(50255,1534014215,606467020,63889928),(49595,1534014215,606582980,1),(45335,1534014215,607874180,158024),(45215,1534014215,608264568,91365864),(46475,1534014215,608883055,584),(30335,1534014215,609632661,1),(54815,1534014215,611092462,1),(28115,1534014215,617074207,0),(51335,1534014215,619264456,1),(42095,1534014215,619310296,1840),(32735,1534014215,619392480,58270504),(40295,1534014215,622229789,1),(48035,1534014215,622286879,1),(32675,1534014215,622528690,2),(33215,1534014215,622638789,2),(32555,1534014215,622689802,271208),(32075,1534014215,622969535,1272),(32015,1534014215,623315406,1024),(32615,1534014215,623379549,0),(32315,1534014215,623470718,1),(34295,1534014215,624816092,140945912),(51395,1534014215,624876655,25912),(33995,1534014215,624935758,0),(34175,1534014215,624986641,88),(47135,1534014215,625056362,1),(32495,1534014215,625072549,0),(32135,1534014215,625113302,2100400),(33155,1534014215,626030482,12648),(32435,1534014215,626474001,1),(32375,1534014215,626539586,720),(34115,1534014215,626644345,1512),(34235,1534014215,627064174,1),(32195,1534014215,627567325,1),(46295,1534014215,627741857,984),(42035,1534014215,628466871,6440),(47735,1534014215,629168490,106432),(63695,1534014215,629250424,3584),(63455,1534014215,629350897,0),(63515,1534014215,630624876,2112),(46235,1534014215,631759895,4360400),(34621,1534014215,650101897,200),(47975,1534014215,656871137,1),(46355,1534014215,664730999,24550608),(34055,1534014215,664909989,1),(32975,1534014215,667919353,0),(63635,1534014215,668842370,1),(34624,1534014215,692068118,200),(34617,1534014215,692556693,0),(61763,1534014215,700191888,1),(48080,1534014215,700191888,1013616),(61834,1534014215,700191888,7424),(61832,1534014215,700191888,0),(48068,1534014215,700191888,1),(48052,1534014215,700191888,1236176),(48073,1534014215,700191888,0),(61838,1534014215,700191888,2),(61836,1534014215,700191888,0),(61765,1534014215,700191888,1),(48050,1534014215,700191888,120344),(48078,1534014215,700191888,335376),(51373,1534014215,700191888,1008),(48074,1534014215,700191888,504),(61853,1534014215,700191888,12616),(48053,1534014215,700191888,1008),(48058,1534014215,700191888,1),(61772,1534014215,700191888,0),(48049,1534014215,700191888,32088),(61777,1534014215,700191888,25072),(61778,1534014215,700191888,4976),(61852,1534014215,700191888,0),(61774,1534014215,700191888,8904),(61835,1534014215,700191888,3808),(61770,1534014215,700191888,1),(61831,1534014215,700191888,58040),(48083,1534014215,739268398,273344),(48076,1534014215,739268398,483872),(61846,1534014215,739268398,0),(51371,1534014215,739268398,0),(61757,1534014215,739268398,15984),(48070,1534014215,739268398,0),(48056,1534014215,739268398,1),(61776,1534014215,739268398,170904),(48071,1534014215,739268398,0),(61849,1534014215,739268398,13144),(48072,1534014215,739268398,272),(61833,1534014215,739268398,16784),(61773,1534014215,739268398,51336),(61840,1534014215,739268398,1),(61839,1534014215,739268398,1),(48039,1534014215,739268398,0),(48067,1534014215,739268398,1),(48041,1534014215,739268398,464),(61767,1534014215,739268398,1),(61837,1534014215,739268398,41256),(48057,1534014215,739268398,1),(61845,1534014215,739268398,1),(61844,1534014215,739268398,1),(48062,1534014215,739268398,1),(61761,1534014215,739268398,8552),(48055,1534014215,739268398,2),(61843,1534014215,739268398,1),(48061,1534014215,739268398,2),(48081,1534014215,739268398,210528),(48059,1534014215,739268398,1),(48085,1534014215,739268398,0),(51372,1534014215,739268398,1),(61762,1534014215,739268398,3416),(48077,1534014215,739268398,0),(48043,1534014215,739268398,268328),(61851,1534014215,739268398,3920),(48082,1534014215,739268398,972672),(48054,1534014215,739268398,1),(61756,1534014215,739268398,312),(61848,1534014215,739268398,0),(48051,1534014215,739268398,33216),(61766,1534014215,739268398,1),(48048,1534014215,739268398,147976),(61847,1534014215,739268398,25768),(61759,1534014215,739268398,0),(48045,1534014215,739268398,0),(61841,1534014215,739268398,1),(48064,1534014215,739268398,1),(61850,1534014215,739268398,26272),(48066,1534014215,739268398,1),(61755,1534014215,739268398,536),(48060,1534014215,739268398,1),(61775,1534014215,739268398,0),(48044,1534014215,739268398,65312),(48069,1534014215,739268398,1),(61771,1534014215,739268398,0),(61760,1534014215,739268398,1229952),(48084,1534014215,739268398,164456),(48075,1534014215,739268398,1985632),(61764,1534014215,739268398,1),(61758,1534014215,739268398,7232),(48042,1534014215,739268398,0),(61830,1534014215,739268398,0),(61768,1534014215,739268398,1),(61842,1534014215,739268398,1),(61769,1534014215,739268398,1),(48038,1534014215,739268398,0),(48040,1534014215,739268398,712),(48065,1534014215,739268398,1),(48046,1534014215,739268398,2466088),(46028,1534014215,768535758,200),(46024,1534014215,768898774,0),(39961,1534014215,807573218,200),(33873,1534014215,888196469,1),(39964,1534014215,899695424,200),(39957,1534014215,900302615,0),(36847,1534014216,115657568,200),(38035,1534014216,162639214,200),(39862,1534014216,162743919,200),(36850,1534014216,168538585,200),(36843,1534014216,168897995,0),(38038,1534014216,268717329,200),(38031,1534014216,269245709,0),(39865,1534014216,275462095,200),(39858,1534014216,275743799,0),(54966,1534014216,619031014,1),(41676,1534014216,619224799,10704),(48516,1534014216,619555641,116),(31716,1534014216,619675205,17),(60816,1534014216,620747689,2944),(45576,1534014216,621319238,80),(61716,1534014216,622022717,7584),(60096,1534014216,622682513,632),(30096,1534014216,622828687,1),(41256,1534014216,624932581,0),(40116,1534014216,625068779,1920),(48816,1534014216,625098936,1),(60936,1534014216,625456215,17936),(45396,1534014216,625707273,55301760),(59316,1534014216,626004377,2147479552),(30756,1534014216,626012052,1),(49716,1534014216,626068572,0),(29916,1534014216,626274830,55),(51276,1534014216,627945615,1168),(61116,1534014216,628306243,9584),(51756,1534014216,628984440,2056),(45216,1534014216,629345027,24271336),(47916,1534014216,629604774,658488),(45516,1534014216,630925418,0),(46476,1534014216,631387832,48);
12333:20180812:042939.049 [Z3005] query failed: [1213] Deadlock found when trying to get lock; try restarting transaction [delete from escalations where escalationid between 102899 and 102906;]
DBがおかしいですかね、、、
yk_taiko - 投稿数: 184
以下いかがですか
・どのアイテムタイプで発生するか
・発生する対象ホストは一部/全て
・発生頻度は一時的/~以降 常時
・ログには何か出ていないか
- zabbix-server
- mariadb
- messages
- zabbix-agent
シマダ - 投稿数: 8
一番初めに見ておくべきzabbix-serverログを見てませんでした。
12331:20180812:055555.031 value cache is fully used: please increase ValueCacheSize configuration parameter
これが出ていたのでValueCacheSize を拡張してみます。
早い回答ありがとうございます。
もう少しzabbix-serverのログを確認してみます。
・どのアイテムタイプで発生するか
→すべてのアイテムです
・発生する対象ホストは一部/全て
→すべてです
・発生頻度は一時的/~以降 常時
→今日は13:15～
以前は8/8 15:00頃～8/10 17:00頃
・ログには何か出ていないか
- zabbix-server
- mariadb
- messages
- zabbix-agent
→確認してみます
ご協力ありがとうございます。
何か進展ありましたら報告致します。
シマダ - 投稿数: 8
お世話になっております。
ValueCacheSize の値を変更してからアイテム値の抜けがなくなりました。
正常に動作していると思われます。
ご協力いただきありがとうございました。