У вас кластерная версия вм или single-node? если кластерная, то

убедитесь, что в логах vmselect и vmstorage нод нет ошибок на интервале времени, когда обновлялся второй график

3 ответов

41 просмотр

кластерная, вот я могу связать это с тем, что у меня 3 узла, на всех я установил -replicationFactor=3 флаг для vminsert и для vmselect (+-dedup.minScrapeInterval=1ms как в доке), потом остановил весь стек контейнеров кластера ВМ (docker-compose down), чуть подождал и вновь запустил, ошибки, конечно, были в vmselect и vmstorage на этот период времени.

Aliaksandr-Valialkin Автор вопроса

можете посмотреть, какие ошибки были в vminsert, когда был недоступен один узел?

2021-08-03T17:22:09.320+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.52:8400" 2021-08-03T17:22:09.321+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.53:8400" 2021-08-03T17:22:09.323+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.51:8400" 2021-08-04T09:37:40.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:236 cannot send 77530 bytes with 417 rows to -storageNode="192.168.3.52:8400": cannot read ack from vmstorage: cannot read data in 0.000 seconds: EOF; closing the connection to storageNode and re-routing this data to healthy storage nodes 2021-08-04T09:37:40.322+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 83624 bytes with 450 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.322+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 75144 bytes with 412 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.323+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 77530 bytes with 417 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.520+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:206 cannot dial storageNode "192.168.3.52:8400": dial tcp4 192.168.3.52:8400: connect: connection refused 2021-08-04T09:37:41.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 77668 bytes with 381 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:41.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 56118 bytes with 280 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:41.321+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 30140 bytes with 145 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:42.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 33861 bytes with 223 rows, since a part of storage nodes is temporarily unavailable и тд и тд Имитировал отказ узла с ip 192.168.3.52

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Привет!) Кто как юзает переменные в строках?) Чисто ради интереса Вот так: echo "У меня {$bananasAmount} бананов"; Или вот так: echo "У меня ${bananasAmount} бананов";
Виталий
3
разработчик ботов скидывает портфолио, боты которые он уже создал. А вот как узнать что это именно он их создал?
Gosudar
4
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
кто-нибудь уже пробовал это?
Lencore
4
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
❓ Подскажите как сделать в группе телеги функцию (кнопку) пересылки сообщения где есть нарушение правил? Бот к каждому сообщению (по определенным ключам) добавляет снизу кнопк...
Alexander
4
Карта сайта