У вас кластерная версия вм или single-node? если кластерная, то

убедитесь, что в логах vmselect и vmstorage нод нет ошибок на интервале времени, когда обновлялся второй график

3 ответов

45 просмотров

кластерная, вот я могу связать это с тем, что у меня 3 узла, на всех я установил -replicationFactor=3 флаг для vminsert и для vmselect (+-dedup.minScrapeInterval=1ms как в доке), потом остановил весь стек контейнеров кластера ВМ (docker-compose down), чуть подождал и вновь запустил, ошибки, конечно, были в vmselect и vmstorage на этот период времени.

Aliaksandr-Valialkin Автор вопроса

можете посмотреть, какие ошибки были в vminsert, когда был недоступен один узел?

2021-08-03T17:22:09.320+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.52:8400" 2021-08-03T17:22:09.321+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.53:8400" 2021-08-03T17:22:09.323+0300 info VictoriaMetrics/app/vminsert/netstorage/netstorage.go:210 successfully dialed -storageNode="192.168.3.51:8400" 2021-08-04T09:37:40.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:236 cannot send 77530 bytes with 417 rows to -storageNode="192.168.3.52:8400": cannot read ack from vmstorage: cannot read data in 0.000 seconds: EOF; closing the connection to storageNode and re-routing this data to healthy storage nodes 2021-08-04T09:37:40.322+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 83624 bytes with 450 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.322+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 75144 bytes with 412 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.323+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 77530 bytes with 417 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:40.520+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:206 cannot dial storageNode "192.168.3.52:8400": dial tcp4 192.168.3.52:8400: connect: connection refused 2021-08-04T09:37:41.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 77668 bytes with 381 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:41.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 56118 bytes with 280 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:41.321+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 30140 bytes with 145 rows, since a part of storage nodes is temporarily unavailable 2021-08-04T09:37:42.320+0300 warn VictoriaMetrics/app/vminsert/netstorage/netstorage.go:167 cannot make a copy #3 out of 3 copies according to -replicationFactor=3 for 33861 bytes with 223 rows, since a part of storage nodes is temporarily unavailable и тд и тд Имитировал отказ узла с ip 192.168.3.52

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Ребят, подскажите, пожалуйста, почему в префиксе к ассетам, которые генерируются через фильтр | theme в шаблоне, стал вдруг появляться index.php? Вот так выглядит ссылка на а...
Виталий
1
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Блин, ребята, сори за тупые вопросы. А можно ли как-то открыть вебапку по нажатию на кнопку в меню(которое появляется слева, команды)?
Artem Stormageddon
3
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Карта сайта