Расскажите, как вы мониторите свои проекты?
Всем привет. Коллеги, а расскажите, как вы мониторите свои проекты? Сколько метрик в минуту? Куда пишете? Какие правила ротации данных? Как горизонтально растёте? Чем алеритите? Сложные алерты есть?Я к чему спрашиваю? У меня сейчас прометей есть и он кушает около 40000 метрик в минуту и даже рисует это всё в графане, пищит алертменеджером, но. Всегда есть но! Как известно, аппетит приходит во время еды, и бизнес хочет ещё примерно удвоить качество метрик. Текущий инстанс уже c3.8xlarge. Боливар не выдержит. Документация про горизонтальное скалирование говорит «федерируй и размазывай руками». То есть, горизонтально оно какбы и не масштабируется толком. Есть альтернативы?P.S: глаз сам косит в сторону «порубить на части и распихать в инфлюксы с капаситором», но оно там с горизонтальным масштабированием всё плохо (не стабильно и за нескромные деньги).P.S2: ну и альтернативу cloudwatch_exporter заодно может подскажете? А то у него мейнтейнер немного странно на ошибки реагирует.
671
10
Comments