grafana через корпоративный прокси/grafana behind proxy

Нужно было слать уведомления в телегу, но напрямую доступ в интернет закрыт. Настройка прокси выглядит так.

Grafana v.6.7.4
OS: CentOS 7.7

Решение:


В /etc/sysconfig/grafana-server добавляем

http_proxy=192.168.0.XX:9090

https_proxy=192.168.0.XX:9090

и перезапускаем графану

systemctl restart grafana-server

journald уменьшение размера логов

Заканчивалось место на корне

Решил уменьшить размер логов journald.

для этого меняем значение в /etc/systemd/journald.conf

я выставил 2ГБ.

[Journal]
Storage=persistent
Compress=True
#Seal=yes
#SplitMode=uid
SyncIntervalSec=1s
RateLimitInterval=1s
RateLimitBurst=10000
SystemMaxUse=2G
#SystemKeepFree=
SystemMaxFileSize=10M
#RuntimeMaxUse=
#RuntimeKeepFree=
#RuntimeMaxFileSize=
MaxRetentionSec=1month
MaxFileSec=1day
ForwardToSyslog=False
#ForwardToKMsg=no
#ForwardToConsole=no
ForwardToWall=False
#TTYPath=/dev/console
#MaxLevelStore=debug
#MaxLevelSyslog=debug
#MaxLevelKMsg=notice
#MaxLevelConsole=info
#MaxLevelWall=emerg
#LineMax=48K




2.перезагружаем конфиг systemctl force-reload systemd-journald

способы перезапуска сервиса тут: 

https://unix.stackexchange.com/questions/253203/how-to-tell-journald-to-re-read-its-configuration

кастомизация Prometheus и AlertManager в OKD 4.5

 Понадобилось слать алерты в Slack и  кастомизировать текст нотификейшнов.

Для этого в Web UI переходим в Cluster Settings --> Alertmanager --> YAML 

rabbitmq установка TTL для сообщений

Была проблема с рэббитом, сообщения копились в очереди. Решением было установка времени жизни для сообщении 3 минуты.


rabbitmqctl set_policy TTL ".*" '{"message-ttl":180}' --apply-to queues