Project

General

Profile

Actions

機能 #340

open

あらゆるものを †監視† する

Added by nop_thread 7 months ago. Updated about 1 month ago.

Status:
進行中
Priority:
低め
Assignee:
Start date:
05/19/2024
Due date:
% Done:

33%

一時中断:
Yes
pinned:
No
確認予定日:
前回確認日:
10/03/2024
管理外残件あり:

Description

部屋の環境を観測するために VPN に Prometheus サーバを立てたが、いろいろやらかした結果しっかりとサーバやアプリの監視をやっていかねばならんということになった。
†全てを監視する†。


Subtasks 7 (4 open3 closed)

機能 #331: メトリクス監視のセットアップ終了nop_thread05/19/2024

Actions
機能 #345: Prometheus と Thanos のサーバを立てる終了nop_thread05/19/2024

Actions
機能 #343: systemd-journald のログを各コンテナ内に溜めるのをやめる新規nop_thread

Actions
機能 #346: ログ集約サーバの整備新規nop_thread

Actions
機能 #484: 外形監視のセットアップ新規nop_thread

Actions
機能 #550: Rails アプリのログを systemd-journald に流す終了nop_thread11/02/2024

Actions
機能 #551: Apache2 のログを systemd-journald に流す待機中nop_thread

Actions
Actions #1

Updated by nop_thread 7 months ago

どうせなので新しい Prometheus サーバを立てるつもりでやっていく。

Actions #2

Updated by nop_thread 7 months ago · Edited

集めたいものメモ:

  • CoreDNS のメトリクス
  • Proxmox VE の様子
    • PVE 固有のものがあるかわからない。ホストに node_exporter を直接入れるのもそれはそれで若干の躊躇がある。
    • かといって各種コンテナに node_exporter を重複して突っ込むのもどうなんだろう。 VM/CT ID とかの紐付けも面倒になるだろうし。
  • AdGuard Home
    • サードパーティの exporter しかないだろうか?
Actions #3

Updated by nop_thread 7 months ago

ホストが生きたままアプリが死んでいることがちょくちょくあり (原因は様々だろうが)、メトリクス収集だけでなく外形監視の必要も感じている。
VPS とかに uptime-kuma か何かでも立てるか。
自動化に使いやすいものが良いが、調べる必要がありそう。

Actions #4

Updated by nop_thread 7 months ago

  • Subtask #345 added
Actions #5

Updated by nop_thread 7 months ago

  • Subtask deleted (#345)
Actions #6

Updated by nop_thread 7 months ago

  • Subtask #346 added
Actions #7

Updated by nop_thread 7 months ago

  • Subtask #331 added
Actions #8

Updated by nop_thread 7 months ago

  • Subtask #343 added
Actions #9

Updated by nop_thread 7 months ago

  • Assignee set to nop_thread
Actions #10

Updated by nop_thread 2 months ago

  • Subtask #484 added
Actions #11

Updated by nop_thread 2 months ago

  • Status changed from 新規 to 進行中
  • 一時中断 changed from No to Yes
  • 前回確認日 set to 10/03/2024

状況:

Actions #12

Updated by nop_thread about 1 month ago

  • Subtask #550 added
Actions #13

Updated by nop_thread about 1 month ago

  • Subtask #551 added
Actions #14

Updated by nop_thread about 1 month ago

https://mastodon.cardina1.red/@lo48576/113410804868071115

旧 Redmine インスタンスが死んでると思ったら、 /var/log/redmine/production.log が 704 MiB に達しており disk full になっていた。勘弁してくれ

コンテナの監視が必要!!!

Actions

Also available in: Atom PDF