log-analysis


ログ解析とはなにか簡単に調べてみた。

おもにログ収集、ログ集積、ログ解析の3つの要素から構成されることが多い。

具体的には以下の通り。

# ログ収集

# Fluentd

# Logstash

# Apache Flume

# ログ集積

要はstoreのようなもの。

# Elasticsearch

スケーラビリティに優れた全文検索エンジン。

# InfluxDB

# MongoDB

# Datadog

# AWS CloudSearch

# AWS S3

# AWS Redshift

# GCP BigQuery

# ログ解析(可視化)

集積したデータを表示する。いわゆるBIツール。

# Tableau

# Kibana

それぞれのユーザーに権限を与えるのが難しいそう

# Grafana

# Metabase

# メトリクスの収集

# Prometheus

アプリケーションメトリクスの監視

# refs