Bagaimana untuk melaksanakan analisis log teragih dan perlombongan dalam perkhidmatan mikro PHP

Cara melaksanakan analisis log teragih dan perlombongan dalam perkhidmatan mikro PHP

Pengenalan:

$ curl -L -O https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-7.10.2-darwin-x86_64.tar.gz
$ tar xzvf filebeat-7.10.2-darwin-x86_64.tar.gz
$ cd filebeat-7.10.2-darwin-x86_64/

filebeat.inputs:
- type: log
  paths:
    - /path/to/your/microservice/logs/*.log

output.logstash:
  hosts: ["your_logstash_host:your_logstash_port"]

Jalankan arahan berikut untuk memulakan Filebeat ：

$ ./filebeat -e -c filebeat.yml

3 Konfigurasikan alat pengumpulan log

Konfigurasikan pemalam masukan dalam Logstash untuk menerima data log daripada setiap perkhidmatan mikro. Langkah-langkah khusus adalah seperti berikut:

(1) Pasang Logstash

Jalankan arahan berikut untuk memasang Logstash:

$ curl -L -O https://artifacts.elastic.co/downloads/logstash/logstash-7.10.2-darwin-x86_64.tar.gz
$ tar xzvf logstash-7.10.2-darwin-x86_64.tar.gz
$ cd logstash-7.10.2-darwin-x86_64/

(2) Konfigurasi Logstash

input {
  beats {
    port => your_logstash_port
  }
}

filter {
  # 编写日志过滤规则
}

output {
  elasticsearch {
    hosts => ["your_elasticsearch_host:your_elasticsearch_port"]
    index => "your_index_name-%{+YYYY.MM.dd}"
  }
}

$ ./logstash -f logstash.conf

4. Konfigurasikan Elasticsearch dan Kibana

Elasticsearch dan Kibana ialah komponen teras untuk menyimpan dan memaparkan data log. Langkah-langkah khusus adalah seperti berikut:

(1) Pasang Elasticsearch dan Kibana

Rujuk dokumentasi rasmi untuk memasang Elasticsearch dan Kibana.

(2) Konfigurasikan Elasticsearch dan Kibana

Ubah suai fail konfigurasi Elasticsearch dan Kibana untuk memastikan ia boleh diakses secara normal.

(3) Konfigurasikan output Logstash

Ubah suai konfigurasi hos bahagian output dalam fail konfigurasi Logstash untuk memastikan data log dikeluarkan dengan betul kepada Elasticsearch.

(4) Gunakan Kibana untuk analisis log dan perlombongan

Buka antara muka web Kibana, sambung ke contoh Elasticsearch yang dimulakan, dan gunakan bahasa pertanyaan KQL untuk analisis log dan perlombongan.

2. Analisis log dan perlombongan

1 Gunakan Elasticsearch untuk analisis log

Elasticsearch menyediakan keupayaan pertanyaan yang kuat, yang boleh ditulis dengan menulis DSL. pernyataan pertanyaan untuk menganalisis data log. Berikut ialah contoh kod untuk menggunakan Elasticsearch untuk analisis log:

$curl -X GET "localhost:9200/your_index_name/_search" -H 'Content-Type: application/json' -d'
{
    "query": {
        "match": {
            "message": "error"
        }
    }
}'

2 Menggunakan Kibana untuk perlombongan balak

Kibana menyediakan antara muka intuitif dan fungsi paparan carta yang kaya, yang boleh. Bantu kami menjadikan perlombongan balak lebih mudah. Berikut ialah contoh kod untuk menggunakan Kibana untuk perlombongan balak:

GET your_index_name/_search
{
  "query": {
    "match": {
      "message": "error"
    }
  },
  "aggs": {
    "level_count": {
      "terms": {
        "field": "level.keyword"
      }
    }
  }
}

Kod di atas akan menanyakan log yang mengandungi kata kunci "ralat" dalam log, statistik agregat berdasarkan tahap log dan menjana carta untuk memaparkan tahap pengedaran.

Kesimpulan:

Dengan membina sistem pengumpulan log dan menggunakan Elasticsearch dan Kibana untuk analisis log dan perlombongan, kami boleh memantau dan menganalisis status berjalan perkhidmatan mikro dalam masa nyata dengan lebih baik. Masalah ditemui dalam masa dan ditangani dengan sewajarnya, dengan itu meningkatkan kestabilan dan ketersediaan aplikasi. Saya harap artikel ini akan membantu anda memahami cara melaksanakan analisis log teragih dan perlombongan dalam perkhidmatan mikro PHP.

Rujukan:

[1] Elastik Timbunan - Elasticsearch, Kibana, Beats dan Logstash /

Atas ialah kandungan terperinci Bagaimana untuk melaksanakan analisis log teragih dan perlombongan dalam perkhidmatan mikro PHP. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!