개발과 육아사이

LogQL은 Grafana Loki에서 사용되는 쿼리 언어로, 로그 데이터를 검색하고 필터링하는 데에 사용됩니다. 기본적으로 PromQL과 비슷하지만 로그 데이터에 특화되어 있습니다. 예시를 통해 LogQL을 설명하겠습니다. 기본 구조: {}:: 중괄호 안에 쿼리를 작성합니다. []: 괄호 안에는 필터 조건을 작성합니다. 기본 검색: # {}: 필터링할 로그 레이블을 지정합니다. # |=: 로그 내용을 필터링하는 데 사용됩니다. # "query string": 검색할 문자열 또는 정규 표현식을 지정합니다. {label_name=~"regex"} |= "query string" # app="example" 조건에 해당하는 로그 중에서 "error"를 포함하는 항목을 찾습니다. {app="example"} ..

Grafana Loki: 1. 개요: Grafana Loki는 분산된 로그 수집 및 저장을 위한 오픈 소스 플랫폼입니다. Promtail과 함께 사용하여 로그를 수집하고, Object Store (S3, GCS 등)에 저장합니다. 2. 주요 특징: LogQL 쿼리 언어: Prometheus에서 영감을 받은 쿼리 언어로, 로그에 질의하기 위해 사용됩니다. 스키마 없음: 로그의 동적인 구조를 지원하며, 필요에 따라 새로운 레이블을 도입할 수 있습니다. 가변적인 리테인(보존) 정책: 로그 데이터의 보존 정책을 유연하게 구성할 수 있습니다. 3. 아키텍처: Promtail: 로그 수집을 위한 에이전트로, 로그를 수집하고 Loki에 전송합니다. Loki: 로그 데이터를 수신하고 Object Store에 저장하며,..

Fluentd: Fluentd는 로그 및 이벤트 데이터 수집 및 전송을 위한 오픈 소스 데이터 수집 도구입니다. 다양한 소스에서 데이터를 수집하고 가공한 후 다양한 목적지로 전송할 수 있습니다. Ruby로 개발되었으며 플러그인 생태계가 풍부하며 데이터 가공 기능이 강력합니다. 로그 수집 및 처리를 위한 유연성을 제공하며 복잡한 데이터 파이프라인을 구축할 수 있습니다. Filebeat: Filebeat는 경량 로그 데이터 수집 도구로 Elastic Stack의 구성 요소 중 하나입니다. 주로 파일 로그를 수집하고 Elasticsearch, Logstash, Kafka 등과 같은 다양한 목적지로 전송합니다. 로그 데이터의 수집 및 전송을 단순화하고 설정이 간단하며 경량입니다. 메트릭 수집을 제한적으로 지원합..