전체 글 289

[LogQL] LogQL 의 다양한 예시

LogQL은 Grafana Loki에서 사용되는 쿼리 언어로, 로그 데이터를 검색하고 필터링하는 데에 사용됩니다. 기본적으로 PromQL과 비슷하지만 로그 데이터에 특화되어 있습니다. 예시를 통해 LogQL을 설명하겠습니다. 기본 구조: {}:: 중괄호 안에 쿼리를 작성합니다. []: 괄호 안에는 필터 조건을 작성합니다. 기본 검색: # {}: 필터링할 로그 레이블을 지정합니다. # |=: 로그 내용을 필터링하는 데 사용됩니다. # "query string": 검색할 문자열 또는 정규 표현식을 지정합니다. {label_name=~"regex"} |= "query string" # app="example" 조건에 해당하는 로그 중에서 "error"를 포함하는 항목을 찾습니다. {app="example"} ..

Elasticsearch 2023.11.20

[IT잡지식] Grafana Loki vs ELK 비교표

Grafana Loki: 1. 개요: Grafana Loki는 분산된 로그 수집 및 저장을 위한 오픈 소스 플랫폼입니다. Promtail과 함께 사용하여 로그를 수집하고, Object Store (S3, GCS 등)에 저장합니다. 2. 주요 특징: LogQL 쿼리 언어: Prometheus에서 영감을 받은 쿼리 언어로, 로그에 질의하기 위해 사용됩니다. 스키마 없음: 로그의 동적인 구조를 지원하며, 필요에 따라 새로운 레이블을 도입할 수 있습니다. 가변적인 리테인(보존) 정책: 로그 데이터의 보존 정책을 유연하게 구성할 수 있습니다. 3. 아키텍처: Promtail: 로그 수집을 위한 에이전트로, 로그를 수집하고 Loki에 전송합니다. Loki: 로그 데이터를 수신하고 Object Store에 저장하며,..

IT잡지식 2023.11.18

[Linux] find 명령어로 group,user 파일 찾기,변경하기

리눅스의 `find` 명령어를 사용하여 특정 그룹 권한 또는 특정 사용자로 된 파일을 찾을 수 있습니다. `find` 명령어는 파일 및 디렉토리 검색에 사용되며 강력하고 유연한 도구입니다. 다음은 `find` 명령어를 사용하여 특정 그룹 권한 또는 사용자로 된 파일을 찾는 예제입니다. 1. 특정 그룹으로 파일 찾기 특정 그룹으로 속한 파일을 찾으려면 `-group` 옵션을 사용합니다. 예를 들어, 그룹명이 "mygroup" 인 파일을 찾으려면 다음과 같이 명령을 입력합니다: find /경로 -group mygroup 여기서 `/경로`는 검색을 시작할 디렉토리의 경로를 나타내며, "mygroup"은 찾고자 하는 그룹명입니다. 2. 특정 사용자로 파일 찾기 특정 사용자로 속한 파일을 찾으려면 `-user` ..

Linux 2023.11.17

[Linux] Telegraf 설치 및 다양한 예제

Telegraf는 데이터 수집, 처리 및 전송을 위한 오픈 소스 시스템 모니터링 및 이벤트 데이터 수집 도구입니다. Telegraf는 다양한 데이터 소스에서 메트릭 데이터를 수집하고, 이를 다양한 대상 시스템에 전송하는 역할을 수행합니다. 이것은 시스템 모니터링, 로깅, 이벤트 트래킹 및 다른 관련 작업에 매우 유용합니다. Install Telegraf | Telegraf Documentation (influxdata.com) Install Telegraf | Telegraf Documentation Thank you for your feedback! Let us know what we can do better: docs.influxdata.com 기본 설정 Input (입력) Input 플러그인은 데이..

Linux 2023.10.16

[Elasticsearch] beat 별 간단한 설정 및 실행 방법(filebeat, packetbeat, metricbeat, winlogbeat, heartbeat, auditbeat)

참고사이트 Beats 다운로드: Elasticsearch를 위한 데이터 수집기 | Elastic Beats 다운로드: Elasticsearch를 위한 데이터 수집기 Elastic Stack용 경량 데이터 수집기인 Beats를 사용하여 데이터를 Elasticsearch로 손쉽게 수집하고 로그 파일, CPU 메트릭, 네트워크 데이터 등을 처리하세요. www.elastic.co 기능 Elastic Agent Beats Logstash 데이터 수집 역할 다양한 데이터 소스에서 데이터 수집 및 전송 다양한 데이터 소스에서 데이터 수집 및 전송 다양한 데이터 소스에서 데이터 수집 및 전송 플러그인 지원 모듈 기반 플러그인 지원 다양한 모듈 및 출력 플러그인 지원 다양한 입력 및 출력 플러그인 지원 구성 및 관리 K..

Elasticsearch 2023.10.13

[IT잡지식] PFsense, OPNsense, Untangle 비교표

PFsense, OPNsense, 그리고 Untangle은 모두 오픈 소스 방화벽 및 네트워크 보안 솔루션으로, 네트워크 보안을 강화하고 관리하기 위해 사용됩니다. 각각의 솔루션에 대한 자세한 설명과 비교표를 아래에 제시하겠습니다. PFsense: 설명: PFsense는 FreeBSD 기반의 오픈 소스 방화벽 및 라우터 플랫폼입니다. 웹 기반 관리 인터페이스를 통해 사용자가 쉽게 설정하고 관리할 수 있습니다. 주요 기능: 방화벽 기능 VPN 지원 (OpenVPN, IPsec 등) 프록시 서버 로드 밸런싱 다중 WAN 및 라우팅 기능 장점: 안정성과 성능이 뛰어나다. 넓은 커뮤니티 및 사용자 지원 단점: 일부 사용자에게 복잡할 수 있음 OPNsense: 설명: OPNsense는 PFsense의 포크로 시작..

IT잡지식 2023.10.12

[Linux] logrotate 설치하여, 주기적으로 로그를 삭제하기

logrotate는 Linux 시스템에서 로그 파일을 자동으로 관리하고 압축, 백업, 삭제, 로테이션 등을 수행하는 유틸리티입니다. 로그 파일은 시스템 리소스를 차지하고 디스크 공간을 낭비할 수 있으므로 logrotate를 사용하여 로그 파일을 효과적으로 관리할 수 있습니다. logrotate 설치 대부분의 Linux 배포판에는 logrotate가 기본적으로 포함되어 있습니다. 하지만 필요한 경우, 패키지 관리자를 통해 설치할 수 있습니다. 아래는 몇 가지 배포판에서의 설치 명령어 예제입니다. # Debian/Ubuntu sudo apt-get install logrotate # Red Hat/CentOS sudo yum install logrotate # Fedora sudo dnf install lo..

Linux 2023.10.11

[IT잡지식] k8s와 ocp 를 명령어 비교표

아래는 쿠버네티스(Kubernetes)와 OCP(OpenShift Container Platform)를 비교한 테이블입니다: 특징 쿠버네티스 (Kubernetes) OCP (OpenShift Container Platform) 개발자 및 커뮤니티 오픈 소스 프로젝트로 시작됨. 커뮤니티 주도 레드햇이 백업하고 지원하는 커뮤니티 버전과 상용 버전 존재 배포 및 관리 기본적인 컨테이너 오케스트레이션을 제공 컨테이너 관리를 위한 추가 기능을 제공 (보안, 모니터링, 라우팅 등) 인증 및 보안 기본적인 클러스터 인증 및 보안 설정 인증, 권한 부여, 네트워크 보안, 레지스트리 보안 등 추가 보안 기능 제공 스케일링 및 로드 밸런싱 수동 및 수평 스케일링 가능 오토 스케일링 및 로드 밸런싱을 위한 자동화된 기능 제..

Kubernetes 2023.10.10

[Elasticsearch] Kibana 에서 다양한 필터 예제

기본 필터링: fieldname:value: 필드의 값이 특정 값과 정확히 일치하는 문서를 검색합니다. 예: status:200 - "status" 필드 값이 200인 문서 검색 범위 필터링: fieldname:[min TO max]: 필드의 값이 주어진 범위 내에 있는 문서를 검색합니다. 예: age:[30 TO 40] - "age" 필드 값이 30에서 40 사이인 문서 검색 Wildcards (와일드카드): fieldname:value*: 필드의 값이 주어진 접두사로 시작하는 문서를 검색합니다. 예: name:joh* - "name" 필드 값이 "joh"로 시작하는 문서 검색 특정 문자열을 포함하는 메시지 필터링 메시지 필드에서 특정 문자열을 포함하는 로그를 필터링하는 예시입니다. 예: message..

Elasticsearch 2023.10.09

[IT잡지식] Fluentd, Filebeat, Logstash, Telegraf, Metricbeat, Prometheus, InfluxDB, DataDog 비교표

Fluentd: Fluentd는 로그 및 이벤트 데이터 수집 및 전송을 위한 오픈 소스 데이터 수집 도구입니다. 다양한 소스에서 데이터를 수집하고 가공한 후 다양한 목적지로 전송할 수 있습니다. Ruby로 개발되었으며 플러그인 생태계가 풍부하며 데이터 가공 기능이 강력합니다. 로그 수집 및 처리를 위한 유연성을 제공하며 복잡한 데이터 파이프라인을 구축할 수 있습니다. Filebeat: Filebeat는 경량 로그 데이터 수집 도구로 Elastic Stack의 구성 요소 중 하나입니다. 주로 파일 로그를 수집하고 Elasticsearch, Logstash, Kafka 등과 같은 다양한 목적지로 전송합니다. 로그 데이터의 수집 및 전송을 단순화하고 설정이 간단하며 경량입니다. 메트릭 수집을 제한적으로 지원합..

IT잡지식 2023.10.06