Microsoft MVP성태의 닷넷 이야기
개발 환경 구성: 511. Beats용 Kibana 기본 대시 보드 구성 방법 [링크 복사], [링크+제목 복사]
조회: 1748
글쓴 사람
정성태 (techsharer at outlook.com)
홈페이지
첨부 파일
 

Beats용 Kibana 기본 대시 보드 구성 방법

예를 들어, FileBeat를 이용해 IIS 로그를 취합중인 경우 여러분들이 직접 IIS를 위한 Kibana 대시보드를 만드는 것도 가능합니다. 그렇긴 하지만 (저처럼 초보자라면) Elastic Stack에서 미리 만들어 둔 기본 대시 보드를 봐두는 것도 나쁘진 않기 때문에 테스트 용도의 ES에서는 구성할만합니다.

사실 방법도 매우 단순하고, 게다가 이미 실행 중인 Kibana가 있다면 다음의 URL에서 친절하게 설명도 해주고 있습니다.

IIS logs
; http://localhost:5601/app/home#/tutorial/iisLogs

단순히 이 글에서는 정리 차원에서 간단하게 기록을 남겨봅니다. ^^




우선, 다음과 같이 제품들을 다운로드해 압축을 풀어놓았다고 가정하면,

TESTSRV 머신:
    Elasticsearch 설치
    Kibana 설치
    
TESTCLNT 머신:
    Beat 설치

TESTCLNT의 filebeat.yml을 편집해 TESTSRV에 설치한 Elasticsearch, Kibana에 대한 경로를 (여러분들의 환경에 맞게) 적절하게 설정한 후,

output.elasticsearch:
  hosts: ["192.168.100.50:9200"]

setup.kibana:
  host: "192.168.100.50:5601"

"setup" 인자로 filebeat를 실행하면 됩니다.

C:\filebeat> filebeat.exe setup
Overwriting ILM policy is disabled. Set `setup.ilm.overwrite: true` for enabling.

Index setup finished.
Loading dashboards (Kibana must be running and reachable)
Loaded dashboards
Setting up ML using setup --machine-learning is going to be removed in 8.0.0. Please use the ML app instead.
See more: https://www.elastic.co/guide/en/machine-learning/current/index.html
Loaded machine learning job configurations
Loaded Ingest pipelines

혼동하지 말아야 할 것은, "setup" 인자로 실행되는 환경 구성은 Elasticsearch, Kibana에 대해 수행되는 것일 뿐 정작 TESTCLNT 컴퓨터 내의 FileBeat를 위한 "설치" 과정과는 무관하다는 점입니다. (물론, Filebeat.exe는 단독으로 실행 가능한 파일이므로 기타 설치 과정이 필요하지 않습니다.)

참고로, 위의 명령어는 Kibana가 제공하는 여러 종류의 기본 대시보드 유형을 한꺼번에 설정하기 때문에 이후 Kibana를 방문하면 다음과 같이 다양한 대시 보드 목록을 확인할 수 있습니다.

kibana_ext_dashboard_1.png

그중에서 아래는 "[Filebeat IIS] Access an error logs ECS" 대시보드 화면의 일부입니다.






"setup" 명령어 수행 시 다음과 같은 오류가 발생한다면?

C:\filebeat> filebeat.exe setup
Exiting: Index management requested but the Elasticsearch output is not configured/enabled

"filebeat.yml"에서 "output.logstash"로만 데이터 출력을 경유하는 구성을 하면 안 됩니다. 대신 "output.elasticsearch"로 곧바로 전달하는 구성을 해야 합니다.

또는, 다음과 같은 오류가 발생한다면?

C:\filebeat> filebeat.exe setup
Overwriting ILM policy is disabled. Set `setup.ilm.overwrite: true` for enabling.

Index setup finished.
Loading dashboards (Kibana must be running and reachable)
Exiting: error connecting to Kibana: fail to get the Kibana version: HTTP GET request to http://localhost:5601/api/status fails: fail to execute the HTTP GET request: Get "http://localhost:5601/api/status": dial tcp [::1]:5601: connectex: No connection could be made because the target machine actively refused it.. Response: .

오류 메시지에 따라 localhost의 Kibana로 접속을 시도한 것이기 때문에 "filebeat.yml"에서 "setup.kibana" 기본값을 바꿔야 합니다.

# This requires a Kibana endpoint configuration.
setup.kibana:

  # Kibana Host
  # Scheme and port can be left out and will be set to the default (http and 5601)
  # In case you specify and additional path, the scheme is required: http://localhost:5601/path
  # IPv6 addresses should always be defined as: https://[2001:db8::1]:5601
  host: "192.168.100.50:5601"

그런데, 그래도 다음과 같은 오류가 발생한다면?

C:\filebeat> filebeat.exe setup
Overwriting ILM policy is disabled. Set `setup.ilm.overwrite: true` for enabling.

Index setup finished.
Loading dashboards (Kibana must be running and reachable)
Exiting: error connecting to Kibana: fail to get the Kibana version: HTTP GET request to http://192.168.100.50:5601/api/status fails: fail to execute the HTTP GET request: Get "http://192.168.100.50:5601/api/status": dial tcp 192.168.100.50:5601: connectex: No connection could be made because the target machine actively refused it.. Response: .

Kibana가 설치된 PC에서 5601 포트로 대기하고 있는 IP를 확인해 보고,

C:\Users\kevin> netstat -ano | findstr 5601
  TCP    127.0.0.1:5601         0.0.0.0:0              LISTENING       16592

저렇게 "127.0.0.1"로 바인딩되어 있으면 외부에서 접속할 수 없으므로, Kibana가 설치된 서버에서 "kibana.yml" 파일의 "server.host" 값을 편집해야 합니다.

# 이렇게 설정한 경우, Kibana를 공용 IP로 접근할 수 있는 서버에 두었다면 누구나 접근할 수 있으므로,
# xpack을 설치해 로그인 설정을 하는 등의 보안을 해야 합니다.

server.host: "0.0.0.0"




[이 글에 대해서 여러분들과 의견을 공유하고 싶습니다. 틀리거나 미흡한 부분 또는 의문 사항이 있으시면 언제든 댓글 남겨주십시오.]



donaricano-btn



[최초 등록일: ]
[최종 수정일: 7/10/2021

Creative Commons License
이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.
by SeongTae Jeong, mailto:techsharer at outlook.com

비밀번호

댓글 쓴 사람
 




1  2  3  4  5  [6]  7  8  9  10  11  12  13  14  15  ...
NoWriterDateCnt.TitleFile(s)
12609정성태4/22/2021427.NET Framework: 1045. C# - 런타임 시점에 이벤트 핸들러를 만들어 Reflection을 이용해 구독하는 방법파일 다운로드1
12608정성태4/21/2021582.NET Framework: 1044. C# - Generic Host를 이용해 .NET 5로 리눅스 daemon 프로그램 만드는 방법 [7]파일 다운로드1
12607정성태4/21/2021400.NET Framework: 1043. C# - 실행 시점에 동적으로 Delegate 타입을 만드는 방법파일 다운로드1
12606정성태4/21/2021427.NET Framework: 1042. C# - enum 값을 int로 암시적(implicit) 형변환하는 방법? [2]파일 다운로드1
12605정성태4/18/2021317.NET Framework: 1041. C# - AssemblyID, ModuleID를 관리 코드에서 구하는 방법파일 다운로드1
12604정성태4/18/2021304VS.NET IDE: 163. 비주얼 스튜디오 속성 창의 "Build(빌드)" / "Configuration(구성)"에서의 "활성" 의미
12603정성태4/16/2021355VS.NET IDE: 162. 비주얼 스튜디오 - 상속받은 컨트롤이 디자인 창에서 지원되지 않는 문제
12602정성태4/16/2021485VS.NET IDE: 161. x64 DLL 프로젝트의 컨트롤이 Visual Studio의 Designer에서 보이지 않는 문제
12601정성태4/15/2021327.NET Framework: 1040. C# - REST API 대신 github 클라이언트 라이브러리를 통해 프로그래밍으로 접근
12600정성태4/15/2021315.NET Framework: 1039. C# - Kubeconfig의 token 설정 및 인증서 구성을 자동화하는 프로그램
12599정성태4/14/2021307.NET Framework: 1038. C# - 인증서 및 키 파일로부터 pfx/p12 파일을 생성하는 방법파일 다운로드1
12598정성태4/14/2021331.NET Framework: 1037. openssl의 PEM 개인키 파일을 .NET RSACryptoServiceProvider에서 사용하는 방법 (2)파일 다운로드1
12597정성태4/13/2021302개발 환경 구성: 569. csproj의 내용을 공통 설정할 수 있는 Directory.Build.targets / Directory.Build.props 파일
12596정성태4/12/2021357개발 환경 구성: 568. Windows의 80 포트 점유를 해제하는 방법
12595정성태4/12/2021313.NET Framework: 1036. SQL 서버 - varbinary 타입에 대한 문자열의 CAST, CONVERT 변환을 C# 코드로 구현
12594정성태4/11/2021442.NET Framework: 1035. C# - kubectl 명령어 또는 REST API 대신 Kubernetes 클라이언트 라이브러리를 통해 프로그래밍으로 접근 [1]파일 다운로드1
12593정성태4/10/2021372개발 환경 구성: 567. Docker Desktop for Windows - kubectl proxy 없이 k8s 대시보드 접근 방법
12592정성태4/10/2021325개발 환경 구성: 566. Docker Desktop for Windows - k8s dashboard의 Kubeconfig 로그인 및 Skip 방법
12591정성태4/9/2021584.NET Framework: 1034. C# - byte 배열을 Hex(16진수) 문자열로 고속 변환하는 방법파일 다운로드1
12590정성태4/9/2021324.NET Framework: 1033. C# - .NET 4.0 이하에서 Console.IsInputRedirected 구현
12589정성태4/8/2021352.NET Framework: 1032. C# - Environment.OSVersion의 문제점 및 윈도우 운영체제의 버전을 구하는 다양한 방법
12588정성태4/7/2021327개발 환경 구성: 565. PowerShell - New-SelfSignedCertificate를 사용해 CA 인증서 생성 및 인증서 서명 방법
12587정성태4/6/2021477개발 환경 구성: 564. Windows 10 - ClickOnce 배포처럼 사용할 수 있는 MSIX 설치 파일
12586정성태4/5/2021298오류 유형: 710. Windows - Restart-Computer / shutdown 명령어 수행 시 Access is denied(E_ACCESSDENIED)
12585정성태4/5/2021290개발 환경 구성: 563. 기본 생성된 kubeconfig 파일의 내용을 새롭게 생성한 인증서로 구성하는 방법
12584정성태4/1/2021305개발 환경 구성: 562. kubeconfig 파일 없이 kubectl 옵션만으로 실행하는 방법
1  2  3  4  5  [6]  7  8  9  10  11  12  13  14  15  ...