구티

kibana 로그는 디폴트로 stdout에 출력을 하게 된다. 데몬으로 동작되고 있는 ( systemctl ) kibana 서비스의 로그를 보기 위해서는, journalctl -u kibana.service 를 이용하여 볼 수 있다. $ journalctl -u kibana.service --since=today > ~/kibana.log 파일로 출력하도록 변경하기 위해서는 kibana.yml에 logging.dest 를 변경해주면 된다. $ sudo cat /etc/kibana/kibana.yml | grep logging.dest #logging.dest: stdout logging.dest: /var/log/kibana.log

Kibana 에서 필터를 이용하여 필요한 데이터만 볼 수 있는데, 필터는 KQL 을 직접 작성 하거나 UI 상에서 필터를 추가하여 사용할 수 있다. KQL KQL은 Kibana Query Language 의 약어이고, 아래와 같이 field 명으로 쿼리를 작성할 수 있다. 문법은 따로 찾아볼 것 없이, 작성을 하게 되면 자동완성 창이 뜨면서 field를 보여주고, 필드를 입력하면 type에 따라 사용 가능한 연산자를 보여주며 친절하게 설명도 보여준다. area 는 number 타입으로, 각종 비교 연산자 및 필드가 존재하는지 연산자를 사용할 수 있음을 보여준다. UI Filter UI 상에서 사용하는 필터는 아래와 같이 Add filter 를 누르면, 선택 가능한 필드 및 연산자를 선택할 수 있게 해준다..

ElasticSearch 에 새로운 필드가 추가가 되었고, Discover에서도 해당 필드가 정상적으로 보이고 있는데 Visualize 나 Filter 메뉴의 Field에서는 해당 필드가 나오지 않는 경우가 있다. 그럴 때는, Kibana에서 해당 index 의 field list 가 업데이트 되지 않아 발생한 문제이므로, field list 를 업데이트 해주면 된다. Management > Kibana > Index Patterns 에 가서, Refresh Field list 버튼을 눌러 주면 field list 를 업데이트 해주고, 아래에 새롭게 추가된 Field 목록이 나온다.

APM 동작을 안하거나, APM 에서 service 를 못찾거나, APM 에서 Configuration 생성 시에 에러가 나거나 하는 경우가 있으면, apm 관련 에러 index 에서 ES 의 index가 block이 됐다거나 read-only, allow delete (api) 의 메시지를 보게 되면 아래와 같이... index \[.kibana\_1\] blocked by: \[forbidden/12/index read-only / allow delete (api)\]; 일일히 찾아서 설정을 변경해줘도 좋지만, 그냥 모든 인덱스 설정을 변경해줘도 된다. curl -XPUT localhost:9200/_all/_settings -H 'Content-Type: application/json' -d '{"..

Load Kibana 수행 시, 아래와 같이 에러가 나는 경우가 있다. unable to add 1 of 1 kibana objects, error: index [.kibana_1] blocked by: [forbidden/12/index read-only / allow delete (api)]; .kibana_1 인덱스가 block 이 되어 에러가 난 경우다. 아래 명령어를 통해 ES의 .kibana_1 인덱스의 설정을 변경해주자. curl -XPUT localhost:9200/.kibana_1/_settings -H 'Content-Type: application/json' -d '{"index":{"blocks":{"read_only_allow_delete":false}}}' 그러면, Load ki..