![]()
상황Airflow를 이용해서 low한 통계 데이터를 집계하는 API를 호출하여 daily 과금 금액과 total 과금 금액을 집계한다. 이때 과금 금액을 "사용한 값" 이라고 하자. "사용한 값"은 00시에 0으로 리셋해준다. "사용할 값"은 하루에 총 소진되어야 할 시간 * 스케줄(06시 ~ 12시에만 소진되어야 하는 등의 설정이 가능하다) 그런데 리셋을 해주었음에도 불구하고 "사용할 값"이 갑자기 치솟아 과소진 된 이슈가 있었다. 원인쿼리의 구성은 이랬다. - 원시 통계 데이터를 가지고 1차 가공 디비에 업데이트 (따라서 시간이 오래 걸리고, Replace Into와 셀렉트 절을 사용한다)REPLACE INTO 1차 가공 테이블 (date, 통계 데이터) SELECT date, 식별자, 통계에 필요한..
![]()
상황헬름으로 띄운 개발계 ELK에서, 특정 이유로 인해 Elastic Search의 인덱스가 모두 날아가는 상황이 생겼다. 개발계이기 때문에 큰 문제는 없었고, 인덱스 패턴을 새로 정의하여 Discovery를 활성하고자 하였다. 그러나 Kibana UI에서 인덱스 패턴 생성을 완료하였음에도 불구하고, 생성되지 않았던 상황. 원인Kibana는 최초 생성 시점에 .kibana_1이라는 인덱스를 생성한다. 이 인덱스는 Kibana 자체 구성 데이터를 저장하는 데 사용되며 대시보드 구성, 시각화, 저장된 검색 및 기타 사용자 정의 설정이 포함되어 있다. 더보기{ ".kibana_1" : { "aliases" : { }, "mappings" : { "properties" : { "application_usage_..
