Logstash, 중간에 빈 데이터 발생 시 derivative/difference+sum 함수 동작 이상

[jaegeunha]

문제 상황

• 데이터 수집 문제
  • InfluxDB에서 Logstash를 통해 수집된 SNMP 데이터가 비어 있거나 동일 시간에 두 번 기록되는 현상 발생.
• 그래프 표시 오류
  • 해당 문제로 인해 AI Prediction 화면에서 derivative sum 함수를 사용하는 그래프가 비정상적으로 표시됨.

[데이터가 빈 경우]

[데이터가 동일 시간에 두 번 기록되는 현상]

[그래프 오류]

[snetsystems]

1. logstash 수집 시, interface 별 in-octets과 out-octets의 총합을 각각 계산하여 장비 별 태그(like memory)로 함께 저장한다.
2. 트래픽 데이터 쿼리 시, derivative+sum에서 derivative+mean에 1번으로 수집된 총합 필드들로 쿼리한다.
   즉, 모든 interface의 in[out] 트래픽의 총합 필드를 interval time으로 평균하여 미분.
3. 모든 대시보드 및 canned 대시보드를 위 2번 쿼리로 변경.
4. AI 학습 및 에측을 위한 쿼리도 위 2번 쿼리로 변경.(#25)