통합 온라인 슬롯 관리 도구로 구현
로그를 사용하여 시스템 운영 관리의 효율성 향상

시스템 또는 애플리케이션에서 발생하는 현상을 기록하는 이벤트 로그, 장치 내에서 작동을 기록하는 작동 로그, 시스템 간의 통신 상태를 기록하는 통신 로그 및 시스템 내에서 발생하는 오류 온라인 슬롯 기록하는 운영 온라인 슬롯 포함하여 다양한 유형의 로그가 있습니다.

또한 로그를 수집, 검색 및 분석하는 다양한 방법이 있습니다. 가장 원시적 인 방법은 스크립트 (프로그램) 작성, 대상 시스템 또는 응용 프로그램에서 로그를 수집하고 고유 한 로그 분석 응용 프로그램 또는 Excel을 사용하여 분석하는 것입니다. 그러나 이것은 여러 시스템 로그를 관리하는 데 적합하지 않습니다. 또 다른 방법은 오픈 소스 소프트웨어 (OSS)를 수집, 검색 및 분석 기능과 결합하는 것이지만 기술에 대한 합리적인 지식 으로이 방법을 사용해야합니다.

전반적으로 여러 시스템 로그를 검색하고 분석하려면 통합 로그 관리 도구를 사용하는 가장 효율적인 방법입니다. 가장 대표적인 제품 중 하나는 Splunk입니다. Splunk는 물리적 또는 가상 환경에 관계없이 모든 IT 시스템에서 생성 된 로그를 수집하고 인덱싱하여 실시간 검색, 분석 및 시각화를 가능하게합니다.

여기에서 우리는 Splunk를 소개하고 전 세계적으로 고객 지원을 제공함으로써 자체 스토리지 온라인 슬롯의 운영 상태를 시각화하려는 Cloudian의 노력을 소개 할 것입니다. 이 회사는 일본에서 설립되었으며 현재 실리콘 밸리에 본사를 둔 객체 저장 공급 업체입니다. 이 회사의 주력 제품인 스케일 아웃 객체 저장 제품인 Cloudian Hyperstore는 주요 국내 및 국제 클라우드 서비스 및 IT 회사의 스토리지 온라인 슬롯으로 사용되며 주로 약 600 개의 회사, 주로 해외 회사에서 구현되었습니다.

전 세계적으로 비즈니스를 운영하는 회사의 경우 문제 해결과 같은 기본 유지 보수 지원이 원격으로 지원되며 스토리지 시스템 및 하드웨어와 관련된 로그는 중앙에 통합 및 지원 팀이 분석합니다. 이전에는 사내에서 개발 한 응용 프로그램을 사용하여 로그를 수집하고 분석했지만 수집 한 로그의 양은 엄청 났으며 완전히 활용되지 않았습니다. 또한, 자체 로그 분석 응용 프로그램의 운영 및 관리는 인력에게 크게로드되었으며 조직은 점점 더 개인화되고있었습니다. 따라서 회사는 명성이 높은 통합 로그 관리 도구를 도입하고 구현의 실적을 도입하여 담당 직원이 집중해야 할 작업에 집중할 수 있도록 고려했습니다.

• 회사의 채택 요구 사항은 표준 함수를 사용하여 모든 로그를 분석 할 수 있었으며 로그를 축적하는 스토리지를 확장 할 수 있다는 것이 었습니다. "우리의 경우, 우리는 전 세계적으로 실행되는 스토리지 시스템에서 로그를 얻을 수 있으므로 하루에 수백 GB의 데이터를 보유하고 있으며 향후 더 많은 고객이있는 것처럼 더 많은 것을 볼 수 있습니다. 따라서 스토리지 확장 성이 중요했지만 Splunk는이 요구 사항을 충족했습니다."
  (글로벌 기술 지원 부사장 Goto Tetsuaki)
  

• 

회사는 Splunk를 채택하기로 결정하고 SCSK를 구현 파트너로 임명했습니다. 두 회사는 2019 년 2 월에 회의를 시작하여 POC를 개최했습니다. 그 후, 우리는 POC에서 발생한 문제를 해결하고 2019 년 11 월에 본격적인 운영을 시작했습니다.

• 시스템을 구축 할 때, 우리는 짧은 시간 안에 하루에 한 번 전 세계에서 로그를로드하기 위해 많은 노력을 기울였습니다. 작업이 시작된 후, 우리는 글로벌 환경에서 사용자 사용을 촉진하기 위해 자체 내부 분석 환경을 개발하기 위해 노력했습니다. 특히, 우리는 작동 매뉴얼, 로그 검색을위한 쿼리, 시각화 용 대시 보드 등을 만듭니다. "로그를 수집 할 수 있다고해도 사용자가 즉시 사용할 수 있다는 의미는 아닙니다. 먼저 원하는 데이터를 검색 할 수 있도록 작업 매뉴얼을 만들었습니다. POC 프로세스 중에 생성 된 검색 쿼리 및 대시 보드를 기반으로 현장 사용자로부터 피드백을 받았으며 반복적 인 개선을 수행했습니다."
  (글로벌 기술 지원 교장 지원 엔지니어 Yoshikawa Kohei)
  

• 

• Claudian은 하루에 한 번 전 세계적으로 작동하는 스토리지 시스템의 로그 (스토리지 I/O, CPU 사용, HDD 용량 등)를 얻어 Splunk의 고속 스토리지에 축적됩니다. "가장 최근의 데이터는 Splunk의 고속 스토리지에 저장되며 일주일 후의 데이터가 덜 자주 검색되므로 원격 저장소에 자동으로 저장하여 객체 저장에 저장하는 기능을 사용합니다.이를 통해 무제한 저장소 및 로그를 검색 할 수 있습니다."
  (글로벌 기술 지원 교장 지원 엔지니어 Kurihara Takeshi)
  

• 

온라인 슬롯 시각화하기위한 모든 메커니즘의 결과로 Claudian이 문제로 본 모든 데이터는 완전히 활용되지 않았으며 운영의 개인화가 해결되었습니다. 현재 직원은 언제든지 모든 고객의 스토리지 시스템의 상태를 확인할 수 있습니다. 또한 Splunk는 로그의 양이 축적되고 비용이 매일 생성되는 로그의 양에 비례하는 시스템이기 때문에 Claudian은 상당한 비용을 발생시키지 않고 원격 저장에 사용되는 온라인 슬롯 작동한다고 말합니다.

현재 Cloudian은 Splunk의 MLTK (Machine Learning Toolkit)를 활용하여 하드웨어 고장을 미리 예측하기 위해 노력하고 있으며, 이는 기계 학습을 사용한 데이터 분석을 가능하게하고 향후 서버 및 응용 프로그램으로 범위를 확장 할 계획입니다. 또한 Splunk에서 추출한 데이터와 Salesforce, Slack 및 기타 조직을 연결하여 대표 및 고객에게 알림을 보내는 것을 고려하고 있습니다.

그림 : Splunk 대시 보드 화면

Cloudian이 소개 한 Splunk는 다음과 같은 기능을 갖춘 세 가지 기능의 검색 및 탐지, 분석 및 시각화 및보고의 세 가지 기능을 갖추고 있습니다.

● 검색/탐지
엄청난 양의 기계 데이터에서 필요한 정보를 빠르게 선택할 수 있습니다. 검색하려는 요소를 복잡한 방식으로 결합 할 수도 있습니다. 검색 패턴을 정기적으로 저장하고 실행할 수 있으며 결과에 따라 알림을 경고 할 수 있습니다. 또한 검색 결과를 드릴 및 파기하거나 불필요한 데이터를 제거하고 실제로 필요한 것만 추출 할 수 있습니다.

● 분석/시각화
검색 결과에서 그래프와 테이블을 만들고 데이터에서 예상 트렌드의 징후를 분석하고 표시합니다. 상관 관계 분석을 통해 여러 시스템의 데이터를 단면적으로 연결하고 관련이없는 이벤트에서 귀중한 정보를 추출 할 수 있습니다.

●보고
분석 결과를 쉽게보고 할 수 있으며 결과를 주기적으로 PDF 파일로 보낼 수 있습니다. 또한 여러 분석 보고서를 결합하고 그래픽, 대화식 대시 보드를 만들 수 있습니다. 멀티 테넌트 기능을 사용하면 각 사용자에게 사용할 수있는 대시 보드 화면을 설정할 수 있습니다.

IT 시스템 작업에서 모든 시스템의 로그를 빠르고 간단하게 검색하여 실패의 원인을 신속하게 식별 할 수 있습니다. 시스템 변경이 발생하더라도 변경 사항을 쉽게 식별 할 수 있으며 시스템 로그를 수집하고 변경 사항을 분석하여 실패로 이어지는 징후를 감지 할 수 있습니다. 시스템의 운영 인력이 개인화되는 경우 운영 상태를 시각화하고 운영 노하우를 템플릿하여 운영 기술을 레벨링 할 수 있습니다. 또한 응용 프로그램을 관리 할 때 모든 로그는 중앙에서 관리되고 시각화되므로 성능 병목 현상을 쉽게 식별하고 추세 분석을 허용 할 수 있습니다. 또한 애플리케이션 실패 및 버전 업그레이드로 인한 예기치 않은 문제를 처리 할 수 ​​있으며 시스템 복구 시간 단축에도 기여합니다.

Cloudian이 Splunk를 도입했을 때 SCSK는 POC를 구현하는 것에서 문제 해결, 요구 사항 정의, 설계, 구성 및 운영이 시작된 후 일관된 지원을 제공했습니다.

SCSK는 2012 년부터 Splunk 고객을위한 기술 지원을 해왔으며, 구현에서 상담, 설계, 건설, 구현 서비스, 유지 보수 및 운영 지원 등을 제공했으며 일본에서 이미 100 명 이상의 고객을 지원했습니다. 2020 년에 그는 "Splunk 2020 APAC 판매 파트너"를 수상했으며 APAC의 가장 많이 팔린 Splunk로 인정 받았습니다. 또한 SCSK는 Splunk로 인증 된 엔지니어를 보유하고 있으며 2018 년 SCSK 엔지니어는 Asia Pacific에서 Hackathon 이벤트에서 우승했습니다. SCSK는 Splunk 제품 소개를위한 문의 데스크를 열었으므로 로그를 사용하여 시스템 운영 및 관리의 효율성을 향상 시키려면 언제든지 문의하십시오.