DevOps 사건 대응 시간 단축을 위한 Amazon Bedrock 활용 사례

서론

클라우드 환경에서 복잡한 시스템을 운영하는 과정에서 발생하는 문제 중 하나는 DevOps 팀이 직면하는 사건 트리아지 문제입니다. Circle K는 Amazon Bedrock를 활용하여 DevOps 사고 대응 시간을 대폭 단축한 사례를 공유하고자 합니다. 본 포스트에서는 Amazon Bedrock의 활용 방안과 적용 사례를 통해 자동화와 배포 가이드라인에 대해 논의합니다.

본문

Circle K는 27개국에 걸쳐 17,200개 이상의 편의점과 주유소를 운영하며, 이러한 방대한 규모의 비즈니스 확장은 디지털 운영 시스템의 복잡도를 증가시켰습니다. 기존 수작업 방식의 트리아지 방법은 평균적으로 45-60분의 시간이 소요되는 반면, Amazon Bedrock 기반의 자동화 시스템 도입 이후 평균 트리아지 시간이 15분 내외로 단축되었습니다.

시스템 구현은 Amazon SNS, SQS, Lambda를 통해 Grafana에서 발생한 알림을 받아들인 후, Amazon Bedrock Flows와 AgentCore를 활용하여 사건을 자동으로 조사하고 Slack으로 구조화된 요약 보고서를 전달하는 방식으로 이루어졌습니다. 이러한 방식은 서비스별 경보에 대한 신속한 대응을 가능하게 하며, AWS 리소스의 헬스체크 및 내부 GitHub 리포지토리 탐색을 통한 문제 원인 파악과 해결 방안을 제시합니다.

결론

Amazon Bedrock를 통한 자동화된 DevOps 트리아지 시스템의 도입은 Circle K의 운영 효율성을 크게 개선시켰습니다. AI를 활용한 모니터링 및 자동 트리아지 시스템 구축은 반복적인 컨텍스트 수집을 자동화하여 엔지니어가 신속하게 문제를 해결할 수 있도록 지원합니다. 해당 시스템은 현재 다양한 서비스의 트리아지를 효과적으로 처리하고 있으며, AWS DevOps Agent와의 통합을 통한 추가적인 자동화를 계획 중입니다.

[1] https://aws.amazon.com/blogs/machine-learning/how-circle-k-accelerated-devops-incident-triage-to-under-15-minutes-with-amazon-bedrock/