가용성 확보를 위해 MTTR에 집중하는 SRE에 주목해야 할 NetOps

F5 에코시스템 | 2018년 5월 14일

사이트 신뢰성 엔지니어(SRE)는 대개 엔지니어링 또는 운영 조직에 속해 이름 그대로 사이트의 신뢰성을 유지하는 데 중점을 두는 비교적 새로운 직무입니다. 일반적으로 애플리케이션의 가용성을 보장하는 일을 의미하지만, 성능 관리도 포함됩니다. 오늘날 대부분의 최종 사용자는 응답하지 않는 앱을 사용할 수 없는 것으로 여기므로 이는 당연한 일입니다.

Perusing Catchpoint의 2018년 SRE 보고서를 살펴보던 중, 서비스 수준 지표와 SRE 메트릭을 비교한 차트가 눈에 띄었습니다. 일반적으로 최상위 서비스 수준 지표로 ‘가용성’이 제시되면 메트릭으로 ‘가동 시간’이나 ‘중단 시간’도 함께 표시됩니다. 하지만 이 설문조사에 참여한 SRE의 경우는 그렇지 않았습니다.

서비스에 가장 중요한 서비스 수준 지표가 무엇인지 묻자, 압도적인 84%가 ‘최종 사용자 가용성’을 1순위로 꼽았습니다. 지연 시간은 61%로 2위, 오류율은 60%로 근소한 차이의 3위를 차지했습니다. 보고서에서 최종 사용자 응답 시간으로 설명된 성능도 58%라는 인상적인 응답률을 기록했습니다.

이제 성공을 정의하는 데 사용되는 지표를 살펴보겠습니다. 인프라 및 운영 분야에서는 ‘가동 시간’과 같은 지표나 ‘파이브 나인(99.999%)’처럼 기억하기 쉬운 표현을 더 흔히 접합니다.

반면 SRE는 성공을 인시던트 발생률과 평균 복구 시간(MTTR)을 기준으로 판단하는 경향이 있습니다. 같은 보고서에 따르면 SRE의 41%가 SRE가 되기 전에 ‘DevOps 엔지니어’로 일했으므로 이는 놀라운 일이 아닙니다. DevOps 자체도 가동 시간을 계산하기보다는 MTTR을 더 중요하게 여기는데, 이는 다운타임이 발생할 수밖에 없다고 전제하기 때문입니다. 핵심은 다운타임을 완전히 피하려고 애쓰며 시간을 낭비하는 대신 신속하게 문제를 해결해 그 시간을 최소화하는 것입니다.

그럼에도 예리한 독자라면 MTTR을 최소화하는 것이 곧 다운타임을 최소화하는 것임을 알아차릴 것입니다. 해결이 빠를수록 다운타임도 줄어듭니다.

이 둘의 미묘한 차이는 사람들이 평가받는 지표에 맞춰 최적화하는 경향이 있다는 점입니다. 코드 줄 수로 평가받는다면 필요 여부와 관계없이 많은 코드를 작성하게 됩니다. 보안 사고 건수로 평가받는다면 모든 것을 철저히 통제하고, 침해 사고를 유발할 가능성이 있는 변경 사항에는 무조건 안 된다고 외치게 됩니다. 가동 시간을 기준으로 평가한다면 운영팀은 시스템을 계속 가동하고 사용 가능한 상태로 유지하는 데 집중하겠지만, MTTR을 단축할 수 있도록 시스템과 애플리케이션을 설계하고 계측하는 데는 집중하지 않을 것입니다.

이는 운영에 접근하는 방식의 변화라는 DevOps의 ‘문화적’ 측면 중 하나로, NetOps에도 이어져야 합니다. 가동 시간 최적화에만 계속 집중하면 평균 해결 시간을 단축하고 다운타임 최소화라는 목표를 달성하는 데 필요한 알림 및 관측 가능성(모니터링과 강력한 로깅 등)을 구축할 기회를 놓치게 됩니다.

로그를 일일이 뒤지는 것은 중앙 집중식 로그라 하더라도 문제의 핵심을 파악하고 해결하는 효율적인 방법이 아닙니다. 전체 데이터 경로(네트워크, 인프라, 애플리케이션)에서 용량, 연결성, 성능 등 가용성에 영향을 미치는 주요 변수를 실시간으로 모니터링하고 경고를 설정하면, 성능이 저하되거나 갑자기 장애가 발생한 시스템 또는 서비스를 신속히 파악할 수 있어 문제 해결 시간을 크게 단축할 수 있습니다.

NetOps는 프로덕션 파이프라인의 안정성과 관련해 이 접근 방식을 채택해야 합니다. 불가피한 장애에 대처하는 데 전반적으로 더 나은 접근 방식일 뿐만 아니라 DevOps 담당자들의 방식과도 일치하기 때문입니다. 결국 우리가 99.999%의 가용성만을 목표로 삼은 데에는 이유가 있지 않겠습니까? 아무리 노력해도 장애는 발생하며 완벽은 불가능하다는 사실을 알고 있기 때문입니다.

성공을 측정하는 지표를 가동 시간/중단 시간에서 MTTR로 전환하면 팀 간 협업과 프로덕션 파이프라인 전반에 걸친 관측 가능성 도구의 활용이 촉진됩니다. 설문조사에서 모니터링 및 알림 도구가 SRE의 ‘필수 도구’ 목록 최상위에 오른 데에는 이유가 있습니다. 오류나 인시던트 발생 시 알림을 제공하는 것을 목표로 하는 관측 가능성에 협업을 더하는 것이야말로 NetOps, DevOps, 앱 개발팀 모두가 애플리케이션의 속도와 가용성을 유지한다는 목표를 달성하도록 보장하는 더 나은 공식입니다.

공유
태그: 2018

작성자 소개

Lori Mac Vittie
Lori Mac Vittie수석 엔지니어 겸 최고 에반젤리스트 | F5

Lori MacVittie는 F5 CTO 오피스의 수석 엔지니어이자 최고 에반젤리스트로, 애플리케이션 딜리버리, 자동화 전략 및 인프라 분야에서 깊이 있는 전문성을 보유하고 있습니다. AI 에이전트를 위한 가드레일을 정의하고, 취약한 멀티클라우드 아키텍처를 분석하며, 확장 가능한 시스템의 한계를 탐구하는 등 복잡한 문제를 명확하게 풀어내는 것으로 잘 알려져 있습니다. 애플리케이션 개발, IT 아키텍처, 네트워크 및 시스템 운영 전반에 걸쳐 30년 이상의 업계 경험을 쌓았습니다. F5에 합류하기 전에는 수상 경력이 있는 기술 편집자로 활동했습니다. MacVittie는 컴퓨터 과학 석사 학위를 보유하고 있으며, 보안, 클라우드 및 엔터프라이즈 아키텍처 분야를 아우르는 다수의 저서를 집필한 작가입니다. 또한 보드게임과 비디오 게임을 열정적으로 즐기며, 치즈에 대해서는 거리낌 없이 확고한 견해를 갖고 있습니다.

Lori Mac Vittie의 다른 블로그 게시물

관련 블로그 게시물

성평등을 향한 여정: 사이버 보안 분야에서 성공적인 커리어를 개척하는 방법에 관한 Jenn Gile과의 Q&A
F5 에코시스템 | 2023. 07. 13.

성평등을 향한 여정: 사이버 보안 분야에서 성공적인 커리어를 개척하는 방법에 관한 Jenn Gile과의 Q&A

F5의 ‘성평등을 향한 여정’ 시리즈 네 번째 Q&A에서는 Rachael Shah와 NGINX 제품 마케팅 책임자 Jenn Gile이 사이버 보안 직종에 대한 오해를 바로잡고, 사이버 보안 분야의 성별 격차를 해소하기 위한 조언과 그 이점에 대해 이야기합니다.

TLS 검사에서 피터 파커 원칙 다루기
F5 에코시스템 | 2019. 12. 09.

TLS 검사에서 피터 파커 원칙 다루기

“큰 힘에는 큰 책임이 따른다.” 볼테르와 처칠도 이와 비슷한 말을 남겼지만, 이 문구는 스파이더맨 코믹스에서 벤 삼촌의 말로 가장 널리 알려져 있습니다. 물론 이 문구가 문화적으로 널리 통용되는 이유 중 하나는 TLS 검사를 비롯해 수많은 상황과 주제에 적용할 수 있기 때문입니다.

Venafi와 F5를 통한 머신 아이덴티티 보호
F5 에코시스템 | 2018. 12. 11.

Venafi와 F5를 통한 머신 아이덴티티 보호

‘머신 아이덴티티’란 간단히 말해 자동화된 프로세스가 자신의 신원을 식별할 수 있도록 하고, 다른 자동화 시스템과 프로세스가 관련 리소스에 적절한 수준의 접근 권한을 부여하도록 하는 방법을 의미합니다. 이 개념 자체는 새로운 것이 아닙니다. 비교적 새로운 점은 이를 구현해야 하는 규모입니다.

마이너와 미니언: 데이터 유출만이 비용을 초래하는 것은 아닙니다
F5 에코시스템 | 2018. 07. 23.

마이너와 미니언: 데이터 유출만이 비용을 초래하는 것은 아닙니다

물론 데이터 유출은 더 큰 비용을 초래할 수 있고(적어도 지금은), 실패 사실을 세상에 드러낼 수밖에 없게 합니다(통지 의무가 있으니까요). 하지만 보안을 단순히 데이터 노출 문제로만 봐서는 안 됩니다. 요즘은 데이터가...

내 클라우드에서 나가!
F5 에코시스템 | 2016. 10. 12.

내 클라우드에서 나가!

F5의 Jay Kelley가 전하는 최신 소식에는 Microsoft Office 365용 신규 ID 및 액세스 솔루션을 배포할 때 고려해야 할 사항이 정리되어 있습니다.

Shift(웹 앱) 보안 레터
F5 에코시스템 | 2015. 07. 06.

Shift(웹 앱) 보안 레터

웹 앱 보안을 개발 초기 단계로 앞당기세요. F5 블로그에서 DevOps 파이프라인 초기에 보안을 통합하여 취약점을 예방하고 시간을 절약하는 방법을 알아보세요.