인시던트 건수와 우선순위
인시던트를 그것을 낳은 사용량에 비추어 세고, 우선순위를 점수가 아니라 구성으로 읽고, 반복을 지켜보십시오. 인시던트 수요의 모양은 어느 한 건의 해결 시간보다 훨씬 일찍 어디에 투자해야 하는지 알려 주기 때문입니다.
개요와 동기
ITIL 4 용어로 인시던트는 서비스에 대한 계획되지 않은 중단 또는 서비스 품질의 저하입니다. 인시던트 관리(incident management)는 정상적인 서비스 운영을 현실적으로 가능한 한 빨리 복구하고 비즈니스에 대한 피해를 제한하는 프랙티스입니다. 모든 인시던트는 신호이기도 합니다. 서비스, 그 변경, 사용자, 모니터링 중 무언가가 기대대로 작동하지 않았습니다. 따라서 인시던트의 건수와 성격은 운영 팀이 가진 가장 많은 정보를 담은 수요 측정치 중 하나입니다.
양만으로는 좋은 지침이 되지 못합니다. 인시던트의 증가는 서비스가 나빠졌다는 뜻일 수도, 더 많은 사람이 쓰고 있다는 뜻일 수도, 모니터링이 개선되어 예전에는 보고되지 않던 결함이 이제 보인다는 뜻일 수도 있습니다. 감소는 신뢰성 작업이 결실을 맺었다는 뜻일 수도, 사용자가 보고하기를 그만두었다는 뜻일 수도 있습니다. 이 주제는 그 이야기들을 구분할 수 있을 만큼 충분한 맥락으로 양을 읽는 방법에 관한 것입니다. 사용량에 대해 정규화하고, 범주와 서비스별로 나누고, 우선순위의 구성과 반복의 비율을 지켜보는 것입니다.
우선순위가 주제의 후반부입니다. ITIL 실천은 보통 우선순위를 두 입력에서 도출합니다. 영향(비즈니스의 얼마나 많은 부분이 영향을 받는가)과 긴급성(비즈니스가 얼마나 빨리 수정이 필요한가)입니다. 이 짝은 기대되는 대응을 정하는 우선순위 수준에 대응됩니다. 애자일 팀에는 백로그를 선별하는 방식에서 가까운 대응이 있습니다. 결함의 심각도와 긴급성 라벨, 그리고 무엇이 대기열을 건너뛰는지 결정하는 흐름 보드의 "서비스 등급"입니다. 말은 다르지만 질문은 같습니다. 무엇을 먼저 처리해야 하며 왜인가?
ITIL 관점은 인시던트를 범주, 우선순위, 서비스 수준 목표가 있는 서비스 데스크와 해결 그룹이 소유하는 레코드로 봅니다. 애자일 관점은 계획 외 작업을 계획된 작업과 경쟁하는 흐름의 중단으로 봅니다(주제 2.9, 운영 작업과 계획 외 작업 참조). 측정치가 그 안의 사람이 아니라 시스템을 설명한다면 두 관점 모두 같은 측정치에서 이득을 봅니다. 서비스 데스크(service desk)는 대부분의 레코드가 시작되는 곳이며, 그 자체의 지표는 별도로 다룹니다(주제 3.1, 서비스 데스크 지표 참조). 인시던트에 얼마나 빨리 대응하고 해결하는지는 주제 3.3, 인시던트 대응 및 해결 시간에서 다룹니다. 중대 인시던트에는 자체 측정치가 있습니다(주제 3.4, 중대 인시던트 지표 참조).
아래에서 여러 용어가 반복됩니다. 백분위수는 관측값의 정해진 비율이 그 아래에 속하는 값이므로, 85번째 백분위수는 관측값의 85퍼센트가 넘지 않는 값입니다. 서비스 수준 협약(SLA)은 제공자와 고객 사이의 문서화된 약속입니다. 구성 항목(CI, configuration item)은 서비스를 전달하기 위해 관리해야 하는 구성 요소입니다. 푸아송 과정(Poisson process)은 어떤 평균 속도로 독립적으로 도착하는 사건을 설명하며 인시던트 도착의 유용한 첫 번째 모형입니다(주제 1.6, 서비스 지표를 위한 통계 소양 참조).
주제 1.2(굿하트의 법칙과 지표의 심리학)의 경고는 다른 어느 곳보다 여기에 더 적용됩니다. 인시던트 건수와 우선순위는 사람이, 흔히 압박 속에서 입력하며, 레코드에 붙은 숫자는 레코드가 쓰인 방식을 바꿔서 바꿀 수 있습니다. 아래의 모든 지표에는 악용 방식이 있고, 방호책은 정의의 일부입니다.
핵심 원칙
- 비교하기 전에 정규화하십시오. 건수는 그것이 나온 사용량, 사용자 기반, 거래량 없이는 거의 의미가 없습니다. 기간과 서비스 사이의 비율을 비교하고 원시 건수를 그 옆에 보여 주십시오.
- 하나의 숫자가 아니라 구성을 읽으십시오. 우선순위 분포, 범주 분포, 반복의 비율은 함께 있을 때 어떤 총합보다 많은 것을 말해 줍니다.
- 우선순위는 기분이 아니라 규칙입니다. 서면 매트릭스로 영향과 긴급성에서 도출하고, 사후에 얼마나 자주 바뀌는지 측정하십시오.
- 인시던트와 요청을 분리하십시오. 정상적인 것에 대한 요청은 결함이 아닙니다. 둘을 함께 세면 인시던트 양이 부풀려지고 서비스 데스크가 시간을 어디에 쓰는지 가려집니다(주제 3.5, 서비스 요청 이행 지표 참조).
- 반복이 가장 가치 있는 신호입니다. 되돌아오는 인시던트는 아직 해결되지 않은 문제를 가리킵니다(주제 4.1, 문제 관리 지표 참조).
- 서비스와 팀을 측정하고 상담원은 절대 측정하지 마십시오. 사람별 건수는 순위 매기기를 부르고, 순위 매기기는 데이터를 오염시킵니다(주제 1.2, 굿하트의 법칙과 지표의 심리학 참조).
- 양이 품질과 무관한 이유로 움직일 것을 예상하십시오. 릴리스, 계절, 캠페인, 보고 채널의 변화가 모두 건수를 이동시킵니다. 차트에 주석을 다십시오.
지표 정의
표는 이 주제의 지표를 나열합니다. 시계와 경계는 공식 열에 명시되어 있습니다. "닫힘"과 "열림"은 인시던트 레코드의 타임스탬프를 가리킵니다. 열린 시각은 레코드가 생성되거나 모니터링 시스템이 만드는 때이고, 닫힌 시각은 인시던트가 해결 확인되어 종료되는 때입니다.
| 지표 | 정의 | 공식 | 단위 | 데이터 원천 | ITIL 프랙티스 | 애자일 대응 | 주기 |
|---|---|---|---|---|---|---|---|
| 서비스별 인시던트 건수 | 기간 중 서비스에 대해 열린 인시던트의 수 | 열린 시각이 기간 안에 있고 영향받은 서비스에 귀속된 인시던트. 서비스 요청, 상위 레코드에 병합된 중복, 오접수로 취소된 레코드는 제외 | 건수 | ITSM 도구 인시던트 레코드 | 인시던트 관리 | 팀별 운영 결함 또는 계획 외 작업 항목 | 주, 월 검토 |
| 정규화된 인시던트율 | 서비스 사용량에 대한 인시던트 | 해당 기간에 열린 인시던트 / 같은 기간과 범위의 사용량 측정치(서비스별로 고르고 기록하는 활성 사용자, 세션, 거래) x 1,000. 사용량 측정치는 인시던트 도구가 아닌 원천에서 와야 함 | 사용 단위 1,000당 인시던트 | ITSM 도구와 분석 또는 모니터링의 사용량 데이터 | 인시던트 관리, 서비스 수준 관리 | 릴리스당 또는 사용자당 결함 밀도 | 월 |
| 우선순위 구성 | 각 우선순위 수준에서 열린 인시던트의 비율 | 열 때 기록된 우선순위의 인시던트 / 해당 기간에 열린 모든 인시던트, 수준마다 표시. 재분류된 인시던트는 열 때 우선순위로 세고 닫을 때 우선순위로 다시 표시 | 수준별 퍼센트 | 우선순위 변경 이력을 포함한 ITSM 도구 | 인시던트 관리 | 결함의 심각도 분포, 서비스 등급 구성 | 월 |
| 우선순위 재분류율 | 열 때와 닫을 때 사이에 우선순위가 바뀐 인시던트의 비율 | 닫을 때 우선순위가 열 때 우선순위와 다른, 기간 중 닫힌 인시던트 / 기간 중 닫힌 인시던트 | 퍼센트 | ITSM 도구 감사 추적 | 인시던트 관리 | 결함 백로그의 재선별률 | 월 |
| 범주 집중도 | 가장 큰 범주들이 차지하는 인시던트 양의 비율 | 건수 기준 상위 다섯 범주의 인시던트 / 해당 기간의 범주가 지정된 모든 인시던트. 범주가 없는 인시던트는 별도의 비중으로 보고 | 퍼센트 | ITSM 도구의 범주 및 서비스 필드 | 인시던트 관리, 문제 관리 | 구성 요소 또는 에픽별 결함 군집 | 월 |
| 반복 인시던트율 | 명시된 기간 안에 같은 서비스, 구성 항목, 범주에서 재발하는 인시던트의 비율 | 앞선 기간(예: 30일, 한 번 정해 기록)에 같은 서비스, CI, 범주로 이미 닫힌 인시던트가 있는, 해당 기간의 인시던트 / 해당 기간에 열린 인시던트. 재개방된 레코드는 반복이 아니라 재개방으로 셈 | 퍼센트 | ITSM 도구와 CMDB 연결 | 인시던트 관리, 문제 관리 | 회귀 또는 유출 결함률 | 월 |
| 재개방률 | 닫힌 뒤 다시 열린 인시던트의 비율 | 기간 중 닫힌 인시던트 중 명시된 기간(예: 7일) 안에 나중에 재개방된 것 / 기간 중 닫힌 인시던트 | 퍼센트 | ITSM 도구 상태 이력 | 인시던트 관리 | 재개방된 결함, 재작업 | 월 |
| 모니터링 감지 비중 | 사용자가 보고하기 전에 모니터링이 먼저 올린 인시던트의 비율 | 첫 이벤트가 자동 경보인 인시던트 / 해당 기간에 열린 모든 인시던트. 경보에서 사람이 연 인시던트는 경보 시각으로 셈 | 퍼센트 | ITSM 도구, 모니터링 연동 | 모니터링 및 이벤트 관리, 인시던트 관리 | 경보 기반 대 고객 보고 결함 | 월 |
정의에 대한 두 가지 메모입니다. 첫째, 이 표의 "우선순위"는 레코드가 지닌 우선순위이며, 사람들이 일이 처리되기를 원하는 순서가 아니라 영향과 긴급성 매트릭스에서 나와야 합니다. 둘째, 기간에 대해 보고하는 양은 특정일에 열려 있는 인시던트 수가 아니라 열린 건수입니다. 어느 시점의 열린 건수는 백로그 측정치이며 경과 시간과 함께 다룹니다(주제 3.3, 인시던트 대응 및 해결 시간 참조).
권장 사항
신중하게 세십시오
1. 인시던트가 무엇이고 무엇이 아닌지 적어 두십시오. 많은 도구가 인시던트, 요청, 경보, 문제를 한 테이블에 담습니다. 어떤 레코드 유형을 셀지 결정하고, 필터를 문서화하고, 매번 적용하십시오. 필터가 바뀌면 추세가 바뀌므로 변경을 날짜와 이유와 함께 기록하십시오(주제 1.5, 데이터 원천과 계측 참조).
2. 보고하기 전에 중복을 제거하십시오. 결함 하나가 티켓 오십 개를 낳으면 상위 인시던트가 사건이고 하위 레코드는 그 파급 범위의 측정치입니다. 두 숫자를 모두 보고하십시오. 상위 인시던트는 결함이 몇 번 발생했는지, 연결된 레코드는 몇 사람이 그것을 느꼈는지입니다. 둘을 섞으면 큰 장애 하나가 한 달 치 일상 업무처럼 보입니다.
3. 인시던트를 팀뿐 아니라 서비스에도 귀속시키십시오. 서비스는 비즈니스가 구매하고 이해하는 것입니다. 서비스 카탈로그(ITIL의 "service catalogue")로 목록을 정의하고, 서비스가 바뀔 때 CI로부터의 매핑을 검토하십시오. 서비스가 없는 인시던트는 고쳐야 할 데이터 품질 문제이며 그런 레코드의 비중은 보고할 가치가 있습니다.
양을 정규화하고 해석하십시오
4. 다른 원천의 사용량 측정치로 정규화하십시오. 인시던트 도구가 아니라 분석이나 모니터링에서 가져온 활성 사용자, 세션, 거래로 나누십시오. 사용자와 인시던트가 두 배가 된 서비스는 나빠진 것이 아니고, 사용량은 그대로인데 인시던트가 두 배가 된 서비스는 나빠진 것입니다. 아무도 분모가 무언가를 숨긴다고 믿지 않도록 비율 옆에 원시 건수를 보여 주십시오.
5. 추세 화살표가 아니라 관리도를 쓰십시오. 인시던트 건수는 아무것도 바뀌지 않았을 때도 주마다 변합니다. 관리도(control chart)는 변동의 일반적인 범위를 보여 주어, 팀이 신호에 반응하고 잡음은 내버려 두게 합니다. 한계 안에서 움직이는 주간 건수는 뉴스가 아니고, 평균의 한쪽으로 지속되는 연속은 뉴스입니다. 분기 말, 휴일, 릴리스 주기 같은 계절성(seasonality)은 같은 기간끼리 비교해 보정하십시오.
6. 차트에 이벤트로 주석을 다십시오. 릴리스, 이전, 캠페인, 의존 서비스의 장애, 보고 채널의 변경을 표시하십시오. 새 셀프서비스 양식이나 더 눈에 띄는 "문제 보고" 버튼은 서비스가 그대로인데도 양을 늘릴 수 있습니다. 대부분의 양에 대한 논쟁은 차트가 그 주에 무슨 일이 있었는지 보여 주면 빨리 끝납니다.
규칙으로 우선순위를 관리하십시오
7. 공개된 매트릭스로 영향과 긴급성에서 우선순위를 도출하십시오. 영향을 영향받는 사용자와 비즈니스 기능으로, 긴급성을 피해가 얼마나 빨리 커지는지로 정의하십시오. 상담원이 값을 고르는 페이지에 매트릭스를 게시하고 칸마다 두세 개의 실제 예를 두십시오. 자유 선택 우선순위 필드는 협상으로 변하고 "우선순위 1" 인시던트의 건수가 설득력의 측정치가 되므로 피하십시오.
8. 구성과 재분류율을 함께 보고하십시오. 건강한 구성은 최상위 우선순위의 인시던트가 소수이고 낮은 우선순위가 넓은 기반을 이룹니다. 최상위 수준이 늘면 피해가 커졌는지, 고객이 "긴급"이면 관심을 받는다는 것을 배웠는지 물으십시오. 재분류율은 매트릭스가 얼마나 잘 맞는지 보여 줍니다. 닫을 때 자주 바뀐다면 규칙이 불분명하거나 첫 평가가 서둘렀다는 뜻입니다. 매트릭스를 소유한 그룹에서 매달 재분류된 레코드의 표본을 검토하십시오.
9. 우선순위와 애자일 서비스 등급을 일치시키십시오. 전달 팀이 인시던트 기반 작업을 받는 곳에서는 같은 말과 같은 매트릭스를 쓰거나 분명한 매핑을 게시하십시오. 결함을 "높음"이라고 부르는 팀과 같은 결함을 "중간"이라고 부르는 운영 팀은 번역에 시간을 잃게 됩니다. 긴급 처리 작업에 명시적 허용치를 두어 중단이 흐름 측정치에 보이게 하십시오(주제 2.1, 흐름 측정치 참조).
반복과 패턴을 찾으십시오
10. 반복과 재개방을 별개의 신호로 추적하십시오. 재개방은 첫 수정이 유지되지 않았다는 뜻이고, 반복은 제대로 수정한 뒤에 같은 종류의 결함이 돌아왔다는 뜻입니다. 앞의 것은 해결 품질을, 뒤의 것은 해결되지 않은 원인을 가리킵니다. 반복되는 군집을 문제 레코드에 연결하고, 돌아올 가능성이 큰 인시던트를 고쳐진 것으로 세지 마십시오(주제 4.1, 문제 관리 지표 참조).
11. 파레토 원리(Pareto principle)로 어디를 볼지 고르십시오. 범주와 서비스를 인시던트 건수로 정렬하고 얼마나 적은 수가 양의 대부분을 차지하는지 보십시오. 나머지에 대한 새 보고서를 만들기 전에 상위 몇 개를 조사하십시오. 이 모양은 결론이 아니라 근본 원인 분석(root cause analysis)의 촉구입니다. 건수가 높은 범주는 단지 분류하기 쉬운 범주일 수 있기 때문입니다.
12. 발견 사항을 전달 팀과 서비스 데스크에 되돌려 주십시오. 서비스를 만들고 바꾸는 팀과 보고서가 아니라 정기 대화로 범주와 반복 관점을 공유하십시오. 반복되는 군집마다 소유자, 다음 단계, 날짜를 짝짓고 작업을 다른 우선순위와 같은 백로그에 올리십시오(주제 2.6, 백로그와 정제 지표 참조). 양은 원인이 제거될 때 줄어들며, 그러려면 계획된 용량이 필요합니다.
악용 방식과 방호책
| 지표 | 악용되는 방식 | 짝을 이루는 방호책 지표 또는 실천 |
|---|---|---|
| 서비스별 인시던트 건수 | 인시던트를 요청으로 기록함, 무관한 티켓을 병합함, 사용자가 보고하지 못하게 낙담시킴, 중복을 "결함 없음"으로 닫음 | 인시던트 양 옆에 사용자가 보고한 접촉량과 요청량, 서비스 데스크의 만족도와 이탈, 결함처럼 읽히는 요청의 표본 |
| 정규화된 인시던트율 | 가장 좋은 수치를 주는 분모를 고르거나 기간 사이에 사용량 정의를 바꿈 | 레지스트리에 기록된 서비스별 고정 사용량 측정치, 비율 옆에 원시 건수 표시 |
| 우선순위 구성 | 차분해 보이려고 우선순위를 낮추거나 관심을 얻으려고 올림, 대응 목표를 피하려고 낮은 우선순위를 부여함 | 우선순위 재분류율, 영향 및 긴급성 매트릭스에 비춘 월간 표본 검토, 고객이 보고한 영향 |
| 우선순위 재분류율 | 바뀌어야 할 때 우선순위를 바꾸지 않아 비율이 안정적으로 보이게 함, 목표에 맞추려고 닫을 때만 바꿈 | 인시던트 중에 영향이 바뀐 레코드의 표본, 인시던트 타임라인 검토 |
| 범주 집중도 | 포괄 범주를 쓰거나, 집중도를 숨기려고 큰 범주를 여럿으로 쪼갬 | 미분류 및 "기타" 레코드의 비중, 범주 목록의 주기적 검토, 범주를 해결 메모와 대조 점검 |
| 반복 인시던트율 | 연결을 피하려고 다른 문구나 CI로 새 인시던트를 엶, 재개방을 피하려고 일찍 닫음 | 텍스트와 서비스별로 거의 중복되는 레코드 검토, 재개방률, 문제 레코드에 대한 연결률 |
| 재개방률 | 재개방하는 대신 사용자에게 새 티켓을 열라고 요청함, 재개방을 피하려고 티켓을 늦게 닫음 | 최근 닫힌 티켓을 참조하는 새 티켓의 수, 고객의 해결 확인, 종료까지 시간 분포 |
| 모니터링 감지 비중 | 인시던트를 자동으로 여는 잡음 많은 경보를 만들거나, 사람이 사용자 보고를 경보로 다시 라벨링하게 함 | 실행 가능한 경보 비중 같은 경보 품질 측정치(주제 5.5, 모니터링과 경보 품질 지표 참조), 인시던트 원천 감사 |
건강한 수치는 따분하고 설명할 수 있습니다. 정규화된 비율은 안정적인 서비스에서는 일정하거나 줄고, 사용량이나 변경이 차트가 보여 주는 이유로 늘면 오릅니다. 우선순위 구성은 안정적이고, 재분류는 낮고, 소수의 범주가 의도적인 관심을 받습니다. 반복과 재개방은 계획된 문제 작업 뒤에 줄고, 어떤 지표의 움직임이든 누군가 숫자를 방어하지 않고도 줄 수 있는 설명이 있습니다.
상충 관계: 장점과 단점
| 접근 방식 | 강점 | 약점 |
|---|---|---|
| 원시 인시던트 건수 | 단순하고, 설명하기 쉽고, 항상 쓸 수 있음 | 사용량, 품질, 보고 행동을 하나의 숫자에 섞음 |
| 사용량에 대한 비율 | 기간과 서비스 사이의 공정한 비교를 가능하게 함 | 신뢰할 수 있는 사용량 원천이 필요하고 분모를 두고 논쟁할 수 있음 |
| 고정된 영향 및 긴급성 매트릭스 | 팀 간에 일관된 우선순위, 감사 가능 | 경직되게 느껴질 수 있고 경계 사례에는 판단과 재정의 경로가 필요함 |
| 자유 선택 우선순위 | 숙련된 상담원에게 빠르고 유연함 | 일관되지 않고, 압박에 열려 있고, 시간에 따른 비교가 어려움 |
| 상세한 범주 트리 | 수요가 어디서 오는지 보여 줌 | 압박 속에서 쓰기 어려워 사람들이 첫 번째 일치나 "기타"를 고름 |
| 태그가 있는 짧은 범주 목록 | 적용이 빠르고 일관됨 | 세부 사항이 적고 텍스트 분석이 필요한 패턴을 가릴 수 있음 |
| CI와 범주별 반복률 | 해결되지 않은 원인을 가리킴 | 좋은 CI 데이터에 의존함, 잘못된 연결과 누락이 모두 발생함 |
어떤 단일 측정치도 옳지 않음을 받아들이십시오. 용량 계획에는 원시 건수를, 건강에는 비율을, 위험에는 우선순위 구성을, 개선에는 반복을 쓰고 각각을 그것이 무엇인지 그대로 보여 주십시오. 범주 목록은 사람들이 쓸 수 있을 만큼 짧게 유지하고, 결정이 더 세밀한 세부 사항을 필요로 할 때만 트리를 개선하십시오.
팀과 논의할 질문
1. 여기서 무엇이 인시던트로 셈하며, 모두 같은 방식으로 규칙을 적용하고 있나요? 최근 레코드 열 건을 가져와 각자 인시던트, 요청, 기타로 라벨을 붙이게 하십시오. 답을 비교하고 불일치를 논의하십시오. 진행자는 고위 인사의 모든 티켓을 인시던트로 다루는 것 같은 습관을 찾고, 예시가 있는 서면 규칙 하나에 합의해야 합니다. 나중의 추세를 올바르게 읽을 수 있도록 날짜를 기록하십시오.
2. 지난 분기에 인시던트 양이 올랐을 때 사용량과 변경에 대해 무엇을 알고 있었나요? 차트를 릴리스, 캠페인, 사용량 수치의 타임라인 옆에 놓으십시오. 어떤 증가가 설명되었고 어떤 것이 설명되지 않았는지 물으십시오. 논의는 분모가 페이지에 얼마나 드물게 있는지 보여 주는 경향이 있습니다. 이제부터 각 서비스가 어떤 사용량 측정치를 가질지 합의하십시오.
3. 우선순위는 어떻게 결정되며, 마지막으로 우리를 놀라게 한 것은 언제였나요? 각 우선순위 수준의 최근 사례와 함께 영향 및 긴급성 매트릭스를 훑어보십시오. 상담원이 추측하는 곳과 고객이나 관리자가 압박하는 곳을 물으십시오. 몇몇 레코드의 열 때 우선순위와 닫을 때 우선순위를 비교하십시오. 논쟁을 줄이는 매트릭스나 예시의 변경 하나를 결정하십시오.
4. 인시던트 양의 대부분을 차지하는 세 범주는 무엇이며, 누가 원인을 없애는 일을 하고 있나요? 상위 범주와 각각의 기반 원인의 소유자를 나열하십시오. 답이 "아무도"라면 그것이 발견입니다. 범주가 실제 군집인지 라벨링 습관인지 물으십시오. 이번 분기에 전달 팀과 함께 조사할 군집 하나를 고르십시오.
5. 반복과 재개방을 어떻게 구분하며, 각각에 대해 무엇을 하나요? 팀에게 레코드 쌍 두세 개를 보여 주고 어느 것이 반복인지 물으십시오. 재개방이 첫 수정의 품질에 대해 무엇을 말하고, 반복이 원인에 대해 무엇을 말하는지 논의하십시오. 진행자는 그룹이 반복되는 군집을 하나씩 닫는 대신 문제 레코드에 연결하도록 이끌어야 합니다. 누가 얼마나 자주 검토할지 합의하십시오.
6. 인시던트 건수를 고위 리더가 매주 검토한다면 우리는 무엇을 바꾸고 싶어질까요? 그룹에게 그 숫자가 벽에 걸려 있다고 상상하게 하십시오. 어떤 습관이 바뀔까요? 기록하는 방식, 티켓을 병합하는 방식, 우선순위를 정하는 방식입니다. 압박을 비난 없이 공개적으로 명명하십시오. 어떤 방호책이 그 이동을 보여 줄지, 누가 그것을 볼지 합의하십시오.
네 가지 관점
제품 및 전달 팀
전달 팀은 이 주제의 산출물을 수요로 받습니다. 범주와 반복 관점은 제품의 어느 부분이 가장 많은 문제를 일으키는지 보여 주고, 우선순위 구성은 얼마나 많은 중단 작업을 계획해야 하는지 보여 줍니다. 팀은 인시던트 기반 작업을 용량의 일부로 다루고, 흐름 측정치에 보이게 유지하고, 반복되는 군집으로 백로그의 신뢰성 작업을 정당화해야 합니다(주제 2.9, 운영 작업과 계획 외 작업 참조). 릴리스당 인시던트 수를 세는 것은 유용한 추세이지만 개별 개발자에 대한 비난 측정치가 되어서는 안 됩니다.
서비스 및 운영 팀
서비스 및 운영 팀은 레코드를 만들고 우선순위를 둘러싼 압박을 느낍니다. 분명한 매트릭스, 짧은 범주 목록, 중복을 연결하는 빠른 방법에서 이득을 얻습니다. 범주가 없는 레코드의 비중과 재분류율처럼 자기 도구의 데이터를 다른 사람들보다 먼저 점검해야 합니다. 운영 팀은 월간 표본 검토를 이끌고 반복되는 군집을 문제 관리에 공급하기에 좋은 위치에 있습니다.
리더십과 거버넌스
리더는 서비스가 좋아지고 있는지와 어디에 투자해야 하는지 알고 싶어 합니다. 정규화된 비율, 우선순위 구성, 반복 관점을 주석과 함께 요청하고 단일 양 수치에는 저항해야 합니다. "더 적은 인시던트"라는 목표는 억제를 부르므로, 고객 영향과 반복 감소 같은 성과에 대한 기대를 정하십시오. 거버넌스는 우선순위 매트릭스를 소유하고 변경을 승인하며, 추세선에 미치는 효과를 기록해야 합니다.
고객과 사용자
고객은 인시던트를 범주가 아니라 중단된 일로 경험합니다. 결함을 보고하는 쉬운 방법, 자신의 영향에 기반한 공정한 우선순위, 정직한 업데이트가 필요합니다. 보고가 낙담되거나 우선순위가 임의로 느껴지면 양이 줄고 신뢰도 함께 줄어듭니다. 주요 발견을 개선된 서비스와 제거된 문제처럼 사용자가 알아볼 수 있는 말로 공유하십시오(주제 6.1, 고객 만족도 지표 참조).
실제 적용: 서비스 관리 사례
한 지역 병원의 IT 부서가 환자 기록 시스템, 일정 관리 시스템, 직원 메시징 도구를 지원합니다. 이 사례의 모든 숫자는 예시입니다.
월간 보고서는 분기 마지막 달에 인시던트 640건을 보여 주며 전달의 520건에서 늘었습니다. 리더십은 복구 계획을 요청합니다. 건수가 가장 크게 오른 일정 관리 시스템의 서비스 소유자는 서비스가 나빠졌다는 데 동의하기 전에 데이터를 보자고 요청합니다.
세 가지 사실이 드러납니다. 첫째, 일정 관리 시스템이 그달에 새 진료소 그룹을 얻어 활성 사용자가 약 30퍼센트(예시) 늘었습니다. 정규화하면 세션 1,000건당 인시던트율은 대략 일정했습니다. 둘째, 추가된 레코드 중 90건은 검사실 시스템과의 인터페이스 실패라는 하나의 상위 인시던트에 연결되어 있어, 별개의 결함 수는 소수만 늘었습니다. 셋째, 우선순위 구성이 이동했습니다. 최상위 우선순위의 비중이 전달의 2퍼센트에서 지금 7퍼센트가 되었습니다. 재분류율도 두 배가 되었고, 20건의 표본은 높은 우선순위의 약 절반이 닫을 때 낮춰졌음을 보여 주었습니다.
팀은 세 가지를 결정합니다. 상위 인시던트와 연결된 레코드를 따로 보고합니다. 활성 세션을 분모로 보고서에 추가합니다. 서비스 데스크 및 임상 책임자와 30분 세션을 열어 표본 레코드에 영향 및 긴급성 매트릭스를 적용하는데, "진료소가 환자를 예약할 수 없다"를 어떤 상담원은 중간으로, 다른 상담원은 높음으로 다뤘음이 드러납니다. 매트릭스에 칸마다 임상 예시 두 개를 추가합니다.
팀이 잡아내는 악용 위험은 조용합니다. 한 관리자가 우선순위 1마다 검토가 열리기 때문에 일정 관리 시스템에는 우선순위 1을 피하라고 상담원에게 요청했고, 그래서 레코드가 더 낮은 우선순위로 열렸다가 나중에 올려지거나 아예 올려지지 않았습니다. 재분류율과 표본 검토가 이 패턴을 드러냈습니다. 팀은 검토가 학습을 위한 것임에 합의하고 그 진술을 게시하며, 방호책으로 닫을 때 우선순위보다 낮게 열린 인시던트의 비중을 추적합니다. 범주 집중도도 인터페이스 결함이 목록 맨 위에 있음을 보여 주므로 문제 레코드가 열리고 인터페이스 팀과 수정 일정이 잡힙니다.
애자일, AI, 자동화, 분석
애자일
영향받은 서비스를 소유한 제품 팀과 정기 개선 대화에서 인시던트 수요를 검토하고 제거할 반복 원인 하나를 고르십시오. 주의할 점은 인시던트를 줄이는 목표가 정직한 보고를 줄일 수 있으므로 건수 옆에 모니터링 감지 비중을 두어야 한다는 것입니다.
AI
AI는 인시던트를 대량으로 분류하고 우선순위를 매길 수 있어서, 실제 영향의 변화 없이 우선순위 구성과 범주 집중도를 이동시킵니다. 우선순위 구성을 우선순위의 정직성에 대한 사람의 표본 점검과 짝지우고, AI가 지정한 우선순위의 재분류율을 보고하십시오. 주의할 점은 과거 티켓으로 학습한 모델은 옛 범주 습관을 되풀이하므로, 새로운 종류의 인시던트가 옛 라벨 아래 접수되는지 지켜봐야 한다는 것입니다.
자동화
인시던트 생성, 우선순위 변경, 모니터링 경보를 자동으로 포착해 양을 이벤트에서 세고, 자동 분류 단계를 오류율로 측정하십시오. 주의할 점은 경보 폭주가 사용자 피해가 아니라 도구를 반영하는 인시던트 건수를 만들므로 사용량으로 정규화하고 중복을 제거해야 한다는 것입니다.
분석
양을 사용량으로 정규화하고, 우선순위를 시간에 따른 구성으로 보여 주고, 반복 인시던트를 원인에 연결하십시오. 이는 예방에 어디에 투자할지에 정보를 줍니다. 주의할 점은 높은 우선순위 인시던트의 건수가 낮으면 월별 비교에는 너무 작으므로 더 긴 구간을 써야 한다는 것입니다.
부문별 관점
스타트업. 양이 작고 팀이 모든 인시던트를 알고 있어서 비율과 매트릭스가 무겁게 느껴질 수 있습니다. 서비스별 단순한 건수와 짧은 범주 목록을 유지하고, 무엇이 인시던트로 셈하는지 한 쪽에 적어 두십시오. 작은 팀은 반복되는 결함을 빨리 없애 시간을 되찾을 수 있으므로 반복을 지켜보십시오.
소규모 사업. 서비스 데스크가 호스팅 도구를 쓰는 한 사람일 수 있습니다. 도구의 표준 보고서를 쓰고, 우선순위를 평이한 영향 및 긴급성 규칙으로 몇 단계로 유지하고, 요청이 인시던트로 세지 않는지 확인하십시오. 새 직원이나 새 소프트웨어 같은 변경에 대한 메모와 함께 월별로 비교하십시오.
대기업. 많은 서비스, 공급업체, 데스크 때문에 일관성이 주된 문제입니다. 영향 및 긴급성 매트릭스 하나, 깊이가 제한된 범주 체계 하나, 중복 제거 규칙 하나에 합의하고, 로컬 팀이 공유 체계를 바꾸지 않고 태그를 추가하게 하십시오. 서비스별로 정규화하고 관리도와 주석으로 추세를 검토하십시오. 공급업체가 일으킨 인시던트는 계약에서 공유된 정의가 필요합니다(주제 5.1, SLA, OLA, XLA 지표 참조).
정부 및 공공 부문. 인시던트에는 보고 의무, 감사 필요, 공적 이해관계가 따를 수 있으며, 특히 서비스가 시민의 권리나 안전에 영향을 주는 곳에서 그렇습니다. 우선순위 매트릭스와 범주 체계를 문서화하고, 우선순위 변경의 감사 추적을 유지하고, 공표하는 건수에 신중하십시오. 공적 보고는 레코드가 쓰이는 방식에 강한 압박을 줄 수 있습니다. 개인정보 규칙이 사용량 데이터를 제한할 수 있으므로 정당하게 쓸 수 있는 분모를 밝히십시오(주제 8.5, 규제 및 정부 보고 참조).
비즈니스 케이스: 동기, ROI, TCO
동기는 수요 관리입니다. 인시던트는 숙련된 시간을 소비하고, 계획된 작업을 중단시키고, 사용자를 교란합니다. 양, 우선순위, 반복을 이해하면 조직이 원인을 제거하고, 실제 수요에 맞춰 인력을 배치하고, 리더에게 신뢰성 작업이 어디서 효과를 낼지 보여 줄 수 있습니다.
비용은 세 부분입니다. 설정은 인시던트와 요청을 정의하고, 우선순위 매트릭스와 범주 체계에 합의하고, 사용량 데이터를 서비스에 연결하는 것입니다. 운영 비용은 레코드를 깨끗이 유지하는 노력, 월간 표본 검토, 보고서를 유지할 사람입니다. 셋째 비용은 발견 사항에 대해 행동하는 시간으로 수익의 대부분이 여기서 나오므로 그것을 위한 용량을 계획하십시오.
수익은 스스로 측정할 수 있는 패턴으로 설명하는 것이 가장 좋습니다. 문제 작업 뒤의 감소한 반복, 우선순위 분쟁에 쓰는 시간 감소, 예상치 못한 에스컬레이션 감소, 인력과 수요의 더 나은 일치입니다. 인시던트의 감소 백분율을 약속하지 마십시오. 서비스, 출발점, 수행한 작업에 달려 있습니다. 총소유비용은 대부분 사람의 시간이므로 그것을 세고, 반복되는 인시던트가 현재 소비하는 시간과 비교하십시오.
안티패턴과 함정
- 원시 건수를 건강 점수로 보고하기. 사용량, 변경, 보고 행동이 모두 움직입니다. 정규화된 비율, 원시 건수, 주석을 함께 보여 주십시오.
- 더 적은 인시던트라는 목표. 억제와 잘못된 라벨링을 보상합니다. 반복 감소와 고객 영향에 대한 목표를 정하고 인시던트 건수는 정보로 두십시오.
- 요청을 인시던트로 세기. 양이 오르고 서비스가 실제보다 나빠 보입니다. 레코드 유형을 분리해 각각 보고하십시오.
- 자유 선택 우선순위. 우선순위가 협상이 되고 구성이 의미를 잃습니다. 공개된 매트릭스를 쓰고 일관성을 표본 검토하십시오.
- 아무도 쓰지 않는 범주 트리. 사람들이 첫 번째 일치를 고르고 "기타"가 커집니다. 짧게 유지하고, "기타"를 매달 검토하고, 쓰이지 않는 것은 정리하십시오.
- 연결된 모든 티켓을 별개의 결함으로 세기. 장애 하나가 한 달을 지배합니다. 상위 인시던트와 연결된 레코드의 수를 보고하십시오.
- 인시던트 건수로 상담원이나 팀의 순위 매기기. 사람별 건수는 업무 배분과 티켓 습관을 반영합니다. 서비스로 집계하고 사람이 아니라 패턴을 검토하십시오.
- 반복 무시하기. 같은 결함이 계속 고쳐지고 아무도 원인을 소유하지 않습니다. 반복을 문제 레코드에 연결하고 소유자를 지정하십시오.
성숙도 모델
| 차원 | 1 시작 | 2 발전 | 3 표준화 | 4 관리 | 5 조율 |
|---|---|---|---|---|---|
| 정의와 집계 | 인시던트가 무엇인지 사람들이 동의하지 않고 건수는 임시 내보내기에서 나옴 | 일부 팀이 요청을 인시던트에서 걸러내고 규칙이 다름 | 모든 팀에 서면 정의, 필터, 중복 제거 규칙 하나 | 정의 변경을 기록해 추세 차트에 표시하고 미분류 레코드 비중을 추적함 | 공급업체 및 고객과 정의를 검토하고 결정에 정보를 주지 못하면 개정함 |
| 정규화와 해석 | 원시 건수만 | 일부 서비스가 사용량 데이터를 씀 | 별도 원천에서 가져온 서비스별 지명된 사용량 측정치 | 검토에서 주석이 있는 관리도를 활용함 | 수요를 설명하도록 팀과 공급업체 간에 사용량, 변경, 인시던트 데이터를 연결함 |
| 우선순위 실천 | 느낌으로 우선순위를 고름 | 일부 팀에 매트릭스가 있음 | 우선순위를 고르는 곳에 보이는 예시가 있는 매트릭스 하나 | 구성과 재분류율을 매월 검토하고 표본 조사함 | 조건이 바뀜에 따라 고객 및 임상 또는 비즈니스 소유자와 매트릭스를 조정함 |
| 반복과 패턴 | 기억으로 반복을 알아차림 | 범주 목록을 가끔 검토함 | 명시된 기간으로 반복 및 재개방률을 매월 보고함 | 반복되는 군집을 소유자와 날짜가 있는 문제 레코드에 연결함 | 팀과 공급업체에 걸친 원인 제거에 자금을 대고 수요 감소까지 추적함 |
체크리스트
- 서면 정의가 인시던트를 요청, 경보, 문제와 구분한다.
- 상위 인시던트와 연결된 레코드를 따로 보고한다.
- 모든 인시던트를 서비스 카탈로그의 서비스에 귀속시킨다.
- 각 서비스에 인시던트 도구가 아닌 원천의 지명된 사용량 측정치가 있다.
- 보고서가 원시 건수, 정규화된 비율, 릴리스와 캠페인의 주석을 보여 준다.
- 주간 양의 변화에 반응하기 전에 관리도를 쓴다.
- 우선순위를 예시가 있는 공개된 영향 및 긴급성 매트릭스에서 도출한다.
- 우선순위 구성과 재분류율을 매월 함께 검토한다.
- 범주 목록이 짧고 "기타" 및 미분류 레코드의 비중을 추적한다.
- 반복 및 재개방률이 명시된 기간을 쓰고 따로 보고된다.
- 반복되는 군집을 소유자가 있는 문제 레코드에 연결한다.
- 어떤 보고서도 인시던트 건수로 개별 상담원의 순위를 매기지 않는다.
AI 프롬프트
인시던트 양의 정의에서 모호함을 점검합니다.
우리는 [ITSM 도구]에서 [서비스 또는 팀]의 인시던트 양을 셉니다. 현재 필터는
[레코드 유형, 상태, 제외 항목 설명]이고 기간은 [기간]입니다. 요청, 중복, 병합된
티켓, 취소된 레코드를 어떻게 처리하는지를 포함해 정의의 모호함을 검토해 주세요.
명확한 서면 규칙과 의견 차이를 해소할 짧은 예시 목록을 제안해 주세요. 기준 값을
지어내지 마세요. 가정한 내용과 정의를 완성하기 위해 내가 답해야 할 질문을
나열해 주세요.
정규화된 인시던트율을 설계합니다.
서비스 [서비스 이름]에 대해 사용량으로 정규화한 인시던트율을 원합니다. 가용한
사용량 측정치는 [원천]의 [목록, 예: 활성 사용자, 세션, 거래]입니다. 선택지를
비교하고, 어느 것이 가장 잘 맞는지와 이유를 말하고, 각각을 왜곡할 수 있는 것을
설명해 주세요. 원시 건수, 비율, [릴리스나 캠페인 같은 이벤트]의 주석을 한
차트에 보여 주는 방법을 제안해 주세요. 수치나 임계값을 지어내지 마세요. 가정한
내용을 나열해 주세요.
영향 및 긴급성 매트릭스를 검토합니다.
우리의 우선순위 매트릭스입니다: [영향 수준, 긴급성 수준, 결과 우선순위 붙여
넣기], 그리고 익명화한 인시던트 예시 [개수]건입니다: [짧은 설명 붙여 넣기]. 각
예시에 매트릭스를 적용하고, 두 사람이 서로 다른 우선순위에 이를 수 있는 곳을
짚고, 불일치를 줄이는 문구나 예시를 제안해 주세요. 매트릭스가 악용될 수 있는
방법을 짚어 주세요. 대응 목표나 기준 값을 지어내지 마세요. 가정한 내용을
나열해 주세요.
개선 후보를 위해 범주와 반복을 분석합니다.
[기간]의 인시던트 레코드가 있고 필드는 [필드 목록, 예: 서비스, 범주, CI, 열린
시각, 닫힌 시각, 재개방 표시]입니다. 상위 범주를 찾고, [기간]의 윈도로 재개방과
반복을 구분하고, 문제 조사 후보 [개수]개를 고르는 방법을 설명해 주세요. 포괄
범주와 거의 중복되는 레코드를 점검하는 방법도 설명해 주세요. 내가 보여 주지
않은 데이터의 패턴을 지어내지 마세요. 가정한 내용을 나열해 주세요.
AI 스킬
- 서비스 관리 지표 스킬: 관련 지표를 정의하는 주제와 그 옆에 있어야 할 방호책을 찾을 때 사용합니다.
- 서비스 관리 지표 유지보수 스킬: 수정한 지표 주제가 시계, 악용 방식, 방호책을 온전히 유지하는지 확인할 때 사용합니다.
핵심 정리
- 인시던트 양은 품질만큼이나 사용량, 변경, 보고 행동을 반영하므로 정규화하고 주석을 다십시오.
- 우선순위를 구성으로 읽고, 공개된 영향 및 긴급성 매트릭스에서 도출하고, 재분류율을 지켜보십시오.
- 상위 인시던트와 연결된 레코드를 따로 보고해, 장애 하나가 한 달 치 일상 업무처럼 보이지 않게 하십시오.
- 반복과 재개방이 가장 유용한 신호입니다. 유지되지 않은 원인과 수정을 가리키기 때문입니다.
- 서비스와 팀으로 집계하고 개별 상담원은 절대 집계하지 마십시오. 모든 지표에 방호책을 짝지우십시오.
- 관리도와 파레토 관점으로 어디를 볼지 정한 다음, 각 군집에 소유자와 용량을 주십시오.
참고 문헌과 더 읽을거리
- Axelos (now PeopleCert), ITIL Foundation: ITIL 4 Edition, TSO, 2019.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
- Wheeler, D. J., Understanding Variation: The Key to Managing Chaos, 2nd edition, SPC Press, 2000.
- Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- ISO/IEC 20000-1, Information technology: Service management: Service management system requirements, International Organization for Standardization.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, ITIL.
- Wikipedia, Incident management.
- Wikipedia, Help desk software.
- Wikipedia, Control chart.
- Wikipedia, Seasonality.
- Wikipedia, Pareto principle.
- Wikipedia, Root cause analysis.