지표 프로그램을 위한 성숙도 모델
공유 5단계 척도를 써서 지표 프로그램이 어디에 있는지 설명하고 다음의 작은 걸음을 고르되, 전시하거나, 비교하거나, 인증하는 점수로는 결코 쓰지 마십시오.
개요와 동기
이 책의 다른 모든 주제는 그 주제에 대한 작은 성숙도 표로 끝납니다. 이 주제는 같은 척도를 지표 프로그램 전체에 적용합니다. 질문은 팀의 인시던트 시간이 얼마나 좋은가가 아닙니다. 조직이 측정치를 얼마나 잘 수집하고, 읽고, 그에 따라 행동하는가입니다. 정의가 공유되는지, 데이터가 신뢰받는지, 숫자가 결정으로 이어지는지, 측정되는 사람들이 프로그램을 도움으로 보는지입니다.
성숙도 모델은 실천이 발전함에 따라 조직이 거칠 수 있는 단계의 설명입니다. 소프트웨어에서 가장 잘 알려진 예는 소프트웨어 공학 연구소의 작업에서 자라 널리 퍼진 능력 성숙도 모델입니다. 그 영향은 컸고, 뒤따른 비판도 컸습니다. 조직은 능력이 아니라 단계를 쫓았고, 감사자는 서류에 점수를 매겼고, 모델은 배지로 쓰이게 되었습니다. 어떤 성숙도 모델이든 책임 있게 쓰려면 세 가지 주의를 시야에 두어야 합니다. 척도는 인증이 아니라 대화의 도구입니다. 맥락에 따라 맞는 단계가 달라지므로 높다고 항상 더 좋은 것은 아닙니다. 그리고 모델은 성과의 대체물이 아닙니다. 서비스를 개선하지 않는 성숙한 프로그램은 아주 깔끔한 실패이며, 배지로 보이는 단계는 좋아 보이지만 결정에 정보를 주지 않는 숫자인 허영 지표와 매우 비슷합니다.
여기서 쓰는 척도는 이 책과 서비스 관리 가이드가 공유하는 것입니다. 시작, 발전, 표준화, 관리, 조율입니다(명세의 공유 성숙도 모델 참조). 이것은 ITIL, ISO/IEC 33000, 능력 성숙도 모델의 프로세스 성숙도 척도와 일부러 같지 않으며, 팀은 이 척도를 근거로 그런 프레임워크의 점수를 주장해서는 안 됩니다.
애자일의 목표가 사용법을 가리킵니다. 지속적 개선은 모델이 최종 상태에 이르기 위한 것이 아니라 다음 걸음을 찾기 위한 것이라는 뜻입니다. 지속적인 발전은 작년에 조율 단계에 이른 프로그램도 사람이 떠나거나 우선순위가 바뀌면 퇴보할 수 있으므로 자기 평가를 반복한다는 뜻입니다. 이해관계자의 지속적 참여는 평가를 팀 위에서가 아니라 팀과 함께 한다는 뜻입니다. 지속 가능한 속도는 프로그램이 한 번에 한 걸음씩 가고 한 분기에 세 단계를 뛰어넘으려 하지 않는다는 뜻입니다. 그리고 의욕 있는 개인을 중심으로 만든다는 것은 일하는 사람들이 프로그램이 자신들에게 도움이 되는지 판단한다는 뜻입니다. 이는 ITIL의 지속적 개선 프랙티스와 같은 논리입니다. 조직이 현재 상태를 점검하고, 방향을 정하고, 작은 걸음으로 개선하는데, 모든 사람에 의한 지속적 개선이라는 일본의 발상인 카이젠에 가까운 습관입니다. 더 일반적인 발상은 지속적 개선 프로세스입니다(주제 9.5, 지속적 개선 지표 참조).
이 모델에는 지표라는 맥락에서 특별한 함정이 있습니다. 자기 지표로 평가받는 프로그램은 경고하던 바로 그 왜곡을 부릅니다. "정의가 있는 측정치의 수"가 목표가 되면 정의가 늘어납니다. 그러므로 이 주제의 접근은 건수 외에 업무의 증거(어떤 결정이 바뀌었는지, 팀이 무엇을 말하는지)를 쓰고, 평가를 부풀려서 얻을 것이 가장 적은 팀이 소유하게 합니다(주제 1.2, 굿하트의 법칙과 지표의 심리학 참조). 팀을 위한 보조 평가 양식은 부록에 있습니다(주제 12.5, 성숙도 자가 평가 참조).
핵심 원칙
- 척도는 대화의 도구입니다. 사람들이 현재를 설명하고 다음 걸음을 고르게 도우며, 평가하고, 순위를 매기고, 인증하기 위한 것이 아닙니다.
- 팀과 함께 평가하십시오. 공개적으로 논의한 자기 평가가 외부의 점수 매기기보다 정확합니다.
- 증거로 판단하십시오. 어떤 문서가 있는지뿐 아니라 어떤 결정이 바뀌었는지, 사람들이 무엇을 말하는지, 데이터가 무엇을 보여 주는지 물으십시오.
- 차원은 다를 수 있습니다. 프로그램은 도구에서는 강하고 신뢰에서는 약할 수 있습니다. 하나의 숫자가 아니라 프로필을 보고하십시오.
- 한 번에 한 걸음씩 가십시오. 모든 것을 한꺼번에가 아니라 한두 차원에서 다음 단계를 목표로 하십시오.
- 높다고 항상 더 좋은 것은 아닙니다. 조직의 규모, 위험, 필요에 맞는 단계를 고르십시오.
- 퇴보를 예상하십시오. 직원 이직, 개편, 압박이 프로그램을 되돌릴 수 있습니다. 정기적으로 다시 평가하십시오.
- 팀의 순위표를 절대 공표하지 마십시오. 프로그램에 대해서는 집계하고 팀의 결과는 그 팀과만 공유하십시오.
지표 정의
아래 측정치는 프로그램의 건강과 그 평가를 설명합니다. 프로그램 팀과 후원자를 위한 것이며, 논의를 위한 신호로 읽습니다.
| 지표 | 정의 | 공식 | 단위 | 데이터 원천 | ITIL 프랙티스 | 애자일 대응 | 주기 |
|---|---|---|---|---|---|---|---|
| 평가 참여 | 자체 논의와 함께 자기 평가를 마친 참여 팀의 비율 | 마치고 논의한 팀 / 참여 팀 | 퍼센트 | 평가 기록 | 지속적 개선 | 돌아보기와 회고 | 연 2회 |
| 차원별 프로필 | 각 차원에서 팀이 자기 평가한 단계의 분포, 단일 점수가 아니라 범위로 표시 | 차원별로 각 단계의 팀 수 | 단계별 팀 | 집계한 자기 평가 | 지속적 개선, 거버넌스 | 눈에 보이는 작업 | 연 2회 |
| 평가에서 나온 개선 조치 | 합의한 다음 걸음 중 완료했거나, 이유와 함께 접었거나, 진행 중인 비율 | 닫았거나 이유를 밝힌 조치 / 합의한 조치 | 퍼센트 | 개선 레지스트리 | 지속적 개선 | 작은 실험 | 분기 |
| 결정의 증거 | 팀이 지난 분기에 그 측정치가 정보를 준 결정이나 숙고한 선택을 명명할 수 있는, 표본 측정치의 비율 | 명명된 결정이 있는 측정치 / 표본 추출한 측정치 | 퍼센트 | 팀 인터뷰, 검토 메모 | 지속적 개선 | 의식보다 증거 | 분기 |
| 정의와 데이터에 대한 신뢰 | 정의가 분명하고 데이터가 올바르다는 팀 수준의 동의 | 짧은 팀 설문에서 동의한 퍼센트, 응답률 표시 | 퍼센트 | 익명 팀 설문 | 지식 관리, 정보 관리 | 공유된 이해 | 연 2회 |
| 다음 단계까지의 시간(서술적) | 팀이 선택한 경우 한 차원을 한 단계 올리는 데 걸린 경과 시간 | 합의된 걸음부터 팀의 재평가까지 개월 수의 중앙값 | 개월 | 평가 이력 | 지속적 개선 | 지속 가능한 속도 | 연 |
| 평가 부담 | 평가가 팀당 걸리는 시간 | 팀당 시간의 중앙값 | 시간 | 팀의 시간 추정 | 지속적 개선 | 지속 가능한 속도 | 연 2회 |
참여는 혼자 채운 양식이 말해 주는 것이 적으므로 논의를 포함한 완료로 측정합니다. 프로필은 범위이며 하나의 성숙도 숫자로 평균하지 않습니다. 다음 단계까지의 시간은 서술적입니다. 빠른 상승은 부풀린 자기 점수를 반영할 수 있고, 느린 상승은 적절한 신중함을 반영할 수 있습니다. 평가 부담은 평가 자체에 대한 점검으로, 팀당 한두 시간을 넘지 않아야 합니다.
권장 사항
척도를 잘 쓰십시오
1. 지표 프로그램의 차원을 정의하십시오. 쓸 만한 집합은 여섯 차원입니다. (a) 질문과 목적, 측정치가 독자가 물은 질문에 답하는가. (b) 정의와 소유, 측정치에 서면 정의와 소유자가 있는가. (c) 데이터와 도구, 데이터가 정확하고, 시의적절하고, 이식 가능한가. (d) 결정에서의 사용, 숫자가 선택에 정보를 주는가. (e) 신뢰와 안전, 사람들이 데이터가 자신을 돕는다고 믿는가. (f) 검토와 발전, 프로그램이 스스로를 다듬는가. 여섯은 유용할 만큼 충분하고 한 시간에 논의할 만큼 적습니다.
2. 각 단계가 어떤 모습인지 설명하십시오. 아래 "성숙도 모델" 절의 표는 각 차원의 각 단계에 대한 짧은 설명을 줍니다. 이를 계기로 다루십시오. 팀은 문구를 자기 맥락에 맞게 조정하고 자신의 예를 적어야 합니다.
3. 평균하지 마십시오. 하나의 전체 점수는 중요한 패턴을 숨깁니다. 도구 성숙도가 높고 신뢰가 낮은 프로그램은 그 반대인 프로그램과 다른 상황에 있고 다음 걸음이 다릅니다. 프로필을 보여 주십시오.
팀 위에서가 아니라 팀과 함께 평가하십시오
4. 한 시간의 대화로 만드십시오. 팀을 표와 함께 모으십시오. 각 사람에게 각 차원에서 팀이 어디에 있다고 생각하는지 비공개로 표시하게 한 뒤 비교하십시오. 차이는 같은 프로그램에 대한 서로 다른 경험을 드러내므로 논의하십시오. 팀의 관점에 합의하고, 그 뒤의 증거를 기록하고, 한두 개의 다음 걸음을 고르십시오.
5. 증거를 요청하십시오. 주장하는 각 단계에 대해 예를 요청하십시오. "우리는 결정에 숫자를 쓴다"는 "지난 분기의 어떤 결정인가?"라는 질문을 부릅니다. 표본 측정치와 인터뷰로 점검하십시오. 이는 사람들을 존중하고 평가가 희망 사항으로 흐르지 않게 합니다.
6. 결과를 팀에 두십시오. 팀의 프로필은 팀의 것입니다. 프로그램은 순위가 아니라 집계된 범위와 공통 주제를 공유합니다. 평가가 자금, 지위, 평가에 영향을 주지 않음을 분명히 하십시오. 영향을 준다면 팀은 부풀릴 것이고 가치는 사라집니다(주제 11.3, 두려움을 키우지 않고 지표 도입하기 참조).
다음 걸음을 고르십시오
7. 다른 것들을 제한하는 차원을 고르십시오. 신뢰와 안전은 다른 모든 것을 제한하는 경우가 많습니다. 그것이 없으면 데이터가 왜곡되고 결정이 의심스럽습니다. 정의와 소유는 데이터와 사용을 제한하는 경우가 많습니다. 흔한 패턴은 신뢰와 정의를 먼저 강화하고, 그다음 데이터, 그다음 사용과 검토를 강화하는 것입니다. 작은 개선이 다른 것들을 풀어 줄 차원을 찾으십시오.
8. 작고 구체적인 걸음을 정하십시오. 다음 걸음은 팀이 한 분기에 끝내고 알아볼 수 있는 것이어야 합니다. "헌장에 합의하기", "우리 측정치 넷의 정의 쓰기", "두 공급을 자동화하기", "결정을 기록하는 월간 검토 열기"입니다. "4단계에 이르기" 같은 걸음은 피하십시오. 단계는 상태를 설명하고 걸음은 일을 설명합니다.
9. 걸음을 개선 레지스트리에 연결하십시오. 조치를 다른 개선 작업과 같은 곳에 소유자와 날짜와 함께 두고, 정기 개선 대화에서 진행을 검토하십시오(주제 9.5, 지속적 개선 지표 참조). 자금이 없거나 일정이 잡히지 않은 걸음은 일어나지 않을 것입니다.
정직하고 가볍게 유지하십시오
10. 순위를 매기지 않고 팀 간에 보정하십시오. 팀들이 한 차원에서 3단계라고 부르는 것의 예를 공유하는 짧은 세션을 여십시오. 기준의 차이를 논의하십시오. 목표는 같은 점수가 아니라 공유된 이해입니다. 진행자를 돌려 쓰고, 프로그램 밖의 팀을 초대해 문구에 이의를 제기하게 하십시오.
11. 리듬에 따라, 그리고 사건에 대응해 다시 평가하십시오. 대부분의 프로그램에는 연 2회면 충분합니다. 개편, 도구 변경, 헌장 위반 뒤에 다시 평가하십시오. 이것들이 신뢰를 어느 방향으로든 움직일 수 있기 때문입니다. 퇴보를 지켜보고 실패가 아니라 정보로 다루십시오.
12. 모델 자체를 폐기하거나 수정하십시오. 해마다 팀에게 차원과 단계 설명이 여전히 맞는지 물으십시오. 헷갈리는 것은 다시 쓰고 아무도 쓰지 않는 것은 제거하십시오. 5년 동안 바뀌지 않은 모델은 더 이상 존재하지 않는 프로그램을 설명하고 있을 수 있습니다.
악용 방식과 방호책
| 지표 | 악용되는 방식 | 짝을 이루는 방호책 지표 또는 실천 |
|---|---|---|
| 평가 참여 | 할당량을 채우려고 양식을 작성함, 한 사람이 팀을 대신해 채움 | 팀 논의 요구, 각 주장 뒤의 증거 요청 |
| 차원별 프로필 | 좋아 보이려고 단계를 부풀림, 도움을 받으려고 낮춤 | 자금이나 지위와 연결하지 않기, 증거 요청, 공개적으로 보정 |
| 평가에서 나온 개선 조치 | 닫으려고 사소한 걸음을 고름, 하지 않고 닫음 | 걸음의 크기와 가치 검토, 다음 평가에서 결과 점검 |
| 결정의 증거 | 사후에 결정을 지어냄, 영향 없는 결정을 나열함 | 날짜와 관련자 요청, "아무것도 하지 않기로 선택함"을 결정으로 인정 |
| 정의와 데이터에 대한 신뢰 | 응답자를 코칭함, 낮은 응답이 불만을 숨김 | 익명성과 최소 집단 크기, 응답률 표시, 팀과 직접 대화 |
| 다음 단계까지의 시간(서술적) | 진전의 주장을 서두름, 퇴보를 숨김 | 서술적으로 유지, 증거와 함께 읽기, 벌 없이 퇴보를 기록 |
| 평가 부담 | 시간을 줄이려고 논의를 건너뜀 | 시간을 참여 및 증거의 품질과 함께 추적 |
건강한 수치는 여러 단계가 섞인 프로필, 도구와 다듬기보다 먼저 오르는 신뢰와 정의, 작고 끝낸 다음 걸음, 팀이 명명할 수 있는 결정, 가끔의 퇴보에 대한 정직한 기록을 보여 줍니다.
상충 관계: 장점과 단점
| 접근 방식 | 강점 | 약점 |
|---|---|---|
| 팀 자기 평가 | 정직하고, 소유 의식이 있고, 빠름 | 주관적, 보정이 필요함 |
| 외부 평가 | 일관됨, 독립적 | 비용이 큼, 평가자를 위한 연기를 부름 |
| 단일 전체 점수 | 소통하기 쉬움 | 패턴을 숨김, 목표를 부름 |
| 차원별 프로필 | 어디서 행동할지 보여 줌 | 요약하기 어려움 |
| 연간 평가 | 가벼움 | 퇴보를 알아차리는 데 느림 |
| 연 2회와 사건 촉발 | 반응적임 | 더 많은 노력 |
| 자금과 연결 | 관심을 얻음 | 부풀림과 악용 |
| 자금과 분리 | 정직한 데이터 | 지지를 얻는 다른 방법이 필요함 |
산문의 답은 증거와 함께 가벼운 자기 평가를 하고, 프로필과 범위를 보고하고, 결과를 팀에 두고, 다음 걸음을 자금이나 지위가 아니라 개선 레지스트리에 연결하는 것입니다.
팀과 논의할 질문
1. 여섯 차원 중 우리의 가장 약한 것은 무엇이며, 왜 그렇게 말하나요? 각자 비공개로 하나를 고른 뒤 공유하게 하십시오. 진행자는 최근 예를 요청해야 합니다. 패턴을 찾고 어느 차원이 다른 것들을 제한하는지 합의하십시오.
2. 측정치가 바꾼 지난 분기의 결정을 명명할 수 있나요? 나열하십시오. 목록이 짧다면 이유를 물으십시오. 문제가 측정치, 데이터, 보는 습관 중 어디에 있는지 논의하십시오.
3. 신뢰와 안전에서 우리는 어디에 있다고 보며, 어떻게 아나요? 아슬아슬한 사건 보고, 이의 제기, 설문 결과를 보십시오. 실제로 사람들이 이야기하는 방식과 비교하십시오. 리더가 그것을 움직이려고 할 수 있는 것 하나에 합의하십시오.
4. 가장 약한 차원의 작고 구체적인 다음 걸음은 어떤 모습일까요? 소유자와 날짜와 함께 한 문장으로 초안을 작성하십시오. 한 분기에 끝낼 수 있는지 점검하십시오. 효과가 있었는지 어떻게 알지 합의하십시오.
5. 무엇이 이 평가를 위협처럼 느끼게 만들며, 어떻게 막나요? 사람들이 두려워할 결과의 사용을 논의하십시오. 결과가 절대 쓰이지 않을 것을 적어 두십시오. 프로그램 책임자가 동의하는지 확인하십시오.
6. 우리가 이를 필요가 없는 단계가 있나요? 우리의 규모, 위험, 목표를 생각하십시오. 지금으로서 충분한 단계와 다시 검토하라고 알려 줄 신호를 설명하십시오.
네 가지 관점
제품 및 전달 팀
팀은 스스로를 평가하고, 다음 걸음을 고르고, 결과를 갖습니다. 대화를 경험의 차이를 드러내는 데 쓰고, 증거를 요청하고, 끝낼 수 있을 만큼 작은 걸음을 정해야 합니다. 프로필을 순위로 바꾸려는 어떤 시도에도 반대해야 합니다.
서비스 및 운영 팀
운영 팀은 무거운 데이터와 인시던트 부담을 지며 프로그램이 어디서 자신들을 지원하거나 부담시키는지 볼 수 있습니다. 도구나 정의가 업무를 막는 곳을 메모하고, 온콜 및 인시던트 데이터를 신중하게 다루라고 요청하고, 평가 부담에 대해 솔직한 피드백을 주어야 합니다.
리더십과 거버넌스
리더는 프로그램을 후원하고 집계된 그림을 받습니다. 프로필과 공통 주제를 요청하고, 단일 점수를 요청하는 것에 저항하고, 팀이 고른 다음 걸음에 자금을 대고, 자금이나 지위를 평가와 묶지 않아야 합니다. 또 지표가 정보를 준 결정을 설명함으로써 행동을 모범으로 보여야 합니다.
고객과 사용자
고객과 사용자는 프로그램이 서비스를 개선하고 그들의 피드백이 측정치의 일부일 때 이득을 봅니다. 파트너인 곳에서는 만족도 설문의 유용성처럼 그들과 관련된 측정치를 평가하는 일과, 자신의 데이터가 어떻게 쓰이는지 검토하는 일에 참여할 수 있습니다.
실제 적용: 서비스 관리 사례
한 국내 보험 그룹에는 20개의 전달 및 지원 팀이 있고 18개월 동안 운영된 지표 프로그램이 있습니다. 후원자가 투자를 이끌려고 "팀별 성숙도 점수"를 요청합니다. 프로그램 책임자는 이전의 감사식 점수 매기기가 팀이 문서 바인더를 준비하게 했던 것을 기억하며 경계합니다. 아래 수치는 예시입니다.
프로그램 책임자는 대신 여섯 차원에 걸친 프로필을 제안하며, 팀 밖의 진행자와 함께하는 한 시간의 대화로 팀이 평가하고 결과는 팀이 갖습니다. 그는 후원자에게 프로그램이 범위와 공통 주제를 보고할 것이며 어떤 팀의 프로필도 자금과 연결되지 않을 것이라고 말합니다. 후원자가 동의하고 결정은 기록됩니다.
20개 팀 중 19개가 논의와 함께 평가를 마치므로 참여는 95퍼센트입니다. 프로필은 범위를 보여 줍니다. 질문과 목적에서는 대부분의 팀이 2단계나 3단계에 있고, 정의와 소유에서는 1에서 4까지 퍼져 있고, 데이터와 도구에서는 대부분 3이고, 결정에서의 사용에서는 대부분 2이고, 신뢰와 안전에서는 2와 4로 갈리고, 검토와 발전에서는 대부분 1이나 2입니다. 증거 점검은 많은 것을 드러냅니다. 열한 팀이 결정에서의 사용에 3단계를 주장했지만, 지난 분기에 측정치가 정보를 준 결정을 명명해 달라고 하자 여섯 팀만 할 수 있었습니다. 프로그램 책임자는 판단 없이 이를 메모하고, 그것이 주제가 됩니다. 팀에 대시보드는 있지만 결정을 기록하는 검토는 거의 열지 않는다는 것입니다.
다음 걸음은 작습니다. 여덟 팀이 결정 로그가 있는 월간 검토를 선택합니다. 네 팀은 자기 측정치의 정의를 쓰기로 합니다. 세 팀은 헌장에 합의하기로 합니다. 여섯 달 뒤 합의한 17개의 걸음 중 14개가 끝났고, 하나는 이유와 함께 접었고, 둘은 진행 중입니다. 반복 평가는 결정의 증거가 표본 측정치의 38퍼센트에서 71퍼센트로 오르고, 신뢰 설문이 동의 54퍼센트에서 67퍼센트로 움직임을 보여 줍니다. 한 팀은 개편 뒤 신뢰가 뒤로 미끄러지고, 진행자는 그것을 실패가 아니라 정보로 기록합니다. 1년 뒤 후원자가 연차 보고서를 위해 다시 단일 점수를 요청합니다. 프로그램 책임자는 범위, 세 가지 주제, 완료된 개선 걸음이 있는 한 쪽짜리 프로필을 제안합니다. 후원자는 받아들이고, 보고서는 척도가 대화의 도구임을 분명히 밝힙니다.
애자일, AI, 자동화, 분석
애자일
모델을 정기 개선 검토에서의 대화로 쓰고 팀이 자기 다음의 작은 걸음을 고르게 하십시오. 주의할 점은 벽에 전시된 성숙도 점수가 목표가 된다는 것입니다.
AI
평가에 AI 관점을 더하십시오. AI 사용의 목록이 있는지, AI 지원 측정치에 품질 짝이 있는지, 사람들이 AI가 도출한 숫자에 이의를 제기할 수 있는지입니다. 주의할 점은 AI가 쓴 자기 평가는 자신 있게 들리지만 지역의 사실을 놓칠 수 있으므로 팀이 직접 써야 한다는 것입니다.
자동화
소유자와 방호책이 있는 지표의 비중 같은 평가의 증거 수집을 자동화하되 사람이 해석하게 하십시오. 주의할 점은 자동으로 모은 증거가 불완전할 수 있으므로 무엇을 제외하는지 말해야 한다는 것입니다.
분석
단일 점수가 아니라 차원에 걸친 프로필을 각 평가 뒤의 증거와 함께 보여 주십시오. 이는 다음에 무엇을 개선할지에 정보를 줍니다. 주의할 점은 평가가 평가받는 사람들의 판단이므로 그것으로 팀을 비교하는 것을 피해야 한다는 것입니다.
부문별 관점
스타트업. 공식 평가는 과할 가능성이 큽니다. 여섯 차원에 대한 연 2회의 짧은 대화와 한두 개의 작은 걸음이면 충분합니다. 작은 팀은 이를 민감하게 느끼므로, 측정치가 판단에 쓰일 것이라는 두려움을 경계하십시오.
소규모 사업. 차원을 소유자 및 직원과의 대화를 위한 체크리스트로 쓰십시오. 가진 몇 안 되는 측정치가 실제 질문에 답하는지, 사람들이 그 뜻을 아는지, 쓰이는지 물으십시오. 걸음 하나를 고르십시오. 한 시간 넘게 쓰지 마십시오.
대기업. 규모는 가볍고 일관된 프로세스를 요구합니다. 같은 차원, 진행자와 함께하는 자기 평가, 보정 세션, 집계된 프로필입니다. 중앙 점수 매기기 부서에 저항하십시오. 다음 걸음을 개선 레지스트리에 연결하고 후원자에게 범위와 주제를 보고하십시오. 척도가 규정 준수의 연습으로 변하는 것을 경계하십시오.
정부 및 공공 부문. 감사 및 감독 기구가 성숙도 점수를 요청할 수 있습니다. 이 내부 대화 도구와 어떤 공식 프레임워크의 차이를 분명히 하십시오. 팀의 결과는 팀에 두고, 감독 기구에는 집계를 제공하고, 척도가 무엇이고 무엇이 아닌지 투명하게 밝히십시오(주제 8.3, 규정 준수와 감사 지표 참조).
비즈니스 케이스: 동기, ROI, TCO
비용은 작습니다. 연 2회 팀당 한두 시간, 진행자, 약간의 분석, 개선 걸음을 수행하는 노력입니다. 더 큰 비용은 모델이 잘못 쓰여 컨설턴트, 점수 매기기 부서, 증거 바인더가 생길 때 옵니다.
수익은 노력의 더 나은 표적화에서 옵니다. 모든 차원에 투자를 퍼뜨리는 대신 프로그램이 제한하는 차원을 찾아 다룹니다. 다른 수익에는 퇴보의 더 이른 인식, 팀 간 공유된 언어, 팀이 고르고 소유한 개선 걸음이 있습니다. 자체 데이터로 사례를 만드십시오. 끝낸 개선 걸음, 결정의 증거와 신뢰 설문 결과의 변화, 평가에 든 노력입니다. 추적 가능한 출처와 자기 맥락에의 관련성 없이 성숙도 개선의 수익에 대한 공개된 주장을 인용하지 마십시오(주제 7.7, 투자 수익과 비즈니스 케이스 참조).
안티패턴과 함정
- 성숙도 배지. 단계가 목표가 됩니다. 증거와 함께 대화로 쓰십시오.
- 하나의 전체 숫자. 패턴이 사라지고 목표가 나타납니다. 프로필을 보여 주십시오.
- 감사자의 점수 매기기. 팀이 연기하려고 문서를 준비합니다. 진행자와 함께하는 자기 평가를 쓰십시오.
- 점수를 자금과 연결하기. 부풀림이 따릅니다. 평가를 분리해 두십시오.
- 최고 단계 쫓기. 모든 프로그램에 조율이 필요한 것은 아닙니다. 맞는 것을 고르십시오.
- 평가하고 잊기. 걸음이 이어지지 않습니다. 걸음을 개선 레지스트리에 연결하십시오.
- 너무 긴 평가. 부담이 커지고 품질이 떨어집니다. 한 시간으로 유지하십시오.
- 퇴보 무시하기. 프로그램은 변화 뒤에 미끄러집니다. 리듬에 따라, 그리고 사건 뒤에 다시 평가하십시오.
성숙도 모델
| 차원 | 1 시작 | 2 발전 | 3 표준화 | 4 관리 | 5 조율 |
|---|---|---|---|---|---|
| 질문과 목적 | 데이터가 있어서 측정치를 수집함 | 일부 팀이 자신이 던지는 질문을 밝힘 | 독자와 질문을 적어 둠, 측정치를 그것에 매핑함 | 질문 포괄을 검토함, 답 없는 질문이 새 측정치를 이끎 | 고객과 공급업체를 포함한 독자가 측정치를 형성함, 질문이 서비스와 함께 진화함 |
| 정의와 소유 | 정의가 사람마다 다름 | 일부 작성됨, 비공식 소유자 | 각 측정치의 정의, 원천, 소유자, 한계가 있는 카탈로그 | 정의의 완전성과 이의 제기를 관리함 | 팀과 공급업체가 정의를 공동 소유함, 결정에 정보를 주지 못하면 수정함 |
| 데이터와 도구 | 수작업이고 취약함 | 일부 자동화된 공급 | 시험된 파이프라인, 공유 저장소, 이식 가능한 데이터 | 신뢰성, 조정, 이탈 준비도를 관리함 | 공유 계약이 있는 연합 파이프라인, 피드백으로 원천을 개선함 |
| 결정에서의 사용 | 숫자를 표시하지만 거의 쓰지 않음 | 일부 검토에서 사용함 | 결정을 기록하는 정기 검토 | 결정의 증거를 추적하고 그에 따라 행동함 | 팀에 걸쳐 결정을 성과에 연결함, 학습을 공유함 |
| 신뢰와 안전 | 두려움 또는 무관심 | 구두 보증 | 서면 헌장, 개인 관점 끔, 안전 설문 | 위반을 공개적으로 검토함, 솔직함 신호를 관리함 | 신뢰가 일상, 직원과 파트너가 프로그램을 형성함 |
| 검토와 발전 | 없음 | 가끔의 정리 | 팀과 정기 검토, 폐기 규칙 | 평가 걸음에 자금을 대고 완료함 | 프로그램이 모두의 변화와 함께 지속적으로 개선됨 |
체크리스트
- 여섯 차원에 합의했고 단계 설명을 우리 맥락에 맞게 조정했다.
- 각 팀이 진행자와 함께 약 한 시간의 논의로 스스로를 평가한다.
- 주장한 각 단계를 예나 표본 점검으로 뒷받침한다.
- 결과를 프로필과 범위로 보여 주며 하나의 평균 점수나 순위로는 결코 보여 주지 않는다.
- 팀의 결과는 팀에 남고 집계는 후원자와 공유한다.
- 평가는 자금, 지위, 성과 평가와 연결되지 않으며 이것이 적혀 있다.
- 각 팀이 소유자와 날짜가 있는 한두 개의 작은 다음 걸음에 합의한다.
- 다음 걸음을 개선 레지스트리에서 추적한다.
- 재평가가 적어도 연 2회, 그리고 주요 사건 뒤에 일어난다.
- 모델 자체를 해마다 팀과 검토한다.
AI 프롬프트
자기 평가 대화를 준비합니다.
팀이 지표 프로그램을 여섯 차원에 걸쳐 자기 평가하는 한 시간짜리 진행 계획을
준비해 주세요. 차원: 질문과 목적, 정의와 소유, 데이터와 도구, 결정에서의 사용,
신뢰와 안전, 검토와 발전. 다섯 단계를 쓰세요. 시작, 발전, 표준화, 관리, 조율.
비공개 표시, 비교, 증거 질문, 한두 개의 작은 다음 걸음에 합의하기를 포함하세요.
점수를 만들지 마세요. 가정을 나열해 주세요.
약한 차원을 걸음으로 바꿉니다.
우리 팀은 지표 프로그램의 [차원]에서 스스로를 [n]단계로 평가합니다. 증거: [붙여
넣기]. 우리를 [n+1]단계로 움직일 수 있는, 각각 한 분기에 끝낼 수 있는 세 개의
작은 걸음을 제안해 주세요. 각 걸음에 대해 소유자, 노력, 있을 법한 이익, 효과가
있었는지 아는 방법을 설명해 주세요. 결과를 약속하지 마세요. 가정과 위험을
나열해 주세요.
주장한 단계의 증거를 점검합니다.
한 팀이 [차원]에서 [n]단계를 주장하며 이 증거를 제시합니다: [붙여 넣기]. 호기심
많은 동료처럼 행동해 주세요. 증거가 주장을 뒷받침하는지 시험할 질문, 설득력 있을
예, 주장이 낙관적임을 시사하는 징후를 나열해 주세요. 팀을 판단하지 마세요.
가정을 나열해 주세요.
순위 없이 프로필을 요약합니다.
다음은 각 차원에서 각 단계에 있는 팀의 집계된 건수입니다: [붙여 넣기]. 범위, 세
가지 공통 주제, 팀이 고른 개선 걸음을 설명하는 후원자용 반 쪽 요약을 작성해
주세요. 팀의 순위를 매기거나, 단일 점수를 만들거나, 증거 없이 원인을 주장하지
마세요. 자기 평가의 주의점을 나열해 주세요.
AI 스킬
- 서비스 관리 지표 스킬: 프로그램 측정치를 성숙도 차원과 그 짝 방호책에 매핑할 때 사용합니다.
- 서비스 관리 지표 유지보수 스킬: 성숙도 평가가 프로필을 보고하고, 결과를 팀에 두고, 단일 점수를 피하는지 확인할 때 사용합니다.
핵심 정리
- 공유 5단계 척도를 대화의 도구로 쓰고, 배지, 순위, 인증으로는 결코 쓰지 마십시오.
- 하나의 평균 점수가 아니라 여섯 차원에 걸친 프로필을 보고하십시오.
- 팀과 함께 평가하고, 증거를 요청하고, 각 팀의 결과를 그 팀에 두십시오.
- 다른 것들을 제한하는 차원, 흔히 신뢰와 정의에서 작은 다음 걸음을 고르십시오.
- 걸음을 개선 레지스트리에서 추적하고, 프로그램은 퇴보하므로 정기적으로 다시 평가하십시오.
- 높다고 항상 더 좋은 것은 아니며, 단계보다 성과가 더 중요합니다.
참고 문헌과 더 읽을거리
- Paulk, M., et al., Capability Maturity Model for Software, Version 1.1, Software Engineering Institute, Carnegie Mellon University, 1993.
- Axelos, ITIL 4: Direct, Plan and Improve, 2020.
- ISO/IEC 33001, Information technology: Process assessment: Concepts and terminology, International Organization for Standardization, 2015.
- Imai, M., Kaizen: The Key to Japan's Competitive Success, McGraw-Hill, 1986.
- Muller, J., The Tyranny of Metrics, Princeton University Press, 2018.
- Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
- Wikipedia, Capability Maturity Model.
- Wikipedia, Kaizen.
- Wikipedia, Continual improvement process.
- Wikipedia, Goodhart's law.
- Wikipedia, Vanity metric.