개요와 동기

지표 프로그램은 신뢰로 성패가 갈립니다. 같은 측정치 집합이 한 조직에서는 유용한 거울이고 다른 조직에서는 두려움의 원천일 수 있습니다. 차이는 측정치에 있는 경우가 드뭅니다. 숫자 때문에 자신에게 무슨 일이 일어날 것이라고 사람들이 믿는가에 있습니다. 숫자가 순위를 매기고, 비난하고, 자신을 줄이는 데 쓰일 것이라고 믿는다면, 합리적인 반응은 스스로를 보호하는 것입니다. 점수가 잘 나오는 일을 고르고, 문제 보고를 미루고, 정의를 놓고 다투고, 기록되는 것을 조용히 조정합니다. 그러면 데이터는 업무를 설명하기를 멈추고, 프로그램은 제공하려고 만들어진 바로 그것을 잃습니다.

이 패턴은 오래되고 잘 알려져 있습니다. 호손 효과는 사람들이 관찰되고 있음을 알 때 행동을 바꾸는 방식을 설명합니다. 캠벨의 법칙은 정량 지표가 의사 결정에 더 많이 쓰일수록 부패의 압력을 더 받고 감시하려던 과정을 더 왜곡한다고 말합니다. 굿하트의 법칙은 목표에 대해 비슷한 요점을 짚습니다(주제 1.2, 굿하트의 법칙과 지표의 심리학 참조). 이 중 어느 것도 측정을 피할 이유가 아닙니다. 왜곡하려는 유인은 낮고 진실을 말할 이유는 높도록 도입을 설계할 이유입니다.

심리적 안전은 실수를 인정하거나, 질문하거나, 나쁜 소식을 보고하는 것 같은 대인 관계의 위험을 감수해도 팀이 안전하다는 공유된 믿음입니다. 지표 프로그램은 그것에 의존하기도 하고 그것을 침식할 수도 있습니다. 실패, 재작업, 지연의 측정치는 사람들이 보고해도 안전하다고 느낄 때만 정직합니다(주제 9.2, 만족도와 웰빙 지표와 주제 4.2, 사후 분석과 학습 지표 참조). 측정되는 사람들과 측정치를 쓰는 사람들 사이의 신뢰가 밑바탕의 자산이며, 천천히 쌓이고 빨리 소모됩니다.

변화 관리는 사람들이 변화를 거치도록 준비시키고 지원하는 규율입니다. 지표를 도입하는 것은 조직의 변화이며, 새 프로세스나 도구와 같은 세심함을 받을 만합니다(주제 9.6, 조직 변화와 도입 지표 참조). 기술 수용 주기는 혁신이 열광하는 사람들에게서 다수로 퍼지는 방식을 설명하며, 존경받는 자원 팀의 시범 사업이 의무 부과보다 더 많은 일을 한다는 것을 일깨워 줍니다. 시범 프로젝트는 더 넓게 약속하기 전에 접근을 시험하는 작은 규모의 시도입니다. 정보 방열기는 사람들이 묻지 않고도 한눈에 읽을 수 있는 정보의 가시적 표시이며, 팀의 데이터를 그것을 소유한 팀에게 보여 줄 때 투명성에 맞습니다.

애자일의 목표가 도입에 모양을 줍니다. 이해관계자의 지속적 참여는 측정되는 사람들이 측정치와 그 사용 규칙을 고르는 데 도움을 준다는 뜻입니다. 지속적 개선은 프로그램 자체가 사람들이 말하는 것에 반응해 바뀐다는 뜻입니다. 지속적인 발전은 측정치가 바뀔 것으로 기대한다는 뜻이며, 이는 어느 하나의 중요도를 낮춥니다. 지속 가능한 속도는 프로그램이 업무를 밀어내는 보고를 더하지 않는다는 뜻입니다. 의욕 있는 개인을 중심으로 만든다는 것은 사람들을 감시할 자원이 아니라 데이터를 써서 자기 업무를 개선할 수 있는 유능한 성인으로 대한다는 뜻입니다. 실용적인 입장은 단순합니다. 시스템을 측정하고, 그 안의 사람들과 데이터를 공유하고, 그들이 개선을 이끌게 하십시오.

이 주제는 대시보드 지침(주제 11.1, 서비스 지표 대시보드 설계 참조) 및 측정치의 거버넌스(주제 1.4, 지표 거버넌스와 소유권 참조)와 함께 작동합니다.

핵심 원칙

  • 데이터가 무엇을 위한 것이고 무엇을 위한 것이 아닌지 말하십시오. 둘 다 적고 지키십시오.
  • 팀이 자신의 측정치를 소유합니다. 일하는 사람들이 그것에 대한 숫자를 정의하고, 보고, 해석하는 것을 돕습니다.
  • 개인이 아니라 시스템을 측정하십시오. 순위표도, 사람별 점수도, 개인 성과 평가에 데이터를 쓰는 일도 없습니다.
  • 투명하십시오. 정의, 데이터 원천, 누가 무엇을 볼 수 있는지 공유하십시오. 놀라움은 의심을 키웁니다.
  • 자원자로 시작하십시오. 자원 팀의 시범이 더 넓은 도입 전에 이야기와 수정을 만들어 냅니다.
  • 사용을 보여 주십시오. 숫자가 비난이 아니라 장애물 제거 같은 도움으로 이어짐을 입증하십시오.
  • 이의 제기를 허용하십시오. 사람들이 숫자에 의문을 제기할 수 있고, 정정이 빠르게 눈에 보이게 이루어집니다.
  • 지속 가능한 속도로 가십시오. 한 번에 몇 개의 측정치, 배울 시간과 함께.

지표 정의

아래 측정치는 도입이 신뢰를 쌓고 있는지 쓰고 있는지 프로그램 팀에게 알려 줍니다. 개인이 아니라 팀과 프로그램을 설명합니다. 몇몇은 설문과 행동 관찰에 의존하므로 이야기를 나눌 신호로 읽는 것이 가장 좋습니다.

지표 정의 공식 단위 데이터 원천 ITIL 프랙티스 애자일 대응 주기
사용 헌장 포괄률 측정치가 무엇에 쓰이고 절대 무엇에 쓰이지 않는지에 대한 서면 진술에 합의한 참여 팀의 비율 합의된 헌장이 있는 팀 / 참여 팀 퍼센트 프로그램이 보관하는 헌장 거버넌스, 조직 변화 관리 작업 합의 분기
팀 소유 비중 팀이 정의를 쓰는 데 도움을 주었거나 승인한 팀에 표시된 측정치의 비율 팀의 승인이 있는 측정치 / 팀에 표시된 측정치 퍼센트 지표 카탈로그, 승인 기록 지속적 개선 자기 조직화 팀 분기
솔직함 신호 측정치를 도입한 뒤에 문제와 아슬아슬한 사건의 보고가 유지되거나 오르는지 팀당 분기별 아슬아슬한 사건 또는 문제 보고, 전후 및 추세 보고 인시던트, 아슬아슬한 사건, 사후 분석 기록 인시던트 관리, 지속적 개선 비난 없는 돌아보기 분기
이의 제기 처리 시간 사람이나 팀이 숫자에 이의를 제기한 때부터 그들에게 보이는 해결까지의 시간 이의 제기부터 해결까지 일수의 중앙값과 85번째 백분위수 일 이의 제기 로그 지속적 개선, 지식 관리 피드백에 응답하기 분기
측정에 대해 인지한 안전(설문) "우리 일에 대한 데이터는 우리를 돕는 데 쓰인다" 같은 진술에 대한 팀 수준 설문 동의 팀 설문에서 동의한 퍼센트, 응답률을 표시 퍼센트 집계한 익명 팀 설문 조직 변화 관리 신뢰와 의욕 있는 개인 연 2회
개인 대상 사용 사건 헌장에 반해 데이터를 개인의 순위를 매기거나 평가하는 데 보여 주거나 쓴 경우 분기별 보고된 경우의 수, 결과와 함께 건수 프로그램에 대한 보고, 대시보드와 검토의 검토 거버넌스 사람에 대한 존중 분기
자발적 도입 의무 부과 전에 기간 중 프로그램을 받아들이기로 선택한 적격 팀의 비율 참여를 택한 팀 / 초대한 적격 팀 퍼센트 프로그램 기록 조직 변화 관리 시범과 학습 분기

인지한 안전 설문은 어떤 개인도 식별되지 않도록 보고의 최소 집단 크기가 필요하고 익명이어야 합니다. 솔직함 신호는 신중하게 읽어야 합니다. 보고의 증가는 더 많은 문제나 그것을 보고하려는 더 많은 의지를 뜻할 수 있고, 건강한 프로그램은 처음에 보통 둘째를 만들어 냅니다. 개인 대상 사용 사건은 숨길 건수가 아닙니다. 목표는 모든 경우가 보고되고, 처리되고, 바로잡히는 것이며, 보고된 소수의 경우는 프로그램의 실패가 아니라 작동하는 보고 경로의 징표입니다. 자발적 도입은 의무 부과 전 기간에 대해서만 셉니다.

권장 사항

기본 규칙을 먼저 정하십시오

1. 약속을 쓰고 공표하십시오. 첫 숫자를 보여 주기 전에 짧은 헌장을 쓰십시오. 좋은 헌장은 측정치가 팀, 서비스, 시스템을 설명하며 개인의 순위를 매기거나 개인 성과 평가에 절대 쓰이지 않는다고 말합니다. 누가 무엇을 볼 수 있는지, 데이터를 얼마나 보관하는지, 사람들이 숫자에 어떻게 이의를 제기할 수 있는지, 규칙을 어기면 어떻게 되는지를 말합니다. 고위 리더가 서명합니다. 헌장은 사람들이 경계를 풀 수 있게 하는 약속이며, 찾고 읽기 쉬워야 합니다.

2. 개선을 위한 측정과 판단을 위한 측정을 분리하십시오. 팀은 자기 업무를 개선하려고 측정치를 씁니다. 리더는 지원과 투자를 이끌려고 집계된 관점을 씁니다. 어느 쪽도 사람을 평가하는 것이 아닙니다. 조직이 개인을 평가해야 한다면 대화, 증거, 맥락으로 해야 하며 대시보드를 읽어서는 결코 안 됩니다(주제 1.2, 굿하트의 법칙과 지표의 심리학 참조).

3. 상충 관계에 대해 솔직하십시오. 모든 측정치가 악용될 수 있고, 어떤 방식인지 알고 있으며, 각각에 방호책이 따른다고 사람들에게 말하십시오. 이 책의 방식으로 악용 방식과 방호책을 보여 주십시오. 위험을 공개적으로 명명하는 것은 선의를 보여 주고, 놓친 방식을 사람들이 지적하도록 초대합니다.

팀을 소유자로 만드십시오

4. 팀이 고르고 정의하게 하십시오. 측정치의 메뉴를 제공하고 각 팀이 시작할 몇 개를 고르고, 밝힌 이유와 함께 정의를 조정하고, 자신의 것을 더하게 하십시오. 측정치를 직접 고른 팀은 정직하게 쓸 가능성이 더 큽니다. 비교가 타당한 수준에서 서비스를 비교할 수 있도록 작은 공통 핵심을 유지하십시오(주제 1.4, 지표 거버넌스와 소유권 참조).

5. 팀에게 데이터를 먼저 보여 주십시오. 다른 누구보다 먼저 각 팀에 숫자를 주고, 점검하고, 바로잡고, 맥락을 더할 시간을 주십시오. 팀이 이야기를 소유합니다. 나중에 리더에게 데이터를 보여 줄 때 팀이 발표하거나 주석을 답니다. 이는 놀라움을 피하고 해석이 업무에 가장 가까운 사람들에게서 나오도록 보장합니다.

6. 관점을 올바른 수준에 두십시오. 팀 수준과 서비스 수준의 관점을 보여 주십시오. 사람별 분해는 보여 주지 말고, 그것을 보여 주는 도구 기능은 끄십시오. 단일 인시던트의 이력처럼 조사를 위해 세부 관점이 필요한 곳에서는 접근을 제한하고, 이유를 설명하고, 검토 대화에서 제외하십시오(주제 11.2, 도구 지형 참조).

신뢰를 얻도록 도입하십시오

7. 자원자와 시범을 하십시오. 호기심이 있고 존경받는 두세 팀을 초대하십시오. 측정치와 규칙을 그들과 작업하십시오. 그들이 동료들에게 자기 이야기를 하게 하십시오. 그들의 수정과 반대가 프로그램을 개선하고, 그들의 지지는 어떤 공지보다 무게가 있습니다. 더 넓게 도입하기 전에 무엇을 바꾸고 싶은지 묻고 바꾸십시오.

8. 가치를 일찍 눈에 보이게 전달하십시오. 처음 몇 주 안에 팀을 짜증 나게 하는 무언가를 제거하는 데 데이터를 쓰십시오. 항상 기다리는 큐, 목적 없는 승인 단계, 아무도 읽지 않는 보고서입니다. 숫자가 도움으로 이어지는 것을 보면 사람들은 더 정직한 데이터를 제공합니다. 숫자가 자신에 대한 질문으로 이어지는 것을 보면 덜 제공합니다.

9. 이의 제기에 빠르게 응답하십시오. 누군가 숫자가 틀렸다고 말하면 진지하게 받아들이십시오. 점검하고, 정의나 데이터를 고치고, 무엇을 했는지 공개적으로 말하십시오. 빠르고 정중한 정정은 신뢰를 쌓고 방어적 답은 신뢰를 소모합니다. 이의 제기 로그를 유지하고 반복되는 이의 제기를 측정치가 손봐야 한다는 신호로 다루십시오.

시간이 지나도 신뢰를 보호하십시오

10. 두려움의 징후를 지켜보십시오. 징후에는 결과를 피하려고 정의를 놓고 다투는 팀, 다른 신호와 맞지 않는 갑작스러운 개선, 줄어드는 문제 보고, 좋아 보이려고 고른 업무, 누가 데이터를 볼 수 있는지 묻는 사람들이 있습니다. 이것들을 잘못된 행동이 아니라 프로그램에 대한 정보로 다루십시오. 팀에게 묻고, 듣고, 조정하십시오.

11. 리더가 헌장을 지키게 하십시오. 리더는 비교하고, 순위를 매기고, 설명하라는 압박을 받습니다. 그들이 정당하게 쓸 수 있는 것을 주십시오. 팀과 서비스 수준의 추세, 분포, 성과 측정치입니다. 헌장 위반을 보고하기 쉽게 만들고, 각 보고에 응답하고, 제기한 개인의 이름을 밝히지 않고 결과를 공표하십시오. 눈에 보이는 위반 하나가 몇 달의 작업을 무효로 만들 수 있고, 눈에 보이는 정정이 그것을 재건할 수 있습니다.

12. 그 안의 사람들과 프로그램을 검토하십시오. 분기마다 팀에게 측정치가 무엇에 도움이 되고, 무엇을 왜곡하고, 무엇을 버리고 싶은지 물으십시오. 시험에 실패한 측정치는 폐기하십시오. 검토 결과를 공유하십시오. 프로그램을 개선하겠다는 지속적이고 눈에 보이는 약속이 프로그램이 팀을 섬기기 위해 존재한다는 가장 강한 신호입니다(주제 9.5, 지속적 개선 지표 참조).

악용 방식과 방호책

지표 악용되는 방식 짝을 이루는 방호책 지표 또는 실천
사용 헌장 포괄률 형식적으로 헌장에 서명함, 리더가 그것을 무시함 실제 헌장 사용 점검, 개인 대상 사용 사건 보고, 팀과 헌장 검토
팀 소유 비중 팀이 읽지 않은 정의를 승인함, 프로그램이 서명용으로 완성된 정의를 제시함 정의가 어떻게 개발되었는지 표본 조사, 팀이 요청하고 반영된 변경 추적
솔직함 신호 팀에게 더 많거나 더 적게 보고하라고 압박함, 범주 이름을 바꿈 심각도와 사후 분석의 내용과 함께 읽기, 고객이 보고한 문제와 비교
이의 제기 처리 시간 눈에 보이는 해결 없이 이의 제기를 닫음, 이의 제기를 단념시킴 눈에 보이는 응답 요구, 이의 제기자 설문, 반복되는 이의 제기 추적
측정에 대해 인지한 안전(설문) 응답자를 코칭함, 낮은 응답률이 불만스러운 팀을 숨김 익명성과 최소 집단 크기, 응답률 표시, 팀과 직접 대화
개인 대상 사용 사건 보고하지 않음, 사건을 다른 것으로 재분류함, 보고한 사람을 비난함 쉬운 익명 보고, 보고자 보호, 개인 데이터에 대한 검토와 대시보드의 검토
자발적 도입 초대로 포장한 압력, 정밀 조사를 피하려고 참여한 팀을 셈 팀에게 참여한 이유 묻기, 실제 사용 점검, 기간을 의무 부과로부터 자유롭게 유지

건강한 수치는 팀이 실제로 참조하는 헌장, 팀이 모양을 잡는 데 도움을 준 측정치, 일정하거나 오르는 문제 보고, 빠르게 답한 이의 제기, 데이터가 자신을 돕는다고 사람들이 믿음을 보여 주는 설문, 공개적으로 처리된 소수의 보고된 위반, 원해서 참여한 팀입니다.

상충 관계: 장점과 단점

접근 방식 강점 약점
모든 팀에 한꺼번에 의무 도입 빠르고 일관됨 믿음 없는 준수, 악용과 분노
자발적 시범 뒤 확산 이야기와 신뢰를 쌓음 더 느림, 고르지 않은 포괄
팀이 모든 측정치를 선택 높은 소유 의식 비교하기 어려움, 포괄의 간극
공통 핵심과 팀 선택 비교와 소유의 균형 거버넌스가 필요함
팀 간에 공개된 대시보드 투명성, 공유된 학습 비교와 순위의 위험
팀 전용 관점과 공유되는 집계 정직한 돌아보기를 위한 안전한 공간 리더가 앞이 안 보인다고 느낄 수 있음
서면 헌장 분명한 약속, 이의 제기의 근거 무시되면 무가치함
비공식 보증 빠름 잊힘, 호소할 방법 없음

산문의 답은 자원하는 팀으로 시작하고, 그들에게 소유권을 주고, 팀의 동의와 맥락과 함께 집계를 위로 공유하고, 리더가 지켜야 하는 헌장으로 약속을 뒷받침하는 것입니다.

팀과 논의할 질문

1. 이 숫자들로 무슨 일이 일어날 것이라고 우리는 믿으며, 과거에 무슨 일이 있는 것을 보았나요? 측정치를 잘 쓰거나 나쁘게 쓴 솔직한 이야기를 청하십시오. 진행자는 논쟁하지 않고 두려움을 기록해야 합니다. 어떤 약속이 가장 큰 차이를 만들지 합의하십시오.

2. 우리 데이터가 절대 쓰이지 않을 것을 밝히는 헌장에 무엇을 쓸까요? 함께 평이한 말로 초안을 작성하십시오. 걱정된다면 개인 성과 평가, 순위, 해고를 포함하십시오. 서명해야 할 리더에게 가져가십시오.

3. 제안된 측정치 중 우리는 무엇을 고르고 무엇을 버릴까요? 각자 비공개로 투표하게 하고 비교하십시오. 일부가 위협적으로 보이는 이유를 논의하십시오. 한 분기 동안 시도할 짧은 집합에 합의하십시오.

4. 사람들이 문제를 숨기기 시작했는지 어떻게 알까요? 징후를 나열하십시오. 줄어든 보고, 누그러진 언어, 피한 업무입니다. 누가 지켜보고 비난 없이 어떻게 제기할지 합의하십시오.

5. 누가 우리 팀의 숫자를, 어떤 형태로, 언제 봐야 하나요? 팀 전용, 리더십 집계, 팀 간 비교를 논의하십시오. 무엇을 공유하고 누가 발표할지 결정하십시오. 규칙을 적어 두십시오.

6. 우리에 대한 숫자가 틀렸다면 어떻게 고치게 할까요? 알아차림부터 정정까지의 경로를 추적하십시오. 지연과 누가 결정하는지 식별하십시오. 단순한 이의 제기 경로와 시간 기대에 합의하십시오.

네 가지 관점

제품 및 전달 팀

팀은 측정되는 위험을 지고, 숫자가 무슨 뜻인지에 대한 지식을 갖고 있습니다. 측정치를 고르고 정의하는 데 참여하고, 자체 검토에 데이터를 쓰고, 숫자가 오도할 때 목소리를 내야 합니다. 데이터를 먼저 보고 측정이 장애물을 제거하는 데 도움이 될 때 이득을 봅니다.

서비스 및 운영 팀

운영 팀은 가장 풍부한 데이터와 가장 무거운 온콜 및 인시던트 부담을 갖는 경우가 많습니다. 침묵을 보상하거나 에스컬레이션을 벌하는 측정치를 경계하고, 인시던트와 아슬아슬한 사건의 보고를 보호하고, 온콜 데이터가 사람의 순위를 매기는 데 쓰이지 않는지 지켜봐야 합니다(주제 5.7, 토일과 온콜 지표 참조).

리더십과 거버넌스

리더가 사용의 문화를 정합니다. 헌장에 서명하고 따르고, 팀과 서비스 관점을 요청하고, 위반에 공개적으로 대응하고, 순위를 요청하는 것을 피해야 합니다. 대시보드의 수가 아니라 프로그램이 가능하게 하는 개선과 보존하는 솔직함으로 프로그램을 판단해야 합니다.

고객과 사용자

고객과 사용자는 팀이 문제를 정직하게 보고하고 원인을 고칠 때 이득을 봅니다. 그들도 데이터 수집의 대상일 수 있습니다. 자신에 대해 무엇이 수집되고 어떻게 쓰이는지에 대한 명확함을 가질 자격이 있고, 어떤 측정치가 자신에게 가치를 보여 주는지 결정하는 파트너가 될 수 있습니다(주제 6.1, 고객 만족도 지표 참조).

실제 적용: 서비스 관리 사례

한 보건 서비스 제공자의 기술 부문이 15개 전달 및 지원 팀에 지표를 도입합니다. 3년 전의 이전 시도는 닫은 티켓으로 팀의 순위를 공표했고, 가치 낮은 티켓의 종결이 급증하고 보고된 인시던트가 줄어드는 것으로 끝났습니다. 아래 수치는 예시입니다.

새 서비스 관리 책임자는 여섯 명의 팀 리더에게 무엇을 기억하는지 묻는 것으로 시작합니다. 그들은 순위와 그 여파를 설명합니다. 그는 그들과 함께 헌장의 초안을 작성합니다. 측정치는 팀과 서비스를 설명하며 결코 개인을 설명하지 않는다. 개인 관점은 도구에서 꺼진다. 데이터는 개인 평가에 절대 쓰이지 않는다. 팀이 데이터를 먼저 본다. 누구든 숫자에 이의를 제기할 수 있고 근무일 10일 안에 응답을 받는다. 그리고 관련 없는 위반은 프로그램에 보고되어 공개적으로 검토된다. 최고기술책임자가 서명하고, 헌장은 프로그램 페이지에 게시됩니다.

세 팀이 시범에 자원합니다. 각 팀이 메뉴에서 네 개의 측정치를 고르고 두 개의 정의를 다시 씁니다. 한 팀은 "해결 시간"이 고객을 기다리는 시간을 제외해야 한다고 고집하고, 다른 팀은 변경 실패를 롤백만이 아니라 사용자 영향으로 정의해야 한다고 고집합니다. 시범은 셋째 주에 첫 이익을 보입니다. 한 팀이 자기 업무가 승인 큐에서 기다리는 것을 보고 아무도 정당화할 수 없는 단계를 제거합니다. 팀은 부문 회의에서 자기 이야기를 발표합니다. 일곱 팀이 더 참여를 요청합니다. 자발적 도입은 두 분기 안에 15개 팀 중 10개에 이르고, 마지막 다섯 팀은 의무 부과 없이 나중에 합류합니다.

프로그램은 두려움을 지켜봅니다. 첫 분기에 팀당 아슬아슬한 사건 보고가 오르는데, 책임자는 이를 보고하려는 의지가 늘었다고 읽고 표본을 읽어 확인합니다. 최소 집단 크기가 있는 팀 설문은 "우리 일에 대한 데이터는 우리를 돕는 데 쓰인다"에 동의하는 응답자가 둘째 분기 초에 58퍼센트, 넷째 분기 초에 76퍼센트임을 보여 줍니다. 이의 제기 처리 시간은 중앙값 근무일 4일입니다. 그러다 한 이사가 예산 사례를 준비하면서 배포 건수로 팀의 순위를 매긴 표를 요청합니다. 프로그램 책임자는 그것이 헌장 밖이라고 말하고, 팀의 논평이 달린 서비스별 추세 관점을 제안하고, 요청을 결과와 함께 보고된 개인 대상 사용 아슬아슬한 사건으로 기록합니다. 이사는 받아들입니다. 두 분기 뒤 개인 대상 사용 사건은 하나이며, 보고되고, 처리되고, 이름 없이 공표되었습니다.

애자일, AI, 자동화, 분석

애자일

측정되는 사람들과 함께, 데이터가 어떻게 쓰일지에 대한 서면 약속과 그들이 보는 것에 대한 정기적인 대화로 도입하십시오. 주의할 점은 팀의 대시보드와 함께 위에서 발표하는 도입이 악용을 부른다는 것입니다.

AI

직원이 AI를 측정 도구나 대체로서 두려워할 수 있으므로, 개인에 대해 AI가 도출한 데이터는 그들을 평가하는 데 쓰이지 않으며 AI 지원 작업은 팀 수준에서 측정된다고 분명히 하십시오. 주의할 점은 AI 도구로 개인의 행동을 분석하는 것은 조용히 하더라도 약속을 깬다는 것입니다.

자동화

사람들이 무엇이 왜 수집되는지 알 때 자동 수집은 받아들일 만합니다. 수집하는 데이터 목록과 접근 규칙을 공표하십시오. 주의할 점은 활동 데이터의 자동 수집이 감시처럼 느껴지므로 결정에 필요한 것만 수집해야 한다는 것입니다.

분석

결과를 팀과 먼저 공유하고 각 숫자가 어떻게 쓰일지 보여 주십시오. 이는 프로그램이 신뢰를 얻었는지에 정보를 줍니다. 주의할 점은 솔직함 신호가 부드러우므로 설문을 관찰과 결합하고 낮은 응답을 정보로 다뤄야 한다는 것입니다.

부문별 관점

스타트업. 팀이 작고 신뢰는 개인적입니다. 숫자가 무엇을 위한 것인지 소리 내어 말하고, 팀 전체가 추적할 몇 개의 측정치를 고르게 하고, 어떤 개인 대화에서도 제외하십시오. 위험은 숫자에 대한 창업자의 스치는 논평이 하룻밤 사이에 행동을 바꾸는 것입니다. 몇 줄이라도 약속을 적어 두십시오.

소규모 사업. 직원이 숫자가 일자리를 줄이려는 것이라고 의심할 수 있습니다. 왜 측정하는지, 무엇을 볼 것인지, 무엇을 보지 않을 것인지를 공개적으로 이야기하십시오. 측정치를 고르는 데 사람들을 참여시키고, 찾은 것을 공유하고, 그들에게 도움이 된 개선을 일찍 보여 주십시오.

대기업. 규모는 대부분의 리더가 팀에서 멀기 때문에 신뢰를 더 어렵게 만듭니다. 고위 수준에서 서명한 헌장, 작은 공통 핵심이 있는 팀 소유 측정치, 개인 관점을 막는 도구 구성, 위반을 보고하는 독립적 경로를 쓰십시오. 시범하고, 배우고, 동료를 통해 퍼뜨리고, 단일한 전 세계 도입 날짜는 피하십시오.

정부 및 공공 부문. 고용 규칙, 노동조합, 공적 검증이 제약과 기대를 더합니다. 직원 대표와 일찍 협의하고, 그들과 헌장에 합의하고, 개선 데이터와 공식 성과 절차 사이의 선을 분명히 하십시오. 공공 보고 요건은 내부 개선 측정치와 분리해 유지해야 합니다(주제 8.5, 규제 및 정부 보고 참조).

비즈니스 케이스: 동기, ROI, TCO

비용은 대부분 사람들의 시간입니다. 헌장 초안 작성, 시범 운영, 팀과의 워크숍, 이의 제기 처리, 설문 실행, 규칙을 지키는 데 쓰는 리더의 시간입니다. 기회비용도 있는데, 신중한 도입은 의무 부과보다 느리기 때문입니다. 이 비용은 도입이 실패해 데이터가 왜곡되고, 신뢰가 소모되고, 프로그램이 버려지는 비용에 비하면 작습니다.

수익은 현실을 반영하는 데이터, 문제의 정직한 보고, 측정치를 개선에 쓰는 팀입니다. 이는 문제의 더 이른 탐지, 숫자에 대한 더 적은 분쟁, 강제 없는 더 높은 도입으로 나타납니다. 자체 이력으로 사례를 만드십시오. 이전에 측정치를 부과했을 때 무슨 일이 있었는지, 이번에 몇 팀이 자발적으로 채택했는지, 문제 보고가 어떻게 바뀌었는지입니다. 추적 가능한 출처와 자기 환경에의 관련성 없이 참여나 신뢰에 대한 공개 수치를 인용하지 마십시오(주제 7.7, 투자 수익과 비즈니스 케이스 참조).

안티패턴과 함정

  • 깜짝 순위표. 리더십 슬라이드에 순위가 나타납니다. 신뢰가 끝납니다. 순위를 프로그램 밖에 두십시오.
  • 성과 평가 속의 측정치. 언급만으로도 모든 곳에서 행동이 바뀝니다. 서면으로 제외하십시오.
  • 먼저 의무 부과, 설명은 나중에. 믿음 없는 준수. 자원자와 시범하고 이유를 설명하십시오.
  • 아무도 집행하지 않는 헌장. 행동 없는 말은 없는 것보다 나쁩니다. 리더가 지키게 하고 결과를 공표하십시오.
  • 기본값으로서의 감시. 도구가 할 수 있기 때문에 개인 활동을 드러냅니다. 그 기능을 끄십시오.
  • 이의 제기에 대한 방어적 답. 사람들이 오류를 지적하기를 멈춥니다. 빠르고 정중하게 응답하십시오.
  • 측정치를 서둘러 늘리기. 과부하와 혼란. 몇 개로 시작해 키우십시오.
  • 침묵을 성공으로 읽기. 보고가 줄면 두려움을 뜻할 수 있습니다. 솔직함 신호를 지켜보고 사람들과 이야기하십시오.

성숙도 모델

차원 1 시작 2 발전 3 표준화 4 관리 5 조율
약속과 사용 문서화되지 않음, 관리자마다 사용이 다름 구두 보증, 일부 팀 합의 리더가 서명한 서면 헌장, 개인 관점 비활성화 위반을 보고하고 검토함, 헌장 사용을 점검함 직원 및 파트너와 헌장을 공동 소유, 경험에서 개정함
소유와 투명성 측정치를 부과함 일부 팀과 협의함 팀이 측정치를 고르고 정의하며 데이터를 먼저 봄 소유 비중과 이의 제기 처리 시간을 관리함 팀, 공급업체, 고객이 합의에 따라 관점을 공유함, 소유가 일상
신뢰와 솔직함 두려움 또는 무관심 자원자와 시범 안전 설문과 아슬아슬한 사건 추세를 팀과 검토함 신호가 계획된 행동을 촉발함, 자발적 도입을 추적함 솔직함이 일상, 프로그램의 개선이 모두에게서 나옴

체크리스트

  • 서면 헌장이 데이터가 무엇을 위한 것이고 절대 무엇을 위한 것이 아닌지 밝히며 리더가 서명했다.
  • 개인 수준의 관점과 순위는 도구에서 꺼져 있거나 정책으로 제한된다.
  • 팀이 자신의 측정치를 고르거나 승인하고 다른 사람보다 먼저 데이터를 본다.
  • 더 넓은 도입에 앞서 자원 팀과의 시범이 있다.
  • 데이터의 첫 사용이 팀에게 눈에 보이는 도움을 전달한다.
  • 밝힌 응답 시간과 로그가 있는 이의 제기 경로가 있다.
  • 헌장 위반에 대한 보고 경로가 있고 결과가 이름 없이 공표된다.
  • 팀 수준의 안전과 솔직함 신호를 지켜보고 팀과 논의한다.
  • 악용 방식과 방호책을 팀과 공개적으로 공유한다.
  • 분기마다 팀과 프로그램을 검토하고, 측정치가 도움이 되지 않게 되면 폐기한다.

AI 프롬프트

지표 헌장의 초안을 작성합니다.

[조직 유형]의 지표 프로그램을 위한 한 쪽짜리 헌장의 초안을 작성해 주세요. 데이터가
무엇을 위한 것인지, 절대 무엇에 쓰이지 않을지(개인 순위와 성과 평가 포함), 누가
무엇을 볼 수 있는지, 데이터를 얼마나 보관하는지, 사람이 숫자에 어떻게 이의를
제기할 수 있는지, 위반을 어떻게 보고하는지, 누가 서명하는지를 밝혀야 합니다.
평이한 말을 쓰세요. 법률 자문을 하지 마세요. 가정과 인사 및 법률 전문가와 확인할
사항을 나열해 주세요.

시범을 계획합니다.

[맥락]의 자원 팀 두세 팀과 함께하는 지표 프로그램의 6주 시범을 계획해 주세요.
팀을 초대하는 방법, 제공할 측정치, 규칙을 정하는 방법, 데이터가 제공해야 할
이른 도움, 끝에 팀에게 물을 것, 더 넓은 도입을 결정하는 방법을 포함하세요.
결과를 가정하지 마세요. 가정과 위험을 나열해 주세요.

두려움의 관점에서 측정치를 검토합니다.

다음은 제안된 측정치와 그것이 쓰일 방식입니다: [붙여 넣기]. 회의적인 팀원처럼
행동해 주세요. 그것이 위협으로 받아들여질 수 있는 방식, 좋아 보이려고 사람들이
행동을 바꿀 수 있는 방식, 그것이 단념시킬 수 있는 정직한 보고를 설명해 주세요.
위험을 낮출 정의, 표시, 사용 규칙의 변경을 제안해 주세요. 가정을 나열해 주세요.

이의 제기에 응답합니다.

한 팀이 이 숫자에 이의를 제기했습니다: [개인 데이터 없이 설명]. 우려를 인정하고,
숫자가 계산되는 방식을 설명하고, 점검하는 방법을 제안하고, 답의 날짜를 정하고,
숫자가 틀렸다면 무엇이 바뀔지 말하는 정중한 응답의 초안을 작성해 주세요. 방어적
이지 마세요. 아직 모르는 것을 나열해 주세요.

AI 스킬

핵심 정리

  • 신뢰가 자산입니다. 데이터가 무엇을 위한 것이고 절대 무엇을 위한 것이 아닌지 적고, 약속을 지키십시오.
  • 팀, 서비스, 시스템을 측정하고 개인을 드러내는 관점은 끄십시오.
  • 팀이 고르고, 정의하고, 데이터를 먼저 보고, 그것이 말하는 이야기를 소유하게 하십시오.
  • 자원자와 시범하고, 눈에 보이는 도움을 일찍 전달하고, 동료를 통해 퍼뜨리십시오.
  • 이의 제기에 빨리 답하고 두려움의 징후를 프로그램에 대한 정보로 다루십시오.
  • 리더가 헌장을 지키게 하고 그 안의 사람들과 프로그램을 검토하십시오.

참고 문헌과 더 읽을거리

  1. Edmondson, A., "Psychological Safety and Learning Behavior in Work Teams," Administrative Science Quarterly, 1999.
  2. Campbell, D., "Assessing the Impact of Planned Social Change," Evaluation and Program Planning, 1979.
  3. Muller, J., The Tyranny of Metrics, Princeton University Press, 2018.
  4. Kotter, J., Leading Change, Harvard Business School Press, 1996.
  5. Westrum, R., "A Typology of Organisational Cultures," BMJ Quality and Safety, 2004.
  6. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution Press, 2018.
  7. Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
  8. Wikipedia, Hawthorne effect.
  9. Wikipedia, Campbell's law.
  10. Wikipedia, Goodhart's law.
  11. Wikipedia, Psychological safety.
  12. Wikipedia, Trust (social science).
  13. Wikipedia, Change management.
  14. Wikipedia, Technology adoption life cycle.
  15. Wikipedia, Pilot project.
  16. Wikipedia, Information radiator.