자동화와 오케스트레이션 지표
자동화는 사람들이 하고 싶지 않은 일을 새로운 일, 새로운 실패, 새로운 위험을 만들지 않고 없앨 때만 효과를 낸 것이므로, 각 자동화가 무엇을 없애는지, 얼마나 자주 실패하는지, 얼마나 빨리 되돌릴 수 있는지, 언제 멈출지 누가 결정하는지를 측정하십시오.
개요와 동기
서비스 관리에서 자동화는 사람이 하던 일을 소프트웨어가 하게 하는 것을 뜻합니다. 계정 프로비저닝, 서비스 재시작, 티켓 라우팅, 표준 변경 승인, 상태 업데이트 게시입니다. 오케스트레이션은 여러 자동화된 단계를 흔히 도구와 팀에 걸쳐 "신규 직원 온보딩"이나 "이 서비스 복구" 같은 하나의 흐름으로 조율합니다. ITIL의 지침 원칙 "최적화하고 자동화하라"는 이 발상의 오랜 진술이며, 지속적 전달이 그에 의존합니다. 코드형 인프라 같은 실천은 시스템의 설정을 버전 관리되고 시험 가능한 파일로 바꾸므로, 자동화는 기록의 한 형태이기도 합니다.
자동화는 위험을 느리고 눈에 보이는 것에서 빠르고 넓은 것으로 옮깁니다. 실수를 하는 사람은 티켓 하나에 영향을 줍니다. 같은 실수를 하는 자동화된 단계는 1분 안에 모든 티켓에 영향을 줄 수 있습니다. 그래서 자동화에는 자체 측정치가 필요하며, "자동화의 수"나 "절약한 시간" 같은 건수는 약합니다. 그것들은 얼마나 많이 만들었고 얼마나 주장했는지를 설명하지, 누군가 더 나아졌는지를 설명하지 않습니다.
이 주제는 서비스 요청의 셀프서비스와 자동화에 대한 앞선 측정치(주제 3.7, 셀프서비스와 자동화 지표 참조)와 다릅니다. 그것은 사용자 대면 요청 흐름에 관한 것입니다. 여기서의 주제는 엔지니어링 및 운영 자산으로서의 자동화입니다. 그 포괄, 신뢰성, 안전, 소유권, 비용입니다. 또 변경이 운영에 이르는 경로를 다루는 주제 10.7의 파이프라인 측정치(주제 10.7, 파이프라인과 자동화된 변경 지표 참조)와도 다릅니다.
여기서 쓰는 용어입니다. 자동화는 사람이 그 단계를 수행하지 않고 실행되는 정의된 과업입니다. 런북은 운영 과업의 문서화된 절차이고, 런북 자동화는 그것을 실행합니다. 오케스트레이션은 자동화를 조율하는 흐름입니다. 사람이 개입하는 루프는 행동이 효력을 내기 전에 사람이 검토하거나 승인한다는 뜻입니다. 토일은 서비스와 함께 늘어나고 지속적 가치가 없는 반복적인 수작업 운영 작업입니다(주제 5.7, 토일과 온콜 지표 참조). 여기서 방호책은 두 가지 의미가 있습니다. 이 책 전체에서 쓰는 짝 측정치와, 자동화가 할 수 있는 것에 대한 기술적 한도입니다. 본문이 어느 쪽인지 말합니다.
핵심 원칙
- 건수가 아니라 효과를 측정하십시오. 자동화의 수는 말해 주는 것이 적습니다. 그것이 무엇을 없애고 무엇을 깨뜨리는지가 많은 것을 말해 줍니다.
- 모든 자동화에는 소유자가 있습니다. 소유자 없는 자동화는 나이와 함께 커지는 위험입니다.
- 모든 자동화된 행동을 보이고 되돌릴 수 있게 만드십시오. 무엇이, 무엇에, 어떤 결과로 실행되었는지 기록하고 되돌리는 방법을 아십시오.
- 사람이 결정하는 곳을 고르십시오. 사람의 역할을 행동의 위험에 맞추고 그 역할을 행사할 수 있는지 시험하십시오.
- 자동화를 서비스로 측정하십시오. 다른 서비스처럼 신뢰성, 변경, 비용, 폐기가 있습니다.
- 안정되고 지루한 것을 먼저 자동화하십시오. 잘 이해하지 못한 것을 자동화하면 문제를 시스템에 굳힙니다.
지표 정의
| 지표 | 정의 | 공식 | 단위 | 데이터 원천 | ITIL 프랙티스 | 애자일 대응 | 주기 |
|---|---|---|---|---|---|---|---|
| 자동화 실행 성공률 | 완료되어 의도한 결과를 달성했고 실행 후 점검으로 확인된 자동화 실행의 비율 | 성공한 실행 후 점검이 있는 실행 / 기간 중 시작한 실행, 실행 후 점검이 없는 실행은 제외하고 따로 보고 | 퍼센트 | 오케스트레이션 및 자동화 플랫폼 로그 | 서비스 요청 관리, 릴리스 관리 | 자동화된 작업에 대한 완료의 정의 | 월 |
| 과업 자동화 포괄률 | 자동화된 적격 반복 과업의 비율 | 합의된 적격 목록에서 자동으로 실행되는 과업 / 적격 목록의 과업, 적격 목록은 분기마다 검토 | 퍼센트 | 과업 목록과 런북 레지스트리 | 지속적 개선 | 자동화 후보의 백로그 | 분기 |
| 수동 개입률 | 사람이 개입하거나 고쳐야 했던 자동화 실행의 비율 | 시작 후 수동 단계가 추가된 실행 / 시작한 실행 | 퍼센트 | 자동화 로그와 티켓 연결 | 인시던트 관리 | 자동화된 작업에서 빠져나간 결함 | 월 |
| 자동화가 일으킨 인시던트율 | 자동화된 행동에 귀속된 인시던트, 1,000회 실행당 | 자동화 원인이 확인된 인시던트 / 자동화 실행 x 1,000 | 1,000회 실행당 건수 | 실행 식별자에 연결된 인시던트 레코드 | 인시던트 관리, 문제 관리 | 자동화된 변경의 변경 실패율 | 월 |
| 롤백 시간 | 필요를 인식한 뒤 자동화된 행동을 되돌리는 데 걸리는 시간 | (되돌림이 완료된 시각 빼기 되돌리기로 결정한 시각)의 중앙값과 95번째 백분위수 | 분 | 자동화 로그와 인시던트 타임라인 | 변경 활성화 | 완료의 정의에 있는 롤백 능력 | 분기 |
| 검증된 절약 시간 | 표본 조사로 점검한 수작업의 제거된 시간 | 자동화한 과업 x (시간 표본의 수작업 과업 시간 중앙값 빼기 남은 수작업 시간 중앙값), 기간 동안, 표본 날짜를 밝힘 | 시간 | 시간 표본과 실행 건수 | 지속적 개선 | 작업 항목당 전달된 가치 | 분기 |
| 자동화 소유권 최신성 | 소유자가 소유권을 확인하고 지난 12개월 안에 자동화를 검토한 자동화의 비율 | 12개월 안에 확인된 소유자와 검토가 있는 자동화 / 레지스트리의 자동화 | 퍼센트 | 자동화 레지스트리 | 거버넌스, 자산 및 구성 관리 | 팀 헌장과 소유권 | 분기 |
공식은 달리 밝히지 않는 한 과업이 아니라 실행을 셉니다. "성공"은 서비스가 건강한지, 계정이 존재하는지 같은 독립적인 실행 후 점검을 요구합니다. 오류 없이 끝나기만 한 실행은 성공으로 세지 않습니다. 절약한 시간은 자동화를 만들고 유지하는 데 쓴 시간을 제외하며, 이는 비용으로 따로 셉니다(주제 7.7, 투자 수익과 비즈니스 케이스 참조).
권장 사항
무엇을 자동화할지 결정하십시오
1. 도구가 아니라 반복 과업의 목록에서 시작하십시오. 반복 과업의 순위를 얼마나 자주 일어나는지, 얼마나 걸리는지, 얼마나 오류가 나기 쉬운지, 얼마나 잘 이해되는지로 매기십시오. 안정되고 잘 이해된 것을 먼저 자동화하고, 드물거나 잘 이해되지 않은 것은 사람에게 맡기십시오.
2. 자동화하기 전에 프로세스를 고치십시오. 헷갈리는 프로세스를 자동화하면 혼란이 더 빨라집니다. 하는 사람들과 단계를 훑어보고, 아무것도 더하지 않는 단계를 제거한 다음 자동화하십시오.
3. 사람의 역할을 위험으로 고르십시오. 위험이 낮고 되돌릴 수 있는 행동에서는 사람이 사후에 로그만 검토할 수 있습니다. 위험이 더 높은 행동에서는 사람이 행동 전에 승인합니다. 가장 높은 것은 수작업으로 남을 수 있습니다. 규칙을 적고 승인자가 결정할 정보를 가졌는지 시험하십시오.
자동화를 안전하게 만드십시오
4. 소유자와 레지스트리를 요구하십시오. 모든 자동화에는 지명된 소유자와, 목적, 범위, 권한, 마지막 검토가 있는 레지스트리 항목이 있습니다. 소유자가 떠날 때는 그 사람이 떠나기 전에 소유권을 옮기십시오.
5. 권한과 범위를 제한하십시오. 자동화에는 일을 하는 최소한의 접근과, 최대 계정 수나 서버 수처럼 한 번의 실행에서 바꿀 수 있는 양의 한도가 있어야 합니다. 범위 한도는 나쁜 실행의 피해를 제한하는 기술적 방호책입니다.
6. 종료 코드가 아니라 결과를 점검하십시오. 의도한 상태를 확인하는 실행 후 점검을 더하고, 그 점검으로 성공을 측정하십시오. 깨끗하게 끝난 스크립트가 아무것도 하지 않았을 수 있습니다.
7. 기록하고 되돌리기를 계획하십시오. 모든 실행은 무엇을 바꿨는지 기록하고, 모든 자동화에는 변경을 되돌리는 시험된 방법이나 불가능한 이유가 명시되어 있습니다. 안전한 환경에서 롤백을 연습하고 걸리는 시간을 측정하십시오.
정직하게 측정하십시오
8. 표본 조사로 절약한 시간을 검증하십시오. 절약한 시간의 주장은 낙관적인 경우가 많습니다. 전후의 수작업 과업을 표본으로 시간을 재고, 표본의 날짜를 밝히고, 유지보수와 실패의 비용을 빼십시오.
9. 포괄 옆에 실패와 개입을 보고하십시오. 높은 수동 개입률과 함께 높은 포괄률은 사람들이 자동화가 깨뜨리는 것을 고치고 있다는 뜻입니다. 둘 다 한 페이지에 보여 주십시오.
10. 더 이상 도움이 되지 않는 것을 폐기하십시오. 과업이 바뀌었거나 사라진 자동화는 위험입니다. 정기 주기로 사용을 검토하고 실행이 없거나 소유자가 없는 자동화를 제거하십시오.
11. 사람이 멈출 수 있게 유지하십시오. 자동화 하나나 자동화의 한 부류를 빨리 일시 중지하는 분명한 방법을 제공하고, 그것이 얼마나 빨리 가능한지 측정하십시오.
악용 방식과 방호책
| 지표 | 악용되는 방식 | 짝을 이루는 방호책 지표 또는 실천 |
|---|---|---|
| 자동화 실행 성공률 | 깨끗이 끝나면 성공으로 셈, 실패한 실행을 로그에서 삭제함 | 독립적인 실행 후 점검, 로그를 하류 레코드와 비교 |
| 과업 자동화 포괄률 | 포괄률이 오르도록 적격 목록을 줄임, 사소한 과업을 먼저 자동화함 | 적격 목록을 다른 팀과 검토, 물량과 시간으로 가중 |
| 수동 개입률 | 실행이 깨끗해 보이도록 수동 수정을 별도의 티켓으로 기록함 | 티켓을 실행 식별자에 연결, 숨은 수정을 위한 실행 표본 조사 |
| 자동화가 일으킨 인시던트율 | 자동화 실패를 사람이나 도구에 귀속함, 인시던트를 실행에 연결하지 않음 | 인시던트 레코드에 실행 식별자 요구, 놓친 연결을 위한 인시던트 표본 조사 |
| 롤백 시간 | 쉬웠던 롤백만 측정함, 시계를 늦게 시작함 | 가장 어려운 자동화의 훈련에서 롤백 연습, 시계의 시작 정의 |
| 검증된 절약 시간 | 낙관적인 과업 시간을 씀, 유지보수와 실패 비용을 무시함 | 팀 밖의 누군가가 하는 시간 표본, 구축 및 유지보수 비용 포함 |
| 자동화 소유권 최신성 | 배포 목록이나 이전 직원을 소유자로 명명함 | 소유자가 서면으로 확인, 소유자가 활동 중인지 점검 |
건강한 수치는 일정하거나 줄어드는 수동 개입률 및 인시던트율과 함께 오르는 포괄률, 팀이 느끼는 것과 맞는 검증된 절약 시간, 폐기된 자동화가 제거되어 최신으로 유지되는 레지스트리입니다.
상충 관계: 장점과 단점
| 접근 방식 | 강점 | 약점 |
|---|---|---|
| 넓게 일찍 자동화 | 토일을 없앰, 더 빠르고 일관된 작업 | 빠르고 넓은 실패, 유지보수 부담, 숨은 의존성 |
| 사람의 점검과 함께 선택적으로 자동화 | 더 낮은 위험, 사람이 기술을 유지함 | 더 느림, 승인자가 도장만 찍을 수 있음 |
| 자동화 수와 절약한 시간 세기 | 보고하고 비교하기 단순함 | 양을 보상함, 주장이 검증되지 않는 경우가 많음 |
| 효과, 실패, 롤백 측정 | 실제 가치와 위험을 보여 줌 | 수집하는 데 더 많은 노력, 레코드 연결이 필요함 |
산문의 결론은 안정되고 이해된 것을 자동화하고, 그것이 무엇을 없애고 무엇을 깨뜨리는지 측정하고, 사람이 멈출 수 있게 유지하는 것입니다. 시간은 절약하지만 가끔 심각한 인시던트를 일으키는 자동화는 나쁜 교환일 수 있으며, 짝 측정치만이 그것을 보여 줄 것입니다.
팀과 논의할 질문
1. 오늘 우리가 운영하는 자동화는 무엇이며, 각각 누가 소유하나요? 목록을 함께 만드십시오. 팀은 보통 아무도 만든 기억이 없는 자동화를 찾습니다. 목적, 권한, 마지막 검토 날짜를 요청하십시오. 개인 기기의 스크립트와 이전 직원이 소유자인 예약 작업을 예상하십시오. 분기 말까지 각각을 누가 소유할지 합의하며 후속 조치를 하십시오.
2. 자동화가 사람이 했을 것보다 문제를 더 크게 또는 더 빠르게 만든 때는 언제인가요? 비난 없이 이야기를 청하십시오. 전형적인 예는 잘못된 자원을 제거한 정리 작업이나 장애 중에 서비스를 재시작한 복구입니다. 어떤 한도가 피해를 제한했을지 물으십시오. 답이 범위 한도와 승인 규칙이 됩니다.
3. 가장 위험한 자동화된 행동에서 누가 결정하며, 잘 결정할 수 있나요? 승인 순간에 승인자가 보는 것을 살펴보십시오. 승인 요청에 판단에 필요한 정보가 빠져 있는 경우가 많습니다. 승인자가 안 된다고 할 수 있는지와 그렇게 하면 무슨 일이 일어나는지 물으십시오. 요청을 개선하거나 역할을 바꾸며 후속 조치를 하십시오.
4. 자동화가 조용히 작동을 멈췄음을 어떻게 알까요? 조용한 실패는 가장 흔한 문제이며 평평한 숫자로 나타나는 경우가 많습니다. 알아차릴 점검을 요청하십시오. 실행 누락과 기대와 맞지 않는 결과에 대한 경보를 논의하십시오. 자동화 하나를 골라 시험하십시오.
5. 절약한 시간 중 실제로 더 나은 일에 쓴 것은 얼마인가요? 서류상 절약한 시간이 용량이 되지 않을 수 있습니다. 시간이 어디로 갔고 누가 결정했는지 물으십시오. 유지보수와 실패의 비용에 대해 정직하십시오. 표본으로 검증할 주장 하나를 골라 후속 조치를 하십시오.
6. 어느 자동화를 폐기해야 하며, 무엇이 필요한가요? 사용과 가치의 증거를 요청하십시오. 폐기는 실패처럼 느껴질 수 있으므로 일상적인 유지보수로 틀을 잡으십시오. 무언가를 제거하기 전에 의존성을 식별하십시오. 시험 기간과 복원하는 방법에 합의하십시오.
네 가지 관점
제품 및 전달 팀
자동화를 시험, 로그, 소유자, 롤백 방법이 있는 제품의 일부로 만드십시오. 완료의 정의에 실행 후 점검을 포함하고, 팀이 아직 이해하지 못한 단계는 자동화하지 마십시오. 측정치를 개별 엔지니어가 아니라 팀의 자동화 수준에 두십시오.
서비스 및 운영 팀
자동화가 실패하면 호출기를 드는 것은 당신이므로 가시성과 쉬운 중단을 고집하십시오. 수동 개입과 자동화가 일으킨 인시던트를 추적하고 수정의 우선순위를 정하는 데 쓰십시오. 자동화 레지스트리를 서비스 기록의 일부로 다루십시오.
리더십과 거버넌스
자동화의 건수만이 아니라 효과, 실패, 롤백 준비를 요청하십시오. 자동화를 만드는 것만이 아니라 유지보수에도 자금을 대고, 일부 자동화가 폐기될 것을 예상하십시오. 위험에 따른 사람 감독에 대한 기대를 정하고 가장 위험한 행동의 목록을 검토하십시오.
고객과 사용자
자동화가 작동할 때는 알아차리지 못해야 하고, 작동하지 않을 때는 의지할 사람이 있어야 합니다. 사람에게 닿는 방법을 묻고, 자동화된 행동이 틀렸을 때 말하십시오. 당신의 피드백은 자동화가 도움이 되었는지 점검하는 일의 일부입니다.
실제 적용: 서비스 관리 사례
한 중견 온라인 소매업체의 운영 팀이 세 과업을 자동화합니다. 실패하는 웹 서버 재시작, 고객 서비스 비밀번호 재설정, 쓰이지 않는 클라우드 저장소 정리입니다. 이 사례의 숫자는 예시입니다. 한 분기 뒤 대시보드는 자동화 3개, 실행 2,400회, "약 180시간 절약"을 보여 줍니다. 리더십은 만족하고 더 요청합니다.
팀은 측정치를 적용합니다. 자동화 실행 성공률은 종료 코드로는 98퍼센트처럼 보입니다. 실행 후 점검을 하면 91퍼센트로 떨어집니다. 비밀번호 재설정은 성공을 보고하지만 실행의 9퍼센트에서 사용자가 로그인할 수 없습니다. 그 자동화의 수동 개입률은 11퍼센트입니다. 재시작 자동화는 두 건의 인시던트를 일으켰고, 하나는 데이터베이스 장애 조치 중에 서버를 재시작했을 때이며, 아무도 연습한 적이 없어서 롤백 시간이 약 40분이었습니다.
시간 표본은 수작업 비밀번호 재설정이 원래 추정이 쓴 10분이 아니라 약 4분 걸렸고, 실패한 재설정을 처리하는 데는 원래 과업만큼 걸림을 보여 줍니다. 검증된 절약 시간은 60시간에 가깝습니다. 저장소 정리의 소유자는 봄에 회사를 떠났습니다.
팀은 비밀번호 재설정에 실행 후 점검을, 재시작 자동화에 범위 한도와 일시 중지 규칙을, 정리에 새 소유자를 더하기로 결정합니다. 한 관리자가 "만든 자동화"를 팀 목표로 세자고 제안합니다. 팀은 같은 것을 더 만드는 것을 보상할 것이므로 거절합니다. 남은 어려움은 비밀번호의 실행 후 점검에 시험 계정이 필요하고, 재시작 자동화의 롤백 훈련이 다음 분기로 잡혀 있다는 것입니다.
애자일, AI, 자동화, 분석
애자일
자동화를 그것을 쓰고 의존하는 사람들과 지속적으로 개선하는 제품으로 다루십시오. 좋은 관행은 자동화 백로그, 실패, 개입에 대한 이해관계자와의 짧은 정기 검토입니다. 주의할 점은 자동화에 대한 잦은 작은 변경에는 다른 변경과 같은 시험이 필요하다는 것입니다. 그렇지 않으면 실패가 더 빨리 옵니다.
AI
AI는 런북 초안을 쓰고, 스크립트를 짜고, 어떤 행동을 취할지 결정할 수 있으며, 에이전트형 AI는 시스템에 행동할 수 있습니다. 행동할 수 있는 AI를 소유자, 권한, 범위 한도, 승인 규칙, 롤백이 있는 자동화로 다루십시오. 성공률을 잘못된 행동의 비율과 사람이 되돌려야 했던 비중과 짝지우십시오(주제 10.3, AI 에이전트와 챗봇 지표 참조). 주의할 점은 AI가 쓴 스크립트는 권위 있어 보이므로 다른 코드처럼 시험해야 한다는 것입니다.
자동화
이것이 이 주제의 주제이므로 실천은 자동화 플랫폼 자체를 측정하는 것입니다. 많은 서비스가 그것에 의존하므로 가용성, 실행 실패, 큐 시간입니다. 티켓과 인시던트에 연결되는 실행 식별자와 함께 실행 데이터를 자동으로 수집하십시오. 주의할 점은 자동화 플랫폼이 단일 장애 지점이 되므로 핵심 과업에 수작업 대체 수단을 두어야 한다는 것입니다.
분석
실행을 성과에 연결하십시오. 성공한 실행 후 점검, 티켓, 인시던트입니다. 이는 어떤 자동화를 고치고, 확장하고, 폐기할지에 정보를 줍니다. 주의할 점은 귀속이 일관된 식별자에 달려 있으므로 연결률을 감사하고 각 비율 뒤의 실행 수를 보여 줘야 한다는 것입니다(주제 10.8, 분석과 데이터 품질 지표 참조).
부문별 관점
스타트업. 작은 팀은 통제가 거의 없이 빨리 자동화합니다. 소유자가 있는 자동화의 짧은 목록을 유지하고, 고객을 건드리는 모든 것에 실행 후 점검을 두고, 필요가 생기기 전에 오케스트레이션 플랫폼을 만드는 것을 피하십시오.
소규모 사업. 자동화는 몇 개의 예약 작업과 관리형 서비스를 뜻하는 경우가 많습니다. 공급업체에 당신을 대신해 어떤 자동화가 실행되고 롤백은 무엇인지 물으십시오. 목록을 유지하고 각 항목을 누군가 소유하는지 점검하십시오.
대기업. 많은 팀에 걸친 많은 자동화는 의존성과 중복을 만듭니다. 중앙 레지스트리, 표준 로깅과 실행 식별자, 고위험 행동의 검토 경로를 유지하십시오. 자동화를 다시 만드는 대신 팀 간에 공유하십시오.
정부 및 공공 부문. 책임성과 감사 필요 때문에 모든 자동화된 행동은 결정과 소유자까지 추적할 수 있어야 합니다. 로그와 승인을 증거로 보관하고, 시민에게 영향을 주는 자동화된 결정에 대한 조달 및 법적 규칙을 확인하십시오(주제 8.5, 규제 및 정부 보고 참조).
비즈니스 케이스: 동기, ROI, TCO
비용은 자동화를 만들고 시험하는 것, 플랫폼을 운영하는 것, 시스템이 바뀔 때 자동화를 유지하는 것, 실패의 비용입니다. 실행을 식별자와 함께 기록한다면 측정치를 수집하는 비용은 적습니다. 더 큰 비용은 소유자, 검토, 롤백 훈련의 규율입니다.
수익은 토일의 제거, 더 빠르고 일관된 작업, 더 적은 수작업 오류입니다. 이는 실재하지만 과장하기 쉬우므로 표본으로 검증하십시오. 위험 쪽은 자동화가 일으킨 인시던트와 아무도 유지하지 않는 자동화의 비용입니다. 공정한 비즈니스 케이스는 검증된 절약 시간과 피한 오류를 유지보수와 인시던트를 포함한 전체 비용과 비교하고, 가정을 범위로 밝힙니다(주제 7.7, 투자 수익과 비즈니스 케이스 참조). 맥락에 따라 크게 다르므로 여기에는 기준 수치를 주지 않습니다. 시작하기 전에 자체 기준선을 측정하십시오.
안티패턴과 함정
- 만든 자동화 세기. 양을 보상합니다. 대신 효과, 실패, 롤백을 보고하십시오.
- 종료 코드로 성공 판단하기. 깨끗한 종료는 거의 증명하지 않습니다. 의도한 결과를 점검하십시오.
- 소유자 없는 자동화. 시스템이 바뀌면서 조용히 실패합니다. 레지스트리를 유지하고 소유자를 확인하십시오.
- 나쁜 프로세스를 자동화하기. 결함이 더 빨리 움직입니다. 먼저 프로세스를 고치십시오.
- 되돌리기 없음. 되돌릴 수 없는 빠른 잘못된 행동이 최악의 경우입니다. 롤백을 계획하고 연습하십시오.
- 표본 없이 절약한 시간을 주장하기. 시간 표본으로 검증하고 유지보수를 빼십시오.
- 연극으로서의 승인. 결정할 정보가 없는 승인자는 지연을 더할 뿐 안전을 더하지 않습니다. 요청을 다시 설계하십시오.
- 단일 장애 지점으로서의 자동화. 핵심 과업에 수작업 경로를 유지하십시오.
성숙도 모델
| 차원 | 시작 | 발전 | 표준화 | 관리 | 조율 |
|---|---|---|---|---|---|
| 소유권과 레지스트리 | 스크립트를 작성자만 앎 | 주요 자동화를 나열함 | 소유자, 범위, 검토 날짜가 있는 레지스트리 | 주기에 따라 검토하고 폐기함 | 팀에 걸친 공유 카탈로그와 표준 패턴 |
| 안전과 롤백 | 되돌리기 없음, 종료 코드 점검 | 일부 실행 후 점검과 로그 | 실행 후 점검, 범위 한도, 시험된 롤백 | 롤백 훈련, 인시던트를 실행에 연결함 | 안전 패턴이 플랫폼에 내장됨 |
| 가치의 증거 | 건수와 추정 | 절약한 시간을 추정함 | 절약한 시간을 표본 조사로 검증함 | 효과, 실패, 비용을 함께 검토함 | 가치와 위험으로 자동화 포트폴리오를 관리함 |
체크리스트
- 모든 자동화에 소유권을 확인한 소유자가 있다.
- 레지스트리가 각 자동화를 목적, 범위, 권한과 함께 나열한다.
- 각 자동화에 의도한 결과를 확인하는 실행 후 점검이 있다.
- 실행을 티켓과 인시던트에 연결되는 식별자와 함께 기록한다.
- 각 자동화에 범위 한도와 되돌리거나 일시 중지하는 시험된 방법이 있다.
- 위험에 따라 각 자동화된 행동의 사람의 역할이 정의되어 있다.
- 절약한 시간을 날짜가 있는 표본으로 검증한다.
- 수동 개입과 자동화가 일으킨 인시던트를 포괄과 함께 보고한다.
- 쓰이지 않거나 소유자 없는 자동화를 검토해 폐기한다.
- 각 지표 옆에 악용 방식과 방호책이 표시되어 있다.
AI 프롬프트
붙여 넣은 자료로 자동화 레지스트리를 만듭니다.
우리가 운영하는 스크립트, 예약 작업, 자동화의 목록을 붙여 넣겠습니다: [메모가
있는 목록 붙여 넣기]. 이름, 목적, 영향받는 시스템, 소유자(제가 준 것만 쓰고
없으면 "알 수 없음"으로 쓰기), 권한(주어진 경우에만), 마지막 검토(주어진
경우에만), 그것에 대해 제가 가장 먼저 물어야 할 질문의 열이 있는 표를 만들어
주세요. 소유자, 날짜, 권한을 지어내지 마세요. 끝에 가정한 내용을 나열해 주세요.
자동화 하나의 실행 후 점검과 롤백을 설계합니다.
우리 자동화는 [이름]이며 [시스템]에서 [설명]을 합니다. [빈도]로 [권한]과 함께
실행됩니다. 의도한 결과를 확인하는 실행 후 점검, 피해를 제한하는 범위 한도,
일시 중지하는 방법, 롤백 접근을 제안해 주세요. 승인 단계를 더한다면 사람 승인자가
필요로 할 정보를 말해 주세요. 우리가 명명하지 않은 도구를 가정하지 마세요.
가정한 내용과 제가 답해야 할 질문을 나열해 주세요.
자동화 대시보드의 악용 위험을 검토합니다.
우리는 다음 자동화 측정치를 보고합니다: [측정치와 정의 붙여 넣기]. 우리 맥락:
[팀 규모, 도구, 청중]. 각 측정치에 대해 아무에게도 도움이 되지 않으면서 더 좋아
보일 수 있는 현실적인 방법을 나열하고, 방호책을 제안하고, 그 방호책이 악용될 수
있는 방법을 말해 주세요. 기준 값을 지어내지 마세요. 가정한 내용을 나열해 주세요.
절약한 시간의 검증을 계획합니다.
우리는 [과업]을 자동화해 [수]시간을 절약했다고 주장합니다. 표본 조사로 그것을
검증하는 짧은 계획의 초안을 작성해 주세요. 무엇의 시간을 잴지, 표본을 몇 개
취할지, 유지보수와 실패 처리를 포함하는 방법, 불확실성을 보고하는 방법입니다.
수치를 지어내지 말고 제가 수집해야 할 숫자는 자리표시자를 쓰세요. 가정한 내용을
나열해 주세요.
AI 스킬
- 런북: 자동화하기 전에 과업을 문서화할 때 사용합니다.
- 근본 원인 분석: 자동화된 행동이 일으킨 인시던트를 분석할 때 사용합니다.
- 서비스 관리 지표 스킬: 지표와 그 짝 방호책을 다루는 주제를 찾을 때 사용합니다.
핵심 정리
- 자동화의 건수와 절약한 시간은 노력과 주장을 설명하므로, 효과, 실패, 롤백을 측정하십시오.
- 모든 자동화에는 소유자, 레지스트리 항목, 실행 후 점검, 범위 한도, 되돌리거나 일시 중지하는 방법이 필요합니다.
- 위험으로 사람이 결정하는 곳을 고르고, 사람이 잘 결정할 수 있는지 시험하십시오.
- 날짜가 있는 표본으로 절약한 시간을 검증하고 유지보수와 실패 비용을 빼십시오.
- 소유자가 없거나, 쓰이지 않거나, 더 이상 필요 없는 자동화를 폐기하십시오.
참고 문헌과 더 읽을거리
- Wikipedia, Automation.
- Wikipedia, Orchestration (computing).
- Wikipedia, Infrastructure as code.
- Wikipedia, Site reliability engineering.
- Wikipedia, DevOps.
- Wikipedia, Goodhart's law.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016.