Tổng quan và động lực

Hầu hết bảng điều khiển bắt đầu với những gì dễ đếm: phiếu đã đóng, thay đổi đã triển khai, câu chuyện đã xong, cuộc gọi đã trả lời. Chúng đã có dấu thời gian trong một công cụ và nằm trong tầm kiểm soát của đội. Không cái nào cho biết có ai khá lên hay không.

Bốn từ giúp giữ mạch lạc. Hoạt động là công sức bỏ ra: giờ làm việc, cuộc họp đã tổ chức, cuộc gọi đã thực hiện. Sản lượng là thứ công việc tạo ra: một bản phát hành, một phiếu đã giải quyết, một bài viết đã xuất bản. Kết quả là thay đổi mà sản lượng đó tạo điều kiện cho ai đó: một khách hàng hoàn thành tác vụ trong một nửa thời gian, một phòng khám mở cửa đúng lịch, một vấn đề lặp lại ngừng tái diễn. Tác động là ảnh hưởng dài hạn hơn lên các mục tiêu của tổ chức, như giữ chân khách hàng hay chi phí phục vụ thấp hơn. Trong ITIL 4 (ấn bản năm 2019 của khung do AXELOS xuất bản, nay thuộc PeopleCert), sản lượng là một sản phẩm bàn giao hữu hình hoặc vô hình của một hoạt động, và kết quả là một thành quả cho một bên liên quan do một hoặc nhiều sản lượng tạo điều kiện.

ITIL bổ sung ý tưởng thứ hai hoạt động như một phép thử cho bất kỳ chỉ số nào: giá trị được đồng kiến tạo bởi nhà cung cấp dịch vụ và người tiêu dùng dịch vụ, chứ không phải bên này trao cho bên kia. Điều này theo tư duy đằng sau logic chi phối dịch vụ, quan điểm tiếp thị cho rằng giá trị nảy sinh trong khi sử dụng, khi khách hàng áp dụng năng lực của nhà cung cấp vào mục tiêu của chính họ. Một chỉ số đo hoàn toàn ở phía nhà cung cấp không thể chứng minh giá trị. Một đội có thể đóng mọi phiếu và giao mọi bản phát hành đúng hạn trong khi người dùng thấy công việc của họ không dễ hơn.

Quan điểm linh hoạt đi đến cùng nơi ấy bằng một con đường khác. Các nguyên tắc đằng sau Tuyên ngôn phát triển phần mềm linh hoạt nói rằng phần mềm chạy được là thước đo chính của tiến độ, và rằng sự đơn giản, nghệ thuật tối đa hóa lượng công việc không phải làm, là thiết yếu. Không điều nào thưởng cho một đống sản lượng lớn hơn. Cả hai đều chỉ vào việc giao thứ gì đó hiệu quả cho người dùng và không xây thứ mà không ai cần.

Các chỉ số sản lượng và hoạt động không sai. Chúng quản lý dòng chảy, năng lực và chi phí, và các chủ đề sau dùng chúng rất nhiều (xem chủ đề 2.1, Các thước đo dòng chảy). Sai lầm là để chúng thay thế cho giá trị. Chỉ số phù phiếm là một con số dễ báo cáo và hầu như luôn tăng: tổng số người dùng đã đăng ký, tổng số phiếu đã xử lý, số tính năng đã giao đến nay. Nó làm một đội trông bận rộn và không nói cho ai biết phải làm gì tiếp. Phép thử: con số này có thể tăng trong khi tình hình của khách hàng xấu đi không?

Các chỉ số kết quả khó hơn. Chúng dịch chuyển chậm, phụ thuộc vào các yếu tố ngoài tầm kiểm soát của đội, và nhiễu. Một thay đổi đối với luồng đặt lại mật khẩu có thể mất nhiều tuần mới hiện lên trong khối lượng liên hệ, thứ mà một chiến dịch tiếp thị cũng ảnh hưởng. Câu trả lời là chọn kết quả một cách cẩn thận, ghép chúng với các thước đo sản lượng mà đội dùng để lái hằng ngày, và trung thực về mức độ dịch chuyển mà đội có thể nhận về mình.

Một chỉ báo dẫn dắt là thước đo dịch chuyển trước kết quả bạn quan tâm và có thể được tác động sớm, như tỷ lệ dịch vụ mới có sổ tay vận hành hỗ trợ đã được kiểm thử. Một chỉ báo trễ báo cáo kết quả sau khi sự việc đã xảy ra, như số sự cố lớn hay tỷ lệ khách hàng rời bỏ. Các nhà kinh tế dùng cùng cặp đôi này, phân loại một chỉ báo kinh tế là dẫn dắt, đồng thời hoặc trễ. Các đội cần cả hai: chỉ báo trễ cho biết bạn có đúng không, và chỉ báo dẫn dắt cho bạn thứ để hành động khi vẫn còn thời gian. Một chỉ báo dẫn dắt chỉ là giả thuyết cho đến khi bạn kiểm tra, qua nhiều kỳ, rằng nó thật sự dịch chuyển trước kết quả.

Các thước đo kết quả là một phương thuốc một phần cho việc lợi dụng (xem chủ đề 1.2, Định luật Goodhart và tâm lý học của chỉ số). Một thước đo gần với điều khách hàng trải nghiệm khó cải thiện hơn nếu không giúp họ, và khoảng cách xa kết quả là nơi việc lợi dụng sống. Các khung giúp việc lựa chọn được trình bày riêng (xem chủ đề 1.7, Các khung đo lường).

Nguyên tắc chính

  • Bắt đầu từ kết quả và đi ngược lại. Nêu tên thay đổi bạn muốn cho một khách hàng, một dịch vụ hoặc tổ chức, rồi hỏi bằng chứng nào sẽ cho thấy nó, rồi hỏi dấu hiệu dẫn dắt nào sẽ xuất hiện sớm hơn.
  • Giá trị được đồng kiến tạo, nên hãy gồm cả phía người tiêu dùng. Ít nhất một thước đo trong mỗi tập nên đến từ những người dùng dịch vụ: thành công, nỗ lực hay trải nghiệm của họ, chứ không chỉ các bản ghi của nhà cung cấp.
  • Giữ chuỗi luôn hiển thị. Cho thấy hoạt động, sản lượng, kết quả và tác động như một chuỗi. Các đội lái theo sản lượng và chỉ báo dẫn dắt, và đánh giá bản thân theo kết quả.
  • Ghép đôi, không bao giờ thay thế. Một thước đo kết quả giải thích vì sao một thước đo sản lượng quan trọng, và một thước đo sản lượng giải thích phải làm gì về một thước đo kết quả. Không cái nào hiệu quả riêng lẻ.
  • Ưu tiên các thước đo có thể giảm cũng như tăng. Một con số chỉ lớn lên là số đếm, không phải tín hiệu.
  • Coi chỉ báo dẫn dắt là giả thuyết. Kiểm tra rằng chúng dự đoán kết quả, và bỏ chúng khi chúng không làm được.
  • Trung thực về việc quy kết. Kết quả có nhiều nguyên nhân. Hãy nói điều đội tác động được và điều đội chỉ quan sát.

Định nghĩa chỉ số

Năm chỉ số dưới đây được chọn để đẩy một tập thước đo về phía kết quả. Chúng là các ví dụ về dạng nên dùng, và các chủ đề sau định nghĩa các thước đo dịch vụ và phân phối lấp đầy chúng. Các ngưỡng minh họa trong chủ đề này không phải là chuẩn so sánh.

Chỉ số Định nghĩa Công thức Đơn vị Nguồn dữ liệu Thực hành ITIL Đối ứng linh hoạt Nhịp
Độ phủ kết quả Tỷ lệ các chỉ số được báo cáo được liên kết trong sổ đăng ký chỉ số với một kết quả bằng văn bản cho một khách hàng hoặc dịch vụ có tên số chỉ số có liên kết kết quả bằng văn bản / số chỉ số được báo cáo trong kỳ. Chỉ đếm các chỉ số hiển thị trên một báo cáo định kỳ; loại trừ các thước đo góc nhìn làm việc do một đội giữ phần trăm Sổ đăng ký chỉ số (xem chủ đề 1.4, Quản trị và quyền sở hữu chỉ số) Đo lường và báo cáo; cải tiến liên tục Mục tiêu sản phẩm và mục tiêu phân phối Hằng quý
Tỷ lệ áp dụng tính năng Tỷ lệ người dùng đủ điều kiện dùng một năng lực mới hoặc đã thay đổi trong một khoảng thời gian nêu rõ sau khi phát hành số người dùng đủ điều kiện phân biệt đã dùng năng lực trong vòng 30 ngày sau phát hành / số người dùng đủ điều kiện phân biệt trong kỳ đó. Đồng hồ bắt đầu từ khi sẵn sàng phổ biến; loại trừ tài khoản thử nghiệm nội bộ và người dùng không thể tiếp cận năng lực phần trăm Phân tích sản phẩm, nhật ký sử dụng danh mục dịch vụ Thiết kế dịch vụ; quản lý phát hành Phản hồi từ buổi rà soát cùng các bên liên quan; thước đo kết quả sản phẩm Hằng tháng trong 3 tháng sau phát hành, sau đó hằng quý
Tỷ lệ liên hệ lặp lại Tỷ lệ liên hệ từ một người dùng về cùng một dịch vụ trong một khoảng thời gian nêu rõ sau khi một liên hệ trước đó đã đóng số liên hệ mới từ cùng người dùng về cùng dịch vụ trong vòng 14 ngày sau một liên hệ đã đóng / số liên hệ đã đóng trong kỳ. Đồng hồ bắt đầu từ lúc đóng; loại trừ các liên hệ được mở như theo dõi có kế hoạch phần trăm Lịch sử liên hệ và phiếu của công cụ ITSM Bàn dịch vụ; quản lý sự cố Lỗi lọt ra ngoài; định nghĩa hoàn thành Hằng tháng
Tỷ lệ xác thực chỉ báo dẫn dắt Tỷ lệ các chỉ báo dẫn dắt đang dùng mà sự dịch chuyển của chúng đã đi trước sự dịch chuyển của chỉ báo trễ liên kết trong kỳ rà soát số chỉ báo dẫn dắt có độ dẫn trước được xác nhận so với chỉ báo trễ / số chỉ báo dẫn dắt đang dùng. Do đội đánh giá trong một buổi rà soát được ghi lại, trên ít nhất bốn kỳ dữ liệu; loại trừ các chỉ báo có ít hơn bốn kỳ phần trăm Sổ đăng ký chỉ số và lịch sử xu hướng Cải tiến liên tục Hành động từ buổi nhìn lại về các thử nghiệm Hai lần một năm
Tỷ lệ hoàn thành rà soát lợi ích Tỷ lệ các thay đổi hoặc cải tiến đã được tài trợ mà kết quả dự kiến của chúng được rà soát so với thước đo sau độ trễ đã thỏa thuận số thay đổi có buổi rà soát kết quả hoàn thành trong vòng 90 ngày kể từ ngày rà soát dự kiến / số thay đổi có ngày rà soát rơi vào kỳ. Loại trừ các thay đổi bị rút trước khi phát hành phần trăm Bản ghi thay đổi, sổ đăng ký cải tiến, ghi chú rà soát Cải tiến liên tục; hỗ trợ thay đổi Rà soát cùng các bên liên quan; rà soát gia số sản phẩm Hằng quý

Độ phủ kết quả và tỷ lệ hoàn thành rà soát lợi ích đo chính thực hành đo lường và dễ được thỏa mãn bằng giấy tờ. Tỷ lệ áp dụng tính năng và tỷ lệ liên hệ lặp lại nằm gần khách hàng hơn và là những chỉ số có khả năng cao nhất làm thay đổi một quyết định.

Khuyến nghị

Bắt đầu từ kết quả

1. Viết kết quả thành một câu về một con người hoặc một dịch vụ. "Nhân viên có thể tự đặt lại mật khẩu mà không cần gọi bàn dịch vụ" là một kết quả. "Triển khai cổng danh tính mới" là một sản lượng. Hãy đặt câu đó ở đầu mục của chỉ số trong sổ đăng ký, rồi chọn thước đo. Nếu bạn không viết được câu đó, bạn chưa sẵn sàng chọn một con số.

2. Vẽ chuỗi từ hoạt động đến tác động. Với mỗi mục tiêu, phác bốn ô: đội làm gì, nó tạo ra gì, điều gì thay đổi cho người dùng, và điều đó thay đổi gì cho tổ chức. Đặt từng chỉ số ứng viên vào một ô. Một tập đầy ở bên trái và trống ở bên phải là tín hiệu để tìm bằng chứng kết quả.

3. Dùng phép thử đồng kiến tạo giá trị cho mọi chỉ số. Hỏi: góc nhìn giá trị của ai được thể hiện ở đây, và góc nhìn của người tiêu dùng có xuất hiện ở đâu đó trong tập không? Theo cách nói của ITIL, một mối quan hệ dịch vụ có một nhà cung cấp và một người tiêu dùng, và giá trị được hiện thực hóa trong việc sử dụng của người tiêu dùng. Một thước đo thời gian phản hồi từ đồng hồ của nhà cung cấp cần một thước đo đồng hành từ phía người tiêu dùng, như việc người dùng có tiếp tục công việc của họ được hay không (xem chủ đề 6.2, Thỏa thuận mức trải nghiệm).

4. Đòi một quyết định, không phải một báo cáo. Với mỗi chỉ số ứng viên, hãy viết quyết định mà ai đó sẽ đưa ra nếu nó dịch chuyển. Cho nghỉ hưu bất kỳ thước đo nào không gắn quyết định. Đây là bộ lọc nhanh nhất chống lại chỉ số phù phiếm và ngăn bảng điều khiển phình ra theo mặc định.

Ghép sản lượng với kết quả

5. Chọn một thước đo kết quả cho mỗi thước đo sản lượng chính. Nếu bạn báo cáo số lần triển khai, hãy ghép chúng với một thước đo về những gì các lần triển khai đã thay đổi cho dịch vụ, như thay đổi thất bại hoặc sự cố người dùng thấy (xem chủ đề 2.8, Chỉ số DORA). Nếu bạn báo cáo số phiếu đã giải quyết, hãy ghép chúng với liên hệ lặp lại. Cặp đó nên nằm trên cùng trang. Một đội chỉ thấy sản lượng sẽ tối ưu cho sản lượng.

6. Chọn các thước đo kết quả mà đội có thể tác động, và nêu tên những thước đo mà đội chỉ quan sát. Một đội có thể tác động đến các liên hệ lặp lại của dịch vụ của chính mình và việc áp dụng các tính năng của chính mình. Nó chỉ có thể quan sát doanh thu của công ty. Cả hai thuộc về bức tranh, nhưng mục tiêu và công việc cải tiến gắn với các thước đo có thể tác động. Nêu tên sự khác biệt ngăn việc đổ lỗi cho những dịch chuyển mà đội không thể gây ra.

7. Dùng đại diện một cách công khai. Nhiều kết quả không thể đo trực tiếp. Hãy chọn một đại diện, nói rõ nó là đại diện và nói rõ nó bỏ sót gì. Tỷ lệ liên hệ lặp lại là đại diện cho "vấn đề đã thực sự được giải quyết", và một khảo sát ngắn hoặc việc đọc các bình luận mở có thể kiểm tra rằng nó vẫn nói sự thật (xem chủ đề 6.1, Chỉ số hài lòng của khách hàng).

Xây dựng các cặp dẫn dắt và trễ

8. Ghép mỗi chỉ báo trễ với ít nhất một chỉ báo dẫn dắt mà bạn có thể hành động. Sự cố lớn là chỉ báo trễ, và tỷ lệ dịch vụ có sổ tay khôi phục đã kiểm thử có thể dẫn dắt chúng. Chỉ báo dẫn dắt cho đội việc để làm trong tháng này. Hãy chọn những chỉ báo dẫn dắt bạn tin vì một lý do bạn có thể viết ra, rồi kiểm thử niềm tin đó.

9. Xác thực chỉ báo dẫn dắt bằng cách nhìn lại. Hai lần một năm, hãy vẽ từng chỉ báo dẫn dắt so với chỉ báo trễ đối tác của nó qua ít nhất bốn kỳ và hỏi sự dịch chuyển có đến trước không. Nơi mối quan hệ yếu, hãy đổi hoặc bỏ chỉ báo dẫn dắt.

10. Dùng mục tiêu mức dịch vụ nơi kết quả có thước đo rõ ràng mà người dùng thấy. Một chỉ báo mức dịch vụ (SLI) được chọn tốt là tín hiệu dẫn dắt cho sự hài lòng của người dùng, và một mục tiêu mức dịch vụ (SLO) nêu nó cần tốt đến đâu (xem chủ đề 5.2, SLI, SLO và ngân sách lỗi). Chúng hiệu quả nhất khi chỉ báo được chọn từ góc nhìn của người dùng, không phải của máy.

Giữ cho lựa chọn trung thực

11. Khép vòng bằng các buổi rà soát kết quả. Khi một thay đổi hoặc cải tiến được tài trợ, hãy ghi lại kết quả nó được kỳ vọng tạo ra, thước đo và ngày mà ai đó sẽ xem. Hãy tổ chức buổi rà soát ngay cả khi câu trả lời khó xử. Không có các buổi rà soát, ngôn ngữ kết quả chỉ là đồ trang trí (xem chủ đề 6.5, Hiện thực hóa giá trị và kết quả kinh doanh).

12. Giữ các thước đo sản lượng trong góc nhìn làm việc, và nói rõ chúng dùng để làm gì. Các thước đo dòng chảy, năng lực và chi phí là công cụ của đội, không phải thẻ điểm. Thời gian chu trình cho bạn biết công việc chờ ở đâu (xem chủ đề 2.2, Thời gian chờ, thời gian chu trình và hiệu suất dòng chảy). Báo cáo lên trên mà không có kết quả bên cạnh, chúng mời gọi việc lợi dụng.

Vectơ lợi dụng và rào chắn

Tiến về phía kết quả không loại bỏ việc lợi dụng. Nó thay đổi hình dạng của việc lợi dụng: kết quả có thể bị định nghĩa lại, đại diện có thể bị lái, và các buổi rà soát có thể bị bỏ qua.

Chỉ số Cách bị lợi dụng Chỉ số hoặc thực hành rào chắn đi kèm
Độ phủ kết quả Viết một câu kết quả mơ hồ ("cải thiện dịch vụ") cho mọi chỉ số để liên kết tồn tại trên giấy Lấy mẫu sổ đăng ký: một câu phải nêu một con người hoặc dịch vụ và một thay đổi; kiểm tra rằng một quyết định đã được đưa ra nhờ thước đo
Tỷ lệ áp dụng tính năng Đếm lần dùng đầu tiên bị ép buộc hoặc tự động là áp dụng; thu hẹp nhóm người dùng đủ điều kiện; biến năng lực thành mặc định để nó được "dùng" mà không được chọn Mức hoàn thành tác vụ hoặc hài lòng ở những người dùng năng lực; mức duy trì sử dụng sau 30 và 90 ngày; đọc bình luận mở
Tỷ lệ liên hệ lặp lại Bảo người dùng nêu yêu cầu mới qua một kênh khác; đóng liên hệ như bản trùng của một liên hệ không liên quan; kéo dài việc đóng để tránh liên hệ lại trong khoảng thời gian Liên hệ theo kênh cho cùng dịch vụ; rà soát lấy mẫu ghi chú đóng; tỷ lệ "vấn đề đã được giải quyết" do người dùng báo cáo
Tỷ lệ xác thực chỉ báo dẫn dắt Tuyên bố chỉ báo dẫn dắt hợp lệ sau một lần xem không chính thức; chọn các chỉ báo dịch chuyển tầm thường cùng kết quả Bản ghi rà soát bằng văn bản kèm dữ liệu đã vẽ; mời một người ngoài đội thách thức một kết quả mỗi chu kỳ
Tỷ lệ hoàn thành rà soát lợi ích Tổ chức buổi rà soát chỉ trên danh nghĩa, hoặc đặt kết quả dự kiến sau sự việc để nó luôn đạt So sánh kết quả trong buổi rà soát với tuyên bố đưa ra khi thay đổi được tài trợ; theo dõi tỷ lệ các buổi rà soát dẫn đến thay đổi kế hoạch

Một kết quả đọc lành mạnh cho thấy những thước đo kết quả đôi khi gây thất vọng, những buổi rà soát đôi khi chấm dứt một thay đổi, và những chỉ báo dẫn dắt đôi khi bị bỏ. Một tập mà mọi kết quả đều đạt và mọi chỉ báo dẫn dắt đều được xác nhận có lẽ đã được tinh chỉnh để như vậy.

Đánh đổi: ưu điểm và nhược điểm

Cách tiếp cận Điểm mạnh Điểm yếu
Thước đo sản lượng và hoạt động Nhanh, rẻ và nằm trong tầm kiểm soát của đội; tốt cho quyết định về dòng chảy và năng lực Dễ thổi phồng; không nói gì về việc có ai được lợi hay không
Thước đo kết quả Gần với điều khách hàng và tổ chức coi trọng; khó cải thiện hơn nếu không giúp được ai Chậm, nhiễu, và bị ảnh hưởng bởi các yếu tố ngoài tầm kiểm soát của đội
Chỉ báo dẫn dắt Cảnh báo sớm và cho thứ để hành động Có thể gây hiểu lầm nếu mối liên kết với kết quả được giả định thay vì được kiểm thử
Chỉ báo trễ Báo cáo điều thực sự đã xảy ra Đến quá muộn để thay đổi kết quả của kỳ này
Đại diện cho kết quả Làm các kết quả khó đo trở nên hữu hình Có thể trôi khỏi điều chúng đại diện, và mời gọi việc đánh tráo
Một tập nhỏ dẫn dắt bởi kết quả Dễ nhớ và thảo luận; tập trung nỗ lực Có thể bỏ sót vấn đề nằm ngoài các kết quả đã chọn
Một tập cân bằng rộng Bao quát nhiều hơn của dịch vụ Làm loãng sự chú ý; mỗi thước đo ít được xem xét kỹ hơn

Hãy giữ một số ít thước đo kết quả mà cả nhóm đọc thuộc được, hỗ trợ mỗi thước đo bằng các thước đo sản lượng và dẫn dắt giải thích nó, và xem lại tập khi chiến lược thay đổi. Các cách tiếp cận cân bằng gắn với thẻ điểm cân bằng và với mục tiêu và kết quả then chốt đều cố nối công việc hằng ngày với những kết quả quan trọng. Chúng thất bại theo cùng một cách khi các kết quả then chốt trở thành danh sách các sản lượng kèm một tỷ lệ phần trăm bên cạnh.

Câu hỏi để thảo luận với đội nhóm

1. Trong năm chỉ số nổi bật nhất của chúng ta, chỉ số nào có thể tăng trong khi khách hàng tệ đi? Hãy viết năm chỉ số lên bảng và đặt câu hỏi cho từng cái. Chẳng hạn một số đếm phiếu đã đóng có thể tăng trong khi các liên hệ lặp lại cũng tăng. Người điều phối nên ghi lại những trường hợp câu trả lời là có, vì đó là các chỉ số phù phiếm. Kết thúc bằng cách hỏi thước đo kết quả nào sẽ nằm cạnh mỗi chỉ số.

2. Một tuần tốt đẹp trông như thế nào đối với một khách hàng của dịch vụ này, bằng lời của họ? Hãy hỏi những người nói chuyện với khách hàng, và tránh từ vựng của chính đội. Các câu trả lời trở thành những câu kết quả, và thường lộ ra những điều không ai đo, như không phải giải thích một vấn đề hai lần. Ghi lại ba câu và hỏi câu nào đo được, dù chỉ qua đại diện.

3. Chúng ta đã bao giờ kiểm tra chỉ báo dẫn dắt nào của mình so với kết quả mà nó được cho là dự đoán chưa? Chọn một chỉ báo và vẽ nó so với chỉ báo trễ đối tác của nó cho vài kỳ gần nhất. Hỏi bạn thấy gì và bạn tự tin đến đâu. Nếu mối quan hệ yếu, hãy thảo luận nên thay bằng gì. Hãy coi một chỉ báo bị bỏ là kết quả bình thường của việc học, không phải thất bại.

4. Đội chúng ta nhận công về một kết quả mà nó chỉ quan sát ở đâu? Hãy xem các chỉ số trong báo cáo gửi lãnh đạo. Cái nào phụ thuộc vào yếu tố ngoài tầm kiểm soát của đội, như tính mùa vụ, một chiến dịch hay một nhà cung cấp? Thống nhất một cách giản dị để nói điều đội tác động và điều đội quan sát. Điều này chuẩn bị cho đội vào ngày một kết quả dịch chuyển vì những lý do nó không gây ra.

5. Hai quý qua chúng ta đã giao hoặc thay đổi gì, và có ai rà soát xem nó có hiệu quả không? Liệt kê các thay đổi lên bảng và đánh dấu những thay đổi có bản ghi rà soát. Với những cái còn lại, hãy hỏi kết quả nào đã được kỳ vọng và làm sao bạn có thể biết ngay bây giờ. Đừng đi tìm người để đổ lỗi. Mục đích là bắt đầu thói quen, dù các buổi rà soát đầu tiên đến muộn.

6. Những thước đo sản lượng nào nên chuyển về góc nhìn làm việc của chúng ta? Một số thước đo hữu ích cho đội và gây hiểu lầm trong một báo cáo. Hãy hỏi cái nào là cái nào, và mỗi cái cần gì bên cạnh để ở lại trên báo cáo của lãnh đạo. Thống nhất một thước đo để chuyển trong quý này. Chuyển một thước đo là dấu hiệu của sự trưởng thành, không phải rút lui khỏi sự minh bạch.

Bốn góc nhìn

Đội sản phẩm và phân phối

Các đội phân phối bị sản lượng cám dỗ vì công cụ của họ báo cáo nó theo mặc định. Phương thuốc là đưa bằng chứng về áp dụng và kết quả vào định nghĩa hoàn thành và buổi rà soát cùng các bên liên quan. Một tính năng không ai dùng là một bài học, và phát hiện điều đó sớm là một lợi ích của thực hành linh hoạt. Các đội giữ các thước đo dòng chảy trong góc nhìn làm việc và ghép chúng với các thước đo áp dụng và thất bại (xem chủ đề 2.5, Chỉ số dự báo và lập kế hoạch phân phối).

Đội dịch vụ và vận hành

Các đội dịch vụ được đo bằng việc xử lý: cuộc gọi đã trả lời, phiếu đã đóng, thời gian giải quyết. Những điều này quan trọng cho lập kế hoạch và chi phí, và chúng nói rất ít về việc vấn đề của người dùng có biến mất hay không. Các đội vận hành nên thêm liên hệ lặp lại, tái diễn cùng nguyên nhân và mức giải quyết do người dùng báo cáo bên cạnh các thước đo tốc độ, và nên nhìn một số đếm tăng của các phiếu dễ với sự nghi ngờ (xem chủ đề 3.1, Chỉ số bàn dịch vụ). Các chỉ báo dẫn dắt như mức dùng bài viết tri thức và sổ tay vận hành đã kiểm thử cho đội việc để làm giữa các sự cố.

Lãnh đạo và quản trị

Điều lãnh đạo yêu cầu xem dạy tổ chức điều gì quan trọng. Hãy yêu cầu kết quả, chấp nhận rằng chúng chậm hơn và nhiễu hơn, và tài trợ cho các buổi rà soát kiểm tra chúng. Các cơ quan quản trị nên tìm một tập ngắn, ổn định các thước đo kết quả, mỗi cái có người sở hữu được nêu và hồ sơ các quyết định mà nó đã cung cấp thông tin (xem chủ đề 1.4, Quản trị và quyền sở hữu chỉ số). Một lãnh đạo hỏi "chúng ta đã học được gì?" nhận dữ liệu tốt hơn người hỏi "vì sao cái này màu đỏ?"

Khách hàng và người dùng

Khách hàng trải nghiệm trực tiếp các kết quả và hiếm khi thấy số đếm sản lượng. Họ là phép thử cuối cùng của tập: dịch vụ có cho phép họ tiếp tục việc họ đến để làm không? Khảo sát ngắn, bình luận mở và quan sát các tác vụ thật là bằng chứng tốt hơn bất kỳ thước đo nào ở phía nhà cung cấp. Khách hàng cũng có vai trò trong việc đồng kiến tạo giá trị, nghĩa là mức độ họ được thông tin, được trao khả năng và được lắng nghe ảnh hưởng đến kết quả (xem chủ đề 6.3, Chỉ số áp dụng dịch vụ và danh mục).

Trong thực tế: một ví dụ về quản lý dịch vụ

Một nhà bán lẻ trực tuyến cỡ vừa vận hành một đội nền tảng nội bộ cung cấp dịch vụ cấp phát môi trường tự phục vụ cho khoảng 40 đội sản phẩm, được hỗ trợ bởi một bàn dịch vụ nhỏ. Mọi con số trong ví dụ này chỉ mang tính minh họa.

Báo cáo hằng tháng cho thấy 310 yêu cầu đã được thực hiện (tăng từ 240), thời gian thực hiện trung vị là 6 giờ, và 12 tính năng được giao trong quý. Lãnh đạo hài lòng. Trưởng nền tảng nhận thấy các liên hệ đến bàn về việc cấp phát cũng tăng, và yêu cầu đội vẽ biểu đồ các sản lượng so với kết quả họ hy vọng: các đội sản phẩm có được môi trường mà không phải chờ hay nhờ giúp.

Bài tập chuỗi cho thấy đội đã đo hoạt động và sản lượng mà không đo kết quả nào. Họ thêm ba kết quả. Thứ nhất là tỷ lệ liên hệ lặp lại: 22 phần trăm liên hệ về cấp phát được theo sau bởi một liên hệ khác về cùng dịch vụ trong vòng 14 ngày. Thứ hai là tỷ lệ áp dụng tính năng cho ba tính năng mới nhất, đứng ở mức 9 phần trăm, 14 phần trăm và 61 phần trăm các đội đủ điều kiện sau 30 ngày. Thứ ba, một chỉ báo dẫn dắt, là tỷ lệ yêu cầu hoàn tất mà không có bước thủ công nào của con người, hiện là 48 phần trăm. Họ đưa ra giả thuyết rằng chỉ báo này nên dẫn dắt tỷ lệ liên hệ lặp lại đi xuống.

Họ quyết định tạm dừng hai tính năng đã lên kế hoạch giống hai tính năng có mức áp dụng thấp và dành quý cho nguyên nhân phổ biến nhất của liên hệ lặp lại, một thông báo lỗi không rõ khi vượt hạn mức. Họ ghi lại kết quả dự kiến, tỷ lệ liên hệ lặp lại dưới 15 phần trăm, và đặt ngày rà soát sau 90 ngày.

Rủi ro lợi dụng xuất hiện vào tháng thứ hai. Tỷ lệ liên hệ lặp lại giảm xuống 11 phần trăm, trông tuyệt vời. Một mẫu 25 liên hệ đã đóng cho thấy bàn dịch vụ đã bắt đầu yêu cầu người dùng dùng kênh trò chuyện cho các câu hỏi theo dõi, và kênh trò chuyện không được đếm trong công cụ ITSM. Đội thêm liên hệ theo kênh vào báo cáo, đưa bản ghi trò chuyện vào mẫu, và thấy tỷ lệ gộp là 17 phần trăm. Đó là một cải thiện thật, nhỏ hơn lần đọc đầu tiên. Trong buổi rà soát, trưởng nhóm báo cáo 17 phần trăm, ghi nhận chỉ báo dẫn dắt tăng từ 48 lên 57 phần trăm cùng nhịp, và ghi lại rằng giả thuyết đã đứng vững trong hai trên bốn kỳ cần có để gọi là đã được xác thực.

Linh hoạt, AI, tự động hóa và phân tích

Linh hoạt

Phân phối liên tục làm cho việc phát hành các thay đổi nhỏ và xem một kết quả của người dùng có dịch chuyển hay không trở nên rẻ. Một thực hành tốt là nêu kết quả dự kiến và tín hiệu sẽ cho thấy nó trước khi công việc bắt đầu, và kiểm tra tín hiệu sau phát hành cùng các bên liên quan. Điều cần lưu ý là các bản phát hành thường xuyên cám dỗ các đội đếm bản phát hành là tiến độ, lại là sản lượng.

AI

Công cụ AI nâng sản lượng một cách dễ dàng: nhiều mã hơn, nhiều bản nháp hơn, nhiều câu trả lời hơn. Câu hỏi về kết quả là người dùng có được phục vụ tốt hơn không, nên hãy ghép số đếm sản lượng với một kết quả như tỷ lệ liên hệ lặp lại hoặc mức thành công tác vụ cho đường đi có AI hỗ trợ. Điều cần lưu ý là một kết quả cải thiện trong khi việc dùng AI tăng vẫn có thể có những nguyên nhân khác, nên tránh tuyên bố công cụ gây ra nó khi không có so sánh.

Tự động hóa

Hãy tự động hóa việc thu nhận các tín hiệu kết quả đã tồn tại, như liên hệ lặp lại, bỏ dở hay thời gian đến câu trả lời hữu ích đầu tiên. Tự động hóa chính công việc nên được đo bằng điều nó giải phóng và điều nó phá vỡ. Điều cần lưu ý là một tác vụ tự động chạy thường xuyên trông có vẻ năng suất ngay cả khi kết quả của nó không bao giờ được dùng.

Phân tích

Dữ liệu kết quả thường chậm hơn và nhiễu hơn dữ liệu sản lượng. Hãy dùng chỉ báo dẫn dắt để lái, và thỉnh thoảng xác thực chúng so với kết quả chậm hơn. Điều cần lưu ý là sự tương quan giữa một sản lượng và một kết quả trong dữ liệu năm ngoái không có nghĩa là sản lượng đó sẽ tiếp tục dự đoán nó. Theo cách nói của ITIL 5, trọng tâm mà chủ sở hữu nêu về các kết quả đo được khiến chủ đề này trở thành nền cho chủ đề 1.8, Đo lường ITIL 5 và kết quả giá trị.

Góc nhìn theo ngành

Công ty khởi nghiệp. Kết quả ở ngay gần: những người sáng lập có thể nói chuyện với khách hàng và xem họ có ở lại không. Rủi ro là chỉ đo mức tăng trưởng người dùng và tính năng, vốn là chỉ số phù phiếm cho đến khi khả năng giữ chân và mức thành công tác vụ hiển thị. Hãy chọn một thước đo kết quả mà khách hàng nhận ra và kiểm tra nó hằng tuần.

Doanh nghiệp nhỏ. Các con số quá nhỏ để làm thống kê, nên hãy ưu tiên trò chuyện trực tiếp, một nhúm trường hợp được theo dõi và một danh sách ngắn các đại diện. Hãy thận trọng với bảng điều khiển của nhà cung cấp báo cáo hoạt động của chính họ như thể đó là kết quả của bạn.

Doanh nghiệp lớn. Quy mô mời gọi báo cáo sản lượng, vì sản lượng so sánh được giữa nhiều đội còn kết quả thì không. Hãy chống lại việc ép một định nghĩa kết quả lên các dịch vụ khác nhau. Thống nhất một tập nhỏ các câu kết quả chung, để mỗi dịch vụ chọn thước đo của mình, và giữ sổ đăng ký luôn cập nhật.

Chính phủ và khu vực công. Nghĩa vụ theo luật, quy tắc tài trợ và mức dịch vụ ấn định trước một số thước đo, thường là sản lượng như số hồ sơ đã xử lý. Hãy đáp ứng chúng, và thêm các thước đo kết quả cho công dân và nhân viên bên cạnh, như việc một người có nhận được sự giúp đỡ mà họ đến tìm hay không. Báo cáo công khai làm dữ liệu kết quả trung thực có giá trị hơn và nhạy cảm hơn, nên hãy thống nhất trước cách các số liệu đã hiệu chỉnh sẽ được giải thích (xem chủ đề 8.5, Báo cáo theo quy định và cho cơ quan nhà nước).

Hồ sơ kinh doanh: động lực, ROI và TCO

Chi phí của việc chuyển dịch về kết quả chủ yếu là công sức và sự kiên nhẫn: viết các câu kết quả, thêm vài thước đo như một khảo sát ngắn hay một sự kiện áp dụng, và tổ chức các buổi rà soát kết quả. Chi phí công cụ vừa phải, vì hầu hết các đại diện có thể được dựng từ dữ liệu đã thu thập. Chi phí lớn hơn là độ trễ, vì dữ liệu kết quả đến chậm và lãnh đạo phải chờ nó.

Lợi tức đến từ những lựa chọn tốt hơn về nơi chi tiêu. Công việc không ai dùng thì đắt, và việc cải thiện một thước đo xử lý trong khi nguyên nhân gốc của các liên hệ lặp lại vẫn nguyên cũng vậy. Mẫu hình cần chờ đợi là ít tính năng được xây rồi bỏ không hơn, nhiều sự chú ý hơn vào các nguyên nhân tái diễn, và một câu chuyện tài trợ mạnh hơn. Đừng hứa một tỷ lệ phần trăm. Hãy đo đường cơ sở của riêng bạn, như mức áp dụng các bản phát hành gần đây và liên hệ lặp lại, rồi so sánh sau vài quý (xem chủ đề 7.7, Lợi tức đầu tư và hồ sơ kinh doanh).

Phản mẫu và cạm bẫy

  • Đếm những gì dễ. Số đếm phiếu và triển khai có trong mọi công cụ, khiến chúng thành mặc định. Hãy thêm ít nhất một thước đo kết quả cho mỗi dịch vụ trước khi thêm một số đếm sản lượng khác.
  • Kịch trường kết quả. Viết một câu kết quả cho mọi chỉ số mà không bao giờ kiểm tra. Hãy rà soát một mẫu của sổ đăng ký và hỏi mỗi thước đo đã cung cấp thông tin cho quyết định nào.
  • Chỉ báo dẫn dắt chưa kiểm thử. Coi một tín hiệu nghe hợp lý là bằng chứng. Hãy vẽ nó so với kết quả trễ ít nhất hai lần một năm và bỏ những cái không dẫn dắt.
  • Kết quả như mục tiêu cá nhân. Giao một thước đo kết quả cho một người mời gọi hành vi được mô tả trong chủ đề 1.2. Hãy gắn kết quả với đội nhóm và dịch vụ.
  • Chỉ đo phía nhà cung cấp. Một tập gồm đồng hồ và số đếm nội bộ sẽ bỏ lỡ điều khách hàng cảm nhận. Hãy gồm một thước đo phía người tiêu dùng cho mọi dịch vụ.
  • Không bao giờ rà soát. Tài trợ thay đổi dựa trên lợi ích được hứa mà không bao giờ kiểm tra. Hãy đặt một ngày rà soát vào bản ghi thay đổi khi nó được phê duyệt.

Mô hình trưởng thành

Chiều 1 Khởi đầu 2 Phát triển 3 Chuẩn hóa 4 Quản lý 5 Phối hợp
Chọn thước đo Số đếm có sẵn trong công cụ Một số đội viết câu kết quả Mọi chỉ số được báo cáo có một kết quả bằng văn bản và một quyết định mà nó cung cấp thông tin Các tập kết quả và sản lượng được rà soát cùng nhau mỗi quý Câu kết quả được căn chỉnh giữa các đội, nhà cung cấp và khách hàng, và được sửa khi chiến lược thay đổi
Chỉ báo dẫn dắt và trễ Chỉ có kết quả trễ, báo cáo muộn Một vài chỉ báo dẫn dắt được chọn theo trực giác Chỉ báo dẫn dắt và trễ được ghép đôi và ghi trong sổ đăng ký Chỉ báo dẫn dắt được xác thực so với kết quả hai lần một năm Chỉ báo được chia sẻ với nhà cung cấp và khách hàng; tập tiến hóa theo bằng chứng
Rà soát kết quả Không rà soát xem các thay đổi có hiệu quả không Thỉnh thoảng rà soát sau các thay đổi lớn Ngày rà soát được ghi cho mọi thay đổi đã tài trợ Các buổi rà soát hoàn tất, kết quả đưa vào kế hoạch kế tiếp Các buổi rà soát là thường lệ, liên đội và gồm ý kiến khách hàng
Bằng chứng phía người tiêu dùng Giai thoại Khảo sát cho một số dịch vụ Một thước đo phía người tiêu dùng cho mọi dịch vụ Bằng chứng người tiêu dùng được theo dõi xu hướng và đọc cùng dữ liệu vận hành Khách hàng giúp định nghĩa và diễn giải các thước đo kết quả

Danh sách kiểm tra

  • Mọi dịch vụ có ít nhất một câu kết quả nêu một con người hoặc dịch vụ và một thay đổi.
  • Mỗi chỉ số được báo cáo được đặt vào chuỗi từ hoạt động đến tác động.
  • Mỗi chỉ số có một quyết định có tên mà nó cung cấp thông tin; những chỉ số không có thì được cho nghỉ hưu.
  • Mọi thước đo sản lượng trên một báo cáo có một thước đo kết quả bên cạnh.
  • Mọi dịch vụ có ít nhất một thước đo phía người tiêu dùng.
  • Mỗi chỉ báo trễ có một chỉ báo dẫn dắt, kèm lý do bằng văn bản cho mối liên kết.
  • Các chỉ báo dẫn dắt được kiểm tra so với kết quả ít nhất hai lần một năm.
  • Các đại diện được gắn nhãn là đại diện, kèm điều chúng bỏ sót.
  • Mọi thay đổi đã tài trợ có một kết quả dự kiến, một thước đo và một ngày rà soát.
  • Các thước đo kết quả gắn với đội nhóm và dịch vụ, không bao giờ với cá nhân.

Lời nhắc AI

Biến một chỉ số sản lượng thành một tập dẫn dắt bởi kết quả.

Our team is [team name], which provides [service or product] to [customers or
users]. We currently report [list of output or activity metrics]. We want to
move toward outcomes. For each metric, suggest an outcome sentence about a
customer or service that it might support, and propose one outcome measure and
one leading indicator we could consider. For each suggestion, say what the
measure would miss and how it could be gamed. Do not invent benchmark values
or sources. List your assumptions and the facts you need from me.

Kiểm tra một chỉ báo dẫn dắt có đáng tin không.

We use [leading indicator] as a leading indicator for [lagging outcome measure].
Here are [number] periods of data for both, pasted below, with notes on
anything that changed during that time: [data and notes]. Describe whether the
leading indicator appears to move before the lagging one, and what other
explanations are consistent with the data. Do not claim causation. List your
assumptions, the limits of this much data, and what additional data would help.

Soạn một buổi rà soát kết quả cho một thay đổi gần đây.

We made this change: [description], approved on [date], with the intended
outcome [outcome sentence] and measure [measure]. Current data: [data]. Draft
an outcome review agenda and a short summary structure that compares the
intended outcome with what we see, separates what the team influenced from what
it only observed, and lists questions for users. Do not judge success beyond
what the data supports. List your assumptions and any data gaps.

Kỹ năng AI

Điểm chính cần nhớ

  • Hoạt động, sản lượng, kết quả và tác động là những thứ khác nhau, và một bảng điều khiển chỉ có hai thứ đầu không thể cho thấy giá trị.
  • Trong ITIL, giá trị được đồng kiến tạo với người tiêu dùng, nên mọi tập cần một thước đo từ phía người tiêu dùng.
  • Ghép sản lượng với kết quả, và chỉ báo trễ với những chỉ báo dẫn dắt mà bạn đã kiểm thử.
  • Hãy rõ về điều đội tác động và điều đội chỉ quan sát.
  • Rà soát các thay đổi đã tài trợ so với kết quả dự kiến của chúng, và để kết quả thay đổi kế hoạch.
  • Các thước đo kết quả giảm việc lợi dụng mà không chấm dứt nó, nên mỗi cái vẫn cần một rào chắn.

Tài liệu tham khảo và đọc thêm

  1. Seiden, J., Outcomes Over Output: Why Customer Behavior Is the Key Metric for Business Success, Sense & Respond Press, 2019.
  2. AXELOS, ITIL Foundation: ITIL 4 Edition, TSO (The Stationery Office), 2019.
  3. Vargo, S. L., and Lusch, R. F., "Evolving to a New Dominant Logic for Marketing," Journal of Marketing, 68(1), 2004.
  4. Kaplan, R. S., and Norton, D. P., "The Balanced Scorecard: Measures That Drive Performance," Harvard Business Review, January to February 1992.
  5. Doerr, J., Measure What Matters: How Google, Bono, and the Gates Foundation Rock the World with OKRs, Portfolio, 2018.
  6. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  7. Forsgren, N., Storey, M.-A., Maddila, C., Zimmermann, T., Houck, B., and Butler, J., "The SPACE of Developer Productivity," ACM Queue, 19(1), 2021.
  8. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016.
  9. Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
  10. Wikipedia, ITIL.
  11. Wikipedia, Co-creation.
  12. Wikipedia, Service-dominant logic.
  13. Wikipedia, Agile software development.
  14. Wikipedia, Vanity metric.
  15. Wikipedia, Economic indicator.
  16. Wikipedia, Balanced scorecard.
  17. Wikipedia, Objectives and key results.