サービスメトリクスのダッシュボード設計
良いダッシュボードは、名前の挙がった聞き手が実際に尋ねる少数の問いに答え、各数字をその傾向と文脈とともに示し、それを使う人々によって築かれる。
概要と動機
ダッシュボード(dashboard)は、一つまたは複数の目的を達成するために必要な最も重要な情報の視覚的な表示で、ひと目で監視できるよう配置されます。実際には、サービス組織のほとんどのダッシュボードは、その定義を満たしません。本物の問いに答える方法として始まり、ツールが描けるすべてを示すまで、積み重ねによって育ちます。誰も所有せず、数字が何を意味するか誰も確信がなく、壁の画面は無視されます。
サービスメトリクスのダッシュボードの目的は、人々が判断を下し、良い対話を始める助けとなることです。チームはそれを使って、自分たちの仕事が以前より長く待たされていることに気づき、なぜかを問います。サービスオーナーはそれを使って、サービスが信頼性の目標の縁に近いことを見ます。リーダーはそれを使って、ある領域への投資が、望まれた成果を生んでいるかを見ます。これらのどれもしない表示は装飾で、装飾は築くのにお金がかかり、無視するのに注意がかかります。
ITILはこれを、情報とコミュニケーションの問いとして枠付けます。正しい情報を、正しい人々に、使える形で、正しい時に。アジャイルの狙いは、同じ設計原則を指します。ステークホルダーの継続的な関与は、聞き手が見方の設計を手伝い、問いが変わるにつれて手伝い続けることを意味します。継続的改善は、ダッシュボード自体がレビューされ、削られることを意味します。継続的な進化は、サービスと目標が変わるときに測定値の集合が変わることを意味します。持続可能なペースは、月に一度しか動かない数字を確認する、日々の強迫をダッシュボードが生まないことを意味します。そして、意欲のある個人を支えるのと同じ信頼は、チームが自分自身のデータを最初に見て、それが語る物語を所有することを意味します。
三つの設計上の失敗が一般的です。一つ目は数字の壁で、百のタイルが競い合い、どれも際立ちません。二つ目は目標だけの表示で、数字が傾向も文脈もなく、赤か緑で目標と並んで示され、理解ではなく色による管理を招きます。三つ目はオーナーのいない表示で、定義が漂流し、データが古く、誰に尋ねればよいか誰も知りません。設計の仕事は、これらを避けることです。
良い視覚設計が助けになります。データの可視化(data visualization)は、パターンが見えて理解できるようにデータを図で示す実践です。スパークライン(sparkline)は、軸やラベルなしに傾向を示す、言葉の大きさの小さな折れ線グラフで、現在の値の隣に履歴を置くので、ダッシュボードによく合います。ランチャート(run chart)は、中央値の線とともに時間にわたる測定値をプロットし、管理図(control chart)は、通常の変動と調べる価値のあるシグナルを分ける限界を加えます(トピック 1.6「サービスメトリクスのための統計リテラシー」を参照)。チャートジャンク(chartjunk)は、重い格子線、三次元の棒、装飾的なゲージなど、情報を加えない装飾で、取り除く価値があります。
虚栄のメトリクス(vanity metric)は、見栄えが良くて、誰の判断も助けない数字で、成果なしに示される処理したチケットの件数やポータルへのログイン数などです。グッドハートの法則(Goodhart's law)からの防護柵は、表示全体に当てはまります。画面の数字が目標になると、人々は数字を管理します(トピック 1.2「グッドハートの法則とメトリクスの心理学」を参照)。
このトピックは、測定のフレームワーク(トピック 1.7「測定のフレームワーク」を参照)と、第1部のデータとガバナンスのトピックに依拠しています。
主要な原則
- データではなく、問いから始める。 一つのチャートを選ぶ前に、聞き手が持つ判断と問いを書く。
- 少数でバランスの取れた測定値を示す。 フロー、品質、信頼性、体験、コストにまたがる小さな集合は、単一の測定値よりも悪用に強い。
- 常に傾向と文脈を示す。 履歴、ベースライン、何が変わったかのメモのない値は、解釈しにくい。
- 変動を尊重する。 揺れのたびに反応しない。ランチャートや管理図を使って、シグナルとノイズを分ける。
- 各聞き手に固有の見方を与える。 チーム、サービスオーナー、リーダーシップは、異なる問いを尋ね、異なる詳細を必要とする。
- チームが自分たちのデータを最初に見る。 仕事をする人々は、誰よりも先に自分たちの数字を見て、解釈を所有するべきである。
- すべてを定義し、オーナーを指名する。 各測定値に、書面の定義、データソース、尋ねる人がいる。
- 保守を軽くする。 毎月1週間の手作業を要するダッシュボードは、死ぬ。
メトリクスの定義
以下の測定値は、サービスではなく、ダッシュボード自体についてのものです。プログラムのチームが、自分たちの表示が健全かを見る助けとなります。一部は記述的で、そのようにマークされています。目標として扱うと、このトピックが警告する歪みを招くからです。
| メトリクス | 定義 | 計算式 | 単位 | データソース | ITILプラクティス | アジャイルの対応物 | 頻度 |
|---|---|---|---|---|---|---|---|
| 問いの網羅 | 挙げられた聞き手の問いのうち、ダッシュボードが定義された測定値で答えられる割合 | 測定値と定義がある問い ÷ 聞き手が挙げた問い | パーセント | ステークホルダーのセッションからの問いの一覧、メトリクスカード | 継続的改善、サービスレベル管理 | ステークホルダーの継続的な関与 | 四半期ごと |
| 定義の完全性 | 表示された測定値のうち、現在の書面の定義、データソース、オーナー、既知の限界がある割合 | 四つすべてがある測定値 ÷ 表示された測定値 | パーセント | メトリクスカードまたはカタログ | 情報・技術管理、ナレッジマネジメント | 共有された理解、見える仕事 | 四半期ごと |
| データの鮮度 | 表示された測定値のうち、期待される間隔内に更新された割合 | 期限内に更新された測定値 ÷ 表示された測定値 | パーセント | パイプラインのログ、ダッシュボードのメタデータ | 監視とイベント管理 | 速いフィードバック | 毎週 |
| 判断とのリンク | レビューされた測定値のうち、最近のレビューが、記録された判断、アクション、あるいは何もしないという意図的な選択につながった割合 | その期間にリンクされた判断のある測定値 ÷ レビューされた測定値 | パーセント | レビューのメモ、改善の台帳 | 継続的改善 | 定期的な振り返り | 四半期ごと |
| 表示のサイズ | 各聞き手の見方にある測定値の数 | 見方ごとの件数 | 測定値 | ダッシュボードの設定 | 継続的改善 | 単純さ | 四半期ごと |
| 廃止率 | 判断に情報を与えなくなったために、その期間に取り除かれた、あるいは置き換えられた測定値 | 廃止された測定値 ÷ 開始時に表示されていた測定値 | パーセント | ダッシュボードの変更ログ | 継続的改善 | 継続的な進化 | 毎年 |
| 聞き手への到達(記述的) | 意図したチームまたは役割のうち、その期間に自分たちの見方を開いた割合 | 閲覧した個別のチームまたは役割 ÷ 意図したチームまたは役割 | パーセント | ダッシュボードのアクセスログ。チームまたは役割に集約 | 情報・技術管理 | ステークホルダーの継続的な関与 | 四半期ごと |
各見方の聞き手を書面で定義します。測定値はツールごとではなく見方ごとに数え、大きなカタログと小さなフロントページが、無秩序な拡大と間違われないようにします。アクセスログはチームまたは役割のレベルで収集され報告され、個人の閲覧習慣の追跡には決して使われません。聞き手への到達は記述的で、判断とのリンクとともに読まれます。多く閲覧されながら判断を変えない表示は、ほとんど価値がないからです。判断とのリンクは、「見て、何もしないと選んだ」を記録された判断として受け入れ、測定値が人々にアクションを捏造するよう促さないようにします。
推奨事項
聞き手から始める
1. 聞き手とその問いを列挙する。 典型的な聞き手は、仕事をするデリバリーやサポートのチーム、サービスに説明責任を持つサービスオーナー、資金を付けて方向を示すリーダーです。それぞれと1時間座り、彼らが何を尋ね、どんな判断を下し、何を知りたいと願うかを書き留めます。良い問いは「私たちの仕事は以前より長く待たされているか?」や「エラーバジェットを使い切るのに近いか?」のように聞こえます。「インシデントのダッシュボードを見せて」のようには聞こえません。
2. 各問いを一つの測定値と相棒に対応付ける。 各問いについて、この本の前の部から最良の単一の測定値と、明白な歪みから守る相棒を選びます。速度の測定値は品質の測定値と組になります。量の測定値は成果と組になります。体験の測定値は行動の測定値と組になります。これが、この本全体を通る組み合わせの論理です(トピック 1.3「アウトプットよりアウトカム:何を測るかを選ぶ」を参照)。
3. 聞き手を設計に含める。 何かを築く前にスケッチを見せます。何が紛らわしく、何が欠けていて、それぞれの数字で何をするかを尋ねます。彼らの答えが集合を削り、彼らは自分たちが作るのを助けたものを信頼します。
小さくバランスの取れた集合を選ぶ
4. 各見方を少数の測定値に保つ。 聞き手の見方あたり、おおよそ五から九の測定値が実用的な範囲ですが、適切な数は問いに依存します。この制限が選択を強います。詳細はクリックの先、補助的な見方に置き、フロントページは、さらに見るべきかを決めるのに必要なものにとどめます。
5. 集合を次元にわたってバランスさせる。 バランススコアカード(balanced scorecard)は、財務の結果だけでなく、いくつかの視点から組織を見る戦略的管理ツールです。その考え方はよく移植できます。サービスについて、フローと速度、品質と安定性、信頼性、体験、コストのバランスを取ります。速度だけを含む集合は近道を促し、品質だけを含む集合は遅延を促します。関連する重要業績評価指標(key performance indicator)の考え方は、指標が、示すのがいかに容易かではなく、目的について何を明らかにするかのために選ばれるときに有用です。
6. 指標と診断を区別する。 少数の見出しの指標が、物事が健全かを教えます。診断の測定値は、そうでないときになぜかを見つける助けとなります。診断を一段下に保ち、フロントページが壁にならないようにします。
文脈と傾向を示す
7. すべての値に履歴を示す。 各現在値の隣に、スパークラインか小さなランチャートを置きます。月次のピークや四半期の周期といった季節のパターンを見るのに十分な履歴を、少なくとも示します。変化を説明するイベントに印を付けます。リリース、ポリシーの変更、停止、チームの再編成。線の隣のメモは、百の質問を省きます。
8. 時間の測定値には分布と範囲を使う。 平均は、ユーザーが感じる長い裾を隠します。中央値と、85または95パーセンタイルのような高いパーセンタイルを示し、ばらつきを示します。標本が小さいときは標本サイズを述べ、小さな標本がどれだけ不確実かを示します(トピック 1.6「サービスメトリクスのための統計リテラシー」とトピック 2.2「リードタイム、サイクルタイム、フロー効率」を参照)。
9. 目標と色に注意する。 サービスレベル目標のように、目標に本当の根拠があるときは目標線を使い、判決ではなく参照として示します。一つのデータ点で反転する赤、黄、緑のタイルは避けます。状態の色を使うなら、通常の変動を考慮に入れた規則に基づかせ、その規則をページで説明します。
信頼でき、保守できるものにする
10. すべての測定値に定義とデータのメモを付ける。 各数字から1クリックで、その定義、計算式、データソース、オーナー、更新時刻、既知のギャップに至るべきです。短い「この読み方」のメモは、そのスペースに値します。限界が見える読み手は、数字を誤用しにくく、それが見えるチームは、それに異議を唱えられます(トピック 1.4「メトリクスのガバナンスとオーナーシップ」とトピック 1.5「データソースと計装」を参照)。
11. データを自動化し、表示を所有する。 記録システムから予定に沿ってデータを引き、最後の更新の時刻を示します。手作業のスプレッドシートは対話を始められますが、脆いものです。各ダッシュボードに、その定義、鮮度、廃止に責任を持つオーナーを指名します。ダッシュボードを聞き手とともに固定の頻度でレビューし、削ります。
12. 最初から出口を計画する。 すべての測定値に、存在する述べられた理由と、廃止される条件があるべきです。たとえば「既知のエラーのバックログが3か月間しきい値を下回ったとき」や「チームがレビューでもう使わなくなったとき」。測定値を廃止することは集合を小さく保ち、プログラムが仕事に仕えるというシグナルとなります。
悪用の手口と防護柵
| メトリクス | 悪用のされ方 | 組になる防護柵のメトリクスまたはプラクティス |
|---|---|---|
| 問いの網羅 | 既存の測定値がすでに答える狭い問いを書く、難しい問いを省く | プログラムのチーム外のステークホルダーを含める。答えのない問いを明示的にレビューする |
| 定義の完全性 | 定型文でフィールドを埋める、誰も読まない定義 | チーム外の人と明確さのために定義を抽出する。定義が実際の計算に合っているか確認する |
| データの鮮度 | 古い情報源を変わらないデータで更新する、情報源のフィードが失敗したのに更新を成功と数える | 更新時刻だけでなく情報源のタイムスタンプも確認する。レコード数と期待される量と比較する |
| 判断とのリンク | フィールドを埋めるために事後に判断を記録する、空白を避けるためにアクションを捏造する | 「何もしないと選んだ」を記録された判断として受け入れる。実際の事前の議論のためにリンクを抽出する |
| 表示のサイズ | 測定値を二次的なタブに隠す、一つの見方を多数に分割する | すべてのタブにわたって聞き手ごとの測定値を数える。聞き手に実際にいくつの数字を使うかを尋ねる |
| 廃止率 | 悪い結果を示す不都合な測定値を廃止する | 廃止された一覧を、不利な傾向の測定値についてレビューする。述べられた理由を求める |
| 聞き手への到達(記述的) | 数を上げるためにページを開く、会議での閲覧の義務化 | 記述的に保つ。判断とのリンクとともに読む。個人の閲覧を報告しない |
健全な読みは、聞き手が説明できる短いフロントページ、計算に合う定義、期限内に届くデータ、時にアクションにつながり時に待つという意図的な選択につながるレビュー、そして一度は人気だったものも含む廃止された測定値の一覧です。
トレードオフ:長所と短所
| 手法 | 強み | 弱み |
|---|---|---|
| 全員のための一つの企業ダッシュボード | 単一の真実の情報源。一貫した定義 | どの聞き手にも一般的すぎる。壁に育つ |
| 共有のデータの上での聞き手別の見方 | 各聞き手に合う。一貫した定義 | 共有の定義のガバナンスが要る |
| チームが築くダッシュボード | 局所的な問いに合う。高いオーナーシップ | 定義が漂流する。集約しにくい |
| 中央のチームがすべてのダッシュボードを築く | 一貫性。設計スキル | 遅い。チームの問いに合わないかもしれない |
| ライブでリアルタイムの表示 | 運用への素早いシグナル | ノイズへの反応を促す。コストが高い |
| 定期的なレビューパック | 落ち着いて、文脈とともに議論される | 遅れ。飛ばされうる |
| 目標と状態の色 | 素早い走査 | 色による管理を招く。変動を隠す |
| 傾向と分布のみ | 変動について誠実 | 新参者には走査しにくい |
散文での答えは、定義を組織全体で共有し、各聞き手に固有の小さな見方を持たせ、運用上の対応が必要とするところでのみライブの表示を使い、改善の判断には落ち着いた定期的なレビューを使うことです。
チームで話し合う問い
1. 先四半期に、画面の数字が情報を与えた判断は何だったか? それらを列挙します。それぞれについて、数字とその出どころを挙げます。現在の画面にある数字のうち、この一覧に一度も現れないものに気づきます。ファシリテーターは、それらがその場所に値するかを尋ねてください。
2. 自分たちのチームに五つの数字しか示せないなら、どれか? 各自が非公開で一覧を書き、それから比較します。違いと、各数字が誰かの判断を何に助けるかを話し合います。試行の集合と、それをレビューする日付に合意します。
3. ダッシュボードの数字のうち、最も取り除きたいのはどれで、なぜか? 議論を生む、誤解を招く、あるいは決して読まれない数字に耳を傾けます。問題が測定値か、その提示かを確認します。それぞれを廃止、再定義、維持のいずれにするかに合意します。
4. 新しい同僚は、助けなしに私たちのダッシュボードをどう読むか? 新参者に、見えるものを説明してもらいます。何を誤読し、なぜかに気づきます。つまずいたところに、定義、文脈、メモを加えます。
5. 私たちの仕事で、数字が示さない変化は何か? リリース、人員配置、ポリシー、顧客の変化が、傾向を説明しうる。次の読み手が物語を得られるよう、表示にイベントをどう記録するかに合意します。
6. 私たち以外に、誰が私たちのデータを見て、それで何をするか? 私たちの数字の経路を、他の聞き手までたどります。彼らがそれに与える解釈が、私たちが支持するものかを確認します。何を共有し、どんな文脈を添えるかに合意します。
四つの視点
プロダクトとデリバリーのチーム
チームは仕事をするので、自分自身のデータの最初の聞き手であるべきです。測定値の選択を手伝い、表示を自分たちのレビューの対話を促すのに使い、イベントで注記するべきです。チームの見方は「私たちはどうしていて、何を試すべきか?」に答えるべきで、「隣のチームと比べてどうか?」ではありません。
サービスと運用のチーム
サービスオーナーは、サービスが時間にわたってどう機能するかに説明責任があります。彼らの見方は、一つのサービスについて、信頼性、インシデント、変更、コスト、体験を、傾向と改善アクションの状況とともに集めます。それを使って、どこに投資するかを決め、顧客やリーダーとの対話に備えるべきです。
リーダーシップとガバナンス
リーダーは、サービス横断の成果とリスクの短い見方を、解釈するのに十分な文脈とともに必要とします。ランキングではなく傾向と分布を求め、他を廃止せずに新しい測定値を求めるのに抵抗し、表示を、個人ではなく、システムと判断に問いを向けるために使うべきです。
顧客とユーザー
顧客とユーザーは、ステータスページ、レポート、彼らの視点を反映する体験の測定値を通じて、サービス情報を見ます(トピック 6.2「体験レベル合意」を参照)。彼らの見方は、誠実で、平易で、チームが見るものと一貫しているべきです。数字が示さないものを、組織に伝えられるべきです。
実践:サービスマネジメントの例
ホスティングされたプロダクトとカスタマーサポートのグループを持つソフトウェア会社が、三つのダッシュボードを蓄積してきました。62のタイルを持つ運用の画面、毎週メールされるサポートのレポート、一人のアナリストが保守するデリバリーのページ。リーダーシップチームは、「すべてを見る」ための単一のダッシュボードを求めます。以下の数字は例示です。
サービスマネジメントの責任者は、問いから始めることを提案します。彼女は三つの聞き手、サポートチーム、プラットフォームチーム、リーダーシップのグループのそれぞれと、1時間のセッションを持ちます。サポートチームは、顧客が最初の有用な返信を以前より長く待つか、同じ問題が戻ってくるかを尋ねます。プラットフォームチームは、エラーバジェットを使い切るのに近いか、変更プロセスが自分たちを遅くしているか守っているかを尋ねます。リーダーシップは、顧客が価値を得ているか、新しいセルフサービスのポータルへの投資が報われているかを尋ねます。合わせて14の問いを挙げました。既存のダッシュボードは、そのうち六つに定義された測定値で答えられるので、問いの網羅は43パーセントです。
グループは、共有の定義の上に、それぞれ七つ以下の測定値による三つの見方を設計します。サポートの見方は、最初の有用な返信までの時間の中央値と85パーセンタイル、7日以内に戻る問い合わせの割合、標本サイズ付きの満足度の傾向、再問い合わせと組になったセルフサービスでの解決を示します。プラットフォームの見方は、エラーバジェットの消費線を伴う目標に対する可用性、変更失敗率を伴う変更のリードタイム、計画外の仕事に費やした時間の割合を示します。リーダーシップの見方は、サービスレベルの成果、顧客体験、アクティブな顧客あたりのコスト、資金が付いた三つの改善アクションの状況を示します。すべての値に、スパークライン、定義カードへのリンク、イベント用のメモ欄があります。色は、ページで説明された規則に基づき、エラーバジェットにのみ現れます。
最初のレビューは驚きをもたらします。サポートチームは、返信時間の中央値が改善したのに85パーセンタイルが悪化したことに気づきます。簡単な問い合わせが素早く答えられ、難しいものが待たされていたからです。チームはトリアージの規則を見ることを決め、その判断を記録します。プラットフォームチームは、最近の変更のリードタイムの増加が新しい承認のステップと重なったことを見て、その問いを変更のグループに持ち込みます。リーダーシップは、ポータルの利用が上がる一方で再問い合わせが横ばいであることに気づき、ポータルが何に答えられないのかをサポートチームに尋ねます。2四半期後、問いの網羅は79パーセントで、表示されたすべての測定値に完全な定義があり、古い62タイルの画面は廃止されています。三つの測定値は誰も使わなかったために落とされ、一つが加えられました。ある部長は、緑・黄・赤の要約行を求めます。サービスマネジメントの責任者は、一週間の悪い週が行を赤に変え、原因のない質問の殺到を招いた試行を示します。彼らは代わりに、毎月何が変わったかの短い書面のメモに合意し、その判断を記録します。
アジャイル、AI、自動化、アナリティクス
アジャイル
ダッシュボードを、そのユーザーとともに築き、小さなステップで改善し、各定期レビューで、それがどの問いに答え、どの判断を変えたかを尋ねます。注意点は、ローンチのために一度築かれたダッシュボードは、問いが変わるにつれて古くなることです。
AI
ダッシュボードには今や、AI支援の仕事、AIが書いた要約、AI生成の洞察がしばしば含まれます。AI関連の測定値を品質の相棒とともに示し、AIが書いたテキストにラベルを付け、意思決定者に届く前に人に確認させます。注意点は、チャートの隣の流暢なAIの要約は、データが値する以上の重みを持ちうるため、データを最初に示すことです。
自動化
データを自動で更新し、鮮度と失敗した読み込みをダッシュボード自体に示します。ダッシュボードのパイプラインを、その自身の失敗で測ります。注意点は、自動化されたダッシュボードは、読み込みが失敗したとき最後の良いデータを示し続けるため、古さを見えるものにすることです。
アナリティクス
各数字を、その傾向、背後にある件数、示せないものについてのメモとともに示します。これが情報を与える判断は、聞き手がどの問いについて行動するかです。注意点は、色としきい値は目標を暗示するため、目標がないところでは赤と緑を避けることです。
業種別の視点
スタートアップ。 非常に小さく保ちます。デリバリーの速度、安定性、顧客体験、コストを反映する、会社全体が読める、おそらく五つの数字の単一のページ。既存のツールが提供するものを何でも使います。プロダクトや顧客が変わるたびにページを見直し、問いが明確になる前にデータ基盤を築くのに抵抗します。
中小企業。 共有のドキュメントや、毎月更新される単純なスプレッドシートのチャートで十分かもしれません。オーナーとスタッフが実際に使う少数の測定値を選び、それぞれの意味を書き下ろし、定期的な会議で議論します。リスクはツールの少なさではありません。リスクは、誰も信頼せず、行動しない測定値です。
大企業。 規模には、共有の定義、統治された測定値のカタログ、チーム、サービス、ポートフォリオ、役員のための階層化された見方が要ります。すべてを一つの数字に集約する誘惑は強く、有害です。チームの見方はチームが所有し、共通の定義を公開し、リーダーシップの見方の新しい測定値には述べられた目的を求めます(トピック 1.4「メトリクスのガバナンスとオーナーシップ」を参照)。
政府・公共部門。 報告の義務と公的な説明責任が、しばしば特定の測定値を決めます。義務づけられた測定値を目に見えて保ち、チームが改善に使うものから明確に分離し、数字が示せることと示せないことを、国民と監督機関に説明します。組織の外と共有されるあらゆる表示には、平易な言葉とアクセシビリティが重要です(トピック 8.5「規制対応・行政向け報告」を参照)。
ビジネスケース:動機、ROI、TCO
ダッシュボードのプログラムのコストには、聞き手へのインタビュー、設計と構築、データの接続と整理、定義の記述、ユーザーの研修と支援、時間にわたる表示の保守の時間が含まれます。最大の隠れたコストは、役立たない数字を読む人々の時間と、誰の数字が正しいかを議論する会議の時間です。安く素早い構築は一般的で、本当のコストはのちに保守と不信として届きます。
見返りには、傾向のより速い認識、定義についての少ない論争、より的を絞った改善の仕事、一つの統治された情報源がいくつかの手作業のレポートに置き換わるときの報告の労力の減少が含まれます。自分たち自身のデータからケースを築きます。手作業のレポートに費やす時間の前後、同じ数字の競合するバージョンの数、表示が情報を与えた判断。たどれる出典と自分たちの文脈への関連性がない限り、アナリティクスの価値についての公表された数字の引用は避けます。信頼できる主張は控えめです。より少なく、より良い測定値を、信頼して使う(トピック 7.7「投資対効果とビジネスケース」を参照)。
アンチパターンと落とし穴
- タイルの壁。 すべての数字が注意を奪い合う。聞き手ごとに少数に削り、詳細を一段下に置く。
- 色による管理。 状態の色がノイズで反転し、反応を駆動する。傾向を示し、変動を尊重する規則を使う。
- 定義がない。 二つのチームが同じラベルを異なって読む。すべての測定値に定義とオーナーを付ける。
- 監視としてのダッシュボード。 個人レベルの見方は信頼を損ない、データを歪める。チーム、サービス、システムを示す。
- すべてを要約する単一の数字。 明らかにするはずだったトレードオフを隠す。バランスの取れた少数を示す。
- 一度築いて、決してレビューしない。 表示が古くなる。頻度に沿って聞き手とレビューし、測定値を廃止する。
- 虚栄の表示。 成果のない大きな活動の件数。すべての量を成果の測定値と組にする。
- 誰も頼まなかったレポート。 尋ねられた問いではなく、利用可能なデータから築かれる。問いから始める。
成熟度モデル
| 観点 | 1 開始 | 2 発展 | 3 標準化 | 4 管理 | 5 協調 |
|---|---|---|---|---|---|
| 聞き手と問い | 利用可能なデータから築かれる | 一部のチームが必要なものを尋ねる | 聞き手と問いが書かれる。聞き手ごとの小さな見方 | 問いの網羅と判断とのリンクがレビューされ行動される | 聞き手が、顧客と供給者を含めて見方を共同設計する。問いがサービスとともに進化する |
| 設計と文脈 | 履歴のない多くのタイル | 一部の傾向と定義 | 見方あたり少数の測定値。すべての測定値に傾向、分布、定義 | 変動を意識した表示。すべての見出しに相棒の測定値 | 見方が変わる目標に適応する。共有のパターンがチーム間で再利用される |
| データと保守 | 手作業、古い、オーナーなし | 一部の自動化。非公式なオーナー | 自動のフィード、名前の挙がったオーナー、鮮度が示される | 鮮度と定義の完全性が管理される。廃止が日常 | 共有の定義を伴う分散したオーナーシップ。廃止と改善がユーザーに駆動される |
チェックリスト
- 各聞き手の問いが書かれ、各見方がそれらに対応している。
- 各見方に、おおよそ九以下の測定値があり、詳細は一段下にある。
- 集合が、フロー、品質、信頼性、体験、コストにわたってバランスしている。
- すべての値が傾向と文脈を示し、時間の測定値が高いパーセンタイルを示している。
- すべての測定値に、定義、情報源、オーナー、更新時刻が1クリック以内にある。
- 目標が参照として示され、状態の色が述べられた規則に従っている。
- チームが自分たちのデータを最初に見て、解釈を所有している。
- どの見方も、個人をランク付けも追跡もしていない。
- ダッシュボードに、名前の挙がったオーナー、レビューの頻度、測定値を廃止する規則がある。
- データが自動で引かれ、最後の更新の時刻が見える。
AIプロンプト
問いを見方に変える。
以下は [聞き手] が尋ねた問いです:[一覧]。各問いについて、一つの主要な測定値と、最も起こりやすい歪みから守る一つの相棒の測定値を示唆してください。それらを七つ以下の測定値の見方にまとめ、それぞれについて、定義、提案するチャートの種類、必要な文脈を述べてください。データやベンチマークを捏造しないでください。前提と、その見方が答えられない問いを列挙してください。
ダッシュボードを明確さのためにレビューする。
以下は私たちのダッシュボードの説明で、各タイル、そのラベル、その定義を列挙しています:[貼り付け]。初めて読む新しい同僚として行動してください。どのラベルが曖昧か、どの数字に文脈や傾向が欠けているか、どのタイルが色による管理を招きうるか、どのタイルを廃止できるかを列挙してください。データを書き直さないでください。前提を列挙してください。
メトリクスカードを起案する。
[測定値] のメトリクスカードを起案してください。平易な定義、計算式、単位、データソース、オーナー、更新間隔、既知のギャップ、最も起こりやすい悪用の仕方、組になる防護柵、情報を与えるべき判断を含めてください。200語以内に収めてください。数字を捏造しないでください。確信のないものには印を付けてください。
ダッシュボードのレビューを計画する。
[チーム] のダッシュボードを、その聞き手と行う45分の四半期ごとのレビューを計画してください。測定値が判断に使われたかの確認方法、どれを廃止するかの決め方、傾向を説明するイベントの記録方法、人をランク付けするのを避ける方法を含めてください。ファシリテーターが尋ねるべき問いと、記録すべき出力を列挙してください。
AIスキル
- サービスマネジメントメトリクスのスキル:提案された見方の各測定値について、組になる防護柵を探すときに使います。
- サービスマネジメントメトリクスのメンテナースキル:ダッシュボードの仕様が、すべての測定値に定義、オーナー、悪用の手口を備えているかを確認するときに使います。
要点
- 聞き手が尋ねる問いから始め、各聞き手に固有の小さな見方を与える。
- 集合をバランスさせ、各見出しを、歪みから守る相棒と組にする。
- すべての値に、傾向、分布、文脈を示し、通常の変動を尊重する。
- すべての測定値に、定義、情報源、オーナー、更新時刻を付ける。
- チームが自分たちのデータを最初に見て所有できるようにし、個人は決して示さない。
- ダッシュボードを聞き手とレビューし、判断に情報を与えなくなった測定値を廃止する。
参考文献とさらなる読書
- Few, S., Information Dashboard Design: The Effective Visual Communication of Data, O'Reilly Media, 2006.
- Tufte, E., The Visual Display of Quantitative Information, Graphics Press, 1983.
- Kaplan, R., and Norton, D., "The Balanced Scorecard: Measures That Drive Performance," Harvard Business Review, 1992.
- Wheeler, D., Understanding Variation: The Key to Managing Chaos, SPC Press, 2000.
- Axelos, ITIL 4 Foundation, 2019.
- Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
- Wikipedia, Dashboard (business).
- Wikipedia, Data visualization.
- Wikipedia, Sparkline.
- Wikipedia, Run chart.
- Wikipedia, Control chart.
- Wikipedia, Chartjunk.
- Wikipedia, Vanity metric.
- Wikipedia, Goodhart's law.
- Wikipedia, Balanced scorecard.
- Wikipedia, Key performance indicator.