Cyflwyniad i Ran 11: Adeiladu rhaglen fetrigau
Mae rhaglen fetrigau yn wasanaeth hirhoedlog ynddi ei hun: mae angen cynulleidfa arni, set fach o fesurau, offer gonest, ymddiriedaeth y bobl a fesurir, a llwybr i dyfu un cam ar y tro.
Mae Rhannau 2 i 10 yn disgrifio beth i'w fesur. Mae'r rhan hon yn disgrifio sut i droi'r mesurau hynny'n arferiad sy'n para. Mae llawer o sefydliadau'n trin mesur fel prosiect: dewis offeryn, adeiladu dangosfwrdd, cyhoeddi set o dargedau, a symud ymlaen. Flwyddyn yn ddiweddarach mae'r dangosfwrdd wedi dyddio, mae'r targedau wedi plygu ymddygiad mewn ffyrdd na fwriadodd neb, ac mae'r bobl a fesurwyd wedi dysgu anymddiried yn yr holl ymarfer. Mae rhaglen yn wahanol. Mae ganddi berchnogion, pwrpas, rhythm adolygu a ffordd o ymddeol mesurau sydd wedi peidio â helpu. Mae'n wasanaeth ynddi ei hun, a gellir ei mesur a'i gwella fel un.
Mae'r nodau ystwyth yn berthnasol i'r rhaglen fel y maent i unrhyw waith arall. Mae cyfranogiad parhaus rhanddeiliaid yn golygu bod y bobl a fydd yn cael eu mesur, a'r bobl a fydd yn defnyddio'r canlyniadau, yn helpu i ddewis y mesurau o'r cychwyn cyntaf. Mae gwelliant parhaus yn golygu bod y rhaglen yn adolygu ei hun ac yn gollwng yr hyn nad yw'n ennill ei gost. Mae esblygiad parhaus yn golygu bod y set o fesurau yn newid wrth i'r gwasanaethau newid. Mae cyflymder cynaliadwy yn golygu nad yw'r rhaglen yn ychwanegu baich adrodd sy'n gwthio allan y gwaith y bwriedir iddi ei oleuo. Ac mae adeiladu o amgylch unigolion ysgogol yn golygu bod mesurau'n cael eu cynnig fel cymorth i dimau sy'n berchen ar eu gwaith, nid eu gorfodi fel gwyliadwriaeth (gweler pwnc 1.2, Cyfraith Goodhart a seicoleg metrigau).
Mae dau fethiant tawel yn aflonyddu ar bob rhaglen. Y cyntaf yw ofn. Os yw pobl yn credu y defnyddir y rhifau i'w graddio, eu beio neu eu torri, byddant yn rheoli'r rhifau yn lle'r gwaith, a bydd y data'n peidio â bod yn wir. Yr ail yw gwasgaru. Mae pob rhanddeiliad eisiau un mesur arall, mae pob offeryn yn cynnig hanner cant o siartiau ychwanegol, ac yn fuan ni all neb ddweud pa rifau sy'n bwysig. Mae'r pynciau yn y rhan hon yn ymwneud yn bennaf ag osgoi'r ddau fethiant hyn: cadw'r set yn fach, ei chadw'n eiddo i'r timau, a chadw'r defnydd ohoni'n weladwy ac yn ddiniwed.
Mae'r pedair lens yn llunio rhaglen fetrigau. Dylid ei hadeiladu yn yr un ysbryd cyflawni parhaus â'r gwasanaethau y mae'n eu mesur. Mae angen rheolau penodol ar nodweddion AI mewn offer a data sy'n deillio o AI am bobl. Mae awtomeiddio yn lleihau ymdrech casglu ac mae angen yr un perchnogaeth a gwiriadau arno ag unrhyw awtomeiddio arall. Ymarfer dadansoddeg, gyda'i ansawdd data a'i ansicrwydd, sy'n gwneud allbwn y rhaglen yn werth ei ddarllen.
Pynciau yn y rhan hon
- 11.1 Dylunio dangosfwrdd metrigau gwasanaeth: cynulleidfaoedd, set fach gytbwys, cyd-destun a thuedd, a golygfeydd i dimau, gwasanaethau ac arweinyddiaeth.
- 11.2 Tirwedd offer: adeiladu yn erbyn prynu, y mathau o lwyfannau, piblinellau data, a meini prawf dethol sy'n niwtral o ran gwerthwyr.
- 11.3 Cyflwyno metrigau heb fagu ofn: tryloywder, perchnogaeth tîm, dim tablau cynghrair unigol, a chyflwyniad sy'n ennill ymddiriedaeth.
- 11.4 Model aeddfedrwydd ar gyfer rhaglenni metrigau: y raddfa bum lefel a rennir wedi'i chymhwyso i'r rhaglen ei hun.
- 11.5 Map ffordd mabwysiadu cynyddol: cynllun ar gyfer y 30, 90 a 180 diwrnod cyntaf sy'n dechrau o'ch man cychwyn.
Sut mae'r pynciau hyn yn perthyn i'w gilydd
Daw cyflwyno heb ofn (gweler pwnc 11.3, Cyflwyno metrigau heb fagu ofn) gyntaf o ran pwysigrwydd, er mai'r dangosfwrdd yw'r hyn y mae pobl yn ei weld. Y cytundebau ynghylch pwy sy'n berchen ar y data, pwy sy'n ei weld, a'r hyn na chaiff ei ddefnyddio ar ei gyfer byth sy'n penderfynu a fydd unrhyw ddangosfwrdd yn cario rhifau gwir. Mae'r pwnc dangosfwrdd (gweler pwnc 11.1, Dylunio dangosfwrdd metrigau gwasanaeth) yn troi'r cytundebau hynny'n ddyluniad: setiau bach, cyd-destun, tuedd, a golygfeydd sy'n addas i bob cynulleidfa. Yna mae'r pwnc offer (gweler pwnc 11.2, Tirwedd offer) yn gofyn pa lwyfannau a phiblinellau all gyflenwi'r data heb droi'n brosiect mwy na'r budd.
Mae'r model aeddfedrwydd (gweler pwnc 11.4, Model aeddfedrwydd ar gyfer rhaglenni metrigau) yn rhoi ffordd i'r rhaglen ddisgrifio ble mae hi a beth allai'r cam nesaf fod, gan ddefnyddio'r un raddfa â phob pwnc arall. Mae'r map ffordd (gweler pwnc 11.5, Map ffordd mabwysiadu cynyddol) yn troi hynny'n gynllun o gamau bach, a phob un yn cyflwyno rhywfaint o werth i'r bobl a fesurir cyn i'r nesaf ddechrau. Dyma'r un rhesymeg cyflawni parhaus ag y mae gweddill y llyfr yn ei hargymell ar gyfer gwasanaethau: cyflwynwch rywbeth defnyddiol yn gynnar, dysgwch o'i ddefnyddio, a gwellwch.
Mae sawl pâr yn cadw'r rhaglen yn onest. Dylid darllen dangosfwrdd o ganlyniadau gyda chofnod o sut y casglwyd y data a'i fylchau hysbys. Dylid darllen cynllun cyflwyno gydag addewid ynghylch yr hyn na ddefnyddir y data ar ei gyfer. Dylid darllen dewis offeryn gyda chost ei adael. Dylid trin sgôr aeddfedrwydd fel man cychwyn sgwrs, ac nid fel targed byth.
Mae'r rhan yn tynnu ar y sylfeini yn Rhan 1, yn enwedig llywodraethu metrigau (gweler pwnc 1.4, Llywodraethu a pherchnogaeth metrigau) a ffynonellau data (gweler pwnc 1.5, Ffynonellau data ac offeryniaeth), ac ar fesurau gwella a newid Rhan 9 (gweler pwnc 9.5, Metrigau gwelliant parhaus, a phwnc 9.6, Metrigau newid sefydliadol a mabwysiadu). Mae'r atodiadau yn Rhan 12 yn cyflenwi'r rhestrau gwirio, y templedi a'r cyfeiriadau cyfun y bydd tîm rhaglen yn eu defnyddio o ddydd i ddydd.