9.8 Ar-alwad a pharodrwydd gweithredol

Trosolwg a chymhelliant

Mae rhywun ar ddi-hun ar hyn o bryd oherwydd y gallai eich system ei bipio. Ar-alwad yw’r trefniant dynol sy’n sicrhau bod person cymwys o fewn cyrraedd i broblem cynhyrchu ar unrhyw awr, a pharodrwydd gweithredol yw’r gwaith a wnewch ymlaen llaw fel bod gan y person hwnnw siawns deg. Mae’r bennod hon yn ymwneud â’r parodrwydd hwnnw a’r system ddynol honno: sut rydych chi’n dylunio cylchdro y gall pobl ei gynnal am flynyddoedd, sut rydych chi’n penderfynu beth sy’n werth deffro rhywun ar ei gyfer, a sut rydych chi’n sicrhau bod gwasanaeth yn wirioneddol barod i gael ei weithredu cyn i chi adael iddo gario traffig go iawn.

Cadwch hyn ar wahân i ddwy bennod gyfagos. Mae Pennod 9.3 yn ymdrin â rheoli digwyddiadau, y broses ymateb ar ôl i rywbeth dorri go iawn: rolau command, lefelau difrifoldeb, cydgysylltu, a phost-mortemau. Mae Pennod 9.1 yn ymdrin â peirianneg dibynadwyedd safle (SRE), y ddisgyblaeth ehangach o beiriannu dibynadwyedd gan ddefnyddio amcanion lefel gwasanaeth a chyllidebau gwallau. Mae’r bennod hon yn eistedd yn uwchlaw’r digwyddiad ac ochr yn ochr â’r ddisgyblaeth. Mae’n gofyn cwestiwn culach, mwy personol: a yw’r gwasanaeth yn barod i redeg, ac a yw’r person sy’n cario’r pager wedi’i osod i lwyddo yn hytrach na dioddef? Gall sefydliad gael proses ddigwyddiadau ragorol a dal i losgi ei beirianwyr allan, oherwydd penderfynir poen ar-alwad ymhell cyn unrhyw ddigwyddiad, gan ansawdd y rhybuddion, cyflwr y llawlyfrau gweithredu, a dyneiddiaeth yr amserlen.

I dimau mawr, mae ar-alwad yn peidio â bod yn ffafr anffurfiol ac yn dod yn seilwaith. Ni all platfform sydd â channoedd o wasanaethau a dwsinau o dimau ddibynnu ar yr un person sy’n digwydd gwybod sut mae popeth yn gweithio. Mae angen cylchdroeon, llwybrau uwchgyfeirio, a safonau parodrwydd sy’n dal eu tir pan fydd yr awduron gwreiddiol wedi symud ymlaen. Mewn lleoliadau menter a llywodraeth, mae’r risgiau’n codi ymhellach. Mae gwasanaethau rheoledig yn cario ymrwymiadau argaeledd a rhwymedigaethau dyletswydd gofal i’r staff sy’n eu gweithredu. Ni all system fudd-daliadau neu iechyd sy’n wynebu dinasyddion fynd yn dywyll dros nos oherwydd bod yr unig berson a’i deallai ar wyliau. Parodrwydd gweithredol yw sut mae sefydliad yn cadw ei addewidion ar ôl i barti’r lansiad ddod i ben, a sut mae ar-alwad dyngarol yn cadw’r bobl sy’n cadw’r addewidion hynny.

Egwyddorion allweddol

Bipiwch berson dynol dim ond ar gyfer problemau sy’n frys, y gellir gweithredu arnynt, ac yn real.
Dyluniwch y cylchdro ar gyfer person sydd â bywyd, nid ar gyfer peiriant sydd bob amser ar gael.
Profwch fod gwasanaeth yn barod i weithredu cyn iddo gario traffig cynhyrchu.
Rhybuddiwch ar symptomau gweladwy i ddefnyddwyr ac SLOs, nid ar bob achos mewnol.
Trinwch lawlyfrau gweithredu ac adolygiadau parodrwydd fel dogfennau byw sy’n cael eu defnyddio, nid eu ffeilio.
Dylai pwy bynnag sy’n adeiladu gwasanaeth helpu i’w redeg, o fewn terfynau dyngarol a chefnogol.
Mesurwch iechyd ar-alwad a lleihau llafur diflas fel bod y llwyth yn tueddu i lawr, nid i fyny.

Argymhellion

Dyluniwch gylchdro dyngarol, cynaliadwy

Dechreuwch gyda siâp yr amserlen, oherwydd mae’n penderfynu mwy am gynaliadwyedd nag unrhyw declyn. Patrwm cyffredin yw cylchdro wythnosol gydag ymatebydd cynradd sy’n derbyn bipiadau yn gyntaf, ac ymatebydd eilaidd sy’n gweithredu fel wrth gefn pan na fydd y cynradd yn cydnabod neu angen help. Cadwch y pwll yn ddigon mawr fel nad yw unrhyw un peiriannydd ar-alwad fwy nag un wythnos ym mhob pedair, ac yn ddelfrydol un ym mhob chwech neu fwy. Mae cylchdro o bedwar person neu lai yn arwydd rhybudd: bydd salwch, gwyliau, ac ymadawiadau staff yn ei chwalu’n ôl i’r un ddau arwr blinedig.

Lle rydych chi’n gweithredu ar draws parthau amser, ffafriwch fodel dilyn-yr-haul, lle mae timau mewn gwahanol ranbarthau’n gorchuddio eu horiau golau dydd eu hunain fel nad oes neb yn cael ei bipio’n rheolaidd am 3 y bore. Mae hyn yn parchu’r rhythm circadaidd, cylch cwsg-deffro mewnol y corff, y mae ei aflonyddu’n gost iechyd uniongyrchol, nid anghyfleustra bach. Pan nad yw dilyn-yr-haul yn bosibl, cywasgwch y boen: blociau shifft nos byrrach, amser adfer gwarantedig ar ôl noson wael, a rheol glir nad yw peiriannydd a bipiwyd yn drwm dros nos yn ddyledus am ddiwrnod llawn o waith nodwedd y bore wedyn.

Uwchgyfeirio yw’r rhwyd ddiogelwch o dan y cylchdro. Diffiniwch, yn ysgrifenedig, beth sy’n digwydd pan na fydd y cynradd yn cydnabod bipiad o fewn ffenestr benodol: mae’n treiglo i’r eilaidd, yna at arweinydd tîm neu reolwr, yna at grŵp ehangach. Mae polisi uwchgyfeirio sy’n awtomatig ac yn cael ei ddeall yn dda yn golygu na fydd unrhyw fipiad byth yn disgyn yn dawel ar y llawr, ac nad un person blinedig yn unig yw’r unig linell amddiffyn.

Gwnewch bolisi bipio yn ymwneud â phroblemau y gellir gweithredu arnynt, sy’n frys, ac yn real

Y ffordd gyflymaf o ddinistrio cylchdro ar-alwad yw bipio pobl am bethau na allant neu nad oes angen iddynt weithredu arnynt. Mabwysiadwch un rheol ac amddiffynnwch hi’n ffyrnig: mae bipiad yn honiad bod yn rhaid i berson dynol wneud rhywbeth nawr. Os nad yw rhybudd yn bodloni’r tri phrawf, sef brys, y gellir gweithredu arno, ac yn disgrifio problem real sy’n weladwy i ddefnyddwyr, nid yw’n haeddu bipiad. Cyfeiriwch ef at docyn, dangosfwrdd, neu grynodeb dyddiol yn lle hynny.

Y gelyn yma yw blinder larwm, y ffenomen a ddogfennwyd yn dda lle mae pobl sy’n cael eu hamlygu i larymau aml yn dod yn ddiaimochus ac yn dechrau eu hanwybyddu, gan gynnwys y rhai sy’n bwysig. Mae’n gysyniad diogelwch cleifion o ysbytai, ac mae’n trosglwyddo’n union i feddalwedd. Pan fydd pob shifft yn dod â ugain bipiad a bod pedwar ar bymtheg ohonynt yn sŵn, mae ymatebwyr yn dysgu eu hysgubo i ffwrdd hanner cysgu, ac mae’r ugeinfed, yr un a oedd yn real, yn cael yr un diystyriad reflecsol. Mae pob rhybudd swnllyd a oddefwch yn dreth fach ar hygrededd pob rhybudd arall.

Triniwch ansawdd rhybuddion fel cynnyrch peirianyddol dosbarth cyntaf. Trac gyfradd cydnabod-i-weithredu: o’r bipiadau a daniwyd, faint a arweiniodd at berson dynol yn gwneud rhywbeth a oedd yn bwysig? Mae rhybudd na wnaeth erioed unwaith gymryd gweithredu mewn chwarter yn ymgeisydd ar gyfer ei ddileu neu ei israddio. Adolygwch eich rhybuddion ar gyflymder rheolaidd, a rhowch statws i unrhyw beiriannydd herio un swnllyd. Y nod yw cylchdro lle mae bipiad yn ddigon prin i olygu rhywbeth o hyd.

Rhybuddiwch ar symptomau ac SLOs, nid ar achosion

Y ffordd fwyaf effeithiol o dorri sŵn yw newid yr hyn yr ydych yn rhybuddio arno. Mae rhybuddio ar achosion, megis CPU uchel, disg llawn, neu broses sengl a ailgychwynnwyd, yn cynhyrchu llifeiriant o fipiadau ar gyfer amodau na fyddant efallai byth yn effeithio ar ddefnyddiwr ac y mae’r system yn aml yn eu hunan-wella. Rhybuddiwch yn lle hynny ar symptomau: a yw’r gwasanaeth yn gwneud yr hyn y mae defnyddwyr ei angen iddo’i wneud? Cydiwch eich rhybuddion bipio wrth eich amcanion lefel gwasanaeth (SLOs), y targedau dibynadwyedd rhifiadol a ddiffinnir ym Mhennod 9.1, a bipiwch pan fyddwch yn llosgi trwy’r gyllideb gwallau’n ddigon cyflym i fethu’r targed, neu pan fydd dangosydd sy’n wynebu defnyddwyr megis oedi neu gyfradd llwyddiant yn croesi llinell y mae pobl mewn gwirionedd yn ei theimlo.

Mae’r dull hwn sy’n seiliedig ar symptomau, wedi’i yrru gan SLOs, yn dibynnu ar arsylladwyedd a thelemetreg Pennod 9.2, gan mai dim ond pan fydd eich metrigau, logiau, a llwybrau olrhain wedi’u strwythuro ac yn ddibynadwy y mae rhybuddio cyfradd-losgi’n gweithio. Mae’r enillion yn ddramatig: mae llond dwrn o rybuddion symptom ystyrlon yn disodli cannoedd o rybuddion achos, ac mae bipiad unwaith eto’n cydberthyn â phroblem sy’n werth deffro ar ei chyfer. Mae achosion yn dal i fod yn bwysig, ond maent yn perthyn ar y dangosfyrddau diagnostig y mae’r ymatebydd yn ymgynghori â nhw ar ôl i rybudd symptom danio, nid yn llwybr bipio.

Mynnwch barodrwydd gweithredol cyn lansio

Dylai gwasanaeth ennill ei le mewn cynhyrchu. Cyn iddo gario traffig go iawn, ei redeg trwy adolygiad parodrwydd cynhyrchu: gwiriad strwythuredig, yn ddelfrydol gan rywun y tu allan i’r tîm adeiladu, bod y gwasanaeth yn wirioneddol yn gallu cael ei weithredu. Codeiddiwch yr adolygiad fel rhestr wirio sy’n dod yn safon a rennir ar draws timau. Mae rhestr gref yn cynnwys monitro ac SLOs, rhybuddio sy’n bodloni’r polisi bipio, dangosfyrddau, llawlyfrau gweithredu ar gyfer y methiannau tebygol, perchnogaeth ddiffiniedig a chylchdro ar-alwad, disgwyliadau capasiti a llwyth, dadansoddiad dibyniaeth a modd methiant, backup ac adfer, rheolaethau diogelwch a mynediad, a chynllun rholio’n ôl.

Mae’r adolygiad yn sgwrs, nid yn giât i’w chwarae. Ei werth yw ei fod yn gorfodi’r tîm adeiladu i wynebu gweithredadwyedd tra bod ganddynt gyd-destun o hyd, yn hytrach na darganfod am 2 y bore chwe mis yn ddiweddarach na ysgrifennodd neb lawlyfr gweithredu na gosod rhybudd. Cysylltwch barodrwydd â phrofi gwytnwch Pennod 9.6: mae gwasanaeth na chafodd erioed fethiant dibyniaeth wedi’i chwistrellu cyn lansio yn gwneud addewid heb ei brofi am sut mae’n methu. Ar gyfer lansiadau menter a llywodraeth risg uchel, gwnewch yr adolygiad parodrwydd yn gam gofynnol, wedi’i ddogfennu, oherwydd bod cost gwasanaeth sy’n wynebu dinasyddion, sy’n aflonydd ac yn methu’n gyhoeddus, yn cael ei fesur mewn ymddiriedaeth yn ogystal ag mewn arian.

Ysgrifennwch lawlyfrau gweithredu a llawlyfrau chwarae sy’n cael eu defnyddio go iawn

Mae llawlyfr gweithredu yn ddogfen weithredol gam wrth gam: sut i ailgychwyn y gwasanaeth hwn, cylchdroi’r dystysgrif hon, draenio’r ciw hwn, dehongli’r rhybudd hwn. Mae llawlyfr chwarae yn ganllaw ymateb ehangach ar gyfer dosbarth o sefyllfa. Mae’r ddau’n ddiwerth os na fydd neb yn eu darllen, ac mae’r rhan fwyaf o lawlyfrau gweithredu’n mynd heb eu darllen oherwydd eu bod yn hen, yn amwys, neu’n amhosibl eu canfod am 3 y bore. Trwsiwch y moddau methiant yn uniongyrchol. Cysylltwch y llawlyfr gweithredu o’r rhybudd ei hun, fel bod ymatebydd yn ei gyrraedd mewn un clic o’r bipiad. Cadwch lawlyfrau gweithredu mewn rheolaeth fersiynau wrth ymyl y cod, fel y mae arferion dogfennaeth Pennod 2.7 yn ei argymell, fel eu bod yn cael eu hadolygu a’u diweddaru fel unrhyw arteffact arall. Ysgrifennwch nhw ar gyfer dieithryn dan straen, cysglyd, gyda gorchmynion pendant ac allbynnau disgwyliedig, nid rhyddiaith sy’n rhagdybio cyd-destun yr awdur.

Prawf llawlyfr gweithredu yw a all rhywun heblaw ei awdur ei ddilyn yn llwyddiannus dan bwysau. Dilyswch hynny yn ystod sefydlu a diwrnodau gêm, a diweddarwch y llawlyfr gweithredu ar unwaith pan fydd digwyddiad yn datgelu ei fod yn anghywir. Mae llawlyfr gweithredu sy’n dweud celwydd yn waeth na dim un, oherwydd ei fod yn anfon ymatebydd blinedig yn hyderus i’r cyfeiriad anghywir.

Piau’r hyn a adeiladwch, o fewn terfynau dyngarol

Poblogeiddiodd mudiad DevOps yr ymadrodd “chi sy’n ei adeiladu, chi sy’n ei redeg”: mae’r tîm sy’n ysgrifennu gwasanaeth hefyd yn cario ei bager. Mae’r budd yn real ac yn werth ei amddiffyn. Pan fydd adeiladwyr yn teimlo eu bipiadau eu hunain, maent yn buddsoddi mewn dibynadwyedd, yn trwsio rhybuddion swnllyd, ac yn dylunio ar gyfer gweithredadwyedd, oherwydd bod y ddolen adborth yn eu cyrraedd yn bersonol yn hytrach na glanio ar dîm gweithrediadau ar wahân na all drwsio’r achos gwraidd.

Mae gan y model derfynau y mae’n rhaid i chi eu parchu. Mae’n gofyn bod timau wedi’u paratoi’n wirioneddol i redeg eu gwasanaethau: wedi’u rhoi’r offer, y platfform, yr hyfforddiant, a’r amser i wneud gweithrediadau’n dda, fel y mae effeithiolrwydd peirianyddol Pennod 1.10 a ffyrdd o weithio Pennod 1.4 ill dau yn mynnu. Mae perchnogaeth lawn yn greulon pan gaiff ei orfodi ar dîm rhy fach i staffio cylchdro, neu heb y gefnogaeth platfform sy’n gwneud ar-alwad yn oddefadwy. Mae rhai sefydliadau’n rhedeg hybrid, lle mae tîm SRE neu blatfform canolog yn cyd-berchnogi’r haenau anoddaf neu’n darparu gorchudd y tu allan i oriau ar gyfer gwasanaethau sy’n bodloni bar dibynadwyedd uchel, gan ryddhau timau cynnyrch o fipiadau nos rheolaidd. Yr egwyddor i’w chadw yw’r ddolen adborth; gall y siâp blygu i ffitio maint y tîm, ei aeddfedrwydd, a dyneiddiaeth y llwyth.

Sefydlwch beirianwyr ar-alwad yn fwriadol a rhedeg diwrnodau gêm

Ni ddylai neb gymryd y pager am y tro cyntaf ar ei ben ei hun ac heb baratoi. Adeiladwch lwybr sefydlu: cysgodi ymatebydd profiadol am gylchdro, cysgodi gwrthdro lle mae’r newydd-ddyfodiad yn arwain gyda mentor yn gwylio, taith trwy’r dangosfyrddau a’r llawlyfrau gweithredu, a map clir o bwy i uwchgyfeirio ato. Gwnewch barodrwydd i fynd ar-alwad yn garreg filltir glir, nid yn dyb.

Diwrnodau gêm yw’r ymarfer sy’n gwneud ar-alwad yn real. Mewn diwrnod gêm rydych yn ymarfer methiant yn fwriadol, yn ddelfrydol mewn amgylchedd realistig, ac yn gadael i’r peiriannydd ar-alwad ymateb gan ddefnyddio dim ond yr offer a’r llawlyfrau gweithredu a fyddai ganddynt mewn digwyddiad go iawn. Dyma lle rydych chi’n darganfod bod y llawlyfr gweithredu’n hen, bod y dangosfwrdd yn colli signal, neu na fydd y rhybudd byth yn tanio. Mae diwrnodau gêm yn adeiladu’r cof cyhyrol a’r hyder sy’n troi bipiad go iawn cyntaf o banig yn weithdrefn, ac maent yn cysylltu’n naturiol â pheirianneg anhrefn Pennod 9.6.

Rhedwch drosglwyddiadau glân a mesurwch iechyd ar-alwad

Y trosglwyddiad rhwng shifftiau yw lle mae cyd-destun yn gollwng. Sefydlwch drosglwyddiad byr, strwythuredig: beth sy’n dirywio ar hyn o bryd, pa rybuddion a daniodd ac a atalwyd, pa newidiadau sydd ar y gweill, beth i’w wylio. Parwch ef â glendid ar-alwad sylfaenol, gan gynnwys polisi nad yw’r ymatebydd sy’n gadael yn gadael llanast i’r un sy’n dod i mewn, a bod unrhyw beth a adawyd wedi’i drwsio’n rhannol yn cael ei ysgrifennu i lawr.

Yn anad dim, mesurwch. Ni allwch reoli llwyth nad ydych yn ei weld. Traciwch fipiadau fesul shifft, y gyfran o fipiadau sy’n glanio y tu allan i oriau (gyda’r nos, dros nos, penwythnosau), amser cydnabod, a pha mor aml y mae’r haenau eilaidd ac uwchgyfeirio’n cael eu sbarduno. Gwyliwch y duedd, nid dim ond y rhif: mae cylchdro y mae ei fipiadau y tu allan i oriau’n dringo o chwarter i chwarter yn anelu at losgi allan waeth beth yw’r cyfrif absoliwt cyfredol. Bwydwch y metrigau hyn i mewn i adolygiad gweithredol rheolaidd lle mae’r tîm yn penderfynu pa lafur diflas i’w awtomeiddio i ffwrdd, pa rybuddion i’w lladd, a lle bu’r parodrwydd yn brin. Mae lleihau llafur diflas, y gwaith gweithredol â llaw ailadroddus sy’n graddio gyda thraffig yn hytrach na chael ei drwsio unwaith, yn ffordd o gadw’r llwyth ar-alwad yn wastad wrth i’r system dyfu.

Cyfaddawdau: manteision ac anfanteision

Dewis	Manteision	Anfanteision
Chi sy’n ei adeiladu, chi sy’n ei redeg	Dolen adborth dibynadwyedd dynn; mae perchnogion yn trwsio achosion gwraidd	Creulon i dimau heb ddigon o adnoddau neu fach iawn; llwyth nos anghyson
Ar-alwad SRE neu blatfform canolog	Yn amddiffyn timau cynnyrch rhag bipiadau nos rheolaidd; sgil weithredol ddwfn	Yn gwanhau dolen adborth yr adeiladwr; gall ddod yn ddympfa
Cylchdro dilyn-yr-haul	Neb yn cael ei bipio dros nos; dyngarol ac iach	Angen staff mewn sawl rhanbarth; baich trosglwyddo trymach
Cylchdro lleol bach	Syml; mae pawb yn gwybod y system	Yn chwalu dan salwch neu ymadawiadau staff; llosgi allan cyflym
Rhybuddio symptom ac SLO	Ychydig o fipiadau ystyrlon; blinder isel	Angen telemetreg aeddfed; gall golli achosion sy’n adeiladu’n araf
Rhybuddio seiliedig ar achosion	Dal problemau’n gynnar ac yn benodol	Yn llethu ymatebwyr; yn gyrru blinder larwm
Adolygiadau parodrwydd llym	Llai o synnau annymunol mewn cynhyrchu	Yn arafu lansiadau; gall deimlo’n fiwrocrataidd os caiff ei chwarae

Y tensiwn canolog yw rhwng gorchudd a dyneiddiaeth. Gwthiwch am orchudd mwyaf a chewch gylchdroeon mawr, rhybuddio ymosodol, a pherchnogaeth lawn ym mhobman, sy’n amddiffyn y system tra’n malu’r bobl i lawr. Optimeiddiwch yn bur ar gyfer cysur yr ymatebydd a rydych chi’n mentro bylchau lle mae problem go iawn yn aros heb sylw. Datryswch ef nid trwy hollti’r gwahaniaeth ond trwy godi ansawdd: mae rhybuddion rhagorol, llawlyfrau gweithredu sy’n gweithio, a gwasanaethau parod yn caniatáu i gylchdro llai, tawelach orchuddio mwy o dir yn ddiogel. Y sefydliadau sy’n gweithredu orau fel arfer yw’r rhai y bipir eu hymatebwyr leiaf, oherwydd iddynt fuddsoddi mewn parodrwydd yn hytrach nag mewn dygnwch. Mae pob awr a dreulir yn tynnu rhybudd swnllyd neu’n trwsio llawlyfr gweithredu yn prynu’n ôl sawl awr o sylw dynol ac yn amddiffyn hygrededd y system gyfan.

Cwestiynau i’w trafod gyda’ch tîm

A fyddech chi’n bersonol yn fodlon cario’r cylchdro hwn am flwyddyn, a beth fyddech chi’n ei newid os yw’r ateb yn na? Mae’r cwestiwn hwn yn torri trwy haniaeth oherwydd ei fod yn gwneud y llwyth yn bersonol. Dewch â’r rhifau go iawn i’r sgwrs: sawl bipiad a daniodd y mis diwethaf, sawl un a laniodd ar ôl hanner nos neu ar benwythnos, a pha mor hir oedd yr amser cydnabod cyfartalog. Gofynnwch i bob person ar y cylchdro a yw’r siâp presennol yn un y gallant ei gynnal heb ofni eu wythnos ar-alwad, a gwrandewch am yr atebion tawel yn ogystal â’r rhai croch. Os yw’r ateb gonest mai dim ond oherwydd bod cwpl o arwyr yn amsugno’r gwaethaf ohono y mae’r cylchdro’n oroesadwy, rydych wedi darganfod breuder a fydd yn torri’r tro cyntaf i un ohonynt adael. Yr allbwn rydych ei eisiau yw rhestr gonkrit o newidiadau, boed yn bwll mwy, yn hollt dilyn-yr-haul, yn ostyngiad bipiadau nos, neu’n lanhad rhybuddio, gyda pherchennog a dyddiad ynghlwm wrth bob un.
Ar gyfer pob rhybudd a all bipio person dynol, allwch chi enwi’r weithred y disgwylir i’r ymatebydd ei chymryd? Nid yw’r rhan fwyaf o gylchdroeon erioed wedi archwilio hyn, ac mae’r ymarfer yn ddadlennol. Tynnwch y rhestr lawn o rybuddion bipio a, ar gyfer pob un, gofynnwch beth mae disgwyl i ymatebydd ei wneud pan fydd yn tanio a pha mor aml y taniodd heb arwain at unrhyw weithred go iawn y chwarter diwethaf. Mae rhybuddion sy’n methu’r prawf, y rhai na all neb gysylltu gweithred â nhw, neu sy’n ddibaid yn datrys eu hunain cyn i unrhyw un eu cyffwrdd, yn sŵn sy’n erydu ymddiriedaeth ym mhob rhybudd arall. Dewch â’r data cydnabod-i-weithredu os oes gennych chi, a byddwch yn barod i ddileu neu israddio’n ymosodol. Y nod yw llwybr bipio lle mae pob rhybudd yn gais gwirioneddol am help dynol, a dylai’r cyfarfod ddod i ben gyda rhestr rybuddion fyrrach, siarpach nag y dechreuodd.
Pan fydd peiriannydd newydd yn ymuno â’r cylchdro hwn, beth yn union sy’n eu paratoi, ac a ydych wedi profi bod hynny’n gweithio? Mae sefydlu ar gyfer ar-alwad yn aml yn cael ei gymryd yn ganiataol yn hytrach na’i ddylunio, ac mae’r bwlch yn dangos y tro cyntaf y bipir newydd-ddyfodiad ar ei ben ei hun i mewn i fethiant nad ydynt erioed wedi’i weld. Ewch trwy’r llwybr gwirioneddol y mae ymatebydd newydd yn ei gymryd: beth maen nhw’n ei gysgodi, pa lawlyfrau gweithredu maen nhw’n eu darllen, a oes unrhyw un wedi dilyn y llawlyfrau hynny’n ddiweddar i gadarnhau eu bod yn dal i weithio, a phwy maen nhw’n uwchgyfeirio ato pan fyddant yn sownd. Ceisiwch ddewis digwyddiad diweddar go iawn a gofyn a allai person newydd, wedi’i arfogi dim ond â’r llawlyfrau gweithredu a’r dangosfyrddau cyfredol, fod wedi’i ddatrys. Mae’r ateb gonest fel arfer yn datgelu dogfennaeth hen a signalau coll, sef yn union yr hyn y mae diwrnodau gêm yn bwriadu ei ddatgelu cyn i ddigwyddiad go iawn wneud hynny. Gadewch gyda charreg filltir barodrwydd wedi’i diffinio ar gyfer ar-alwad ac amserlen ar gyfer y diwrnodau gêm a fydd yn ei gadw’n onest.
Lle mae ein bipiadau y tu allan i oriau mewn gwirionedd yn glanio, ac a ydym yn fodlon newid staffio neu orchudd i amddiffyn cwsg pobl? Mae gan fipiadau nos a phenwythnos gost iechyd y mae cyfrif bipiadau crai yn ei guddio, felly gall cylchdro sy’n edrych yn oddefadwy ar gyfartaledd fod yn dinistrio ychydig o bobl yn dawel sy’n digwydd dal y methiannau 3 y bore. Dewch â dadansoddiad o fipiadau yn ôl awr a diwrnod yr wythnos, wedi’i hollti yn ôl gwasanaeth ac ymatebydd, a chwiliwch am y crynhoad yn hytrach na’r cymedr. Mae’r ystyriaeth gystadleuol yn real: mae gorchudd dilyn-yr-haul angen staff mewn mwy nag un rhanbarth ac yn ychwanegu baich trosglwyddo, tra bod cylchdro lleol bach yn symlach ond yn gadael rhywun yn berchen ar y nosweithiau. Penderfynwch yn fwriadol ai’r ateb yw cylchdro ail-ranbarth, tîm platfform canolog yn cymryd haenau y tu allan i oriau, blociau nos byrrach gydag amser adfer gwarantedig, neu lanhad rhybuddio sy’n dileu’r sŵn dros nos wrth ei ffynhonnell. I weithredwyr menter a llywodraeth, triniwch ddyletswydd gofal i staff ar-alwad fel rhwymedigaeth ffurfiol gyda pherchennog a metrig a adroddir, nid slogan lles, oherwydd gall reoleiddiwr neu gyngor gweithwyr ofyn i chi ei ddangos yn y pen draw.
A yw ein hadolygiad parodrwydd cynhyrchu yn sgwrs wirioneddol am sut mae’r gwasanaeth yn methu, neu’n rhestr wirio a chwaraeir i glirio’r giât? Dim ond os yw’n newid yr hyn sy’n cael ei lansio y mae adolygiad parodrwydd yn talu ar ei ganfed, a’r modd methu yw ffurflen a lenwir y prynhawn cyn lansio i fodloni proses nad oes neb yn ei chredu. Dewch â’r adolygiadau diweddaraf a gwblhawyd a gofynnwch beth ddaliodd pob un mewn gwirionedd: llawlyfr gweithredu coll, ail-rolio heb ei brofi, rhybudd na daniodd erioed, neu ddim byd o gwbl. Mae’r tensiwn rhwng cyflymder lansio a thrylwyredd gweithredol, a bydd adolygiad sy’n teimlo fel biwrocratiaeth yn cael ei chwarae tra bydd un sy’n datgelu moddau methiant go iawn yn cael ei ddigio nes y tro cyntaf y mae’n achub noson rhywun. Penderfynwch pwy sy’n rhedeg yr adolygiad, a yw’n rhywun y tu allan i’r tîm adeiladu, a pha dystiolaeth, megis methiant dibyniaeth wedi’i chwistrellu neu lawlyfr gweithredu y mae dieithryn wedi’i ddilyn, sy’n cyfrif fel pasio. Mewn lansiadau menter a llywodraeth, cadwch yr adolygiad a gwblhawyd fel arteffact archwilio a’i gysylltu â phrofi gwytnwch Pennod 9.6, oherwydd bod gwasanaeth sy’n wynebu dinasyddion, sy’n aflonydd, ac yn methu’n gyhoeddus, yn costio ymddiriedaeth na all unrhyw ail-rolio ei adfer.
Lle mae “chi sy’n ei adeiladu, chi sy’n ei redeg” yn ein gwasanaethu’n wirioneddol, a lle mae’n greulon yn dawel i dîm nad ydym wedi’i adnoddi i redeg ei wasanaeth? Mae perchnogaeth lawn yn creu’r ddolen adborth sy’n gwneud i adeiladwyr drwsio rhybuddion swnllyd a dylunio ar gyfer gweithredadwyedd, ond wedi’i gorfodi ar dîm rhy fach i staffio cylchdro dyngarol mae’n dod yn beiriant llosgi allan araf wedi’i wisgo fel atebolrwydd. Dewch â’r map o ba dimau sy’n berchen ar ba bageri, pa mor fawr yw pob cylchdro mewn gwirionedd unwaith y byddwch chi’n tynnu’r bobl nad ydynt byth yn cymryd bipiad caled, a pha blatfform, offer, a hyfforddiant sydd gan bob tîm i redeg gweithrediadau’n dda. Mae’r tyniad cystadleuol rhwng egwyddor lân perchnogaeth gyffredinol a’r realiti blêr bod angen i rai haenau gael tîm SRE neu blatfform canolog i gyd-berchnogi’r gwaith dibynadwyedd anoddaf neu ddarparu gorchudd y tu allan i oriau. Yr allbwn rydych ei eisiau yw dosbarthiad gonest o bob gwasanaeth yn berchen yn llawn, cyd-berchen, neu wedi’i orchuddio’n ganolog, gyda’r bwlch adnoddau wedi’i enwi ar gyfer unrhyw dîm rydych yn gofyn iddo redeg rhywbeth na all ei gynnal. I sefydliad mawr neu gyhoeddus, ychwanegwch amseroedd arwain caffael a recriwtio ar gyfer y gefnogaeth platfform a’r pennau staff y mae perchnogaeth ddyngarol yn eu tybio, oherwydd bod tîm na allwch ei staffio yn y ffenestr berthnasol yn un rydych yn ei osod i fethu.

Lens sector

Cwmni newydd. Gyda llond llaw o beirianwyr, mae pawb ar-alwad ac nid oes lle i gylchdro arwrol guddio ynddo. Treuliwch eich amser prin ar y ddau newid sy’n talu ar ei ganfed gyflymaf: dilëwch rybuddion seiliedig ar achosion a bipiwch ddim ond ar gwpl o SLOs sy’n olrhain eich llif craidd, a chysylltwch lawlyfr gweithredu un dudalen o bob rhybudd sy’n weddill. Hepgorwch offer cywrain a dilyn-yr-haul; bydd taenlen a rennir, uwchgyfeirio awtomatig o’r cynradd i’r eilaidd, a rheol galed bod noson wael yn prynu’r bore wedyn i ffwrdd yn eich cario ymhellach nag unrhyw bryniant platfform.

Busnes bach. Mae’n debyg nad oes gennych SRE penodedig ac ni allwch staffio cylchdro nos, felly pwyswch ar yr hyn a brynwch yn hytrach na’r hyn a adeiladwch. Ffafriwch wasanaethau a chynnal a reolir y mae eu darparwr yn cario’r bipiadau seilwaith dwfn, a defnyddiwch declyn bipio a gynhelir yn hytrach na chodi uwchgyfeirio eich hun. Fframiwch barodrwydd fel rhestr wirio fer a llond llaw o rybuddion ystyrlon wedi’u clymu wrth yr hyn y byddai cwsmer yn sylwi arno, a byddwch yn onest na ddylai rhai gwasanaethau, yn syml, bipio person dynol dros nos pan fyddai tocyn bore’n gwneud y tro.

Menter. Y broblem yw cysondeb ar draws llawer o dimau: adolygiad parodrwydd cynhyrchu a rennir, polisi bipio cyffredin, ac ystorfa llawlyfrau gweithredu mewn rheolaeth fersiynau fel bod peiriannydd sy’n symud rhwng timau’n deall y system ar-alwad ar unwaith. Gwnewch iechyd ar-alwad yn fetrig a lywodraethir gyda throthwyon bipiadau y tu allan i oriau sy’n sbarduno adolygiad, safoni uwchgyfeirio a throsglwyddo fel na fydd unrhyw fipiad yn disgyn yn dawel, a gadewch i dîm platfform canolog gyd-berchnogi’r haenau anoddaf. Rheolwch bortffolio’r cylchdroeon fel y rheolwch bortffolio’r gwasanaethau, gyda data ar lafur diflas, llwyth bipiadau, a risg llosgi allan yn bwydo i mewn i adolygiad gweithredol rheolaidd.

Llywodraeth. Mae rheolau caffael, tryloywder, a dyletswydd gofal yn siapio’r trefniant. Triniwch iechyd staff ar-alwad fel gofyniad ffurfiol, archwiliadwy, a lle mae staffio dros nos yn gyfyngedig, contractiwch bartner gweithrediadau dilyn-yr-haul fel nad oes unrhyw was sifil yn cael ei bipio’n rheolaidd am 3 y bore. Cadwch bob adolygiad parodrwydd a gwblhawyd fel arteffact archwilio, ysgrifennwch lawlyfrau gweithredu i’w gweithredu gan ymatebydd na adeiladodd y system, gan na fydd y bobl sy’n ei gweithredu mewn pum mlynedd yn awduron iddi, ac ymarferwch y brig tymhorol gyda diwrnodau gêm cyn i ddinasyddion ei gyfarfod go iawn.

Enghreifftiau

Cwmni newydd. Mae cwmni newydd o ddeuddeg o bobl yn lansio ei gynnyrch cyntaf sy’n cael ei dalu amdano ac yn rhoi’r chwe pheiriannydd i gyd ar gylchdro wythnosol gyda chynradd ac eilaidd. Yn y mis cyntaf mae’r pager yn tanio bob nos, y rhan fwyaf ar gyfer rhybuddion CPU a disg sy’n hunan-ddatrys, ac mae dau beiriannydd yn dawel yn dechrau chwilio am swydd. Mae’r tîm yn stopio ac yn ailadeiladu: maent yn dileu pob rhybudd seiliedig ar achos, yn diffinio dwy SLO ar gyfer talu a chwilio, ac yn bipio dim ond ar losgi cyllideb gwallau. Mae bipiadau’n gostwng o oddeutu deugain yr wythnos i dri. Maent yn ychwanegu rhestr wirio parodrwydd un dudalen y mae’n rhaid i bob gwasanaeth newydd ei phasio ac yn cysylltu pob llawlyfr gweithredu’n uniongyrchol o’i rybudd. Mae ar-alwad yn newid o fod yn rheswm i bobl adael i fod yn rhan reolaidd o’r swydd, a gwnaethant hynny gyda thaenlen a disgyblaeth yn hytrach nag offeryn drud.

Menter. Mae cwmni taliadau byd-eang yn rhedeg cannoedd o wasanaethau o dan fodel “chi sy’n ei adeiladu, chi sy’n ei redeg”, wedi’i gefnogi gan dîm platfform canolog sy’n darparu’r system bipio, y broses adolygu parodrwydd, ac ystorfa llawlyfrau gweithredu a rennir mewn rheolaeth fersiynau. Mae pob gwasanaeth yn pasio adolygiad parodrwydd cynhyrchu wedi’i ddogfennu cyn lansio, yn cynnwys SLOs, rhybuddio, llawlyfrau gweithredu, capasiti, ac ail-rolio. Mae iechyd ar-alwad yn fetrig a olrheinir: mae timau y mae eu bipiadau y tu allan i oriau’n fwy na throthwy’n sbarduno adolygiad awtomatig, ac mae’r tîm platfform yn cynnig cyd-berchnogi’r gwaith dibynadwyedd nes bod y llwyth yn dod i lawr. Mae diwrnodau gêm yn rhedeg bob chwarter yn erbyn chwistrelliad methiant realistig. Gan fod y safon yn unffurf a’r offer yn cael eu rhannu, gall peiriannydd symud rhwng timau a deall y system ar-alwad ar unwaith, a gall arweinyddiaeth weld, fesul tîm, a yw’r llwyth dynol yn gynaliadwy.

Llywodraeth. Mae asiantaeth dreth genedlaethol yn gweithredu system ffeilio gyda brigau tymhorol caled a rhwymedigaeth gyfreithiol i aros ar gael i ddinasyddion. Gan fod y gweithlu wedi’i grynhoi mewn un parth amser a bod staffio dros nos yn gyfyngedig, mae’r asiantaeth yn contractio trefniant dilyn-yr-haul gyda phartner gweithrediadau fel nad oes unrhyw was sifil yn cael ei bipio’n rheolaidd yng nghanol y nos, ac mae’n trin iechyd a dyletswydd gofal staff ar-alwad fel gofyniad ffurfiol. Mae pob newid gwasanaeth yn pasio adolygiad parodrwydd gweithredol cyn ei ddefnyddio, gyda’r rhestr wirio’n cael ei chadw ar gyfer archwiliad. Ysgrifennir llawlyfrau gweithredu i’w gweithredu gan ymatebydd na adeiladodd y system, oherwydd ni fydd y bobl sy’n ei rhedeg mewn pum mlynedd yn bobl a’i hysgrifennodd. Yn ystod tymor ffeilio mae’r asiantaeth yn rhedeg diwrnodau gêm yn erbyn y senario llwyth brig, fel bod yr ymatebwyr yn cyfarfod yr ymchwydd mewn ymarfer cyn iddynt ei gyfarfod go iawn.

Achos busnes: cymhellion, ROI, a TCO

Mae’r enillion ar barodrwydd gweithredol ac ar-alwad dyngarol yn ymddangos mewn dau lyfr cyfrifon: dibynadwyedd y system a chadw staff y tîm. Ar ochr dibynadwyedd, mae gwasanaethau sy’n pasio adolygiad parodrwydd ac yn cario rhybuddion seiliedig ar symptomau’n methu’n llai aml ac yn adfer yn gyflymach, oherwydd bod y llawlyfr gweithredu’n bodoli, mae’r rhybudd yn ystyrlon, ac mae’r ymatebydd wedi’i ymarfer. Mae amser cydnabod cyfartalog ac amser adfer cyfartalog ill dau’n gostwng pan fydd bipiad yn cyrraedd person parod gyda llawlyfr gweithredu wedi’i gysylltu yn hytrach nag un dryslyd yn hela am gyd-destun. Ar yr ochr ddynol, mae ar-alwad yn achos blaenllaw o ymadawiadau staff peirianneg, ac mae disodli peiriannydd uwch yn costio lluosrif mawr o’r buddsoddiad y byddai wedi’i gymryd i drwsio’r cylchdro. Mae llosgi allan galwedigaethol, y cyflwr o flinder cronig yn y gweithle y mae Sefydliad Iechyd y Byd yn ei gydnabod fel ffenomen alwedigaethol, yn ddrud yn union oherwydd ei fod yn cymryd eich pobl fwyaf profiadol, y rhai sy’n deall y system, ac yn eu gyrru allan.

Mae’r gost i’w fabwysiadu’n bennaf yn un-tro ac yn gymedrol. Rydych yn ysgrifennu rhestr wirio parodrwydd, yn mudo rhybuddion o achosion i symptomau, yn rhoi llawlyfrau gweithredu mewn rheolaeth fersiynau, ac yn sefydlu metrigau iechyd ar-alwad. Y gost gylchol yw disgyblaeth adolygu rhybuddion, rhedeg diwrnodau gêm, ac anrhydeddu amserlennu dyngarol. Mae cost esgeulustod yn cyfansoddi’n dawel: mae rhybuddion swnllyd yn magu blinder, mae blinder yn magu digwyddiadau go iawn a gollwyd ac ymadawiadau, ac mae pob ymadawiad yn cymryd gwybodaeth weithredol gydag ef, sy’n codi’r llwyth ar y rhai sy’n aros. I wneud yr achos i arweinyddiaeth, cysylltwch iechyd ar-alwad â metrigau y maent eisoes yn eu gwylio: amlder a hyd digwyddiadau, amser cydnabod, ymadawiadau staff heb eu cynllunio, a’r duedd bipiadau y tu allan i oriau. Mae cylchdro y mae ei fipiadau y tu allan i oriau’n gostwng wrth i’r system dyfu yn dystiolaeth uniongyrchol bod eich buddsoddiad dibynadwyedd yn gweithio ac y bydd eich peirianwyr yma o hyd y flwyddyn nesaf.

Gwrth-batrymau a pheryglon

Y cylchdro arwrol: mae dau neu dri pherson yn dawel yn amsugno pob bipiad caled, felly mae’r amserlen yn edrych yn iawn ar bapur ac yn chwalu’r eiliad y bydd un ohonynt yn gadael.
Bipio ar achosion: rhybuddio ar CPU, cof, a disg yn hytrach na symptomau gweladwy i ddefnyddwyr, gan lethu ymatebwyr â bipiadau nad oedd erioed angen person dynol.
Blinder rhybuddion wedi’i oddef: rhybuddion sy’n hysbys yn swnllyd yn cael eu gadael yn y llwybr bipio am fisoedd oherwydd bod eu dileu’n teimlo’n risg, nes bod ymatebwyr yn anwybyddu popeth.
Pydredd llawlyfrau gweithredu: dogfennau a ysgrifennwyd unwaith wrth lansio, byth wedi’u diweddaru, ac yn anghywir yn hyderus pan fydd ymatebydd blinedig yn eu dilyn am 3 y bore.
Perchnogaeth heb gefnogaeth: gorfodi “chi sy’n ei adeiladu, chi sy’n ei redeg” ar dîm rhy fach i staffio cylchdro neu heb y platfform a’r offer i’w redeg yn ddyngarol.
Theatr parodrwydd: rhestr wirio adolygu wedi’i llenwi i basio’r giât yn hytrach nag i wynebu’n wirioneddol sut mae’r gwasanaeth yn methu.
Lansio a gadael: anfon gwasanaeth heb gylchdro, heb rybuddion, a heb lawlyfrau gweithredu, yna darganfod y bwlch yn ystod y toriad cyntaf.
Llwyth heb ei fesur: dim data ar fipiadau fesul shifft na bipiadau y tu allan i oriau, felly mae llosgi allan yn anweledig nes bod pobl yn gadael.
Bipiad cyntaf, dim ymarfer: rhoi peiriannydd newydd ar-alwad heb gysgodi a heb ddiwrnod gêm, yna ymddwyn wedi synnu pan fyddant yn rhewi.

Model aeddfedrwydd

Lefel 1, Cychwyn: Mae ar-alwad yn anffurfiol ac yn adweithiol. Mae ychydig o bobl yn cael eu ffonio pan fydd pethau’n torri, mae rhybuddion yn tanio ar achosion ac yn sŵn yn bennaf, mae llawlyfrau gweithredu ar goll neu’n hen, mae gwasanaethau’n lansio heb wiriad parodrwydd, ac nid oes neb yn mesur y llwyth dynol nes bod rhywun yn llosgi allan neu’n gadael.
Lefel 2, Datblygu: Mae arferion sylfaenol yn ymddangos ond yn amrywio yn ôl tîm. Mae gan rai cylchdroeon gynradd, eilaidd, ac uwchgyfeirio diffiniedig, mae rhai rhybuddion wedi’u tiwnio a rhai llawlyfrau gweithredu wedi’u hysgrifennu, ac mae rhestr wirio parodrwydd yn bodoli ond yn cael ei chymhwyso’n anghyson. Efallai y caiff bipiadau eu cyfrif ar y timau sy’n trafferthu, mae bipiadau nos yn gyffredin, ac mae sefydlu ar gyfer ar-alwad yn cael ei ddyfeisio yn hytrach na’i ddylunio.
Lefel 3, Safoni: Mae adolygiadau parodrwydd yn gam wedi’i ddogfennu cyn lansio, wedi’i orfodi ar draws timau. Mae bipio’n seiliedig ar symptomau ac SLOs yn ôl polisi cyffredin, mae llawlyfrau gweithredu’n byw mewn rheolaeth fersiynau ac yn cysylltu o rybuddion, mae sefydlu’n cynnwys cysgodi a diwrnodau gêm, mae trosglwyddiadau’n dilyn fformat strwythuredig, ac mae uwchgyfeirio’n ddigon unffurf fel bod peiriannydd sy’n symud rhwng timau’n adnabod y system ar unwaith.
Lefel 4, Rheoli: Mae ar-alwad yn cael ei fesur a’i reoli yn erbyn llinellau sylfaen. Mae bipiadau fesul shifft, cyfran y tu allan i oriau, amser cydnabod, amlder uwchgyfeirio, a chymhareb cydnabod-i-weithredu’n cael eu holrhain fesul tîm a’u cymharu â thargedau, felly mae cylchdro sy’n drifftio tuag at losgi allan yn weladwy cyn i bobl adael yn hytrach nag wedyn. Mae trothwyon yn sbarduno adolygiad, mae ansawdd rhybuddion yn cael ei archwilio ar dystiolaeth o ba fipiadau a arweiniodd at weithred go iawn, a chaiff penderfyniadau staffio a pherchnogaeth eu gyrru gan y data yn hytrach na chan anecdot.
Lefel 5, Cydgordio: Mae iechyd ar-alwad yn ganlyniad a wella’n barhaus wedi’i integreiddio ar draws y sefydliad. Mae tueddiadau bipiadau a thu allan i oriau’n gostwng wrth i’r system dyfu, caiff llafur diflas ei awtomeiddio i ffwrdd yn systematig, mae dilyn-yr-haul neu gyfwerth yn amddiffyn cwsg, mae diwrnodau gêm a chwistrellu methiant yn rheolaidd, ac mae’r sefydliad yn addasu perchnogaeth, gorchudd, a safonau parodrwydd wrth iddo ddysgu o bob shifft, gan ailgydbwyso’r llwyth ar draws timau a rhanbarthau wrth i’r darlun risg newid.

Syniadau ar gyfer trafodaeth

Beth yw eich cymhareb gyfredol o fipiadau a arweiniodd at weithred go iawn o gymharu â bipiadau a ddatryswyd eu hunain, a beth fyddai ei angen i’w fesur?
Pe bai eich ymatebydd mwyaf gwybodus yn gadael yfory, pa wasanaethau fyddai’n dod yn anniogel i’w gweithredu, a pham?
Lle mae “chi sy’n ei adeiladu, chi sy’n ei redeg” yn eich gwasanaethu’n dda, a lle mae’n greulon yn dawel i dîm heb ddigon o adnoddau?
Pryd wnaethoch chi ddiwethaf wylio peiriannydd newydd yn dilyn un o’ch llawlyfrau gweithredu dan amodau realistig, a beth dorrodd?
A yw eich bipiadau y tu allan i oriau’n tueddu i fyny neu i lawr dros y pedwar chwarter diwethaf, ac a oes unrhyw un yn berchen ar y rhif hwnnw?
Pa eitem adolygiad parodrwydd, pe baech yn ei gorfodi’n llym, a fyddai wedi atal eich lansiad gwael mwyaf diweddar?

Prif gasgliadau

Penderfynir parodrwydd ar-alwad cyn unrhyw ddigwyddiad, gan ansawdd eich rhybuddion, llawlyfrau gweithredu, a chylchdro, nid gan arwriaeth yn ystod y toriad.
Bipiwch berson dynol dim ond ar gyfer problemau sy’n frys, y gellir gweithredu arnynt, ac yn weladwy i ddefnyddwyr; rhybuddiwch ar symptomau ac SLOs, a chyfeiriwch bopeth arall at docynnau a dangosfyrddau.
Dyluniwch gylchdroeon ar gyfer pobl sydd â bywydau: pyllau digon mawr, dilyn-yr-haul lle bo modd, uwchgyfeirio awtomatig, ac amser adfer wedi’i anrhydeddu.
Profwch fod gwasanaethau’n barod cyn lansio gydag adolygiad parodrwydd cynhyrchu, cadwch lawlyfrau gweithredu mewn rheolaeth fersiynau ac wedi’u cysylltu o rybuddion, ac ymarferwch gyda diwrnodau gêm.
Mesurwch iechyd ar-alwad, yn enwedig bipiadau y tu allan i oriau ac amser cydnabod, a gyrrwch y llwyth i lawr trwy dorri llafur diflas a sŵn yn hytrach na gofyn i bobl ddioddef mwy.

Cyfeiriadau a darllen pellach

Betsy Beyer, Chris Jones, Jennifer Petoff, a Niall Richard Murphy (goln.), Site Reliability Engineering: How Google Runs Production Systems
Betsy Beyer, Niall Richard Murphy, David K. Rensin, Kent Kawahara, a Stephen Thorne (goln.), The Site Reliability Workbook: Practical Ways to Implement SRE
Rob Ewaschuk, “My Philosophy on Alerting,” yn atodiad Site Reliability Engineering
John Allspaw a Jesse Robbins (goln.), Web Operations: Keeping the Data on Time
Nicole Forsgren, Jez Humble, a Gene Kim, Accelerate: The Science of Lean Software and DevOps
Gene Kim, Jez Humble, Patrick Debois, a John Willis, The DevOps Handbook
Michael T. Nygard, Release It! Design and Deploy Production-Ready Software
Sefydliad Iechyd y Byd, ICD-11, cofnod ar losgi allan fel ffenomen alwedigaethol