Mellan 70 och 79 procent av äldre moderniseringsprojekt misslyckas med att uppnå sina uttalade mål. Den statistiken förekommer i varje artikel i ämnet, och sedan fortsätter varje artikel med att erbjuda samma fem generiska förklaringar: dålig intressentsamordning, underskattning av budget, omfattningsförskjutning, felaktiga leverantörsval och att teknik behandlas som lösningen på det som egentligen är ett affärsproblem. Dessa förklaringar är inte felaktiga. De är inte heller efterforskningar. De är diagnoser ställda utifrån program som gick fel, utan tillgång till interna bevis som skulle avslöja det specifika, orsakssambandet, åtgärdbara felet i centrum för varje fall.
En obduktion är en strukturerad analys av vad som hände, vad som orsakade det och vad som specifikt var grundorsaken, det fel som, om det hade korrigerats, skulle ha förändrat resultatet. Obduktioner är viktiga eftersom de skiljer mellan symptom och orsaker. Budgetöverskridande är ett symptom. Grundorsaken till budgetöverskridandet var att omfattningsuppskattningen byggdes på en ofullständig förståelse av det system som ersattes, eftersom den strukturella analysen som skulle ha avslöjat den verkliga omfattningen aldrig gjordes. Att fixa budgetprocessen åtgärdar inte grundorsaken. Att göra den strukturella analysen innan man gör ett omfattningsåtagande gör det.
Extrahera affärslogiken först
SMART TS XL producerar det faktiska programantalet, beroendegrafen och procentandelen död kod innan någon moderniseringsbudget godkänns.
TA REDA PÅ MER…Vad en verklig modernisering efter döden innehåller
De efterföljande utvärderingar som förekommer i projektavslutningsdokument och konsultretrospektiver innehåller vanligtvis följande: en tidslinje över viktiga beslut, en lista över vad som överskred budget och med hur mycket, ett avsnitt om "lärdomar" som rekommenderar bättre kommunikation och intressentengagemang, och en slutsats att teamet gjorde sitt bästa under svåra omständigheter. Dessa dokument tjänar organisatoriska syften, avslutar redovisningen och skyddar ryktet, men de identifierar sällan den specifika, tekniska, adresserbara grundorsaken som skulle ha förändrat resultatet.
En obduktion som är användbar för nästa program inkluderar:
Uttalat mål och faktiskt resultat. Vad programmet utformades för att uppnå och vad det faktiskt levererade, i specifika, mätbara termer. Inte ”förbättra flexibiliteten” utan ”ersätta systemet för skadehantering med en molnbaserad plattform som minskar cykeltiden för skadeanmälningar från 8 dagar till 2 dagar”. Skillnaden mellan uttalat mål och faktiskt resultat är utgångspunkten för rotorsaksanalys.
Omedelbar orsak kontra rotorsak. Den omedelbara orsaken är vad obduktionen vanligtvis visar: cutovern misslyckades, datamigreringen gav felaktiga resultat, testmiljön representerade inte produktion. Rotorsaken är varför: cutovern misslyckades eftersom beroendemappningen var felaktig och 14 system som var beroende av den ersatta applikationen inte hade uppdaterats; datamigreringen gav felaktiga resultat eftersom schemat hade 40 odokumenterade varianter som inte fanns i migreringsspecifikationen; testmiljön representerade inte produktion eftersom produktionsmiljöns konfiguration inte hade dokumenterats.
De bevis som saknades. Vilken specifik information, om den hade funnits tillgänglig vid tidpunkten för det avgörande beslutet, skulle ha ändrat det beslutet? Denna fråga identifierar misslyckandet i underrättelseprocessen, den organisatoriska och analytiska process som skulle producera korrekt information om det system som moderniserades.
Vad den strukturella analysen skulle ha funnit. För varje moderniseringsfel med en rotorsak på kodnivå, vilket är de flesta av dem, bör efterstudien dokumentera vad en grundlig strukturell analys av det befintliga systemet före projektet skulle ha avslöjat: det faktiska programantalet, beroendediagrammet, dataschemavarianterna, andelen död kod, den inbäddade affärslogiken. Detta är det kontrafaktiska som ger efterstudien dess praktiska värde.
Grundorsak 1: Oupptäckt komplexitet
Mönstret: Moderniseringsteamet uppskattar omfattningen baserat på dokumenterade systemkomponenter. Det faktiska systemet innehåller mer komplexitet än vad dokumentationen beskriver. Omfattningsuppskattningen är felaktig vid tidpunkten för genomförandet, när det är som dyrast att ändra den.
TSB Bank-fallet (2018). TSB Banks IT-migrering flyttade kundkonton från Lloyds Banking Group-plattformen till ett nytt Proteo4UK-system. 1.9 miljoner kunder blev utelåsta från sina konton. Migreringen hade tagit tre års förberedelser. Den omedelbara orsaken var själva cutover-händelsen. Grundorsaken, som dokumenterats i Slaughter och Mays oberoende granskning, var att migreringens omfattning inte korrekt återspeglade komplexiteten i kunddata, antalet kontotyper, produktvarianter och edge-fall i kundpopulationen. Systemet som migrerades från hade samlat på sig årtionden av produktutveckling; systemet som migrerades till hade inte validerats mot hela omfattningen av vad det mottog.
Misslyckandet med den strukturella analysen: Ingen känd kontoinventering kartlade heltäckande hela omfattningen av kontotyper och produktvarianter innan migreringsdesignen slutfördes. Migreringsdesignen byggde på vad dokumentationen sa att det fanns, inte på vad systemet innehöll.
Kodnivåmotsvarigheten: Ett COBOL-baserat kärnbanksystem där dokumentationen beskriver 12 kontotyper och de faktiska FD-posterna i källkoden definierar 47 kontotyper, med REDEFINES-varianter för varje, innehåller mer komplexitet än någon migreringsdesign byggd från dokumentationen. Den strukturella analysen som läser FD-posterna och kopieböckerna hittar 47. Migreringsdesignen byggd från dokumentationen hanterar 12. Gapet upptäcks under övergången.
Grundorsak 2: Fel vid extrahering av affärslogik
Mönstret: Ersättningssystemet är utformat utifrån en specifikation. Specifikationen fångar inte hela affärslogiken för det befintliga systemet. Ersättningssystemet beter sig annorlunda i de fall som specifikationen inte beskrev, vilket är fall som det befintliga systemet hanterade korrekt.
FBI:s virtuella ärendehanteringssystem (170 miljoner dollar övergavs, 2005). FBI:s projekt Virtual Case File var avsett att ersätta ett pappersbaserat ärendehanteringssystem med en digital plattform. Efter 170 miljoner dollar i utvecklingsarbete övergavs systemet utan driftsättning. GAO:s efterkontroll identifierade otillräckliga krav som den primära orsaken. Den djupare grundorsaken: kraven härleddes från specifikationen av vad systemet borde ha varit, inte från en systematisk analys av vad den befintliga processen faktiskt gjorde. Ärenden som hanterades genom informella processer, ackumulerade lösningar och institutionell kunskap fångades inte upp i kraven. Ersättaren skulle inte ha kunnat hantera dem.
Misslyckandet med strukturell analys: Ingen systematisk analys av den befintliga processens faktiska beteende, motsvarande statisk analys för ett programvarusystem, utfördes innan kraven färdigställdes. Kraven var ett designdokument, inte ett utdrag av befintligt beteende.
Motsvarigheten på kodnivå: Ett COBOL-program med 847 villkorliga grenar i sin EVALUATE-sats, som representerar 847 specifika affärsregelvillkor som ackumulerats under trettio år av regeländringar, kan inte ersättas av ett system som specificerats från dokumentation som beskriver 20 villkor. Den strukturella analysen som räknar EVALUATE WHEN-klausulerna hittar 847. Ersättningen som specificerades från dokumentationen implementerar 20. De återstående 827 upptäcks när verkliga produktionsdata stöter på villkor som det nya systemet inte hanterar.
Grundorsak 3: Beroendeidentifiering mitt i körning
Mönstret: Migreringsplanen bygger på antagandet att systemet som ersätts har en specifik uppsättning beroenden. Under migreringskörningen upptäcks ytterligare beroenden som inte fanns med i planen. Beroendena upptäcks vid värsta möjliga tidpunkt, efter att tidslinjen har fastställts, resurser har allokerats och kurskorrigering är dyrast.
Queensland Healths lönesystem (2010). Ersättningen av Queensland Healths lönesystem skapade en situation där 35 000 sjukhusanställda fick felaktiga löner, vissa underbetalda, vissa överbetalda, i månader efter driftsättningen. Den omedelbara orsaken var komplexiteten i vårdpersonalens löneregler: skiftstraff, ersättningar, övertidsberäkningar och variationer i anställningsvillkor som ersättningssystemet inte hade implementerat korrekt. Grundorsaken var att hela omfattningen av lönereglernas komplexitet, 24 000 olika löneregler, som det framkom, inte var känd vid tidpunkten för projektets omfattning. Projektet godkändes på en uppskattning byggd på delvis kunskap om lönereglernas inventering.
Misslyckandet med strukturanalysen: De 24 000 löneregler som styrde Queensland Health-arbetarnas ersättning kodades in i det befintliga lönesystemets bearbetningslogik. Att extrahera och validera hela regelförteckningen innan ersättningen utformades skulle ha avslöjat omfattningen korrekt. Projektets omfattning fastställdes utan denna förteckning.
Motsvarigheten på kodnivå: Ett COBOL-löneprogram vars komplexitet verkar hanterbar utifrån dokumentationen men vars PROCEDURE DIVISION innehåller 24 000 regelvillkor fördelade över hundratals stycken och avsnitt kan inte ersättas av ett system som utformats baserat på en granskning av policydokumentationen. Den strukturella analysen som kartlägger hela regelinventeringen, varje IF-villkor, varje EVALUATE-gren, varje COMPUTE-formel, producerar specifikationen. Specifikationen som produceras från policydokument producerar de 35 000 felaktiga lönepaketen.
Grundorsak 4: Fel i datamigreringsomfång
Mönstret: Datamigreringen är utformad baserat på det dokumenterade schemat. Det faktiska schemat innehåller varianter, tillägg och historiska datastrukturer som inte finns i dokumentationen. Migreringen konverterar det dokumenterade schemat korrekt. Data i odokumenterade schemavarianter migreras inte eller migreras felaktigt.
Moderniseringen av Veterans Affairs EHR (livscykelkostnad på 10 till 37 miljarder dollar). VA:s modernisering av elektroniska patientjournaler, avsedd att ersätta VistA med ett kommersiellt COTS-system (Cerner), har utökats från en uppskattad livscykelkostnad på 10 till 37 miljarder dollar, med endast en bråkdel av de 171 planerade vårdcentralerna som driftsatts efter åratal av arbete. GAO:s bedömning anger konsekvent utmaningar med datamigrering som en central bidragande faktor: patientdata i VistA som ackumulerats under årtionden med hjälp av lokalt utvecklade scheman, datainmatningskonventioner och klinisk terminologi som skilde sig åt mellan vårdcentraler. Cerner-systemets datamodell tillgodose inte alla varianter, vilket skapade problem med datakvaliteten som påverkade den kliniska vården.
Misslyckandet med strukturell analys: Den fullständiga inventeringen av schemavarianter över 171 VistA-implementeringar, som var och en hade utvecklats lokalt under årtionden, var inte komplett innan migreringsdesignen slutfördes. Migreringsdesign som inte tar hänsyn till den fullständiga schemainventeringen kan inte migrera alla data korrekt.
Motsvarigheten på kodnivå: Ett VSAM-filsystem där postlayouten har utvecklats genom 40 år av REDEFINES-tillägg, med 47 dokumenterade layoutvarianter plus ett okänt antal odokumenterade som endast syns i COBOL FD-posterna, kan inte migreras helt av en process som är utformad från de 47 dokumenterade varianterna. Den strukturella analysen av FD-posterna och programlogiken hittar alla varianter. Migreringen som är utformad från dokumentationen missar de varianter som dokumentationen missade.
Grundorsak 5: Död kod räknas in i omfattningen
Mönstret: Omfattningsuppskattningen räknar alla program i portföljen. En betydande andel av dessa program har inga inkommande anrop från någon produktionsexekveringsväg, de är död kod. Migreringsarbetet är allokerat mot hela antalet, inklusive död kod. Tid och budget läggs på att migrera program som aldrig kommer att köras i den nya miljön.
Denna grundorsak är mindre dramatisk än de andra, den leder inte till felaktiga löneutbetalningar eller felaktiga löneutbetalningar, men den är genomgripande och dyr totalt sett. Branscherfarenhet visar konsekvent att 15–25 procent av programmen i stora äldre portföljer inte kan nås från någon produktionsväg. En COBOL-portfölj med 4 000 program har vanligtvis 600–1 000 döda program. Att migrera dessa program till vilken kostnad som helst per program representerar en betydande, undvikbar kostnad.
Felet i den strukturella analysen: Programinventarieräkningar som kommer från PDS-medlemslistor eller CMDB-poster räknar allt som finns. Nåbarhetsanalys som spårar varje produktionsexekveringsväg från varje JCL-jobbström identifierar endast de program som faktiskt körs. Skillnaden är minskningen av dödkodsomfånget som var tillgängligt men inte utnyttjat.
Den gemensamma tråden: Projekt som startade utan att veta vad de ersatte
Om man läser igenom dessa fem kategorier av grundorsaker framträder ett mönster i samtliga fall: programmet gjorde sina viktigaste åtaganden, omfattning, tidslinje, tillvägagångssätt och budget, innan en grundlig strukturell analys av det system som skulle ersättas genomfördes.
TSB Bank åtog sig en migreringsdesign innan den fullständiga kundkontoinventeringen var känd. FBI åtog sig kraven innan den fullständiga regeluppsättningen extraherades från den befintliga processen. Queensland Health åtog sig en projektomfattning innan den fullständiga löneregelinventeringen var känd. VA åtog sig en migreringsdesign innan den fullständiga VistA-schemavariantinventeringen var känd. Organisationer som åtar sig omfattningsuppskattningar räknar regelbundet alla program, inklusive oåtkomliga, innan analys av död kod minskar omfattningen.
De flesta efterföljande undersökningar av misslyckade moderniseringsprojekt pekar på budgetöverskridanden, ökad omfattning eller dåligt leverantörsval. Det är symtom. Sjukdomen går djupare.
Förundersökningen: Hur man genomför en obduktion innan misslyckande
En pre-mortem tillämpar post mortem-disciplin innan projektet påbörjas. Teamet föreställer sig att projektet har misslyckats och frågar: vad orsakade misslyckandet? Övningen belyser de mest sannolika felformerna innan de har inträffat, när de är billigast att åtgärda.
För ett äldre moderniseringsprogram kopplas frågorna före döden direkt till de fem grundorsakerna:
För grundorsak 1 (oupptäckt komplexitet): Är omfattningsuppskattningen hämtad från dokumentation eller från strukturell analys av det faktiska systemet? Om dokumentation, vad är skillnaden mellan den dokumenterade inventeringen och den strukturella inventeringen? Har en stickprovsbaserad strukturell analys utförts för att uppskatta skillnadens storlek?
För rotorsak 2 (fel vid extrahering av affärslogik): Har en systematisk extrahering av affärslogik från det befintliga systemets kod genomförts? Hur många affärsregelvillkor implementerar det befintliga systemet? Finns det en valideringsplan som testar ersättningen mot hela regelinventeringen, inte bara de dokumenterade reglerna?
För rotorsak 3 (beroendeidentifiering mitt i körning): Har hela beroendegrafen för det system som ersätts byggts från kodanalys? Finns det program som antas vara fristående men som har inkommande beroenden som inte syns i dokumentationen? Har migreringssekvensen validerats mot beroendegrafen?
För rotorsak 4 (fel i datamigreringsomfattning): Har hela dataschemainventariet, inklusive alla REDEFINES-varianter, alla COMP-3-fält och alla historiska datastrukturer, extraherats från den faktiska koden snarare än från schemadokumentationen? Har migreringsspecifikationen byggts från det strukturella schemainventariet?
För rotorsak 5 (död kod räknas in i omfattningen): Har analys av död kod utförts för att identifiera program utan inkommande produktionsexekveringsväg? Har omfattningsuppskattningen justerats för att exkludera död kod från migreringsomfattningen?
Om någon av dessa frågor inte kan besvaras utifrån bevis, inte från dokumentation, intervjuer, uppskattningar, utan från strukturell analys av den faktiska koden, har förundersökningen identifierat en sårbarhet som kan bli grundorsaken till en obduktion.
Hur SMART TS XL Eliminerar informationsgapet före åtagandet
Varje grundorsak i denna samling efter döden kan spåras tillbaka till ofullständig kunskap om det system som ersätts vid tidpunkten för introduktionen. SMART TS XL producerar de strukturella bevisen som fyller den kunskapsluckan.
Funktionen för statisk kodanalys producerar den kompletta programinventeringen, inklusive program som dokumentationen missat, med preliminär komplexitetspoängsättning för varje komponent. Det faktiska programantalet, inte det dokumenterade antalet, är utgångspunkten för en korrekt omfattningsuppskattning. För varje program är affärslogikinventeringen, varje villkorlig gren, varje beräkningsformel, varje regelvillkor, den specifikation som ersättningen måste matcha.
Mappningen av applikationsberoenden bygger den kompletta beroendegrafen: varje inkommande och utgående beroende för varje program, inklusive de beroenden som dokumentationen inte beskriver. Beroendegrafen är det som avgör migreringssekvensering, och beroendeidentifiering under migreringskörning är den tredje grundorsaken till moderniseringsmisslyckanden. Att upptäcka beroenden före commit eliminerar överraskningarna mitt i körningen.
Analysen av den äldre moderniseringen identifierar död kod, program utan inkommande referenser från någon produktionsexekveringsväg. Att ta bort död kod från omfattningsuppskattningen innan åtaganden görs minskar omfattningen till vad som faktiskt måste migreras, inte vad som finns i portföljen. Omfattningsminskningen är en av de mest direkta ekonomiska fördelarna med strukturell analys före projektet.
Effektanalysfunktionen besvarar frågan före dödandet för varje föreslagen förändring: om detta program migreras, vad är den fullständiga omfattningen av vad som måste uppdateras, testas och valideras? Effektomfattningen, härledd från den strukturella beroendegrafen, omvandlar riskfrågor före dödandet från kvalitativa problem till uppräknade, avgränsade svar.
Företagssökningsfunktionen gör strukturella bevis sökbara i hela programmet: hitta alla program som implementerar en specifik affärsregel, varje datamängd som innehåller en specifik schemavariant, varje program som är beroende av en specifik delad komponent . Denna sökfunktion är det som gör det möjligt för pre-mortem att få specifika svar snarare än allmänna funderingar, och det som förvandlar post mortem-fyndet "vi kände inte till hela schemat" till ett specifikt, undvikbart fel med ett specifikt, identifierbart förebyggande medel.
Slutsats: Den efterföljande boken du inte har råd att skriva
De fem grundorsakerna i denna analys, oupptäckt komplexitet, fel vid extrahering av affärslogik, beroendeidentifiering mitt i körning, fel vid datamigrering och död kod som räknas in i omfattningen, är inte slumpmässiga fel. De är förutsägbara fel i intelligensprocessen: den process som borde ha producerat korrekt kunskap om systemet som moderniserades innan programmet antog sin form.
De är också förebyggbara misslyckanden. Inte genom bättre projektledning, inte genom mer erfarna leverantörer, inte genom mer rigorös intressentsamordning, även om allt detta hjälper. Kan förebyggas genom att göra en strukturell analys av det befintliga systemet innan omfattningen bestäms, metoden väljs och budgeten godkänns. Analysen som avslöjar det verkliga programantalet, det faktiska beroendediagrammet, den kompletta affärslogikinventeringen och de verkliga dataschemavarianterna är den analys som omvandlar ett efterkontrollresultat från "vi visste inte" till "vi fick reda på det i tid".
Den obduktion man skriver tre år efter ett misslyckat program är dyr och smärtsam. Den strukturella analysen man gör innan programmet startar är ingetdera.


