Teknologi & platformNy⏱ ~2 min

Datavask

Retting av feil i data som allerede finnes - dubletter, hull, feilstavinger og inkonsistente formater - oftest på stamdata og oftest i etterkant.

Datavask er arbeidet med å rydde opp i et datasett som allerede er i bruk. Det skiller seg fra de tre naboene sine: datakvalitetGraden av nøyaktighet, fullstendighet og pålitelighet i et datasett - kritisk for korrekt fakturering og balanseavregning i kraftbransjen. er tilstanden datasettet er i, valideringDet første steget i VEE - automatisk sjekk av måledata mot tekniske og logiske grenser for å avdekke åpenbart feilaktige verdier. er kontrollen som avdekker at en verdi bryter en regel, og VEEValidation, Estimation, Editing - systematisk prosess for å sikre kvaliteten på råmåledata fra strømmålere. er den løpende, regulerte prosessen på måleverdier. Datavask er selve rettingen, og den treffer oftest stamdataDe autoritative kildedataene i et System of Record (Master) - dataene som eies, vedlikeholdes og editeres på ett sted, og som alle andre systemer henter kopier fra. heller enn tidsserier: dupliserte målepunkter, adresser som ikke stemmer med matrikkelen, anleggskomponenter uten kobling til et anlegg, navnsetting som har driftet fra hverandre mellom to systemer.

I kraftbransjen dukker behovet typisk opp i tre situasjoner. Etter en fusjon, der to selskapers registre skal bli ett. Før en migreringOverføring av data, applikasjoner eller tjenester fra ett system, miljø eller plattform til et annet - en av de mest risikofylte, men hyppigste operasjonene i IT-prosjekter., der det gamle systemets slingringsmonn ikke finnes i det nye. Og før en ny ElhubNasjonalt nav for måleverdier og markedsprosesser i norsk kraftmarked.-rolle settes i drift, der data som var gode nok internt plutselig skal tåle å bli sendt ut.

Ordet fortjener en innvending. Vask er en engangshandling: du vasker noe skittent, og så er det rent. Men data blir skitne igjen, fordi feilen som regel ikke ligger i datasettet, den ligger i prosessen som fyller det. Et register som ble vasket i fjor og er skittent igjen i år, er ikke dårlig vasket. Det er et register uten vedlikehold. Det er derfor HEVDIkke et akronym, men det norske ordet «hevd» - en juridisk rett du må holde i hevd løpende for at den skal bestå. Tvimennings managed service for datakvalitet, på tvers av hele systemlandskapet. selger datakvalitet og datavask som en løpende tjeneste og ikke som et prosjekt.

DataKvalitetProsess