Verifiering börjar innan åtgärden görs

Ett utgångsläge är mer än ett värde

En baslinje beskrivs ibland som ett värde före ingreppet. Värdet är en del av underlaget, men jämförelsen behöver också veta under vilka förhållanden det uppstod: vilken mätpunkt det gäller, vilken metod som användes, vilka driftfall som pågick och vad som varierade under perioden.

En rapport från Energiforsk om övertonsgränser visar hur olika metodval påverkar olika delar av bedömningen. Tilldelningsprincipen påverkar vilket störutrymme anläggningen får, modellvalet påverkar det beräknade bidraget och mätperioden påverkar vilka variationer som fångas. Samma metodfråga återkommer när två mätningar ska ställas mot varandra, eftersom skillnaden mellan dem då bär slutsatsen.

Jämförbarhet är ett val som görs i förväg

Ett ingrepp är i sig en förändring av systemet. Före och efter är därför två olika tillstånd, och det är avsikten. Svårigheten är att göra övriga förhållanden tillräckligt jämförbara för att stärka bedömningen av vilken del av skillnaden som kan kopplas till ingreppet.

Det gäller mätpunkten, metoden och vilka driftfall som ingår. En eftermätning som gjordes under ett annat driftfall än förmätningen beskriver något annat, även om den är tekniskt korrekt. Har anläggningen dessutom ändrats på annat sätt under tiden behöver den förändringen vara känd, eftersom den annars är svår att skilja från åtgärdens effekt.

De här förutsättningarna kan ibland rekonstrueras i efterhand om dokumentationen finns, men de kan inte säkras då. Jämförbarheten behöver därför planeras när förmätningen läggs upp.

Kriterier som formuleras efteråt blir svåra att pröva

Om kriteriet för ett lyckat utfall sätts först när eftermätningen finns är det inte ett förhandsbestämt kriterium. Det riskerar då att anpassas till det som redan syns. Risken märks tydligast när resultatet är blandat, alltså när något har förbättrats och något annat inte.

Ett kriterium som formuleras innan ingreppet görs behöver säga vad som ska mätas, under vilka förhållanden, vilken variation som ska betraktas som en del av utgångsläget och vad som ska räknas som en tillräcklig förändring. Det gör det möjligt att konstatera om kriteriet uppfylldes, även när svaret är nej.

Utgångsläget avgör hur mycket det finns att hämta

En rapport från Energiforsk om batterilager och elkvalitet mätte på tre anläggningar. Vid en syntes en tydlig förbättring av övertonshalten. Vid de två andra syntes ingen påverkan alls, och rapporten pekar på lägre övertonsnivåer och skilda nätförhållanden som förklaringar. För det prov där en inbyggd funktion för aktiv filtrering var aktiverad konstaterar rapporten att elkvaliteten redan var god, så att det fanns mycket lite spelrum för funktionen att göra skillnad.

Det säger något om hur en utvärdering behöver läsas. Ett utfall utan mätbar förändring kan bland annat betyda att åtgärden inte gjorde nytta. Det kan också betyda att det inte fanns särskilt mycket att förbättra. Utan ett dokumenterat utgångsläge är de två tolkningarna svåra att skilja åt.

En lyckad verifiering förklarar inte automatiskt varför

Samma rapport anger att exakt vad i batterilagret som absorberar strömövertonerna inte är fastställt. En observerad förbättring är alltså inte i sig en förklaring av mekanismen.

Det har praktisk betydelse när resultatet ska användas någon annanstans. Att en åtgärd gav effekt i en anläggning säger begränsat om nästa om mekanismen och de relevanta förutsättningarna inte går att beskriva. En rapport från Energiforsk om spänningsdippar och transienter visar samma begränsning från ett annat håll: modern kraftelektronisk utrustning reagerar olika på spänningsdippar, samtidigt som kunskapen om dess immunitet mot dippar och transienter är begränsad.

En verifiering kan alltså vara både korrekt och begränsad. Den svarar på om något förändrades i just den här anläggningen, under just de förhållanden som gällde.

Därför är verifieringen ett krav på hur mätningen lades upp

Utan en dokumenterad baslinje blir det svårt att avgöra hur utfallet förhåller sig till utgångsläget. Verifieringen är därför inte en formalitet efteråt, utan ett krav på hur mätningen lades upp redan från början.

Där sluter serien sin egen krets. Vilket underlag som finns i efterhand beror på vilken information mätningen sparade och under vilka förhållanden den gjordes. Vad underlaget räcker till att säga beror också på frågan, kriterierna och kunskapen om anläggningen. Det gäller när ett fel ska bli synligt, när ett ursprung ska härledas, när en utveckling ska följas över tid, när ett ingrepp ska väljas, och sist när någon frågar om det blev bättre.