Funktionella tester av Secure Backup

Transkript

1 Funktionella tester av Secure Backup 1 Syfte Det här dokumentet beskriver de funktionella tester som ska utföras av Secure Backup inför ett offentliggörande av en ny version av programmet. De funktionella testerna ska testa systemet formellt. 2 Sammanfattning Dokumentet innehåller en serie med funktionella tester med unikt numrerade krav som måste vara uppfyllda för att testen ska vara godkända. Testerna inkluderar de huvudsakliga funktionera i programmet samt de funktioner som har valt från ett robusthetsperspektiv. 3 Klassificering Dokumentet har klassificerats som offentligt dokument (Klass A). Det finns inga begränsningar i hur dokumentet får hanteras eller spridas. Dokument: Funktionella tester av Secure Backup 1

2 4 Innehåll 1 Syfte Sammanfattning Klassificering Innehåll Inledning Testets omfattning Test-set Installation Standardtest: Kopiering och återställning Automatisk kopiering Inkrementell kopiering och Arkivet Block-Level Incremental Stort antal filer Återanslutning Återstart Ominstallation Kontoblockering Avinstallation...17 Dokument: Funktionella tester av Secure Backup 2

3 5 Inledning Det här dokumentet beskriver de funktionella test som ska utföras av Secure Backup inför offentliggörandet av en ny programversion. Dessa utgör ej ett fullständigt test av systemet, utan ett sätt att med formella metoder kontrollera att programmet fungerar och uppvisar ett i huvudsak korrekt beteende. Dessa bör kompletteras med "blandade" försök med syfte att krascha systemet eller på annat vis hitta brister i programmets funktioner på ett sätt som formella tester ej kan göra. Ett blandat test kan ex vara att högerklicka på statusikonen och välja "Öppna" eller "Avsluta" medan en dialog är öppen i programmet, eller andra oväntade kombinationer av händelser och fel. De funktionella testen är utformade så att de innehåller en serie steg som skall utföras i ordning numrerade med bokstäver från a och framåt. Testen innehåller också en serie unikt namngivna krav som ska vara uppfyllda för att respektive test ska lyckas. 5.1 Testets omfattning De funktionella testerna i detta dokumentet inkluderar följande funktioner: Installation Säkerhetskopiering Återställning Kompression Transportkrypteringen Kopiering av dolda filer Kopiering av tomma filer Automatisk kopiering Historik Inkrementell kopiering Arkivering Block-Level Incremental Stort antal filer Radering av filer på servern Radering av arkiverade kopior Återanslutning Återstart Ominstallation Installationsinvalidering Kontoblockering Avinstallation Radering av krypteringsnyckel Dessa funktioner har ansetts extra viktiga från ett robusthetsperspektiv eller huvudsakliga för programmets funktion. Programmets säkerhetsfunktioner finns listade i dokumentet Säkerhetsfunktioner och testas med andra metoder för validering/verifiering av dessa funktioner. Dokument: Funktionella tester av Secure Backup 3

4 5.2 Test-set För att utföra testerna i detta dokument behövs tillhörande test-set med de filer/mappar/verktyg som krävs för att testa programmet. Test-set:et finns i filen test-set.zip (c:a 1.3GB). Test-set:et har samma informationsklassificering som detta dokument. Dokument: Funktionella tester av Secure Backup 4

5 6 Installation Programmet installeras med medföljande installationsprogram som packar upp och förbereder systemet för programvaran. a. Installera programmet och skapa en användare. b. Välj följande inställningar: Extra transportkryptering - På Komprimera filer - På Inkludera dolda filer - På Innehållsbaserad jämförelse av filer - Av SYS_FUN_INST1: Inga fel ska uppstå under installationen. Dokument: Funktionella tester av Secure Backup 5

6 7 Standardtest: Kopiering och återställning Standardtestet inkluderar programmets mest grundläggande funktioner, dvs säkerhetskopiering och återställning. Testet går ut på att säkerhetskopiera och återställa en upsättning filer i ett test-set. Detta test-set innehåller lite blandade filer: pdf-dokument, text-filer och bilder från lite olika test-set (korpus). Test-settet innehåller dessutom filer och mönster som är tänkta att testa programmets funktioner ytterligare. Test-set:et innehåller: Filer med blandat innehåll Duplicerade filer Tomma filer/mappar Dolda filer/mappar Filer med hög/låg entropi Både små och stora filer Dubblerade filnamn/mappnamn med olika innehåll (olika mappar) Lite olika fuzzing-patterns Under standardtestet kommer verktyget Find att användas, det är ett verktyg som hittar förändringar i filträd och kommer hitta följande förändringar: Nya filer Ändringar i filernas innehåll (jämförs med SHA-256) Ändringar i filers tid/datum Ändringar i attribut Saknade filer Find är alltså tänkt att hitta ev. felaktigheter som sker i själva kopieringen genom att kontrollera att den återställda kopian är identisk med det som säkerhetskopierades. Programmet finns i mappen Find i test-set.zip tillsammans med instruktioner för programmet. a. Lagra mappen "Standard" med Find, dvs "find store <sökväg>". b. Välj mappen "Standard" och starta kopiering. Skriv ned disk-usage efter kopiering för senare test. SYS_FUN_STD1: Kopieringen ska lyckas utan fel. SYS_FUN_STD2: Disk-usage ska vara lägre än mappens storlek på disk. c. Starta kopieringen igen. SYS_FUN_STD3: Kopieringen ska vara inkrementell och gå betydligt snabbare an tidigare kopiering. Dokument: Funktionella tester av Secure Backup 6

7 d. Ändra inställningen till "Innehållsbaserad jämförelse" till avstängd och starta kopiering igen. SYS_FUN_STD4: Kopieringen ska ske märkbart snabbare än den tidigare kopieringen. e. Återställ den senaste kopian, ex till samma mapp som test-set:et. f. Kontrollera den återställda kopian med Find, dvs "find verify <sökväg>". SYS_FUN_STD5: Resultatet från find ska vara att filer/mappar stämmer överens med originalet, dvs "No changes found!". g. Starta en avancerad återställning. Plocka ut de filer och mappar som finns i mappen "Selection" så att återställningsmappen får ett identiskt innehåll. h. Jämför den återställda informationen mot den i mappen Selection med Find. Obs! Eftersom Windows ändrar filernas fildatum vid kopiering kommer datum/tid för "skapad" och "Använd" ej ha samma tid/datum. Därför kommer verifiering med Find att indikera att tid/datum har ändrats. Detta är normalt och inget fel. SYS_FUN_STD6: Resultatet från Find ska vara att filer/mappar stämmer överens med originalet, med undantag för tid/datum. Dokument: Funktionella tester av Secure Backup 7

8 8 Automatisk kopiering Kopiering ska vid behov starta minst 5 min efter omstart, och därefter var 10:e minut. När behov finns beror på användarens inställning. Oavsett inställning kommer kopieringen starta direkt efter en nyinstallation om ingen kopiering har utförts. Obs! Detta testet gäller enbart desktop-versionen. a. Ta bort filen "last.bin" i programmets arbetsmapp för att framtvinga en automatik kopiering. Efter omstart av programmet ska det indikeras att ingen tidigare kopia finns. Dvs, senaste kopiering --. Not: Arbetsmappen har vanligtvis följande sökväg: c:\user\<användare>\appdata\local\sb_wd Obs! Mappen AppData är en dold fil. Ändra inställningar i explorer för att visa dolda filer och mappar. Win 8: Välj "Dolda objekt" under fliken "Visa" i utforskaren. b. Starta om hela datorsystemet. SYS_FUN_AUT1: Automatisk kopiering ska starta inom 5 minuter efter start. c. Visa dialogen "Historik..." SYS_FUN_AUT2: Kopieringen ska även finnas med i historiken. Dokument: Funktionella tester av Secure Backup 8

9 9 Inkrementell kopiering och Arkivet När en kopiering utförs i klienten så laddas enbart de ändrade filerna upp till servern. Arkviet är en funktion för att spara kopior så att de kan återställas även efter en längre tid. Dessa två funktionerna testas gemensamt i detta test. a. Ställ in arkivering var 5:e kopia och minst 10 lagrade kopior. b. Lägg till mappen "mapp1" i mappen "Incremental". Starta säkerhetskopiering. Ta bort mappen igen. Lägg sedan till "mapp2", starta kopiering igen, ta bort den, etc. Kopiera alla 10 mapparna på det här viset. Not: Varje kopia kommer vara inkrementell kopia från den tidigare mappen. Varje mapp innehåller: minst en ny fil som ej förekommit sedan förut minst en fil mindre än tidigare mapp (raderad fil) minst en ändrad fil med storlek större än 2MB (dvs unikt innehåll för varje mapp) minst en fil som är större än 2MB och byter namn för varje mapp (samma innehåll i alla mappar) c. Återställ den senaste kopian och jämför med Find. SYS_FUN_INC1: Den återställda mappen "mapp10" ska vara identisk med originalet. d. Ställ in att lagra bara 1 kopia på servern, samt välj mappen "Empty". Starta kopiering. SYS_FUN_INC2: Det ska visas en varning när antalet kopior minskas. e. Öppna dialogen "Hantera arkiv..." SYS_FUN_INC3: Minst två kopior ska vara arkiverade i arkivet f. Återställ de två arkiverade kopiorna med avancerad återställning, båda arkiverade mappar kan återställas i samma återställning, jämför sedan mot originalmappen med Find (de med samma namn och nummer). Vilka mappar som arkiveras beror på hur många kopior som gjorts tidigare. SYS_FUN_INC4: De arkiverade mapparna ska vara något av följande alternativ: "mapp1 och mapp6", "mapp2 och mapp7", "mapp3 och mapp8", "mapp4 och mapp9" eller "mapp5 och mapp10". SYS_FUN_INC5: De återställda mapparna ska vara identiska med originalmapparna. g. Radera den äldsta av de två kopiorna i arkivet (den som kopierats först i tiden) i dialogen "Hantera arkiv...". Dokument: Funktionella tester av Secure Backup 9

10 h. Återställ den senaste arkiverade kopian. SYS_FUN_INC6: Återställningen ska lyckas trotts att den andra kopian har raderats. Obs! Jämförelse med Find behöver ej göras denna gången, utan lyckad återställning räcker. i. Radera resterande arkiverade kopior (kan markeras samtidigt). j. Starta ytterligare en kopiering med "Empty". k. Öppna dialogen för "Diskanvändning...". SYS_FUN_INC7: En kopia ska lagras på servern. SYS_FUN_INC8: Diskanvändningen ska vara maximalt 1 KB. Not: Eftersom det inte finns någon diskanvändning är det inte några filer kvar på servern, och eftersom återställningen lyckas har tidigare kopior av filerna ej raderats. Dokument: Funktionella tester av Secure Backup 10

11 10 Block-Level Incremental Block-Level Incremental används för att kopiera stora filer. Filen delas in i block som kopieras var för sig. Vid inkrementell kopiering överförs enbart de block som har ändrats sedan förra kopieringen. a. Kontrollera att innehållsbaserad jämförelse av filer är avstängd. Detta kontrollerar att datum/tid filter fungerar. b. Lägg till mappen "Empty" och ta bort alla andra mappar. Starta en kopiering, på så vis laddas en tom kopia upp och inga filer kopieras därmed inkrementellt. Ta sedan bort mappen igen. c. Lägg till mappen "mapp1" i "Block-Level Incremental". d. Säkerhetskopiera mappen. e. Byt ut mappen mot "mapp2" och kopiera igen. Not: Filen "test.bin" i mapp2 är ändrad på tre ställen mot originalfilen i mapp1. Enbart de tre ändrade blocken ska kopieras. SYS_FUN_BLI1: Kopieringen ska gå märkbart snabbare än tidigare. f. Byt ut mappen mot "mapp3" och kopiera igen. Not: Filen "test.bin" i mapp3 har utökats med c:a 1 MB mot filen i "mapp2". Enbart den nya informationen på slutet av filen kommer att kopieras. f. Återställ den senaste kopian. Jämför resultatet med Find mot mapp3. SYS_FUN_BLI2: Find ska ej hitta ändringar. Not: Den återställda filen test.bin ska därmed vara identisk efter återställning, trotts att den har kopierats i flera omgångar med BLI. Dokument: Funktionella tester av Secure Backup 11

12 11 Stort antal filer Detta testet tar ganska lång tid kan kan hoppas över vid enklare funktionstester. Programmet ska kunna hantera 250k filer. Varje fil lagras med filnamn, fildatum, etc, vilket gör att list-filen som lagrar filerna blir väldigt stor och det kan ta lång tid att ladda upp/ned fillistan eller söka efter filer i listan. Obs! Detta testet bör enbart utföras på en test-instans av servern och ej en riktig produktionsserver eftersom även servermjukvaran testas. Obs! Detta testet kan skapa problem med windows/explorer eftersom ett mycket stort antal filer kommer hanteras. a. Använd verktyget file_generator för att generera många filer. Programmet ligger i mappen Antal. Kör programmet och välj filer, avsluta med enter. Programmet kommer arbeta i flera minuter för att generera filer. Not: Alla filer har unikt slumpmässigt innehåll för att omöjliggöra de-duplicering. Obs! Ta bort filer med Shift+Del istället för vanlig radering, eftersom det tar väldigt lång tid att flytta alla dessa filer till papperskorgen. b. Säkerhetskopiera mappen Antal. c. Återställ mappen. Återställning av många filer kan ta väldigt lång tid. SYS_FUN_LNF1: Programmet ska kunna hantera unika filer utan att fel uppstår. Dokument: Funktionella tester av Secure Backup 12

13 12 Återanslutning Om anslutningen mot servern (tcp-anslutningen) förloras så återansluter klienten mot servern igen och återupptar kopieringen. Obs! För att testet ska kunna utföras måste datorn anslutas via kabel. a. Välj att 1 kopia ska lagras på servern och ingen arkivering ska användas. b. Välj mappen "Empty" och starta kopiering. Välj sedan mappen Standard. Starta kopiering igen så det blir en full kopiering. c. Avbryt kopieringen genom att dra ut nätverkskabeln under pågående kopiering. SYS_FUN_REC1: Efter maximalt 2 minuter ska programmet visa en dialog om att anslutningen har brutits. d. När felmeddelanden visats, återanslut kabel och välj "Ja". SYS_FUN_REC2: Kopieringen ska återstarta efter 4-6 sekunder. e. Upprepa igen, tag ur sladden och vänta på fel. SYS_FUN_REC3: Kopieringen ska återstarta även denna gången. f. Låt kopieringen köra klart. Återställ och jämför resultatet med Find. SYS_FUN_REC4: Kontrollera att disk-usage är samma som vid normal kopiering av test-set:et utan återanslutning. Not: Detta kan innebära att en nya kopiering behöver göras utan återanslutning om disk-usage inte har skrivits ned från ett tidigare test. SYS_FUN_REC5: Find ska inte hitta några ändringar i datan. Not: Detta kontrollerar att filen som överfördes ej fattas i kopian, utan har återsänts till servern igen då anslutningen avbröts. g. Lägg till mappen "empty", ställ in att 1 kopia ska lagras och ingen arkivering, kopiera sedan två gånger. SYS_FUN_REC1: Kontrollera att diskanvändningen är maximalt 1 KB. Not: Detta testar att värdet på disk-usage uppdateras korrekt på servern. Dokument: Funktionella tester av Secure Backup 13

14 13 Återstart Om programmet kraschar, kopieringen avbryts med oväntade fel eller datorn startas om finns en funktion för att återstarta en pågående kopiering. a. Välj att 1 kopia ska lagras på servern och ingen arkivering ska användas. b. Välj mappen "Empty" och starta kopiering. Välj mappen Standard. Starta kopiering igen. c. Vänta tills kopieringen är färdig till c:a 80%. Avsluta då processen med "Aktivitetshanteraren" under pågående kopiering. Aktivitetshanteraren kan öppnas med Ctrl+Alt+Del. d. Starta programmet igen, och starta en ny kopiering. SYS_FUN_RES1: Programmet ska fråga om den tidigare kopieringen ska fortsättas. e. Välj att återstarta kopieringen. Kopieringen kommer snabb-spolas fram till ungefär där kopieringen avbröts. Not: Återstartinformation skrivs till disk med jämna mellanrum, så kopieringen ska återstarta då den senaste punkten skrevs till disk, dvs strax innan tidigare kopiering avbröts. SYS_FUN_RES2: Kopieringen ska återgå till normal kopiering efter en stund. SYS_FUN_RES3: Kopieringen ska slutföras utan fel. f. Återställ datan, och jämför resultatet med Find. SYS_FUN_RES4: Find ska inte hitta några fel i den återställda datan. g. Lägg till mappen "empty" och kopiera två gånger. SYS_FUN_RES5: Kontrollera att diskanvändningen är maximalt 1 KB. Dokument: Funktionella tester av Secure Backup 14

15 14 Ominstallation Efter en ny installation kan antingen ett nytt konto skapas eller ett tidigare konto knytas till installationen. Om ett tidigare konto knyts till installationen genom att välja en tidigare återställningsfil (ominstallation) ska de tidigare installationerna av kontot sluta att fungera, för att skydda mot att samma konto används av flera installationer (eftersom det kan leda till inkonsekventa säkerhetskopior). a. Säkerhetskopiera mappen Standard med originalinstallationen. b. Installera programmet på ett nytt system. Välj "Återställ från återställningsfil" istället för att skapa en ny användare. b. Lägg till mappen Standard, och starta kopiering. SYS_FUN_RIS1: Inkrementell kopiering ska fungera efter ominstallation. c. Kontrollera om säkerhetskopiering fungerar i originalinstallationen. SYS_FUN_RIS2: Säkerhetskopiering i den första installationen ska ha slutat att fungera. Not: Återställning ska fortfarande vara möjlig i originalinstallationen. Dokument: Funktionella tester av Secure Backup 15

16 15 Kontoblockering Om ett konto används tillräckligt mycket så blockeras kontot från användning en viss tid. Detta är dels för att skydda mot överbelastning av servern och dels för att skydda krypteringsnyckeln som används för att kryptera och autentisera överföringen. a. Starta säkerhetskopiering upprepade gånger (max 50 gånger) tills kontot låser sig. SYS_FUN_BLO1: Kontot ska låsas vid upprepade kopieringar. Dokument: Funktionella tester av Secure Backup 16

17 16 Avinstallation Avinstallation av programmet kan göras i kontrollpanelen. Vid avinstallation finns en funktion för att radera kvarvarande krypteringsnycklar från systemet med överskrivning för att inte lämna kvar information i filsystemet. a. Avsluta programmet och välj att avinstallera programmet i kontrollpanelen. b. Välj att radera krypteringsnyckeln. SYS_FUN_UIN1: Följande ska raderas från systemet: programmappen som valdes vid installation, arbetsmappen, samt ikoner på skrivbordet och startmenyn. Not: Programmappen har vanligtvis följande sökväg om inget annat valts: c:\program (x86)\secure Backup. Not: Arbetsmappen har oftast följande sökväg: c:\user\<användare>\appdata\local\sb_wd. Mappen AppData är en dold mapp och för att den ska synas måste inställningen för att visa dolda mappar ändras i utforskaren. Dokument: Funktionella tester av Secure Backup 17