Saatja: Viljar Pallo <
[email protected]>
Saadetud: 31.03.2023 14:59
Adressaat: AKI info <
[email protected]>
Teema: Taotlus Andmekaitse Inspektsiooni seisukoha saamiseks
Manused: Taotlus koormustestide läbiviimiseks.pdf
Tähelepanu! Tegemist on välisvõrgust saabunud kirjaga.
Tundmatu saatja korral palume linke ja faile mitte avada.
Tere
Oleme töötamas välja uue põlvkonna tervise infosüsteemi.
Oluline osa arengutest on tervise infosüsteemi üleminek vabavaralisele platvormile ning see hõlmab ka
tervise infosüsteemi kogunenud andmete migreerimist uuele vabavaralisele platvormile.
Selleks, et uue platvormi jõudluses veenduda, peame viima läbi koormustestid ning saame seda teha
ainult tervise infosüsteemi toodangukeskkonna andmeid kasutades. Samuti peame veenduma
toodangukeskkonnale vastavas mahus migratsioonide õnnestumises.
Lisasin manusesse migratsiooni- ja koormustestide läbiviimise protsessi kirjelduse.
Palume antud protsessi osas Andmekaitse Inspektsiooni hinnangut, kas ja millistel tingimustel saame
migratsiooni- ja koormustestidega edasi liikuda.
Palume võimalusel vastata antud pöördumisele hiljemalt 14. aprilliks.
Lugupidamisega
Viljar Pallo
upTIS teenuste juht
Tervise ja Heaolu Infosüsteemide Keskus
Tel. 53411288
Skype. viljarpallo
Taotlus loa saamiseks toodangukeskkonna andmete
migratsiooni testimiseks ja sellega seotud
koormustestide läbiviimiseks
1. Eesmärk
Tervise infosüsteem töötab täna webMethods integratsiooniserveri platvormil ning
kasutab terviseandmete talletamiseks Oracle andmebaasi. webMethods platvormil
arendamise kompetents on Eestis väga piiratud, mistõttu oleme Eestis olnud tervise
infosüsteemi platvormi arendamise osas sisuliselt vendor lock olukorras ning see
olukord vajab parendamist. Uue põlvkonna tervise infosüsteemi (upTIS) projekti
raames oleme liikumas vabavaralise ja paremini skaleeruva platvormi suunas, millele
on tagatud Eestis ka laialdane arenduskompetents. See muudatus hõlmab
webMethods integratsiooniserveri platvormilt üleminekut mikroteenustel
baseeruvale arhitektuurile ning Oracle andmebaasi asemel PostgreSQL ja Minio S3
lahenduste kasutamist terviseandmete talletamiseks.
Tänaseks oleme tööde osas jõudnud seisu, kus suur hulk webMethods platvormile
arendatud teenuseid on arendatud välja mikroteenustena ning oleme teenuseid
tootestamas. Samuti oleme täitnud vajalikud eeldused (sh koostanud andmete
migreerimiseks vajalikud skriptid ning taganud lahendused andmete krüpteerimiseks
ja andmebaasiseisude võrreldavuse kontrollimiseks) andmete migratsiooni
läbiviimiseks.
Üleminek Oracle andmebaasilt vabavaralisele platvormile on uue põlvkonna tervise
infosüsteemi arengute võtmes väga oluline samm ning peame selleks veenduma
toodangukeskkonna mahus ja sisulises keerukuses migratsiooni õnnestumises ning
uue platvormi jõudluses. Selleks plaanime viia pre-live keskkonnas läbi andmete
migratsiooni ja koormustestid ning peame seda tegema toodangukeskkonnale
lähedasi tingimusi (sh andmebaasi mahtu) arvestades.
2. Ligipääsu vajaduse elutsükkel ja ajaraam
Migratsiooni- ja koormustestid on plaanis viia läbi 90 päeva jooksul alates selleks
vajaliku kooskõlastuse saamisest. Hinnanguline testide läbiviimise periood jääb
vahemikku aprill – september 2023.
3. Andmetele ligipääsu omavad isikud
Ligipääsu vajadus tekib:
➢ Rakendusadministraatoril – kes viib läbi andmete migratsiooni
➢ Vastutaval testijal – kes viib läbi koormustestid
4. Migratsiooni ja koormustestide ülesehitus
Oracle andmebaasist andmete migreerimiseks PostgreSQL andmebaasi ja S3
objektihoidlasse kasutatakse selleks väljatöötatud skripte.
Koormustestide läbiviimise protsess baseerub Gatling raamistiku peal ning
koormustestide jaoks kasutatakse toodangukeskkonnast pre-live keskkonda
kopeeritud andmeid.
Vajadust vaadata LIVE andmeid migratsiooni ega koormustestide käigus ei esine.
Testid viiakse läbi mitmes etapis:
➢ Andmete migreerimine Oracle andmebaasist PostgreSQL andmebaasi ja S3
objektihoidlasse
➢ Esimene koormustest viiakse läbi vana platvormi peal (webMethods + Oracle)
➢ Teine koormustest viiakse läbi uue platvormi peal (mikroteenused +
PostgreSQL/S3)
➢ Kolmas koormustest viiakse uue platvormi peal läbi vastavalt vajadusele (kui
selgub vajadus paranduste tegemiseks)
Migratsiooni ja koormustestide läbiviimiseks paigaldatakse pre-live keskkond ning
koormustestid käivitatakse selleks eraldi loodavas virtuaalmasinas.
Live keskkonnas jõudluse prognoosimiseks on plaanis koormustestide tulemusi
võrrelda Live keskkonna reaalse teenuste jõudluse statistikaga.
Selleks, et tervise infosüsteemi kasutuse simulatsioon oleks koormustestide
tegemisel realistlik, kasutatakse päringute andmeid LIVE X-tee logidest.
Toodangukeskkonna andmetega koormuse tekitamise loogika:
➢ Tervise infosüsteemi toodangukeskkonnast võetakse koopia andmetest
➢ Andmed migreeritakse ainult vastava koormustesti läbiviimiseks mõeldud
virtuaalserveri andmebaasidesse
➢ Võetakse LIVE X-tee turvaserveri logist konkreetse ajavahemiku (paaritunnine
periood) logi ning logi viiakse kujule, mida saab koormustestis kasutada
➢ Koormustestide käivitamiseks vajalikud skriptid ja X-tee logid paigaldatakse
virtuaalmasinasse, mida kasutatakse skriptide käivitamiseks
➢ Läbitakse koormustestid
➢ Koormustestide tulemused kuvatakse Gatling raportis anonümiseeritud
andmetega
➢ Kui koormustestid on läbi viidud ja tulemused analüüsitud, siis hävitatakse pre-
live keskkonda migreeritud andmed ja X-tee logid
➢ Lisaks hävitatakse ka virtuaalmasin, kus testid läbi viidi
➢ Koostatakse andmete utiliseerimise akt
5. Andmekaitse
Saamaks adekvaatseid hinnanguid, milline on tehtud arendustööde ja platvormi
muudatuse mõju toodangukeskkonnas rakendamisel, on vaja viia koormustestimine
läbi pre-live keskkonnas. Pre-live keskkond on kõige lähedasem keskkond
toodangule tehniliste näitajate ja andmemahtude osas. Oluline põhjus, miks
koormusteste ei saa viia läbi nt test-keskkonnas, on asjaolu, et toodangukeskkonna le
võrdväärses komplekssuses ja mahus testandmeid tekitada on väga keeruline või
suhteliselt võimatu.
Käesolev koormustestide skoop on üles ehitatud põhimõttele, et võtame X-tee logist
konkreetse perioodi nt. ühe päeva või mõne tunni logi ja kasutame seda koormustesti
ajal taustakoormuse tekitamiseks.
Miks ei ole võimalik teha teste kasutades testandmeid?
➢ Esineb väga oluline vahe test- ja toodangukeskkonna andmebaaside mahtude
vahel. Testandmete kasutamine ei anna meile ligilähedaseltki vajalikku
võrdlusmomenti, millest saame vajalikku infot, kuidas tehtud arendused ja
platvormi muudatused hakkavad toimima toodangukeskkonnas
➢ Test-keskkonnas olevad andmed on väga ühekülgsed võrreldes
toodangukeskkonna andmetega. Vajame testimiseks mitmekülgseid andmeid,
mis mõjutavad olulisel määral koormustestide tulemusi
6. Põhjendused anonüümseks muutmata
originaalandmetega koormustestide läbiviimiseks
Järgmiselt oleme loetlenud põhjendused, miks ei ole võimalik käivitada koormusteste
teisiti:
➢ testkeskkonnas loodud testandmed ei võimalda kasutatavates tööprotsessides
esinevaid vigu tuvastada, vaid seda on võimalik tagada üksnes
originaalandmetega; sünteetiline andmete genereerimine ei võimalda
saavutada piisavalt laiaulatuslikku andmete komplekti;
➢ anonüümseks muudetud originaalandmete kasutamine muudaks konkreetse
testprotsessi töömahu ebamõistlikult suureks; hetkeseisuga puudub võimalus
andmeid anonümiseerida;
➢ testimisel ja testide tulemuste analüüsimisel suudetakse andmekaitse ja
infoturbenõudeid järgides tagada asjakohaste isikute isikuandmete piisav
kaitse; põhimõtted on loetletud käesolevas dokumendis;
➢ on tagatud, et testide jaoks vajalikele andmetele pääsevad juurde üksnes
käesolevas dokumendis väljatoodud töötajad, kellel on volitused teha testimisi
ja parandada testimiste käigus esinevaid vigu; taotletavad ligipääsud on
loetletud käesolevas dokumendis;
➢ andmetele on lubatud juurde pääseda vaid isikutel, kes on allutatud
konfidentsiaalsuslepetele;
➢ oleme toimingust teavitanud tervise infosüsteemi vastutava töötleja ja volitatud
töötleja poolseid isikuandmete töötlemise eest vastutavaid isikuid;
➢ pärast koormustestide lõpetamist koormustestimiseks loodud virtuaalmasinad
koos nende andmestikuga kustutatakse; hävitamise protsess on kirjeldatud
käesolevas dokumendis.
7. Tegevuste protsess
# Tegevus Vastutaja
1 Kirjeldada koormustestimise protsess, keskkonnad, Projektijuht
stsenaariumid
2 Viia TEHIK infoturbe osakond ja andmekaitse Projektijuht
spetsialist protsessiga kurssi
3 Valideerida koormustestimise protsessi Andmekaitse Projektijuht
Inspektsiooniga
4 Seadistada koormustestideks vajalik pre-live keskkond Süsteemiadministraator
5 Seadistada ajutine virtuaalmasin pre-live võrgus, kus Süsteemiadministraator
käivitatakse vajalikud koormustestid
6 Käivitada andmete migratsioon TIS Rakendusadministraator
toodangukeskkonnast andmete migreerimiseks upTIS
pre-live keskkonda
7 Võtta X-tee turvaserveri logist kirjeid kindlast Infoturbe spetsialist
ajavahemikust ning tõsta logifail punktis 5 nimetatud
virtuaalmasinasse
8 TEHIK testija käivitab punktis 5 loodud virtuaalmasinas Testija
koormustestid
9 Testide tulemusena genereeritakse anonümiseeritud Testija
Gatling raportid. TEHIK testija teeb raportid upTIS
projektitiimile kättesaadavaks
10 Arhitektid kontrollivad testitulemused üle ning vajadusel Arhitekt
tehakse vajalikud optimeerimistööd Arenduspartner
11 Kui testitulemused seda nõuavad, siis korratakse teste, Testija
kuid seda ettenähtud ajaperioodi piires
12 Testide läbiviimise (sh toodangukeskkonna andmete ja Testija
X-tee logide töötlemise ajad) fikseeritakse selleks
loodud Wiki lehel
13 Peale kõigi testide läbiviimist kustutatakse Rakendusadministraator
virtuaalmasinast toodangukeskkonna andmed ja X-tee
logid
14 Punktis 5 loodud ajutine virtuaalmasin hävitatakse Süsteemiadministraator
15 Koostatakse utiliseerimisakt Projektijuht