BIJLAGE

„SIS II-TESTS

1. DOELSTELLINGEN

Met de hierna beschreven SIS II-tests moet worden aangetoond dat het nationale systeem (N.SIS II), de communicatie-infrastructuur en de wisselwerking tussen het centrale SIS II (C.SIS II) en N.SIS II functioneren in overeenstemming met de technische en functionele vereisten als bepaald in Verordening (EG) nr. 1987/2006 en Besluit 2007/533/JBZ.

Met deze SIS II-tests wordt tevens aangetoond dat N.SIS II, de communicatie-infrastructuur en de wisselwerking tussen C.SIS II en N.SIS II kunnen functioneren in overeenstemming met niet-functionele vereisten zoals robuustheid, beschikbaarheid en prestatievermogen, zoals bepaald in Verordening (EG) nr. 1987/2006 en Besluit 2007/533/JBZ.

2. VERLOOP, REIKWIJDTE EN ORGANISATIE VAN DE SIS II-TESTS

De volgorde, het doel, de reikwijdte (afhankelijk van de nationale implementatie) en de organisatie van de tests zijn als volgt:

2.1. De connectiviteitstests vormen de eerste testfase, waarin de connectiviteit en de veerkracht van de communicatie-infrastructuur van SIS II worden getest.

2.2. De nationale conformiteitstests vormen de tweede testfase, waarin wordt nagegaan of N.SIS II voldoet aan de specificaties die zijn vastgelegd in de referentieversie van het Interface Control Document (ICD).

2.3. De tests van de lokale nationale interface en de vervangende lokale nationale interface (LNI/BLNI-tests) vormen de derde testfase, waarin de connectiviteit en de veerkracht van de SIS II-communicatie-infrastructuur worden beoordeeld om te testen of N.SIS II achter de LNI en de BLNI (in lidstaten die een BLNI hebben) correct functioneert en voldoende veerkrachtig is.

2.4. De algemene tests vormen de vierde testfase, waarin wordt beoordeeld of N.SIS II naar behoren functioneert volgens de geldende ICD-specificatie in een situatie waarbij andere landen op SIS II zijn aangesloten, zoals vereist is bij de normale werking van het systeem. Deze tests kennen twee onderscheiden fasen:

2.4.1. Lidstaattests

In deze testfase dienen alle reeds op SIS II aangesloten lidstaten aan te tonen dat zij berichten van de toetredende lidstaat kunnen verwerken. Het berichtenverkeer van de toetredende lidstaat kan door middel van simulatie tot stand zijn gekomen.

2.4.2. Integrale tests

In deze fase wordt het geteste systeem blootgesteld aan verkeer (nominaal, stress- en piekverkeer) zoals dat tijdens de normale werking kan worden verwacht. De lidstaten (met uitzondering van het geteste systeem) worden vervangen door simulatoren. Deze fase is bedoeld om er zeker van te zijn dat het geteste systeem alle inkomende berichten kan ontvangen en verwerken en alle normale handelingen kan uitvoeren, en omvat tevens tests van de veerkracht.

2.5. De ITSM-tests vormen de vijfde testfase, waarin wordt gekeken naar de organisatie van het IT-servicemanagement, waaronder de werkings- en communicatieprocedures via communicatiesystemen zoals SIS II SPoC mail, eOPM en SM7.

2.6. De Sirene-connectiviteitstests vormen de zesde testfase, waarin de connectiviteit en de veerkracht van de Sirene-mailinfrastructuur worden getest en de basiswerking van de mailboxen wordt gecontroleerd door een simulatie van het normale verkeer.

2.7. De functionele Sirene-tests vormen de zevende testfase, die gericht is op de werking van de nationale technische oplossing voor Sirene en de informatie-uitwisseling tussen de Sirene-bureaus door middel van formulieren die volgens de specificaties in het bij Uitvoeringsbesluit (EU) nr. 2015/219 van de Commissie (1) vastgestelde Sirene-handboek via de Sirene-mailinfrastructuur worden verzonden, op het opnemen, wijzigen, markeren en verwijderen van de dienovereenkomstige SIS II-signaleringen, en op het koppelen/ontkoppelen van relevante aanvullende informatie bij SIS II-signaleringen.

In andere tests kan worden voorzien afhankelijk van het rechtskader dat van toepassing is op een gegeven lidstaat die zich bij SIS II wil aansluiten.

2.8. Coördinatie van de tests

Het Europees Agentschap voor het operationeel beheer van grootschalige IT-systemen op het gebied van vrijheid, veiligheid en recht (eu-LISA) coördineert als beheersautoriteit alle tests. eu-LISA bepaalt de testspecificaties en het testplan en stelt de definitieve resultaten van de tests vast. Daarnaast zal het eventueel aan het licht gebrachte problemen signaleren, categoriseren en beschrijven en mogelijke oplossingen voorstellen.

De lidstaten zullen eu-LISA bijstaan bij het verrichten van alle taken in verband met de uitvoering van de tests.

2.9. Testdocumentatie

De uitvoerige testspecificaties zullen door eu-LISA worden vastgesteld. De betrokken lidstaat krijgt zowel de ontwerpversie als de definitieve versie van de testspecificaties.

2.10. Uitvoering van de tests

De tests worden door eu-LISA samen met de betrokken lidstaat en andere belanghebbenden uitgevoerd op basis van de testspecificaties en volgens het met de deskundigen van de lidstaat overeengekomen tijdschema; doel is aan te tonen dat is voldaan aan de verwachte testresultaten zoals vastgelegd in de testspecificaties. eu-LISA zal voor het uitvoeren van de tests, waaronder de functionele Sirene-tests, de C.SIS II-testomgeving ter beschikking stellen. Daarin kunnen naast de functionele Sirene-tests ook de dienovereenkomstige wijzigingen van signaleringen worden verricht.

2.11. Aanvaarding van de tests

Het testresultaat voor een lidstaat kan „geslaagd”, „geslaagd met opmerkingen”, „onbeslist”„niet geslaagd” of „niet getest”/„niet van toepassing” zijn.

a) „Geslaagd”: i) de behaalde resultaten zijn zoals verwacht in de beschrijving van de „verwachte resultaten”; ii) aan alle testvoorwaarden en het testplan is voldaan; iii) geen van de onbeslistheidscriteria is van toepassing.

b) „Geslaagd met opmerkingen”: aan de onder a) bedoelde voorwaarden is voldaan, maar door specifieke omstandigheden of door aangetoonde oorzaken heeft zich tijdens de test een onverwacht resultaat of een onverwachte gebeurtenis voorgedaan.

c) „Onbeslist”: tijdens de test hebben zich onverwachte gebeurtenissen voorgedaan die niet aan het geteste systeem kunnen worden toegeschreven.

d) „Niet geslaagd”: aan ten minste één van de slagingscriteria is niet voldaan.

e) „Niet getest”/„Niet van toepassing”.

Over de resultaten van de SIS II-tests brengt eu-LISA verslag uit. Daarnaast zal het eventueel aan het licht gebrachte problemen signaleren, categoriseren en beschrijven en mogelijke oplossingen voorstellen. De deskundigen van de lidstaten verstrekken alle informatie die de Testcoördinatiegroep (TCG) nodig heeft voor de uitvoering van haar taak.

Wanneer de tests in de documentatie in afzonderlijke fasen zijn verdeeld, stelt eu-LISA de lidstaat in kennis van de resultaten van elke afgelopen fase voordat de volgende fase begint.

De aanvaarding van de tests zal worden gebaseerd op verslagen met een uitvoerige analyse van de testresultaten en conclusies inzake de validering van het nationale systeem (N.SIS II of Sirene-toepassing) van de lidstaat. Indien de geteste lidstaat of eu-LISA van mening is dat de tests niet met succes konden worden afgerond, wordt daarvan in het verslag een aantekening gemaakt. eu-LISA brengt advies uit over de geslaagde voltooiing van de SIS II-tests, met inachtneming van het standpunt van de deskundigen van de lidstaat. Het legt het testresultaat en zijn advies ter definitieve goedkeuring voor aan het SISVIS-comité in de relevante formatie.

3. INTERFACE CONTROL DOCUMENT (ICD) EN DETAILED TECHNICAL SPECIFICATION (DTS) VOOR HET UITVOEREN VAN DE TESTS

Het N.SIS II van elk van de landen die op SIS II worden aangesloten, wordt getest op basis van de laatste specificaties.

De door eu-LISA opgestelde Detailed Technical Specifications (DTS) bevatten de functionele en de niet-functionele specificaties van C.SIS II.

Het door eu-LISA opgestelde ICD beschrijft de interface tussen C.SIS II en N.SIS II. Het bevat de technische specificaties van de interacties tussen de systemen in termen van doorgegeven gegevensbestanddelen en berichten, gebruikte protocollen alsook het tijdstip en de volgorde van gebeurtenissen.

De specificaties in het ICD en de DTS gelden voor een bepaalde periode en de tijdstippen van de updates van beide systemen worden vastgelegd in een releaseplan, waarin de referentieversie voor een gegeven testfase wordt vastgelegd. Problemen die tijdens de testcampagnes aan het licht zijn gekomen, worden gemeld, geanalyseerd en opgelost volgens de overeengekomen operationele procedures. Daarbij wordt rekening gehouden met het standpunt van de deskundigen van de geteste lidstaat.

4. TUSSENTIJDS EN EINDVERSLAG OVER DE RESULTATEN VAN DE TESTFASEN

eu-LISA stelt regelmatig verslagen op over de stand van de tests. In die verslagen wordt aangegeven om welke testfase het gaat en of de lidstaat die fase heeft voltooid, aangevangen of nog niet heeft aangevangen. Eventuele waarneembare gevolgen voor het tijdschema van het project en de oorzaken daarvan worden aangetekend.

Bij de afsluiting van elke testfase stelt eu-LISA een verslag op over de resultaten, door eu-LISA gesignaleerde problemen en mogelijke oplossingen daarvoor. Wanneer de geteste lidstaat of eu-LISA oordeelt dat een test niet succesvol kon worden afgerond, wordt dat vermeld, met opgave van de redenen ervan, in een afzonderlijke aantekening.”