Case Study · Infrastruktura krytyczna - Engave S.A.
Jak w trybie awaryjnym odbudowaliśmy infrastrukturę IT dla systemu ostrzegania przed powodzią, który chroni całą Polskę przed katastrofami naturalnymi
Projekt w skrócie
Klient
Państwowe Gospodarstwo Wodne Wody Polskie oraz Instytut Meteorologii i Gospodarki Wodnej - Państwowy Instytut Badawczy
System
ISOK - Informatyczny System Osłony Kraju przed nadzwyczajnymi zagrożeniami, ze szczególnym uwzględnieniem zagrożeń powodziowych
Stawka
200 000 000 PLN dotacji unijnej z Programu Operacyjnego Innowacyjna Gospodarka - zagrożonej z powodu niewykonania umowy przez poprzedniego wykonawcę
Czas
2,5 miesiąca - od przejęcia projektu do odbioru. Praca 24 godziny na dobę.
Zakres
Odbudowa infrastruktury serwerowej i sieciowej, wirtualizacja VMware, konfiguracja DR i backupu, dokumentacja powykonawcza, utrzymanie
Dlaczego ISOK istnieje
Przez lata ochrona przeciwpowodziowa w Polsce opierała się na wałach i obwałowaniach. Problem w tym, że wał chroniony intensywnie się zagospodarowuje - i gdy w końcu pęka, straty są większe niż gdyby wału nigdy nie było. Budowanie coraz droższych zabezpieczeń nie dawało efektów - dawało złudne poczucie bezpieczeństwa.
ISOK miał odpowiedzieć na inne pytanie: nie jak zabezpieczyć teren przed wodą, ale jak wiedzieć z wyprzedzeniem, gdzie woda dotrze i jak szybko. Jeden portal, jeden system, jedna zintegrowana baza danych - dostępna dla administracji i dla każdego obywatela z dostępem do internetu. Każdy mógłby sprawdzić, czy jego dom stoi na obszarze zagrożonym powodzią i jaki jest stopień tego zagrożenia.
Dyrektywa Powodziowa UE z 2007 roku nałożyła na Polskę obowiązek przygotowania map zagrożenia i ryzyka powodziowego. ISOK był odpowiedzią na ten obowiązek - i na lata zaniedbań w zarządzaniu kryzysowym. Po powodzi 2010 roku projekt przebudowano i ukierunkowano na zagrożenia powodziowe jako priorytet absolutny.
Problem
Kiedy Engave przejęło projekt, zegar już tykał. Poprzedni wykonawca zawalił harmonogram i warunki umowy. Dotacja unijna - 200 mln zł z Programu Operacyjnego Innowacyjna Gospodarka - stanęła pod realnym znakiem zapytania. Termin był twardo określony. Nie przez klienta, nie przez kontrakt - przez przepisy europejskie i ryzyko utraty całego finansowania.
Sytuacja zastana w serwerowniach była dokładnie tym, czego można się spodziewać po projekcie, który zmienił wykonawcę w połowie drogi: infrastruktura częściowo wdrożona, częściowo skonfigurowana, bez pełnej dokumentacji, z lukami w architekturze, które trzeba było najpierw zdiagnozować, a dopiero potem naprawić.
Nie było czasu na komfort pełnej analizy przed działaniem. Analiza musiała iść równolegle z wdrożeniem. Każdy dzień zwłoki to był dzień bliżej utraty dotacji - i dzień, w którym ISOK nie działał.
Wyzwanie
Normalny projekt tej skali wymaga wielokrotnie więcej. Tutaj nie było opcji rozciągnięcia harmonogramu. Data graniczna była twarda - i nienegocjowalna.
Nie wiadomo było dokładnie, co działa, co nie działa i dlaczego. Sprzęt serwerowo-macierzowy wymagał audytu od zera. Każde odkrycie mogło oznaczać kolejne godziny pracy i kolejne zamówienie.
ISOK to nie system biznesowy, który można odłożyć na później. To infrastruktura, od której zależy ostrzeganie milionów ludzi przed powodzią. Margines błędu był zerowy.
System musi działać sprawnie w normalnych warunkach - ale musi też wytrzymać moment, gdy tysiące ludzi jednocześnie sprawdza mapę zagrożeń podczas realnego zagrożenia. Właśnie wtedy nie może padać.
Rozwiązanie
Engave zaczęło od pogłębionej analizy stanu zastanego: sprzęt, oprogramowanie, dotychczasowe prace serwisowe w obu serwerowniach. Diagnoza musiała być szybka i precyzyjna - każda godzina spędzona na analizie to godzina mniej na wdrożenie.
Rekomendacja i realizacja doposażenia serwerowni: rozbudowa pamięci masowej, rozbudowa serwerów, prawidłowe rozmieszczenie komponentów we wszystkich węzłach z uwzględnieniem dostaw uzupełniających. Nowa infrastruktura sieciowa i serwerowa pod wirtualne deskopy.
Aktualizacja i uruchomienie sprzętu serwerowo-macierzowego, wdrożenie oprogramowania wirtualizacyjnego VMware, konfiguracja maszyn wirtualnych, rekonfiguracja SAN i macierzy. Platforma zbudowana pod obciążenie szczytowe - nie pod obciążenie przeciętne.
Rekonfiguracja LAN i warstw bezpieczeństwa, instalacja i konfiguracja LDAP oraz SSO, naprawa i konfiguracja systemu backupu, wdrożenie mechanizmów Disaster Recovery, wdrożenie systemu monitorowania. Środowisko, które ma nie tylko działać - ale przetrwać awarię.
Projekt techniczny i dokumentacja powykonawcza dla całości wykonanych prac - wymagana przez kontrakt, niezbędna dla odbioru i rozliczenia dotacji. W projekcie przejętym po poprzedniku, gdzie dokumentacja była niekompletna, to był oddzielny, czasochłonny etap.
Są projekty, gdzie liczy się najniższa cena. I są projekty, gdzie liczy się to, czy ktoś dotrze na miejsce w ciągu kilku godzin - i zdoła naprawić to, czego ktoś inny nie naprawił. To są dwa różne rynki. ISOK był zdecydowanie tym drugim.
Wyniki
200 mln
PLN dotacji unijnej uratowanej dzięki terminowemu oddaniu projektu
2,5mies.
od przejęcia zniszczonego projektu do pełnego odbioru systemu
Działa
ISOK funkcjonuje dziś jako publiczny portal ostrzegania przed zagrożeniami hydrologicznymi i meteorologicznymi
Projekt zakończył się w terminie. Dotacja unijna w wysokości 200 mln zł została rozliczona. ISOK został uruchomiony i działa jako publiczny portal, w którym każdy obywatel może sprawdzić, czy jego adres leży na obszarze zagrożonym powodzią.
Mapy Zagrożenia Powodziowego i Mapy Ryzyka Powodziowego - produkty ISOK - zostały uwzględnione w planach zagospodarowania przestrzennego gmin i województw. Polska wypełniła tym samym obowiązek wynikający z Dyrektywy Powodziowej UE.
System ma zaplecze zaprojektowane pod obciążenie szczytowe: działa sprawnie w normalnych warunkach i jest gotowy na moment, gdy tysiące użytkowników jednocześnie sprawdza mapy podczas realnego alarmu powodziowego. Dzięki wdrożonym mechanizmom DR i monitorowania - administratorzy wiedzą o problemach zanim staną się awariami.
Poświadczenie
„Wszystkie prace zostały wykonane z należytą starannością i przy bardzo dużym zaangażowaniu Wykonawcy."
Jacek Wesołowski, Dyrektor Departamentu Informatyzacji, Telekomunikacji i Automatyki - PGW Wody Polskie / IMGW-PIB
Dlaczego to ważne
Powódź tysiąclecia w 1997 roku. 14 mld zł strat w 2010 roku. Polska zbyt dobrze zna cenę braku systemu ostrzegania, który działa zanim woda zaleje domy - nie po tym, jak już to zrobi.
ISOK to infrastruktura krytyczna w najpełniejszym sensie tego słowa: jej awaria nie oznacza przestoju biznesowego, oznacza brak informacji dla ludzi, którzy muszą podjąć decyzję o ewakuacji. Dlatego projekt nie mógł się nie udać - i dlatego Engave pracowało 24 godziny na dobę przez 2,5 miesiąca, żeby tak się nie stało.
Dla Engave ISOK jest dowodem na to, że istnieje kategoria projektów, w których liczy się wyłącznie jedno: czy da się to zrobić, czy nie da. Nie cena, nie harmonogram wygodny dla wykonawcy, nie lista zastrzeżeń w kontrakcie. Da się - i jest to zrobione.
Co to oznacza dla Twojej organizacji
Projekty awaryjne, przejęcia po innych wykonawcach, ratowanie systemów krytycznych pod presją czasu - to jest dokładnie sytuacja, w której Engave działa najlepiej. Jeśli masz projekt, który wymaga kogoś, kto dotrze i go skończy - porozmawiajmy.
engave.pl/kontakt
Engave S.A. · engave.pl · Wszelkie prawa zastrzeżone
Cyberbezpieczeństwo, opieka IT, digitalizacja - niezależnie od tematu, chętnie porozmawiamy. Opisz swoją potrzebę, a odpowiedni specjalista odezwie się w ciągu 24h roboczych.
KONTAKT:
biuro@engave.pl
+22 863 13 90
Dyżur techniczny: +48 604 470 151
Ul. Czarodzieja 16, 03-116 Warszawa