Case Study · Infrastruktura krytyczna - Engave S.A.

2,5 miesiąca. 200 mln zł na szali. Zawiódł poprzedni wykonawca.

Jak w trybie awaryjnym odbudowaliśmy infrastrukturę IT dla systemu ostrzegania przed powodzią, który chroni całą Polskę przed katastrofami naturalnymi

Klient: PGW Wody Polskie / IMGW-PIB · Projekt: ISOK · Dotacja: 200 mln PLN · Czas realizacji: 2,5 miesiąca

Projekt w skrócie

Klient

Państwowe Gospodarstwo Wodne Wody Polskie oraz Instytut Meteorologii i Gospodarki Wodnej - Państwowy Instytut Badawczy

System

ISOK - Informatyczny System Osłony Kraju przed nadzwyczajnymi zagrożeniami, ze szczególnym uwzględnieniem zagrożeń powodziowych

Stawka

200 000 000 PLN dotacji unijnej z Programu Operacyjnego Innowacyjna Gospodarka - zagrożonej z powodu niewykonania umowy przez poprzedniego wykonawcę

Czas

2,5 miesiąca - od przejęcia projektu do odbioru. Praca 24 godziny na dobę.

Zakres

Odbudowa infrastruktury serwerowej i sieciowej, wirtualizacja VMware, konfiguracja DR i backupu, dokumentacja powykonawcza, utrzymanie

Dlaczego ISOK istnieje

Powódź w 1997 roku: 12 mld zł strat, 55 ofiar śmiertelnych. Powódź w 2010 roku: 14 mld zł strat. Polska potrzebowała systemu, który ostrzega zanim woda zaleje - nie po fakcie.

Przez lata ochrona przeciwpowodziowa w Polsce opierała się na wałach i obwałowaniach. Problem w tym, że wał chroniony intensywnie się zagospodarowuje - i gdy w końcu pęka, straty są większe niż gdyby wału nigdy nie było. Budowanie coraz droższych zabezpieczeń nie dawało efektów - dawało złudne poczucie bezpieczeństwa.

ISOK miał odpowiedzieć na inne pytanie: nie jak zabezpieczyć teren przed wodą, ale jak wiedzieć z wyprzedzeniem, gdzie woda dotrze i jak szybko. Jeden portal, jeden system, jedna zintegrowana baza danych - dostępna dla administracji i dla każdego obywatela z dostępem do internetu. Każdy mógłby sprawdzić, czy jego dom stoi na obszarze zagrożonym powodzią i jaki jest stopień tego zagrożenia.

Dyrektywa Powodziowa UE z 2007 roku nałożyła na Polskę obowiązek przygotowania map zagrożenia i ryzyka powodziowego. ISOK był odpowiedzią na ten obowiązek - i na lata zaniedbań w zarządzaniu kryzysowym. Po powodzi 2010 roku projekt przebudowano i ukierunkowano na zagrożenia powodziowe jako priorytet absolutny.

Problem

Projekt wartości 200 mln zł, terminarz europejski, system krytyczny dla bezpieczeństwa kraju - i wykonawca, który nie wywiązał się z umowy.

Kiedy Engave przejęło projekt, zegar już tykał. Poprzedni wykonawca zawalił harmonogram i warunki umowy. Dotacja unijna - 200 mln zł z Programu Operacyjnego Innowacyjna Gospodarka - stanęła pod realnym znakiem zapytania. Termin był twardo określony. Nie przez klienta, nie przez kontrakt - przez przepisy europejskie i ryzyko utraty całego finansowania.

Sytuacja zastana w serwerowniach była dokładnie tym, czego można się spodziewać po projekcie, który zmienił wykonawcę w połowie drogi: infrastruktura częściowo wdrożona, częściowo skonfigurowana, bez pełnej dokumentacji, z lukami w architekturze, które trzeba było najpierw zdiagnozować, a dopiero potem naprawić.

Nie było czasu na komfort pełnej analizy przed działaniem. Analiza musiała iść równolegle z wdrożeniem. Każdy dzień zwłoki to był dzień bliżej utraty dotacji - i dzień, w którym ISOK nie działał.

Wyzwanie

Jeden z najbardziej karkołomnych i niemal niemożliwych do wykonania projektów w historii firmy - tak Engave opisuje ISOK do dziś.

Czas: 2,5 miesiąca na pełne wdrożenie.

Normalny projekt tej skali wymaga wielokrotnie więcej. Tutaj nie było opcji rozciągnięcia harmonogramu. Data graniczna była twarda - i nienegocjowalna.

Stan zastawany: niediagnozowana infrastruktura po poprzedniku.

Nie wiadomo było dokładnie, co działa, co nie działa i dlaczego. Sprzęt serwerowo-macierzowy wymagał audytu od zera. Każde odkrycie mogło oznaczać kolejne godziny pracy i kolejne zamówienie.

Stawka: system krytyczny dla bezpieczeństwa publicznego.

ISOK to nie system biznesowy, który można odłożyć na później. To infrastruktura, od której zależy ostrzeganie milionów ludzi przed powodzią. Margines błędu był zerowy.

Wydajność pod obciążeniem szczytowym.

System musi działać sprawnie w normalnych warunkach - ale musi też wytrzymać moment, gdy tysiące ludzi jednocześnie sprawdza mapę zagrożeń podczas realnego zagrożenia. Właśnie wtedy nie może padać.

Rozwiązanie

Praca 24 godziny na dobę. Analiza równolegle z działaniem. Zero kompromisów w zakresie jakości - bo nie było na nie miejsca.

Engave zaczęło od pogłębionej analizy stanu zastanego: sprzęt, oprogramowanie, dotychczasowe prace serwisowe w obu serwerowniach. Diagnoza musiała być szybka i precyzyjna - każda godzina spędzona na analizie to godzina mniej na wdrożenie.

Infrastruktura sprzętowa.

Rekomendacja i realizacja doposażenia serwerowni: rozbudowa pamięci masowej, rozbudowa serwerów, prawidłowe rozmieszczenie komponentów we wszystkich węzłach z uwzględnieniem dostaw uzupełniających. Nowa infrastruktura sieciowa i serwerowa pod wirtualne deskopy.

Wirtualizacja i platforma VMware.

Aktualizacja i uruchomienie sprzętu serwerowo-macierzowego, wdrożenie oprogramowania wirtualizacyjnego VMware, konfiguracja maszyn wirtualnych, rekonfiguracja SAN i macierzy. Platforma zbudowana pod obciążenie szczytowe - nie pod obciążenie przeciętne.

Bezpieczeństwo i ciągłość działania.

Rekonfiguracja LAN i warstw bezpieczeństwa, instalacja i konfiguracja LDAP oraz SSO, naprawa i konfiguracja systemu backupu, wdrożenie mechanizmów Disaster Recovery, wdrożenie systemu monitorowania. Środowisko, które ma nie tylko działać - ale przetrwać awarię.

Dokumentacja powykonawcza.

Projekt techniczny i dokumentacja powykonawcza dla całości wykonanych prac - wymagana przez kontrakt, niezbędna dla odbioru i rozliczenia dotacji. W projekcie przejętym po poprzedniku, gdzie dokumentacja była niekompletna, to był oddzielny, czasochłonny etap.

Są projekty, gdzie liczy się najniższa cena. I są projekty, gdzie liczy się to, czy ktoś dotrze na miejsce w ciągu kilku godzin - i zdoła naprawić to, czego ktoś inny nie naprawił. To są dwa różne rynki. ISOK był zdecydowanie tym drugim.

Wyniki

200 mln

PLN dotacji unijnej uratowanej dzięki terminowemu oddaniu projektu

2,5mies.

od przejęcia zniszczonego projektu do pełnego odbioru systemu

Działa

ISOK funkcjonuje dziś jako publiczny portal ostrzegania przed zagrożeniami hydrologicznymi i meteorologicznymi

Projekt zakończył się w terminie. Dotacja unijna w wysokości 200 mln zł została rozliczona. ISOK został uruchomiony i działa jako publiczny portal, w którym każdy obywatel może sprawdzić, czy jego adres leży na obszarze zagrożonym powodzią.

Mapy Zagrożenia Powodziowego i Mapy Ryzyka Powodziowego - produkty ISOK - zostały uwzględnione w planach zagospodarowania przestrzennego gmin i województw. Polska wypełniła tym samym obowiązek wynikający z Dyrektywy Powodziowej UE.

System ma zaplecze zaprojektowane pod obciążenie szczytowe: działa sprawnie w normalnych warunkach i jest gotowy na moment, gdy tysiące użytkowników jednocześnie sprawdza mapy podczas realnego alarmu powodziowego. Dzięki wdrożonym mechanizmom DR i monitorowania - administratorzy wiedzą o problemach zanim staną się awariami.

Poświadczenie

„Wszystkie prace zostały wykonane z należytą starannością i przy bardzo dużym zaangażowaniu Wykonawcy."

Jacek Wesołowski, Dyrektor Departamentu Informatyzacji, Telekomunikacji i Automatyki - PGW Wody Polskie / IMGW-PIB

Dlaczego to ważne

Powódź tysiąclecia w 1997 roku. 14 mld zł strat w 2010 roku. Polska zbyt dobrze zna cenę braku systemu ostrzegania, który działa zanim woda zaleje domy - nie po tym, jak już to zrobi.

ISOK to infrastruktura krytyczna w najpełniejszym sensie tego słowa: jej awaria nie oznacza przestoju biznesowego, oznacza brak informacji dla ludzi, którzy muszą podjąć decyzję o ewakuacji. Dlatego projekt nie mógł się nie udać - i dlatego Engave pracowało 24 godziny na dobę przez 2,5 miesiąca, żeby tak się nie stało.

Dla Engave ISOK jest dowodem na to, że istnieje kategoria projektów, w których liczy się wyłącznie jedno: czy da się to zrobić, czy nie da. Nie cena, nie harmonogram wygodny dla wykonawcy, nie lista zastrzeżeń w kontrakcie. Da się - i jest to zrobione.

Co to oznacza dla Twojej organizacji

Czy Twoja infrastruktura IT ma plan działania na wypadek, gdy poprzedni wykonawca zawiedzie, termin jest za dwa miesiące, a stawką jest coś, czego nie możesz sobie pozwolić stracić?

Projekty awaryjne, przejęcia po innych wykonawcach, ratowanie systemów krytycznych pod presją czasu - to jest dokładnie sytuacja, w której Engave działa najlepiej. Jeśli masz projekt, który wymaga kogoś, kto dotrze i go skończy - porozmawiajmy.

engave.pl/kontakt

Engave S.A. · engave.pl · Wszelkie prawa zastrzeżone

Skontaktuj się
z Engave

Cyberbezpieczeństwo, opieka IT, digitalizacja  - niezależnie od tematu, chętnie porozmawiamy. Opisz swoją potrzebę, a odpowiedni specjalista odezwie się w ciągu 24h roboczych.

KONTAKT:

biuro@engave.pl
+22 863 13 90
Dyżur techniczny: +48 604 470 151
Ul. Czarodzieja 16, 03-116 Warszawa

Administratorem Twoich danych osobowych jest Engave S.A. z siedzibą w Warszawie, informacje o zasadach przetwarzania danych dostępne są w Polityce Prywatności. Każda zgoda może zostać cofnięta w każdym momencie, bez wpływu na uprzednie przetwarzanie, poprzez kontakt na: biuro@engave.pl