BLOK 1 - WPROWADZENIE DO PIBUK INSTYTUT ŁĄCZNOŚCI, WARSZAWA 2015-11-03
AGENDA 9:15 10:30 Wprowadzenie do PIBUK Przerwa kawowa 10:45 12:15 Live demo wdrożonego oprogramowania Lunch 12:45 14:00 Funkcjonalności software, dyskusja o możliwych zastosowaniach
AGENDA BLOK 1 Geneza projektu Modele pracy Możliwe zastosowania (Network Analytics) Architektura, hardware, wirtualizacja Warstwa software SAS Przebieg projektu
GENEZA PROJEKTU, MODELE PRACY
GENEZA PROJEKTU - POTRZEBY INSTYTUTU ŁĄCZNOŚCI Potrzeby naukowe i badawcze Pracownicy IŁ Projekty badawcze Współpraca z innymi uczelniami i instytutami Usługi komercyjne działalność statutowa Analiza danych pomiarowych, np. z próbników i drive testów Analizy na danych operatorów, np. rozwój i optymalizacja sieci fix i mobile Dodatkowe usługi komercyjne Analytics, Data & Know-How as a Service Analizy i usługi analityczne w chmurze, z danymi i wiedzą Instytutu Łączności
Dane Strukturalne Dane Strumieniowe GENEZA PROJEKTU FUNKCJONALNOŚCI W TYPOWYM PROJEKCIE DANE WEJŚCIOWE PRZETWARZANIE DANYCH STRUMIENIOWYCH Real Time Alerts ANALITYKA I MODELOWANIE WIZUALIZACJA I ALERTY Pomiary Próbniki Internet Filtrowanie, agregacja, reguły biznesowe INTEGRACJA DANYCH Data Mining Modelowanie statystyczne Scoringi, Optymalizacja Dane aplikacyjne Bazy danych Extract Transform Load Repozytorium Analityczne Eksploracja danych, eksploracja statystyczna, wizualizacja danych, raportowanie
GENEZA PROJEKTU ŚRODOWISKA I ELASTYCZNOŚĆ PRACY ŚRODOWISKA BADAWCZE ŚRODOWISKA KOMERCYJNE Pracownicy IŁ Pracownicy naukowi IŁ Projekt 1 Projekt 4 development Pracownicy IŁ Politechnika Warszawska Politechnika Wrocławska Praktykanci IŁ Projekt 2 Projekt 3 testy produkcja Projekt 5 Analizy Analytics & data as a Service development testy produkcja Internet Klient ZARZĄDZANIE ŚRODOWISKAMI Tworzenie, klonowanie, konfiguracja, podłączanie danych, backupy, logi, Analitycy IŁ
GENEZA PROJEKTU ŚRODOWISKA I ELASTYCZNOŚĆ PRACY ŚRODOWISKA BADAWCZE Projekt 4 ŚRODOWISKA KOMERCYJNE Analytics & Data as a Service Chmura obliczeniowa SAS Projekt 5 REPOZYTORIUM ANALITYCZNE POSTGRESQL INNE BAZY RELACYJNE Warstwa danych
MOŻLIWE ZASTOSOWANIA
PRZYKŁADOWE OBSZARY ZASTOSOWAŃ Network Capacity Planning & Deployment Analytics Network Service Quality Assurance Analytics Network Control & Optimization Analytics Network Device Analytics Dostarczenie dokładnych prognoz ruchu i prawdopodobieństwa wysycenia nadajników w celu optymalizacji wydatków przeznaczonego na rozbudowę i modernizację sieci. Pogłębione zrozumienie wpływu poszczególnych urządzeń, elementów infrastruktury i ustawień na doświadczenie klienta poprzez analizę korelacji ze zdarzeniami sieciowymi. Optymalizacja alokacji zasobów sieciowych, redukcja wydatków związanych z rekonfiguracją i pracami modernizacyjnymi. Analityczne wykrywanie potencjalnych problemów technicznych z elementami sieciowymi, planowanie prac diagnostycznych i utrzymaniowych.
NETWORK CAPACITY PLANNING & DEPLOYMENT ANALYTICS Solution allows to forecast bandwidth user demand Identify trends, seasonality and event impacts. Evaluate data traffic and congestion probability per each cell (bubble size traffic size, color congestion probability). Network expansion requirements determined at the cell grain in order to anticipate forecasted traffic for it Opex and Capex investment estimation is based on real pricelists. The value of traffic for cell upgrades can be determined by analyzing the usage patterns that each customer will conduct. Network analytics can help to identify which cell upgrades generate the best ROI, while staying in line with budget constraints.
NETWORK SERVICE QUALITY ASSURANCE ANALYTICS Model objaśniający zależności pomiędzy parametrami jakościowymi a konfiguracją elementów sieci Poprawa jakości sieci poprzez zmianę parametrów konfiguracji wybranych elementów sieci
ARCHITEKTURA, HARDWARE, WIRTUALIZACJA
DLACZEGO BIZNES ORAZ IT POTRZEBUJĄ IAAS INFRASTRUCTURE AS A SERVICE)? 1 Wyzwania 2 Wpływ 3 Odpowiedź Z perspektywy biznesu Zmiany w biznesie oraz wzrost konkurencji na rynku.potrzebuje więcej usług IT dostarczanych w jak najkrótszym czasie pozyskuje usługi, aby jak najszybciej i najoptymalniej kosztowo odpowiedzieć na potrzeby rynku. Z perspektywy IT IT musi odpowiadać na częstsze i bardziej złożone wymagania biznesowe oraz przygotować się na rozwój i zarządzanie tym rozwojem musi wprowadzić automatyzację, aby dostarczać zasoby infrastruktury szybciej, efektywniej kosztowo i w odpowiedniej skali standaryzuje i integruje infrastrukturę IT, aby dostarczyć wydajne zarządzanie cyklem życia usługi, co skutkuje szybszym uzyskaniem usług i wsparcia oraz większymi oszczędnościami.
Efektywność IT KOLEJNY KROK Chmura na pokładzie Wirtualizacja Znacząco obniża koszty Redukuje poziom skomplikowania Zwiększa wysoką dostępność Cloud Przyspiesza wdrożenie usług infrastrukturalnych oraz aplikacji Optymalizuje wykorzystanie zasobów, obniżając koszty Czas
USŁUGI PROFESJONALNE PRZEKSZTAŁCENIE MOŻLIWOŚCI IT W OSIĄGNIĘCIA BIZNESOWE Przybliżenie przełomu w biznesie poprzez wdrożenie skalowalnych innowacji technologicznych, które mają istotny wpływ na jego powodzenie Skrócenie czasu życia projektu od szkicu do satysfakcji użytkownika dzięki aplikacjom i rozwiązaniom VMware Redukcja kosztów i maksymalizacja zwrotu z inwestycji w chmurę vrealizeautomation dzięki wykorzystaniu pełnego zasobu zalet i korzyści oferowanych przez to rozwiązanie Uproszczenie Chmury i zwiększenie jej niezawodności, efektywności i skuteczności poprzez właściwą ocenę gotowości operacyjnej klienta, rozwijanie Chmury z myślą o jej wydajności i wysokiej dostępności oraz poleganie na fachowej wiedzy z zakresu kompatybilności oprogramowania i zarządzania przedsiębiorstwem
CYKL ŻYCIA USŁUGI 1 ZDEFINIUJ Zadefiniuj Grupę Biznesową i zabudżetuj ją 6 ZARZĄDZAJ Optymalizuj i odzyskuj zasoby, bazując na polisach i kosztach 2 STWÓRZ Zarezerwuj zasoby i ustal zasady korzystania z nich 5 MONITORUJ Monitoruj całą infrastrukturę oraz użytkowników URUCHOM Uruchom usługi korzystające z zasobów chmury prywatnej, publicznej oraz hybrydowej 3 4 KONTROLUJ Kontroluj wykorzystanie zasobów i koszty 17
PRZEJRZYSTE KOSZTY I CENY USŁUG Koszt całkowity W oparciu o wartości zdefiniowane oraz integrację z platformą wirtualizacji Koszt jednostkowy CPU, pamięć, zasoby dyskowe Automatyczna wycena wzorców Kto czego używa Koszt i zużycie w przeliczeniu na jednostkę biznesową, usługę Automatyczna generacja raportów finansowych
JEDNOLITY KATALOG USŁUG: APLIKACJE, INFRASTRUKTURA, XAAS, PULPITY Logo Personalizacja portalu Uniwersalny portal Kategorie usług Elastyczność w dodawaniu nowych usług Usługi indywidualne Zarządzanie uprawnieniami per usługa
KONCEPCJA PLATFORMY Projekt 1 Projekt 2 Projekt 3 Projekt n USŁUGI Przykładowy System Badań i Diagnozowania WIRTUALIZACJA Użytkownicy INFRASTRUKTURA
WARSTWA SOFTWARE
PLATFORMA PODSTAWOWE KOMPONENTY PLATFORMY Warstwa danych Przygotowanie danych Analizy danych Wizualizacja danych Modelowanie danych Raportowanie (VA i OLAP)
WARSTWA DANYCH REPOZYTORIUM DANYCH ŹRÓDŁOWYCH Źródłem danych dla procesów działających w PSBD jest Repozytorium Danych Źródłowych Projekt A M C EM Dane wynikowe w postaci agregatów i dane operacyjne przechowywane będą w tabelach w bazie danych PostgreSQL ASC, KML (SCP) Repozytorium Danych Źródłowych (NFS) (NFS) Projekt B M C DI System PSBD może być zasilany danymi poprzez dwa (WS/HTTS/FTP/etc.) (NFS) interfejsy: Baza danych MySQL Pliki tekstowe w formacie ASC/KML ładowane w trybie wsadowym do inne systemy MySQL (ACCESS to MySQL) PSBD Agregaty Kostka OLAP Raporty M C DI VA O (ACCESS to PostgreSQL) PostgreSQL Repozytorium Danych Źródłowych
PRZYGOTOWANIE DANYCH PROCESY PRZETWARZANIA DANYCH Intuicyjne narzędzie do tworzenia procesów przetwarzania danych Elastyczny język przetwarzań, dostarczający pełen zestaw funkcji i zadań walidujących, czyszczących i przekształcających dane do żądanej postaci (ponad 300 przekształceń) Adaptery do innych systemów i baz danych (SAS/ACCESS to MySQL, PostgreSQL, ODBC, Oracle, MS SQL Server, Sybase IQ, Sybase, Hadoop, PC Files) Bogate możliwości wczytywania danych z formatów plików płaskich np. XML, CSV, TXT, Wykorzystanie procesów ETL oraz ELT Zarządzanie zmianą na poziomie całej ścieżki przetwarzania danych Change Analysis Impact Analysis Reverse Impact Analysis (Data Lineage) Import/export metadanych Narzędzia harmonogramowania zadań Wersjonowanie
ANALIZY DANYCH NARZĘDZIE PRACY ANALITYKA SAS Enterprise Guide to aplikacja kliencka, która dzięki wygodnemu interfejsowi daje użytkownikowi możliwość dostępu do różnych źródeł danych, interaktywnego przetwarzania danych, łatwego wykonywania analiz przy wykorzystaniu procedur dostępnych w SAS. Kilkadziesiąt kreatorów przygotowania danych do analiz z możliwością tworzenia zmiennych wyliczanych Możliwość budowy procesów analiz o różnym stopniu złożoności z wykorzystaniem funkcji statystycznych i optymalizacyjnych Elastyczny dostęp do danych w dowolnym formacie (Oracle, Hadoop, MS SQL, pliki płaskie, inne ) Intuicyjne tworzenie reguł i warunków wyboru danych Bogate możliwości prezentacji wyników w postaci tabelarycznej lub graficznej
Visual Analytics WIZUALIZACJA DANYCH WIZUALNA ANALIZA DANYCH I RAPORTOWANIE Narzędzie do szybkiej eksploracji i wizualizacji ogromnych wolumenów danych: automatyczny dobór postaci wykresu, kilkadziesiąt form wizualizacji (w tym wykresy mapowe) narzędzia do zaawansowanych analiz (korelacja, regresja, szeregi czasowe) Samodzielne raportowanie - dashboardy, analizy hierarchiczne, drążenie do detalu, alertowanie, szybkie tworzenie interaktywnych zestawień Tworzenie i dystrybucja raportów oraz analiz przez przeglądarkę, kanały mobilne oraz MS Office Rozwiązanie dla analityków i twórców raportów (możliwość pełnego dostosowania wyglądu aplikacji)
MODELOWANIE DANYCH NARZĘDZIE DO BUDOWY ZAWANSOWANYCH MODELI ANALITYCZNYCH Bardzo bogate funkcjonalnie narzędzie do budowy zaawansowanych modeli analitycznych Szeroka paleta narzędzi do modelowania predykcyjnego (regresja, drzewa decyzyjne, sieci neuronowe i wiele innych), segmentacji, analizy powiązań oraz sekwencji, analizy przeżycia i modelowania szeregów czasowych Blisko 20 metod modelowania Szeroka paleta narzędzi do przygotowania i eksploracji danych Interaktywne porównanie, testowanie i walidacja modeli, Zautomatyzowany i zoptymalizowany proces scoringu, Narzędzie otwarte, łatwe w rozbudowie (możliwość integracji z R)
RAPORTOWANIE OLAP WIELOWYMIAROWE RAPORTOWANIE NA DANYCH POMIAROWYCH W ramach systemu PSBD została utworzona kostka OLAP umożliwiająca wykonywanie przez użytkowników wielowymiarowych analiz danych Użytkownicy mają możliwość zarówno interaktywnej pracy z kostką jak i tworzenia statycznych raportów bazujących na danych zawartych w kostce OLAP Kostka OLAP jest zbudowana na podstawie danych źródłowych udostępnionych systemowi PSBD z systemu MLB
PRZEBIEG PROJEKTU
PODSTAWOWE INFORMACJE O PROJEKCIE - ZAKRES Zakres projektu dostawa oprogramowania dostawa i instalacja serwerów, macierzy, systemu tworzenia kopii zapasowych wdrożenie, w tym zainstalowanie, skonfigurowanie i integracja oprogramowania zrealizowanie szkoleń i warsztatów dla pracowników Zamawiającego zaprojektowanie, zaimplementowanie i wdrożenie na platformie informatycznej PSBD dostawa dokumentacji dostarczonego sprzętu i oprogramowania świadczenie przez usług serwisu (gwarancyjnych, konserwacyjnych i powdrożeniowych)
PODSTAWOWE INFORMACJE O PROJEKCIE - HARMONOGRAM Start projektu - lipiec 2015 Etap 1 dostawa sprzętu i oprogramowania - 60 dni Etap 2 instalacja i konfiguracja sprzętu i oprogramowania - 90 dni Etap 3 skonfigurowanie i zintegrowanie rozwiązania; zaprojektowanie, implementacja i wdrożenie PSBD - 120 dni
PODSTAWOWE INFORMACJE O PROJEKCIE - SZKOLENIA Szkolenia podział: Administratorzy Analitycy Zaawansowani Analitycy Implementacyjne Ponad 30 typów szkoleń Ponad 90 dni szkoleniowych w okresie 3 miesięcy
Zapraszamy na przerwę