dr inż. Maciej Kiewra Prezentacja wygłoszona na konferencji BI vs Big Data podczas Kongresu GigaCon Warszawa, 16.04.2014 r.
Big Data w praktyce, z perspektywy konsultanta Business Intelligence
Parę słów o sobie 10 lat pracy z Business Intelligence Doktor nauk technicznych w zakresie informatyki Do 2010 pracownik naukowo-dydaktyczny Politechniki Wrocławskiej Współtwórca QBICO (2007) Srebrny Partner Microsoft Data Platform i Business Intelligence Wykonawstwo projektów BI w kraju i za granicą Usługi doradcze Audyty rozwiązań BI Stress testy systemów informatycznych
Zagadka na dobry początek: Kiedy zostało napisane poniższe zdanie? Dzisiaj rozmiary danych generowanych przez komputery przekroczyły zdolności przyswajania człowieka Tou, Julius T. "Knowledge engineering". International Journal of Computer & Information Sciences 9, no. 4 (1980): 275-285.
Big Data w drugim kwartale 2014 roku (1/2) Gartner, wrzesień 2013: 64% procent przedsiębiorstw zainwestowało lub planuje inwestować w Big Data w 2013 roku Mówimy 0 64% z listy 720 partnerów Gartnera Mniej niż 8% partnerów wdrożyło rozwiązanie Big Data Ilu partnerów Gartnera rzeczywiście używa Big Data? Źródło: http://www.gartner.com/newsroom/id/2593815
Big Data w drugim kwartale 2014 roku (2/2) IDG, styczeń 2014: Prawdziwe jest też zdanie, że ponad połowa przedsiębiorstw nie planuje w najbliższym czasie wdrożenia Big Data Źródło: http://www.idgenterprise.com/report/big-data-2
Big Data a zwrot z inwestycji? Big Data a zwrot z inwestycji Dlaczego przedsiębiorstwa (nie)inwestują w Big Data?
Dlaczego przedsiębiorstwa inwestują w BI? Zarząd chce wiedzieć, które produkty są dochodowe Raportowanie z rozproszonych/przestarzałych systemów dziedzinowych jest trudne bądź niemożliwe Uzyskanie większej samodzielności użytkowników biznesowych Wierzą, że da się ograniczyć ekseliozę Konieczność przesyłania skonsolidowanych danych do zewnętrznych instytucji np. EMIR, Dodd Frank Lepsze poznanie potrzeb klientów (analiza RFM, lejki sprzedażowe, analiza koszykowa, obliczanie konwersji)
Powody inwestycji w Big Data Bo raporty działają zbyt wolno Bo nasz dział IT chce się nauczyć Hadoopa Bo Zarząd twierdzi, że dzięki gromadzeniu wszystkich danych o kliencie osiągniemy przewagę konkurencyjną Bo jest rzeczywista potrzeba
W którym przypadku mówimy o Big Data? Śledzenie kontaktów z naszym Klientem w kontekście wielu kanałów (e-mail, telefon, facebook, strona WWW) Klasyfikacja klienta na podstawie kontaktów i zakupionych towarów i usług Prognozowanie wydatków na wynagrodzenia na podstawie danych historycznych (np. pod koniec roku) Szacowanie zaangażowania pracowników w projekty na podstawie prawdopodobieństwa otrzymania danego zamówienia
Czy Król jest nagi? Pewnego dnia przybyło tam dwu oszustów, podali się za tkaczy i powiedzieli, że potrafią tkać najpiękniejsze materie, (...) szaty uszyte z tej tkaniny miały cudowną własność: były niewidzialne dla każdego, kto nie nadawał się do swego urzędu albo też był zupełnie głupi. J. Ch. Andresen Nowe szaty cesarza http://antoniajo.blogspot.com/2010/08 /artist-series-michael-logsdon.html
Rzeczywiste wykorzystanie Big Data Bardzo duży rozmiar danych Brak określonej struktury danych Analiza emocji towarzyszących komentowanym produktom (ang. sentiment analysis) Wyszukiwanie podobnych przypadków w opisach chorób sporządzanych przez lekarzy Przetwarzanie danych tekstowych (analiza logów serwera) Implementacja autorskich algorytmów z zakresu eksploracji danych
BI i Big Data czy jest możliwa symbioza? Technologie z rodziny Big Data pomog(aj)ą w przygotowawczych procesach przetwarzania danych tzw. ETL (Extract, Trasform, Load) Dane gromadzone przez przedsiębiorstwo to coraz częściej mała wysepka wśród mórz i oceanów zewnętrznych danych
Jak połączyć BI i Big Data?
Czas na krótką demonstrację (prezentowane na konferencji narzędzia mogą Państwo przetestować pod adresem: http://toa.qbico.pl/demo.aspx )
Tools for Online Analytics (TOA) Dzięki narzędziom użytkownik biznesowy sam zarzuca sieci w morzu danych w poszukiwaniu pereł. Uzyskanie danych trwa znacznie krócej niż w przypadku tradycyjnego ETL. Analityk nie jest uzależniony od działu IT ani od dostawców zewnętrznych.
Podsumowanie Klasyczny Business Intelligence i Big Data mogą żyć w symbiozie Integracja na poziomie: Procesu ETL zasilającego system BI Dane zewnętrzne Big Data dane wewnętrzne system klasy BI Przed inwestycją w Big Data zastanów się czy: Nie wystarczy rozwiązanie klasy Business Intelligence Uzyskany zostanie wystarczający zwrot z inwestycji
Dziękuję za uwagę i zapraszam do współpracy Maciej Kiewra E-mail: mkiewra@qbico.pl http://www.qbico.pl