Data Services możliwości rozwoju Blok I Standadrowy nowy sait problemy związane z tworzeniem nowego datacenter Blok II VCE vblock i EMC Isilon - wykorzystanie infrastruktury kowergentnej na przykładzie projektu Big Data Copyright Capgemini 2015. All Rights Reserved 1
Capgemini Infrastructure Services Data Services Operations Krzysztof Skowron
Employment growth Capgemini Poland 5854 6001 6500 Poznań Warsaw 5132 4504 Wrocław Opole Katowice Kraków 2344 3247 3807 3506 1842 37 56 68 118 219 276 338 454 605 1068 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 Advisor Deck Infra Services November 2014 Copyright Capgemini 2014. All Rights Reserved 3
Capgemini in Poland Consulting Services Warszawa Cloud Application Services Infrastructure Management Wrocław Business Services Opole Katowice Kraków Advisor Deck Infra Services November 2014 Copyright Capgemini 2014. All Rights Reserved 4
Eastern Europe Infrastructure Services Transformational Outsourcing User Services Incident Support Ordering Services Access Management Workplace Services Multi-lingual Support Digital and Inteligent Service Centres IT Infrastructure Data Services Remote Infrastructure Management Infrastructure Monitoring Application Management IT Operations Management Product Specific Services ITIL Service Management Transformation Services Incident Management Problem Management Configuration and Change Management Release Management Business Continuity Service Integration & Service Management Virtualization & Productivity Cloud Processing Delivery Excellence Advisor Deck Infra Services November 2014 Copyright Capgemini 2014. All Rights Reserved 5
Data Services key info 200+ customers Strategic partners Industry recognition Strategic Supplier Excellence Award awarded by Bayer 2014 AllianceOne Mission Critical partner of the year awarded by HP - 2013 Positioned in Challenger quadrant in Gartner s MQ 2013 Our Data center assets 39 datacenters in 11 countries 28,000 m2 datacenter space 44,000+ servers managed 50PB+ storage, 60PB+ backup managed 11,000+ databases managed 6000+ strong global team 1000+ SME s on transformation 1000+ Wintel resources 500+ Unix and Linux resources 500+ storage systems professionals 1000+ software services resources 1000+ IMOC resources Platforms and solutions Industry recognized process model Next Gen. Platforms Hosted ITSM Platform (BMC+HP) CLOUD SERVICE BROKERING Platform Data Service Automation Platform Oracle Engineered Platform Database Auto Heal Platform Industrialized services SRM as a Service SAP HANA as a Service (Private cloud) Oracle Engineered platform as a Service Oracle DB Platform as a Service Windows 2K3 Migration service Copyright Capgemini 2015. All Rights Reserved 6
Upgrade Your Career Copyright Capgemini 2015. All Rights Reserved 8
We are looking for... https://www.pl.capgemini.com/kariera/oferty-pracy https://www.pl.capgemini.com/kariera/linux-unix-consultant https://www.pl.capgemini.com/kariera/linux-administrator https://www.pl.capgemini.com/kariera/nix-systems-nagios-engineer-0 https://www.pl.capgemini.com/kariera/scom-systems-consultant-0 https://www.pl.capgemini.com/kariera/scom-systems-engineer https://www.pl.capgemini.com/kariera/windows-system-consultant https://www.pl.capgemini.com/kariera/windows-system-engineer https://www.pl.capgemini.com/kariera/vmware-consultant https://www.pl.capgemini.com/kariera/vmware-engineer https://www.pl.capgemini.com/kariera/storage-system-engineer https://www.pl.capgemini.com/storage-system-consultant https://www.pl.capgemini.com/backup-system-consultant https://www.pl.capgemini.com/kariera/backup-system-engineer https://www.pl.capgemini.com/kariera/infrastructure-engineer Copyright Capgemini 2015. All Rights Reserved 9
About Capgemini Now with 180,000 people in over 40 countries, Capgemini is one of the world's foremost providers of consulting, technology and outsourcing services. The Group reported 2014 global revenues of EUR 10.573 billion. Together with its clients, Capgemini creates and delivers business, technology and digital solutions that fit their needs, enabling them to achieve innovation and competitiveness. A deeply multicultural organization, Capgemini has developed its own way of working, the Collaborative Business Experience TM, and draws on Rightshore, its worldwide delivery model. Rightshore is a trademark belonging to Capgemini www.capgemini.com The information contained in this presentation is proprietary. 2014 Capgemini. All rights reserved.
Standardowy nowy sait problemy zwiazane z tworzeniem nowego datacenter
O mnie Krzysztof Podobiński Infrastructure/ VMware Consultant ponad10 lat doświadczenia w IT 5 lat w Capgemini Application Support and Development Engineer Senior Infrastructure/VMware Engineer Trener IT Projektowane i wdrażanie nowych środowisk opartych o rozwiązania VMware, Citrix oraz NetApp Zarządzenie i monitorowanie isniejącej infrastruktury OnCommand, DFM server Rozwiązywanie problemów sprzętowych HP, Dell, IBM, Cisco Tworzenia i implementacja zmian w wirtualnym środowisku Koordynacja współpracy z zewnętrznymi dostawcami Copyright Capgemini 2012. All Rights Reserved 12
Agenda Założenia początkowe Rzeczywistość Problemy Rozwiązania Copyright Capgemini 2012. All Rights Reserved 13
Założenia początkowe Liczba wirtualnych maszyn ~30 Kilka VM wymagajacych wysokiej wydajności Odporność na awarie pełna nadmiarowość Cena podstawowe modele i licencje Elastyczność Copyright Capgemini 2012. All Rights Reserved 14
Założenia początkowe standardowy sajt ESXi servers 2 x HP proliant DL 380 G9 Storage z podwójnym kontrolerem NetApp 2520 Network switch 2 x Cisco switches (1Gb/s) Storage switch 2x low end Dell switches (1Gb/s) Medium standard ethernet Storage protocol NFS Copyright Capgemini 2012. All Rights Reserved 15
Założenia początkowe standardowy sajt Network Switch Network Switch Ząrządzanie Sieć produkcyjna VMware ESX VMware ESX Copyright Capgemini 2012. All Rights Reserved 16
Założenia początkowe standardowy sajt VMware ESX VMware ESX Storage Vmotion Storage Switch INTERCONNECT Storage Switch Storage NetApp HA CLUSTER Storage NetApp Copyright Capgemini 2012. All Rights Reserved 17
Rzeczywistość Migracja z istniejącej infrastruktury Ponad 100 VM + kolejne w planach Kilkanaście VM High Perf z Exchnage server Kilkanaście VM High Perf z SQL server Kilkanaście VM wiekszych niż 1TB Copyright Capgemini 2012. All Rights Reserved 18
Problemy Wydajność ESXI CPU, RAM, HA Wydajność storage IOPS, latency Przestrzeń dyskowa Połączenia 1Gb/s Copyright Capgemini 2012. All Rights Reserved 19
Rozwiązania Wydajność ESXI CPU, RAM, HA Więcej CPU, Memory Dodatkowe ESXI Wydajność storage IOPS, latency Przestrzeń dyskowa Więcej dysków Dyski SSD Dyski SATA Połączenia 1Gb/s Połączenia 10Gb/s Copyright Capgemini 2012. All Rights Reserved 20
Rozwiązania - ESXI Dodatkowe CPU CPU z większą ilością rdzeni Dodatkowa pamięć Brak wolnych slotów Konieczność wyłączenia całego środowiska Konieczność wyłączenia całego środowiska Dodatkowe ESXi Wystarczające zasoby w przypadku awarii Copyright Capgemini 2012. All Rights Reserved 21
Rozwiązania - Storage Więcej dysków SAS Dyski SSD Wysoka wydajność Liczba dysków Wysoka cena Dyski SATA Tanie Mała wydajność Hybryda SSD+SATA Wysoka wydajność Akceptowalna cena Copyright Capgemini 2012. All Rights Reserved 22
NFS Rozwiązania - Storage Rozmiar dysków SATA SSD jako cache dla random IOPS Inteligentny auto Tiering Volume 1 Volume2 Aggregate Disk SSD Disk SSD Disk SSD SSD Spare Disk SATA Disk SATA Disk SATA Disk SATA Disk SATA Disk SATA SATA Spare Copyright Capgemini 2012. All Rights Reserved 23
Rozwiązania - Storage Żądanie odczytu Memory buffers Losowy odczyt SSD Flash Pool SATA HDD Copyright Capgemini 2012. All Rights Reserved 24
Rozwiązania - Storage Auto Tiering - odczyt Załadowanie odczyt odczyt odczyt hot warm neutral cold delete czyszczenie czyszczenie czyszczenie czyszczenie Copyright Capgemini 2012. All Rights Reserved 25
Rozwiązania - Storage Żądanie zapisu Potwierdzenie zapisu NVRAM SSD Flash Pool SATA HDD Copyright Capgemini 2012. All Rights Reserved 26
Rozwiązania - Storage Auto Tiering - zapis Załadowanie odczyt neutral cold HDD czyszczenie czyszczenie Copyright Capgemini 2012. All Rights Reserved 27
Rozwiązania - Sieć Storage Switch INTERCONNECT Storage Switch LAG 1 LAG 2 Brak switchy 10Gb/s Brak Muli LAG na switchach LAG Second Level LAG Second level interface group Aktywne Pasywne Storage NetApp Copyright Capgemini 2012. All Rights Reserved 28
Rozwiązania - Sieć Vkernel 1 192.168.147.1 VMware ESX Vkernel 2 192.168.148.1 VMware ESX 192.168.147.2 192.168.148.2 Storage Switch INTERCONNECT Storage Switch 192.168.147.5 192.168.148.5 Storage NetApp Storage NetApp Copyright Capgemini 2012. All Rights Reserved 29
Rozwiązania - Sieć 192.168.147.1 192.168.147.2 192.168.147.3 192.168.147.4 Volume 1 192.168.147.5 Volume 2 192.168.147.6 Volume 3 192.168.147.7 Volume 4 192.168.147.5 Storage switch LACP Storage 192.168.147.5 Storage 192.168.147.5 192.168.147.6 192.168.147.7 Copyright Capgemini 2012. All Rights Reserved 30
Efekt końcowy Liczba zmigrowanych VM >100 Srednie storage latency 5ms Pełna odporność na awarie Cena podstawowe modele i licencje Możliwość dalszej rozbudowy Copyright Capgemini 2012. All Rights Reserved 31
Dziękuję, Copyright Capgemini 2012. All Rights Reserved 32
About Capgemini With around 120,000 people in 40 countries, Capgemini is one of the world's foremost providers of consulting, technology and outsourcing services. The Group reported 2011 global revenues of EUR 9.7 billion. Together with its clients, Capgemini creates and delivers business and technology solutions that fit their needs and drive the results they want. A deeply multicultural organization, Capgemini has developed its own way of working, the Collaborative Business Experience TM, and draws on Rightshore, its worldwide delivery model. Krzysztof Podobiński Infrastructure/VMware Consultant krzysztof.podobinski@capgemini.com www.capgemini.com The information contained in this presentation is proprietary. 2012 Capgemini. All rights reserved. Rightshore is a trademark belonging to Capgemini.
Big Data Czym jest Big Data? Volume rozmiar danych giga/tera/petabajty Variety różnorodność, często bez struktury np. maile, zdjęcia, Tweety Velocity szybkość przyrastania danych Copyright Capgemini 2015. All Rights Reserved 35
Big Data Jakie możliwości daje efektywne przetwarzanie takich danych? Postęp w ochronie zdrowia (testy DNA, smartwatch, informacje z Tweet ów) Optymalizacja procesów produkcji (dane z linii produkcyjnej i czujników użytkowanych produktów) Dynamiczne dopasowanie reklamy i cen oferowanych produktów (Target, Red Roof Inn) Copyright Capgemini 2015. All Rights Reserved 36
Infrastruktura pod Big Data - wybór Możliwe dwa podejścia: Commodity hardware, tradycyjne Data Center: Niskie koszty Apache Hadoop tworzony z myślą o commodity hardware Maszyny wirtualne, sprzęt klasy enterprise, wsparcie producenta: Wyższe koszty początkowe Wysoka jakość świadczonych usług Duża elastyczność środowiska i możliwość rozbudowy Copyright Capgemini 2015. All Rights Reserved 37
(Very) Low End Copyright Capgemini 2015. All Rights Reserved 38
Hardware Infrastruktura konwergentna Różne elementy infrastruktury IT (serwery, urządzenia sieciowe, macierze dyskowe, wirtualizacja) zarządzane jako jeden moduł, dobrane pod kątem wydajności i kompatybilności. Problemy w tradycyjnym Data Center: Kompatybilność Wsparcie i troubleshooting Rozbudowa i wykorzystanie zasobów Copyright Capgemini 2015. All Rights Reserved 39
Hardware VCE vblock VCE początkowo spółka joint venture VMware, Cisco, EMC. Obecnie część EMC. Serwery Cisco Storage EMC Urządzenia sieciowe Cisco Wirtualizacja VMware Wspólny support Wersjonowanie jak jeden produkt Kompatybilność komponentów Copyright Capgemini 2015. All Rights Reserved 40
vblock Support i wersjonowanie Pomimo różnych producentów komponentów wsparcie jak dla jednego produktu ze strony VCE Kompatybilność aktualizacji firmware i software wszystkich komponentów testowana pod kątem całego vblocka RCM Release Certification Matrix Najnowsza wersja wspierana przez producenta (np ESXi) wsparcie VCE dla vblock Status całego vblocka oraz zgodność z RCM monitorowane przez VCE Vision Intelligent Operations Copyright Capgemini 2015. All Rights Reserved 41
vblock - wersjonowanie Copyright Capgemini 2015. All Rights Reserved 42
Storage dla Big Data Macierz w vblocku nie wystarczająca na potrzeby BigData EMC Isilon: Budowa modułowa Duża wydajność Łatwy w rozbudowie ( scale-out ) EMC Wieloprotokołowy (HDFS) Wystąpił w filmie Batman vs Superman Copyright Capgemini 2015. All Rights Reserved 43
Isilon - Parametry Max 144 moduły w klastrze Max 50PB Max > 3M IOPS Elastyczna rozbudowa zgodnie z potrzebami dzięki kilku seriom modułów: S High Performance X High Versatility NL duża przestrzeń dyskowa, wersja ekonomiczna HD High Density, duża przestrzeń dyskowa, gęsto upakowana (3PB/rack) Copyright Capgemini 2015. All Rights Reserved 44
Silnik Big Data Hortonworks Hadoop Copyright Capgemini 2015. All Rights Reserved 45
vblock 340 - Komponenty Osobna infrastruktura produkcyjna i zarządzająca Produkcja: 16x Cisco Blade B200 M3 Intel(R) Xeon(R) CPU 2.20GHz 20 cores 512 gb RAM Macierz VNX5600-62TB Urządzenia sieciowe Cisco: Nexus 5k Nexus 1000v (Virtual Appliance) Management: 3x Serwery Rack Cisco Macierz EMC VNXe Cisco Nexus 3k Copyright Capgemini 2015. All Rights Reserved 46
Architektura - vblock Copyright Capgemini 2015. All Rights Reserved 47
Klaster EMC Isilon Komponenty 7x moduły X410: Storage Processor: Intel Xeon Processor Dual, 8-core Pamięć: 128GB Dyski SSD: 1,6TB (L3 cache) Dyski HDD: 102TB Front-End: 2x Nexus 5K, 10Gb Back-End: 2x Infiniband Switch, 40Gb Całkowita przestrzeń dyskowa klastra: 644TB (protekcja 1 node + 2 dyski) Copyright Capgemini 2015. All Rights Reserved 48
Architektura vblock z Isilon Copyright Capgemini 2015. All Rights Reserved 49
Vmware vsphere: ESXi Vitual Distributed Switch HA DRS SDRS vrealize Automation Copyright Capgemini 2015. All Rights Reserved 50
Vmware vrealize Automation Copyright Capgemini 2015. All Rights Reserved 51
Vmware vrealize Automation Copyright Capgemini 2015. All Rights Reserved 52
Rezultat widok vcenter Copyright Capgemini 2015. All Rights Reserved 53
Rezultat Przejrzysta infrastruktura Łatwa w rozbudowie Dopasowana do potrzeb Big Data Efektywne wykorzystanie dużych zasobów Czołowi producenci sprzętu Prosty model wsparcia Wirtualizacja i automatyzacja Infrastruktura gotowa do szybkiego dostarczania wymagających środowisk Business Data Lake zgodnie z oczekiwaniami klienta oraz łatwa w utrzymaniu i rozbudowie wraz z rosnącym zapotrzebowaniem na zasoby. Copyright Capgemini 2015. All Rights Reserved 54
Co dalej? Bliźniacza infrastruktura w drugim datacenter (replikacja, DRP) Wirtualizacja warstwy sieciowej Vmware NSX, VCE VxBlock Dalsza automatyzacja Copyright Capgemini 2015. All Rights Reserved 55
About Capgemini With more than 120,000 people in 40 countries, Capgemini is one of the world's foremost providers of consulting, technology and outsourcing services. The Group reported 2011 global revenues of EUR 9.7 billion. Together with its clients, Capgemini creates and delivers business and technology solutions that fit their needs and drive the results they want. A deeply multicultural organization, Capgemini has developed its own way of working, the Collaborative Business Experience TM, and draws on Rightshore, its worldwide delivery model. Rightshore is a trademark belonging to Capgemini www.capgemini.com The information contained in this presentation is proprietary. 2012 Capgemini. All rights reserved.
30.06.2016 30 czerwca 2016 Miejsce: Atrium, ul. Graniczna 54 Start: 18:00 Zakończenie: 21:00 Zapisy: www.pl.capgemini.com/capgemini-by-night Sesja HR: informacje o procesie rekrutacji oraz możliwościach rozwoju Case Study: Automatyzacja procesów finansowo-księgowych Office Tour Copyright Capgemini 2015. All Rights Reserved 57