VDI na OpenStack: jak to zrobić i czy ma to sens? Tomasz Dubilis

Transkrypt

1 VDI na OpenStack: jak to zrobić i czy ma to sens? Tomasz Dubilis

2 WIL PW 2 ~2005 pierwszy wannabe-klaster z MPI i kolejkowaniem 2010 pierwszy prawdziwy klaster HPC, RDMA, Infiniband, LustreFS pierwszeproblemy biblioteki,dependencyhell poszukiwanielepszychtechnologii 2015 Pierwszy OpenStack(Mitaka, Hammer)

3 WIL PW w liczbach 3 60 serwerów obliczeniowych 18 węzłów CEPH 2 węzły Neutron 3 węzły ovirt Sieć 10GBit + 56Gbit Infiniband

4 WIL PW w liczbach vcpu(e5-2680v3 2.5/3.3GHz) 5.5TB RAM 523TB (~0.5PB) RAW CEPH 2 x 40Gbit -external 2 x 10Gbit + 56Gbit Infiniband

5 WIL PW do czego używamy 5 Dlanas: - Symulacje - Tworzenie ad-hoc systemów obliczeniowych dla konkretnych przypadków (obliczenia nanomateriałów,symulacje obciążeniowe,katastrofy budowlane) Dlainnych: - Wydział Fizyki kolaboracja z CERN/projekt Alice - Inne:symulacjesiecineuronowych,procesówdecyzyjnych HPCaaS Szukanie nowych zastosowań

6 WIL PW zalety 6 Dynamicznaalokacjazasobów Łatwe zarządzanie środowiskiem Możliwość pełnejadministracjizasobami w tenancie Szybkośćiwydajność

7 VDI Wirtualny Pulpit 7 PocoVDInauczelni? Możliwość udostępniania studentom licencjonowanego oprogramowania Zarządzanie obrazami Czyróżni się to od VDIw środowisku komercyjnym? Większe zróżnicowanie środowiska hardware& software Większe wymaganiasprzętowe Czasczasczas uruchomienia,sesji,życiapulpitu Uczelnia vs Korporacja łatwiej czy trudniej?

8 VDI Wirtualne Laboratorium Obliczeniowe 8 Mamy doświadczenie z klasycznym VDI Produkt komercyjny Kosztlicencji Konieczność posiadania wydajnejmacierzy, najlepiejflash only Ale wsparcie dlavgpu Na klastrze 8 serwerów tylko kilkadziesiąt słabych lub kilkanaście mocnych sesji

9 9

10 Windows na OpenStacku co w tym trudnego? 10 KVM! Sterowniki VirtIO Storage(dysk) Sieć Acozanonimizacjąobrazu? Linux-cloud-inittools Windows- Sysprep?

11 Cloudbase na potrzeby PoC 11 GotoweobrazyzWindowsServer2012 free Przygotowane skrypty w Powershellu umożliwiające wygenerowanie obrazów dla dowolnego współczesnego systemu Windows, np. 10 (plus poprawki, sterowniki, instalacje.msiitp.)podwindows(hyper-v) Community/suport RTFM-

12 Tak! Sysprep! Cloudbase-init 12 HTTP i ConfigDriveV2 metadata Umożliwia: Tworzenie użytkowników Ustawianie haseł Statyczną konfigurację sieci Ustawienia hostname Prekonfiguracjęz użyciem skryptów Napisany w Pythonie Open source, licencja Apache 2

13 Cloudbase-schemat 13 Sysprepping Configurationfile File execution Services OpenStack ale też Amazon EC2 czyopennebula Plugins

14 Cloudbase -Plugins 14 Settinghostname(main) Creating user(main) Settingpassword(main) Static networking(main) Savingpublic keys(main) Volume expanding(main) WinRMlistener(main) WinRMcertificate(main) Scripts execution(main) Licensing(main) Clock synchronization(pre-networking) MTU customization(pre-metadata-discovery) Userdata(main) Configuring selected plugins

15 Przecież to się MUSI dać sensownie ZARZĄDZAĆ 15

16 Dobre? Dobre, ale nie rób tego więcej 16

17 Leostream? 17

18 Leostream! 18

19 OpenStack rozbudowa 2019 pod kątem VDI 19 4 węzły obliczeniowe CPU-only 2 x Intel Xeon Gold 2.3GHz 3 węzły obliczeniowe z GPU! 2 x Tesla M10 (2560 CUDA, 32GB RAM)

20 OpenStack rozbudowa pod kątem VDI 20 3 węzły CEPH Tylko dyski SSD 6 x 3,84TB Łącznie ~70TB flash

21 Leostream kompletne środowisko 21 Po stronie serwerowej Brokerpołączeń Brama Postroniewirtualnegohosta Agent Po stronie klienta Aplikacjadostępowe

22 Architektura 22

23 W jaki sposób się dostać? Jakim protokołem? 23 Dedykowanaaplikacja LeostreamConnectforWindows(natywny) LeostramConnectforLinux&Mac(Java) Przeglądarka HTML5(guacd) ThinClient

24 Jakim protokołem, po co to? 24 Protokoły: RDP HPRGS Teradici PCoIP Mechdyne TGX Ale też SPICE VNC Inne

25 Agent w systemie gościa 25 Codaje? USB Monitorowanie Drukowanie Najakieplatformy? LeostreamAgentforWindows(natywny) LeostramAgentforLinux&Mac(Java)

26 Jeszcze jeden rzut okiem 26

27 Workflow czyli jak to złożyć w całość 27 Tworzymy i edytujemy obraz bazowy na dowolnym hypervizorze(virtualbox, Vmware, Hyper-V) Pamiętamy o sterownikach VirtIO Cloudbase-init anonimizacja,sysprep Konwersja obrazu do RAW Upload doopenstacka Konfiguracja w Leostream

28 LIVE DEMO* *cała niniejsza sesja była prezentowana z wirtualnego pulpitu ;)

29 Dziękuję za uwagę Q & A