OPTIMalizacja kwerend SQL

Transkrypt

1 Agata Rachobińska OPTIMalizacja kwerend SQL listopada 2010 Naruszewo, hotel Szkockie Ranczo

2 Dlaczego tuning kwerend jest problematyczny? Środowisko rozwojowe Brak umiejętności, bądź zbyt ogólna wiedza Generowanie zapytań ze szkieletów Nieadekwatne środowiska testowe Produkcja Problemy wydajnościowe poprostu występują Gromadzenie informacji z wielu miejsc ZłoŜoność analizy wymaga specjalistycznych umiejętności Potrzeba rozwaŝenia całego obciąŝenia, a nie tylko jednego zapytania 2

3 IBM Optim Tuner Optymalizacja wydajności oraz obniŝenie kosztów Optymalizacja wydajności Poprawa satysfakcji klientów Poprawa wydajności organizacyjnej Wzrost poziomu świadczonych usług Zmniejszenie kosztów Wzrost ogólnej wydajności systemu Zmniejszenie obciąŝeń Uproszczona analiza dla administratorów, programistów, projektantów Poprawa efektywności zbierania statystyk Skrócenie czasu wykonania

4 Pojedyncza kwerenda kontra całe obciąŝenie Środowiska rozwojowe Środowiska produkyjne IBM Optim Tuner IBM Optim Workload Tuner Tuning pojedynczych zapytań SQL w środowiskach przedprodukcyjnych, podczas gdy poniesione koszty są niewielkie Optymalizacja pracy dla uzyskania szczytowej wydajności 4

5 Co potrafi OPTIM (Workload) Tuner Identyfikacja zapytań Katalog DB2 Dynamic statement cache Monitory zapytań oraz wydajności Click to add an outline Ułatwienia analizy Formatowanie zapytań Adnotacje Wizualizacja ścieŝki dostępu Porady eksperckie Poprawa projektu kwerendy Poprawa jakości statystyk Pomoc w projektowaniu baz danych 5

6 Uproszczona analiza Zdefiniuj lub wybierz workload Uruchom porady Przejdź do wybranej porady Sprawdź poprawę

7 Wybieranie kosztownych zapytań DB2 Plan table Statement table Catalog plan or package Statement cache Profile monitor Zdefiniuj lub wybierz workload Optim Development Studio QMF and QMF HPO DB2 Monitor OMEGAMON XE for DB2 File, text, or exported workload User defined category

8 Wizualizacja zapytań przyspieszająca analizę Prosty obraz sekcji, joinów, predykatów itp Sprawdź statystyki tabeli oraz dodatkowe informacje Przyspieszenie analizy, skrócenie przestojów Zapobieganie błędom ludzkim Określenie, gdzie powinno nastąpić filtrowanie

9 Widok zmian Przyspieszenie analizy, skrócenie przestojów Widok zmian które nastąpią

10 Uruchomienie porad eksperckich Click to add an outline Statystyki Zebranie rekomendowanych statystyk aby zobaczyć wpływ na wybór ścieŝki dostępu Zapytania Zebranie rekomendacji odnośnie tuningu zapytań dla uzyskania lepszej ich efektywności. Indeksy Zebranie rekomendacji dotyczących dodatkowych indeksów co moŝe zredukować liczbę scanów

11 Analiza Access Planów Wizualizacja ścieŝki dostępu Przepływ przetwarzania zapytań Indeksy i operacje Uzasadnienie optymalizatora

12 Poprawa jakości statystyk i ich zbierania Dostacza porad o Brakujących statystykach Sprzecznych statystykach Nieaktualnych statystykach Rezultaty Prawidłowo oszacowane koszty Lepsza wydajność zapytań Mniejsze zuŝycie CPU Generuje RUNSTATS control statements Wskazuje sprzeczne i brakujące statystyki Half of access path PMRs could be resolved by statistics advisor before calling IBM support. IBM Support Wyjaśnienie konfliktów

13 Doskonalenie kwerend Widok podsumowania analizy Podkreślenie odpowiednich składników zapytań Filtrowanie rekomendacji po ich poziomie Zalecenia i uzasadnienie Advisor sprawdza Brakujące predykaty join dla referential constraint Predykaty które mogłyby być indeksowane Predykaty 2 stopnia, które mogłyby zapisane jako predykaty 1 stopnia

14 Porady dotyczące indeksów Poprawa efektywności zapytań Indeksowanie kluczy obcych w zapytaniach, które nie mają zdefiniowanych indeksów Wsparcie dla dostępu index only Indeksowanie w celu uniknięcia sortów Uproszczenie uŝycia Konsoliduje indeksy i daje jedno zalecenie UmoŜliwia analizę co-jeśli Generuje DDL do tworzenia indeksów Uruchamia natychmiast lub zapisuje Test przed wdroŝeniem Wykorzystuje moŝliwość wirtualnego indeksu wbudowanego w silnik DB2

15 Sprawdzenie ulepszeń Zbiera workload wielokrotnie aby określić efekt zmian Wizualizacja zmian w access planie

16 Workload Tuning vs. Tuning Optymalizacja decyzji oparta jest na kompromisach Statystyki koszt CPU vs. oszczędności na zapytaniach Indeksowanie szybkość zapytań vs. dostępne zasoby Tuning workloadu przyspiesza analizę Analizuje wiele zapytań na raz Tuning workloadu konsoliduje i optymalizuje rekomendacje dla całego obciąŝenia Rekomendacje dotyczące statystyk Rekomendacje dotyczące indeksowania Przyspieszenie analizy, optymalizacji projektu i wykorzystania zasobów

17 Architektura Tunera Optim Tuner Client Tools Formatting Annotating Access plan graph Visual plan hints Reporting capture Advice Statistics Index Access Path Workload Advice Statistics Index Workload control center Windows XP or Vista Restricted use DB2 Connect Catalog tables QT tables Profile tables DB2 stored procedures for use with Optim Tuner products DB2 for z/os, V8 or later with DDF enabled

18 Weryfikacja zgodności z systemem produkcyjnym Clone project Przyspieszenie rozwoju Tworzenie, testowanie i uruchamianie kwerend, procedur i funkcji Zwiększenie wydajności Analiza wpływu zmian Poprawa izolacji problemu Bądź aktywny Wykorzystanie najlepszych praktyk w zakresie rozwoju Test przed wdroŝeniem Minimalizowanie spowolnienia produkcji Wykonać analizę Zmiana połączenia z bazą

19 Lifecycle Approach to Optimization Analiza Reakcja Rozwój Zmieniaj workload proaktywnie Przechwytuj kosztowne zapytania z performance monitorów Optymalizuj bazy i zapytania oraz zbieranie statystyk Poprawiaj wydajność bazy danych i czasy odpowiedzi Szybka reakcja na zaistniałe problemy Zmniejszenie uzaleŝnienia od dostępności specjalistycznych umiejętności Szybkie i ukierunkowane doradztwo w zakresie rozwiązywania problemów Wymień nieskuteczne SQLe bez zmian aplikacji za pomocą pure Optim Runtime Ulepszone projekty zapytań od początku Wykorzystanie doświadczonych administratorów baz danych i programistów baz danych Strojenie pojedynczego zapytania by poprawić projekt bazy i kwerendy Integracja z Optim Development Studio

20 Scenariusze monitorowania i odpowiedzi DB2 Monitor Optim Tuner OMEGAMON XE

21 IBM Optimization Services Center for DB2 for z/os Tuner Client Eclipse Based Tools and Advisors Workload Advisors Tools Advisors Formatter Annotation Workload Access Plan Graph Visual Plan Hint Report Statistics Advisor Access Path Analyzer Workload Statistics Advisor DB2 for z/os

22 IBM Optim Tuner for DB2 for z/os Tuner Client Eclipse Based Tools and Advisors Tools Advisors Formatter Annotation Advisor Index Advisor Access Plan Graph Visual Plan Hint Report Statistics Advisor Access Path Analyzer DB2 for z/os

23 IBM Optim Workload Tuner for DB2 for z/os Tuner Client Eclipse Based Tools and Advisors Workload Advisors Tools Advisors Formatter Annotation Advisor Index Advisor Workload Report Workload Access Plan Graph Visual Plan Hint Report Statistics Advisor Access Path Analyzer Workload Statistics Advisor Workload Index Advisor Workload Advisor DB2 for z/os

24 Monitoring Tools

25 25

26 26