Nowe technologie baz danych

Transkrypt

1 Nowe technologie baz danych

2 Partycjonowanie Partycjonowanie jest fizycznym podziałem danych pomiędzy różne pliki bazy danych Partycjonować można tabele i indeksy bazy danych Użytkownik bazy danych nie jest świadomy tego, czy struktura jest podzielona czy też nie jest. Partycjonowanie nie ma wpływu na zapytania SQL.

3 Korzyści z partycjonowania Podniesienie skalowalności i zarządzania tabelami o dużych rozmiarach (rzędu kilkuset megabajtów) Lepszy dostęp do danych Możliwość wykorzystania wieloprocesorowych serwerów (każdy procesor może wówczas obsługiwać różne partycje) Przykład: Dana jest tabela sprzedaż posiadająca rekordy dotyczące sprzedaży z wielu miesięcy. Zakładamy, że dzielimy tabelę po miesiącu. Na ostatnim miesiącu są wykonywane częste modyfikacje, a z poprzednich tylko odczyt. Modyfikacje z ostatniego miesiąca nie maja więc wpływu na wydajność z miesięcy poprzednich.

4 Konfigurowanie partycjonowania tworzenie bazy danych CREATE DATABASE [Data Partition DB] ON PRIMARY (NAME='Data Partition DB Primary FG', FILENAME= 'C:\Data\Primary\Data Partition DB Primary FG.mdf', SIZE=5, MAXSIZE=500, FILEGROWTH=1 ), FILEGROUP [Data Partition DB FG1] (NAME = 'Data Partition DB FG1', FILENAME = 'C:\Data\FG1\Data Partition DB FG1.ndf', SIZE = 5MB, MAXSIZE=500, FILEGROWTH=1 ), FILEGROUP [Data Partition DB FG2] (NAME = 'Data Partition DB FG2', FILENAME = 'C:\Data\FG2\Data Partition DB FG2.ndf', SIZE = 5MB, MAXSIZE=500, FILEGROWTH=1 ), FILEGROUP [Data Partition DB FG3] (NAME = 'Data Partition DB FG3', FILENAME = 'C:\Data\FG3\Data Partition DB FG3.ndf', SIZE = 5MB, MAXSIZE=500, FILEGROWTH=1 )

5 Konfigurowanie partycjonowania Tworzenie funkcji partycji: CREATE PARTITION FUNCTION [Data Partition Range](int) AS RANGE LEFT FOR VALUES (100000) Tworzenie schematu partycji: CREATE PARTITION SCHEME [Data Partition Scheme] AS PARTITION [Data Partition Range] TO ([Data Partition DB FG1], [Data Partition DB FG2]); Tworzenie tabeli na partycji: CREATE TABLE MyTable (ID INT NOT NULL, Date DATETIME, Cost money) ON [Data Partition Scheme] (ID);

6 Dodawanie danych int =1 <=100 begin insert into MyTable set end = <= begin insert into MyTable set end

7 Odczyt danych Partycjonowanie nie ma wpływu na polecenia SQL: select * from MyTable Odczyt danych z uwzględnieniem partycji: select $partition.[data Partition Range](t.ID), * from MyTable as t

8 Bazy danych: Key-Value Mamy unikalny klucz oraz jego wartość

9 Przykład baza relacyjna Persons: ID FIRST_NAME LAST_NAME 0 Steven Edouard 1 Sam Brightwood Accounts: ID ACCOUNT_TYPE ACCOUNT_BALANCE CURRENCY HOLDER (FK: Persons) 0 Investment USD 0 1 Savings USD 0 2 Checking USD 0 3 Checking YEN 1 4 Investment YEN 1 5 Savings YEN 1

10 Przykład: Key Value "person:0:first_name" = "Steven" "person:0:last_name" = "Edouard" "person:1:first_name" = "Sam" "person:1:last_name" = "Brightwood" "account:0:type" = "Investment" "account:0:balance" = " " "account:0:currency" = "USD" "account:1:type" = "Savings" "account:1:balance" = " " "account:1:currency" = "USD..

11 Przykład: Key Value "account:0:holder" = "person:0 "account:1:holder" = "person:0 "account:2:holder" = "person:0 "account:3:holder" = "person:1 "account:4:holder" = "person:1 "account:5:holder" = "person:1" Zapytanie: Kim jest posiadacz rachunku o ID=1 Jakie rachunki posiada Steven Edouard?

12 Przykład: Key Value Dodatkowe indeksy: "person:name:edouard_steven" = "person:0 "person:name:sam_brightwood" = "person:1 "person:0:accounts" = "[account:0, account:1, account:2] "person:1:accounts" = "[account:3, account:4, account:5]"

13 Przykłady Amazon s Dynamo Project Voldemord Redis Memcached and MemcacheDB

14 Kolumnowe bazy danych Wierszowe bazy danych: wiersze są umieszczone na stronach pamięci bazy danych Kolumnowe bazy danych: kolumny są umieszczone na stronach pamięci bazy danych.

15 Kolumnowe bazy danych

16 Wczesne łaczenie

17 Późne łączenie

18 Przykłady Google s Bigtable Cassandra HBase