Deduplikacja w praktyce. Omówienie wdrożeń z zastosowaniem technologii deduplikacji danych EMC. Piotr Nogaś EMC Corporation 1
Agenda Technologie deduplikacji DataDomain Avamar DLM EMC BRS transformacja do backup u nowej generacji w wykonaniu EMC Aspekt finansowy Aspekt jakościowy (SLA) Pracochłonność utrzymania Dobra praktyka wdrożenia Zwiększenie efektywności rozwiązań Czego należy unikać Pytania 2
IT Trends Impacting Backup and Recovery 2009 0.8 Zettabytes 2020 35.2 Zettabytes DATA DELUGE BUDGET DILEMMA Transformation INFRASTRUCTURE SHIFT 3
Backup Evolution Over Time From tape to disk to deduplication Backup Applications Onsite Backup Storage Disaster Recovery Storage Traditional Tape-Centric Backup Software Backup Software Tape VTL Tape VTL/Tape Backup failures Recovery time Storage cost Complexity Transformational Disk-Centric Backup Software Deduplication Storage Deduplication Backup Software and System Decrease 4
Deduplication Is Accelerating the Transition More efficient Reduced storage Less bandwidth 5
6
EMC Leading the Deduplication Market In-use rating 3-times over nearest competitor Reduce: Data moved by up to 95 percent CPU usage by up to 80 percent Backup windows by up to 90 percent Data stored by up to 30 times* Replication bandwidth by up to 99 percent *Versus full and incremental with typical retention Source: Wave 15 Storage Study Q2 2011, published 5/16/11, large-enterprise sample, n=31,theinfopro (www.theinfopro.com) 7
8
EMC Deduplication Backup Solutions Retain longer Keep backups onsite longer eliminate tape WAN Replicate smarter Only deduplicated data over networks Recover reliably Fault detection and self-healing 9
EMC Continues to Evolve Backup Software and storage designed to work together Unlocks the power of disk Software INTEGRATED ARCHITECTU RE Storage Improves Performance: Up to 50 percent faster than traditional solutions Simplicity: One user interface common policy management Predictability: Proven best practices more than 20,000 installations 10
$ MILLIONS Backup and Recovery Market Leadership #1 in deduplication backup software and storage worldwide 1 800 1 600 1 400 1 200 1 000 800 Data protection and recovery software Purpose-built backup appliances Tape automation (est.) 600 400 200 0 EMC Symantec IBM Oracle Quantum CA Source: Worldwide Tape Automation 2010 2014 Forecast and Analysis and 2009 Vendor Shares, IDC Doc #223182, May 2010 11
EMC Backup and Recovery Solutions Data Domain Avamar NetWorker Disk Library for mainframe Data Protection Advisor 12
EMC Data Domain Deduplication storage systems Scalable systems Reduce storage by an average of 10 30-times and protect up to 28.5 PB of logical capacity in a single system High-speed deduplication Complete backups faster throughput of up to 26.3 TB/hr Network-efficient replication Send only deduplicated and compressed data across the network, requires a fraction of the bandwidth, time, and cost compared to traditional replication methods Easy integration Qualified with all leading enterprise backup and archiving applications integrates easily into existing storage infrastructures 13
EMC Avamar Deduplication backup software and system Faster backups over existing LAN/WAN Data deduplication significantly reduces backup windows and network traffic by only storing unique changes, while always maintaining daily full backups for immediate single-step restore Enterprise-wide backup and recovery for both physical and virtual environments Optimized for VMware, NAS, remote office and desktop/laptop Flexible deployment Avamar Data Store scales to 124 TB of deduplicated capacity, and integrates with Data Domain systems for further scalability of high change rate workloads High reliability Patented RAIN technology to provide uninterrupted data accessibility 14
EMC NetWorker Unified backup and recovery software NetWorker Unified management Bring together a full range of traditional and next-generation data protection from backup-to-disk to replication to tape under a common management interface High performance Accelerate backup and recovery with industry-leading speed, security, and scalability to meet demanding service levels Leading deduplication Integrate with Avamar and Data Domain to transform your backup and recovery with industry-leading deduplication Maximum flexibility Backup mission-critical business applications in physical and virtual environments 15
EMC DLm6000 IBM mainframe EMC Disk Library for mainframe Transparent to mainframe operations Storage configuration flexibility One or two EMC VNX7500s One or two Data Domain DD890s One VNX7500 and one DD890 Managed from z/os console Flexible recovery time objective (RTO) and recovery point objective (RPO) capabilities Scalable performance and capacity No interruption of tape processing for DR testing, maintenance, or upgrades Scales from 40 TB to 5.7 PB 16
EMC Data Protection Advisor Data protection management software Data Protection Advisor Increase visibility Monitor, analyze, and report across physical and virtual backup environments with a single, unified product Reduce costs Consolidate information enterprise-wide to reduce administrative efforts, accelerate problem resolution, and forecast resource and capacity planning Prove protection Understand potential risks and data protection exposures across multiple backup products Lower complexity Use an automated, unified approach to managing the data protection environment, greatly simplifying the monitoring process and tuning the environment to maximize utilization 17
EMC Global Services Services for backup and recovery Consulting: Strategy Assessment, Operational Readiness Backup Assessment Deduplication Assessment Implementation Operational Assurance Health Check Integration Enablement Data Migration Backup and Recovery Residency Services Remote Managed Services Storage Managed Services Managed Availability Services Training and certification Operate Onsite/Remote Support Secure Remote Support Secure Self-help Designated Support Engineer Strategic Account Manager 18
The Journey to Next-Generation Backup Traditional Tape- and Truck-centric Transitional Disk and Tape Next-Generation Disk- and Network-centric Not everyone is in the same place 19
EMC BRS transformacja do backup u nowej generacji w wykonaniu EMC Aspekt finansowy Aspekt jakościowy (SLA) Pracochłonność utrzymania 21
Metodyka realizacji projektów Wstępna ilościowa analiza istniejącego rozwiązania i oszacowanie zakresu i benefitów transformacji Pełna analiza istniejącego środowiska celem przygotowania tzw. biznes case uszczegółowienia zakresu projektu, dróg dojścia, standardów i metodyki skalowania oraz opcjonalnie PoC Implementacja rozwiązania z uwzględnieniem tzw. contingency Strojenie i pomiar osiągniętych efektów 22
Dobra praktyka wdrożeń technologii deduplikacyjnych Zwiększenie efektywności rozwiązań Czego unikać 23
Efektywność rozwiązań deduplikacyjnych Emulacja VTL wyłącznie jeśli konieczne Małe taśmy (retencja oraz aspekt odtworzenia w trakcie robienia kopii) Dużo napędów (unikać współdzielenia dedykować napędy) Wyłączyć multiplexing na poziomach: Systemu backupu Aplikacje/bazy danych (Oracle maxopenfiles, MS-SQL/Sybase stripe ) Dostosować wielkość bloków taśmowych oraz mechanizmy zabezpieczenia przed przekroczeniem maksymalnej rekomendowanej ilości jednoczesnych strumieni Zastosowanie technologii alternatywnych do emulacji bibliotek: DDBoost NFS/CIFS 10GbE jumbo frames Zintegrować technologie komplementarne RMAN incremental update z DD FastCopy Managed replication (automatyczne rozwiązania DR z wykorzystaniem backupu) Deduplikacja na serwerze backup (ang. storage node/media server) Standaryzacja i zasady skalowania 24
Deduplikacja: czego unikać Implementacji niezgodnej z dokumentacją i dobrą praktyką Zalecane CPU, ilość RAM Dostosowanie parametrów FC/IP/kernel/RAM Stosowania serwerów Windows z oprogramowaniem antywirusowym bez możliwości ustawienia wyjątków na procesy transportu danych Implementacji rozwiązań wyłącznie na podstawie analizy ilościowej Dane typu multimedia/archiwa skompresowane unikalne/często zmieniane dane Zasoby NDMP o wielu milionach plików niektórych producentów Wymogi zgodności (prawne oraz procedury wewnętrzne) Zmian ustawień parametrów kompresji bez analizy wpływu: na parametr RTO Ilość obsługiwanych strumieni backup/restore. 25
Deduplikacja: benefity Skrócenie okien backupowych po migracji z TL na urządzenie deduplikujące Optymalizacja procesu klonowania taśm przez integrację zarządzania Redukcja czasu odtworzenia kopii zapasowych Eliminacja zadań strojenia i przestojów związanych ze specyfiką bibliotek taśmowych. 26
THANK YOU HAVE A GREAT CONFERENCE! 27