Efektivní IT - Pavel Barták - Avnet Technology Solutions

Efektivní
Pavel Barták, EMC Czech
© Copyright 2010 EMC Corporation. All rights reserved.
1
EMC Corporation
EMC is a
TECHNOLOGY
company.
Our focus is
IT infrastructure.
The impact is on INFORMATION.
© Copyright 2010 EMC Corporation. All rights reserved.
2
Proč EMC
Financial Impact
Operational Impact
Business Impact
(Cost Savings)
(Cost Avoidance)
(Revenue Generation)
• Šetří náklady na
infrastrukturu
• Zvyšuje vužitelnost
infrastruktury díky
virtualizaci
• Šetří náklady konsolidací
datových center
© Copyright 2010 EMC Corporation. All rights reserved.
• Snižuje provozní náklady
sjednocenou správou
Usnadňuje provoz
automatizovanou správou
na základě politik
• Zajištění Business
Continuity s souladu s
předpisy
• Neustálá dostupnost
správných informací
• Okamžitá odezva na
požadavky společnosti
• Urychlení nasazení do
provozu
Time To Market
3
The EMC Strategy
Private Cloud
Information
Infrastructure
Virtual
Infrastructure
Data Center
© Copyright 2010 EMC Corporation. All rights reserved.
4
EMC’s Investment in Innovative Technology
Authentica
Network Intelligence
RSA
Valyd
Information
Security
Ask Once
Acartus
Captiva
ProActivity
Virtualization/
Data Mobility
VMware
Rainfinity
Akimbi
Services
Dolphin
Content
Management
Documentum
2003
Resource
Management
Astrum
Availability/
Archiving
Legato
2004
Tablus
Verid
Archer
Document Sciences
X-Hive
Kazeon
FastScale
Interlink
Internosis
BusinessEdge
Geniant
Conchango
2005
2006
2007
2008
2009/2010
Smarts
nlayers
Voyence
Infra
ConfigureSoft
Avamar
Kashya
Illuminator
Indigo Stone
WysDM
Data Domain
Cloud Infrastructure
and Services
Pi
Mozy
Consumer/
Small Business
Dantz
© Copyright 2010 EMC Corporation. All rights reserved.
Iomega
5
Application Integration
EMC
EMC
EMC
and
and
and
Microsoft
Oracle
SAP
 Dedicated EMC engineering team
at Microsoft focuses on testing
and documenting best practices
 More than $20 million of EMC
equipment installed at Microsoft,
including the SQL Server and
Exchange Labs
 EMC has a Microsoft Gold
Certified Support Center
© Copyright 2010 EMC Corporation. All rights reserved.
 Dedicated EMC engineering team
drives joint Oracle-based product
testing and validation, API
integration, and co-development
of new technologies
 More than 20 joint engineering
projects focusing on optimizing
performance, business continuity,
and management for SAP
environments
 Oracle-based EMC team for
design and delivery of EMC-based
services for Oracle products
 More than 4,000 mutual customers,
including the largest, most complex
SAP environments in the world
 More than 30,000 of the world's
largest mutual installations,
including 90 of the Fortune 100
 SAP integrates EMC storage at the
API level
6
Recese 2009
Ceny
Domů
Zaměst
Obraty
nanost Bohatství firem
rozpočty
Informace
IT
+62%
Kilo
Mega
Giga
Tera
Peta
Zetta
1,000
1,000,000
1,000,000,000
1,000,000,000,000
1,000,000,000,000,000
“Terabyte” “Gigabyte”
1,000,000,000,000
1,000,000,000
,000,000,000
“Zettabyte”
Digitální Svět 2009-2020
Růstový faktor
44
2009:
0.8 ZB
2020: 35.2 Zettabytes
Source: IDC Digital Universe Study, sponsored by EMC, May 2010
IT Infrastruktura
28%
72%
Provoz
Investice
Komplexní
Neefktivní
Neflexibilní
Drahá
IT potřebuje obecně
nový přístup
Cloud Computing Offers a Departure
from Established IT Models
EVOLUTIONARY
REVOLUTIONARY
Technology
Business Model
Maximize existing
data center model:
Information Infrastructure
Move from capital
investment-based IT
to pay-as-you-go:
Private Cloud
IT as a Service
© Copyright 2010 EMC Corporation. All rights reserved.
13
EMC in DC
Applications
Applications
Applications
Middleware
Middleware
Middleware
Database
Database
Database
Operating
System
Operating
System
Operating
System
Server
Server
Server
Storage
Storage
Storage
© Copyright 2010 EMC Corporation. All rights reserved.
14
Virtualized DC
Applications
Applications
Applications
Middleware
Middleware
Middleware
Database
Database
Database
Operating
System
Operating
System
Operating
System
Virtual Infrastructure
CPU
Pool
© Copyright 2010 EMC Corporation. All rights reserved.
Storage
Pool
Network
15
EMC’s Complementary Strategies
Information
Virtual
Infrastructure
Infrastructure
Information Storage
Information Management
Information Protection
Information Security
Virtualization (VMware)
© Copyright 2010 EMC Corporation. All rights reserved.
16
EMC Virtual Infrastructure
Placing information intelligence closest to what it controls
VIRTUAL MACHINES
HARDWARE INDEPENDENCE
Any Workload
Move “live”
workloads around
in real time with
zero downtime
Common Pool of Flexible Capacity
Virtualization
Physical Infrastructure (x86)
Servers
Any Hardware
Dynamic mapping
of resources to
business needs
Storage
Network
Servers
Network
Storage
Manage services, not servers
© Copyright 2010 EMC Corporation. All rights reserved.
17
Vblock Infrastructure Packages
A New Way of Delivering IT
 Rapid deployment model
of virtualized infrastructure
 Pre-integrated and validated
solutions reduce total cost
of ownership
 Service-level driven through
predictable performance
and operational characteristics
 Improved compliance/security
and reduced risk
Solution Packages
Information
Applications
Operating Systems
Virtualization
Compute
Network
Storage
Vblock Infrastructure Packages
Accelerate Time to Results—Reduce TCO
© Copyright 2010 EMC Corporation. All rights reserved.
18
Better Agility, Lower Cost
Vblock triggers a savings of
13% for the total cost of running SAP
Pre-engineered units reduces risk
Scalable, cost efficient compute resources
Built-in cluster-like functionality
Areas of TCO Savings
Vblock
triggered
savings*
Hardware/Software
Investment
20%
Implementation
30%
Simple resizing and reconfiguration
Integrated, consistent backups
Dynamic provisioning of compute resources
Reduced downtime through virtual migrations
Hardware/Software Ongoing
Cost
2 - 5%
Operations
5%
Continuous Improvement
Projects
20%
Upgrade Projects
30%
*2010 SAP/VMS Consulting study of
vBlock Savings
The best-run business run SAP
EMC Information-Centric Security
Industry-leading controls to secure people, data, and infrastructure
Secure Access
Secure Audit
Information
Secure Data
• Access control and
authentication
• Tamper-proof audit log
• Secure data sharing—
rights management
• File/directory and
database security
• Audit integration—RSA
enVision
• Data encryption and key
management
• EMC Certified Data
Erasure
© Copyright 2010 EMC Corporation. All rights reserved.
20
EMC IT Service Management—Ionix
IT Operations Intelligence
Service
Management
Service Management
• CMDB
• Service desk and ITSM
• Monitoring and analysis
• Root-cause, rapid triage
IT Operations
Intelligence
Service Discovery and Mapping
• Dynamic, passive, agent-less
• Application dependency mapping
• Discovery consolidation
© Copyright 2010 EMC Corporation. All rights reserved.
EMC
Ionix
Service
Discovery
and Mapping
Data Center
Automation and
Compliance
Data Center Automation
and Compliance
• Server and network
configuration mgmt
• Storage management
• Configuration analytics
21
Řešení ukládání dat
Provoz
Výkon – IOPS,latence
Záloha
Kapacita, Backup Window
Archiv
Dlouhodobost,
doložitelná nedotknutelnost
Vaše data, naše starost
CLARiiON
Symmetrix
V-Max
Symmetrix
CX4 UltraScale Series
NS80
NSX
CX4-960
Flash
drives
Celerra
NS40
CX4
-120
CX4-240
CX4-480
Flash
drives
NS40G
Flash
drives
NS20
DMX-4
Fibre Channel and iSCSI
Virtual Provisioning
NS80G
NAS, FC, & iSCSI
AX4
Atmos
Connectrix
Cloud
Optimized
Storage
SAN Connectivity
Cloud
RecoverPoint
CDP and CRR
Consumer NAS
Invista 2.0
SAN Virtualization
LifeLine
Software-as-a-Service (SaaS)
EMC Centera
Gen 4 LP Node
Gen-3
Data Store
DL5000
Rainfinity
Rainfinity Global
File Virtualization
Mozy Backup
Centera
Avamar
Datadomain
EMC Disk Library
Evoluce HDD za posledních 30 let
 Kapacita pevných disků vzrostla z
1GB na 1TB
– 14 palcový 1GB 3380, 3600 RPM -> 3.5
palcový 1 TB FC, 7200 RPM
– 1000x více….
 Zvýšení propustnosti rozhraní
pevných disků z 3 MB/s na 4Gb/s
– Mainframe BMC 3.0 MB/sec Bus&Tag ->
Open System 4Gb (400 MB) FC
– 133x větší propustnost
 Vyhledávací a rotační latence se
změnila z 24ms na 6ms
– 3380 – 3600 RPM disk (16ms +8ms) ->
3.5 in 15K RPM disk (4ms +2ms)
– Pouze 4násobné zlepšení náhodných
operacích při použití 8KB bloku
Nepřítel se jmenuje Komplexita
Exploding
Data Growth
Multiple Point
Solutions
IT Staff
Resources
Many More
Technology Choices
Efektivní IT
VMware
VMware
Vzdálené
volumy
Virtualizace
Soubory
Pole
Virtual Prov
Tier 3
Archivní
data
 Klasifikace a tierování
 Archivace neaktivních dat
 Eliminace redundantních dat
Tier 0
Tier 1
Production
Data
Tier
2
 Virtualizace serverů
Zálohy
 Redukce a zkrácení záloh
 Virtualizace kapacity virtual provisioning
Charakter dat
Úložiště podle typu dat (Petabajty)
50,000
Strukturovaná & Replikovaná
Nestrukturovaná
40,000
30,000
20,000
10,000
0
2005
2006
2007
2008
Source: IDC Digital Universe White Paper, Sponsored by EMC, May 2009
2009
2010
2011
2012
Klasifikace dat – File System Assessment
File Age by Last Modified Date
File System Assessment
umožňuje
 zjistit míru duplicit
 trend nárůstu kapacity
 strukturu souborů
 klasifikovat soubory dle
doby posledního přístupu
3%
2%
7%
0-15 days
9%
16 days - 30 days
31 - 90 days
3 - 6 months
6 months - 1 year
17%
over 1 year
62%
EMC provedlo FSA u více než 1600 zákazníků
Výsledek: 60 – 70 % souborů nebylo
přistoupeno déle než rok
Aktivní Archivace aplikací
Redukce množství aktivních dat,
které je nutno spravovat
Aktivní
data
 Source One pro Exchange a Notes
 Source One pro Sharepoint vč 2010
Uvolněný
prostor
Primární storage
Archivní storage
 Nepotřebné
 Duplicitní
 Nesouvisející s podnikáním
 Nepřistupované déle jak 90 dní
 nastavení archivačních politik dle
potřeby a typu dat
 snížení celkových nákladů
 rychlejší zálohování a obnova
 snížení času nezbytného pro správu
Storage Tiering – dnes manuální
Na úrovni LUNů
Správná data
na správném místě
Faster
Device Activity Report
Flash
Flash drive
targets?
V-LUN
application
performance
Fibre
Channel
SATA
targets?
V-LUN
SATA
© Copyright 2010 EMC Corporation. All rights reserved.
Lower
storage costs
and less energy
32
FAST – Full Automated Storage Tiering
Správná data
na správném místě
…a ve správnou dobu
FAST wizard
Flash
Fibre
Channel
allows users
to set up and
apply storage
tiering in
minutes
SATA
© Copyright 2010 EMC Corporation. All rights reserved.
33
FAST v2- optimalizace na úrovni datových řetězců
FAST
SubLUN
Tiering
automaticky
přesouvá
intenzivně
používaná data na
Flash disky a málo
používaná na
nízkonákladové
SATA disky
© Copyright 2010 EMC Corporation. All rights reserved.
5% Active
Flash
95% Inactive
HDD
Storage pool
34
FAST for File-Based and Unstructured Data
Available Now
Unified Storage
Flash + SATA tiering
FAST
Virtual Provisioning
Store more
with less
Deduplication
Compression
Public
Cloud
Cloud federation
© Copyright 2010 EMC Corporation. All rights reserved.
35
FAST Cache pro zvýšení výkonu aplikací
Without
FAST Cache
App
server
With
FAST Cache
App
server
Controller
1 of 5 I/Os
from Cache
DRAM Cache
 Dramatické rozšíření cache diskového pole pro
čtení ale i pro zápis
 Možnost nastavení striktnějšího předčítacího
algoritmu
 Aktivace a konfigurace je možná za plného
provozu
Controller
9 of 10 I/Os
from Cache
DRAM Cache
 EFD disky není třeba zálohovat při výpadku el.
energie
 Nižší zatížení HDD – výkonnostní plánování
Flash
1 of 10 I/Os
from disk
4 of 5 I/Os
from disk
HDD
© Copyright 2010 EMC Corporation. All rights reserved.
HDD
36
Flash Cache
Database
Exchange
Database
VMware
Microsoft
SharePoint
 Manages a Map of pages located on
Flash Drives
 Data is cached by promoting data
from HDD to Flash Drives
DRAM
Policy
Engine
MAP
Flash Cache
– Benefit - Avoids Cache Misses and
improves response time
 Dirty pages are asynchronously
written back to HDD
– Benefit - Deferral (write hits) and
optimization of writes (sorting and
coalescing) as response time is already
optimized by cache
 Provides a much larger, scalable
cache
10K
7.2K
© Copyright 2010 EMC Corporation. All rights reserved.
37
FAST Cache dopad na aplikace
 VMware View s „linked clone― desktops
–
–
–
–
Boot storms – snížení až 99% HDD I/O
Recompose – 70% snížení HDD I/O
Antivirus desktop full scan – 77% snížení HDD I/O
44% nižší počet HDD na stejný počet uživatelů
 Oracle 11g R2 OLTP
– Zvýšení z 12 500 tpm na 30 000 tpm
– Snížení latence z 14ms na 5ms
 SQL Server OLTP
– Zvýšení počtu současných uživatelů z 25 000 na 50 000
– Application response time snížený ze 40s na 5s
– Zvýšení z 1 300 tps na 2 400 tps
 NFS file share Celerra NS 960 – 100 FC drives + 2TB FAST Cache
– Stejný výkon jako systém s 300 FC disky
– 46% nižší náklady na I/O
– 65% nižší spotřeba
© Copyright 2010 EMC Corporation. All rights reserved.
38
Neprodukční data v IT systémech
Primární / produkční data
1x
Neprodukční data
20x
EMC Information Protection
Identify
Business
Requirements
Information Recovery
Business Restart
Disaster Tolerance
Multisite
Align
Infrastructure
Capabilities
Backup
Platform
Isolate
internal
device failure
Establish
safety nets
limiting data
loss or
corruption
LOCAL
Tier
Protection
Approaches
Backup
© Copyright 2010 EMC Corporation. All rights reserved.
Recovery
Restore data
to a known
good backup
point
Remote
Information
Protect
against sitewide and
geographic
disaster
Remote
processing
Automate
and
streamline
resumption of
business
operations
Continue
business
operations
through
disaster
without
disruption
REMOTE
Local and Remote Replication
Automation
40
10% záloh
Je při testech
neobnovitelných
15% zákazníků
„deduplikovalo“ zálohy
v roce 2009
75% záloh v 2012
bude „deduplikovaných“
Hlavní typy deduplikace
Typy deduplikace dle různých kritérií
SOUBOROVÁ
SUB-SOUBOROVÁ
FIXNÍ DÉLKA BLOKU
VARIABILNÍ DÉLKA
BLOKU
POST-PROCES
INLINE
NA ZDROJI
NA CÍLI
LOKÁLNÍ
GLOBÁLNÍ
Efektivita různých přístupů
Běžné diskové pole
1:1
Redukce přebytečné
kapacity
Souborová úroveň
LZ komprimace
~ 2:1
Single Instance Storage
~ 3:1
Fixní délka bloku
Variabilní délka
bloku
Fixní blok
~ 5:1
Variabilní
segment
~ 20:1
13,4 :1
Deduplikační poměr
aneb kolik kapacity ušetřím?
Deduplikační poměr
kapacita všech záloh uložených na zálohovací storage
vůči kapacitě skutečně obsazené
deduplikační
poměr
% ušetřené
kapacity
2:1
50 %
5:1
80 %
10 : 1
90 %
13,4 : 1
92,5 %
15 : 1
93 %
20 : 1
95 %
25 : 1
96 %
ušetřená kapacita v % = 100-(100/x), kde x=deduplikační poměr
Využití Data Domain deduplikované storage
 funkční
deduplikace
Lokální záloha
ZÁLOHOVACÍ SERVERY
DEDUPLIKOVANÁ
IP REPLIKACE
 snadná integrace
se stávajícím
zálohovacím sw
 deduplikovaná
replikace do
vzdálené lokality
(DR)
ARCHIVAČNÍ SERVERY
Disaster Recovery
 CPU centric
dedup– inline
 Na cíli
APLIKAČNÍ SERVERY
Deduplikovaná replikace
minimalizuje nároky na přenosové linky
Lokalita A
200 GB
10 TB
Zálohovací
Server A
Lokalita B
Zdroj
200 GB
zápisů
10 TB
Replika
200 GB
zápisů
10 TB
10 TB
10 TB
10 TB
10 TB
Zálohovací
Server B
10 TB
10 TB
10 TB
10 TB
10 TB
• jsou přenášeny pouze unikátní segmenty a metadata
• všechny zálohy jsou dostupné v obou lokalitách pro obnovu či jako kopie
• žádný management na denní bázi nebo transport pásek
EMC Avamar
AVAMAR SOFTWARE
Možnost instalace na
předepsané typy
serverů
AVAMAR DATA STORE
Zálohovací zařízení
včetně software/hardware
AVAMAR VIRTUAL EDITION pro VMware
Avamar VM
Operating System
Avamar server
implementovaný jako
virtuální stroj
Zálohovací řešení s globální
deduplikací na zdroji
 redukuje velikost zálohy na zdroji, dříve
než je přenesena po síti
 rychleji vytváří plné zálohy při využití
stávající infrastruktury
 deduplikuje napříč servery a lokalitami a
zmenšuje až 50x fyzickou velikost
záložní storage
 ideální pro zálohování virtualizovaných
prostředí, vzdálených poboček, serverů i
uživatelských stanic/laptopů
 2 500 zákazníků, 4 500 instalací
Dosahované deduplikační poměry
Typ dat
Množství
primárních dat
Množství
přenesených
dat
Dedup.
poměr
na “cíli”
Windows file systémy
3,573 GB
6.1 GB
(586:1)
45:1
Mix Windows, Linux
a UNIX file systémů
5,097 GB
11.7 GB
40:1
Engineering soubory na NAS
zařízeních (NDMP zálohy)
3,265 GB
24.2 GB
21:1
Mix 20 % databáze a 80 %
souborové systémy
(Windows a UNIX)
9,583 GB
80.0 GB
19:1
Mix Linuxových file systémů
a databází
7,831 GB
104.2 GB
14:1
90 denní retence
Avamar optimalizuje zálohování VMware
 až 95% redukce přenesených dat
 až 90% zkrácení zálohovacích časů
Tradičně se přenáší ~200% týdně
Application
Application
Operating System
Operating System
 až 50% snížení zátěže na zdrojových
discích
VMware Virtualization Layer
x86 Architecture
 až 95% redukce využití NIC
 až 80% redukce zatížení CPU
 až 50% snížení využití paměti
 všechny zálohy jsou uchovávány jako
„virtuální plné zálohy― a jdou okamžitě
obnovit
CPU
NIC
Memory
Disk
Avamar přenáší ~2% týdně
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
App
OS
VMware Virtualization Layer
x86 Architecture
CPU
Memory
NIC
Disk
Efektivní zvládnutí růstu informací
5X
Fully automated storage tiering
Optimize performance and capacity
Virtual Provisioning
4X
Allocate capacity on demand
Deduplicate, compress, spin down
3X
Efficiency to store more with less
Archive and delete
2X
Policy-based lifecycle management
Federate to the cloud
1X
Public and private cloud integration
2010
2011
2012
© Copyright 2010 EMC Corporation. All rights reserved.
2013
2014
53
^
Dokonalosti není dosaženo když už není co
přidat, ale tehdy, když už není co odebrat
[email protected]
Antoine De Saint-Exupéry