EMC ViPR & ECS
Um Tour pelo Software Defined Storage
© Copyright 2014 EMC Corporation. All rights reserved.
Gerson Freire
Principal SE
1
Crescimento
Exponencial dos Dados
Novos Métodos de
Acesso
Alta Demanda por
Agilidade e Disponibilidade
Storage Está
no Digital
Centro da
Transformação de TI
IDC
Universe:
REPENSE 40 ZB até 2020
Crescimento
Masivo traz
Complexidade Massiva
Como Storage
é Entregue
e Gerenciado
© Copyright 2014 EMC Corporation. All rights reserved.
2
Gerenciamento do Ambiente de Storage – Situação Atual
Complexo & Manual
Lento
Sujeito a erros humanos
Requer diferentes skills
Site A
Apps A
Site B
Apps B
Open Servers
Open Servers
Remote Replication(DR)
SAN A
SAN B
SAN A
SAN B
Eu preciso de 10 novos
vols para o meu Oracle
DB com proteção local
e remota
Mirror
Prod
Prod
Mirror
EMC, IBM, HDS, NetApp etc.
© Copyright 2014 EMC Corporation. All rights reserved.
DEVELOPER
EMC, IBM, HDS, NetApp etc.
3
Vídeo
© Copyright 2014 EMC Corporation. All rights reserved.
4
Nova Abordagem do Gerenciamento de Storage
(Nível de Serviço)
Storage Block Gold




Tierização Gold
No de paths: 4
Snapshots Local
Proteção Remota Sincrona
© Copyright 2014 EMC Corporation. All rights reserved.
Storage Block Silver




Pool de discos SAS
No de paths: 2
Snapshots local
Proteção Remota Assinc.
Storage Block Bronze
 Pool de discos SATA
 No de paths: 2
5
EMC VIPR Software-Defined Storage…
Uma plataforma de sw que facilita o gerenciamento do ambiente atual e a transição para a 3a plataforma
VM
VM
VM
VM
VM
VM
VM
VM
ViPR
Services
VIPR
Controller
EMC
Provisioning
Non-EMC
Self-Service
Reporting
Array
Support via
OpenStack
Protect Current Investments
Performance & Mission-Critical Workloads
© Copyright 2014 EMC Corporation. All rights reserved.
Automation
Commodity Hardware
ECS Appliances
New & Basic Workloads
6
Visão do Usuário: Portal Self Service
EMC ViPR
EMC ViPR
EMC ViPR
Procedimentos executados pelo ViPR:
- Zoning na SAN
- Criação dos volumes no storage
- Mapeamento dos volumes nas portas do storage
- Associação dos volumes ao servidor
- Associação dos volumes a politicas de tierização
- Configuração de replicas locais(snaps/clones)
- Configuração de réplicas remotas(ex: SRDF, RP, VPLEX)
- Scan no servidor para reconhecer os volumes
Service Level
Cada storage array/switch
SAN, possui a sua forma
própria de configuração!!
© Copyright 2014 EMC Corporation. All rights reserved.
7
ViPR Controller(Suporte Heterogeneo a Arrays EMC e Terceiros)
VIPR
Controller
NATIVE INTEGRATION
VMAX
EMC
ScaleIO
VNX
VBLOCK
Isilon
XtremIO
NetApp
FAS
IBM
XIV
IBM
SVC
IBM
DS8000
Hitachi
Dell
Equal-Logic
HP 3PAR
HP
Left-Hand
Solidfire
ORACLE
ZFS
NetApp
E-Series
HUS VM
Hitachi
VSP
(Block)
DL4540
© Copyright 2014 EMC Corporation. All rights reserved.
8
Integração com Frameworks de Cloud
Integração com VMware, Hyper-V e OpenStack
ViPR
Data Services
ViPR
Controller
3rd Party
VMAX
© Copyright 2014 EMC Corporation. All rights reserved.
VNX
Commodity
Isilon
9
ViPR & The EMC Hybrid Cloud
Admin Portal
End-User Portal
Log
Insight
OS
OS
OS
OS
VM
VM
VM
VM
3
ITBM Enhanced
Chargeback
Others
APPS
PLATFORM
2
APPS
vCenter
Operations
Manager
PLATFORM
vCloud Automation Center
APP
APP
APP
Partners
VM
VM
VM
Integrated
Provisioning
and DR,
Backup
Restore
Integrated
Provisioning,
Backup,
HA, &
and
Security
Hyper-V
vSphere
OpenStack
APP
VM
VM
OBJECT/
HDFS
VMware NSX™
BLOCK
vCHS
FILE
EMC
SRM
Hybrid Arrays
© Copyright 2014 EMC Corporation. All rights reserved.
All-Flash SO-NAS
SDDS
10
ViPR no ambiente da SAP
• 2 Data Centers
• Grande Ambiente de Storage
• 84 K Backend Volumes
• 4 VPLEX Clusters
• 9 VMAX Arrays
• 4 Fabric Managers
• Desafios de Provisionamento
• Escalabilidade
• 10 pessoas gerenciando 26 PB
de storage
• Provisionamento, relatórios e
aberturas de chamados
integrado
• Automação com o ambiente de
cluster extendido(VPLEX)
© Copyright 2014 EMC Corporation. All rights reserved.
11
ViPR Controller: Benefícios
 Agilidade e “time-to-market” de TI para o negócio
 Redução do custo operacional
– Gerenciar “mais com o mesmo”
 Padronização do gerenciamento do ambiente de storage
 Dimuinuição do risco com erros humanos(automação)
 Integração com portais de private cloud
© Copyright 2014 EMC Corporation. All rights reserved.
12
Novas Aplicações = Novas formas de Acesso ao Storage
(Object/HDFS)
OBJECT
OBJECT
OBJECT
OBJECT
HDFS

Global, Single namespace

Escalar a bilhões de objetos

Acesso e proteção Geo-Distribuído

Acesso e medição Multi-tenant

Acesso a dados via REST/HTTP

Storage para sistemas analíticos

No RAID, No File Systems

Baixo custo de infraestrutura
OBJECT
© Copyright 2014 EMC Corporation. All rights reserved.
13
ViPR Data Services
ViPR Data
Services
Commodity Hardware
Storage Arrays
Commodity
Hardware
VMAX
Object on Commodity
HDFS on Commodity
Block on Commodity
VNX
Isilon
3rd Party
Object on File
HDFS in File
Compatibilidade Objeto: Amazon S3, Open Stack Swift, EMC Atmos/Centera
© Copyright 2014 EMC Corporation. All rights reserved.
14
A PRIMEIRA SOLUÇÃO COMPLETA DE
INFRAESTRUTURA WEB-SCALE STORAGE PARA O
SEU DATA CENTER
Exabyte+
Service
Provider
Self-Service
Elastic
COMPLETE
© Copyright 2014 EMC Corporation. All rights reserved.
WEB-SCALE
Enterprise
ANY DATA CENTER
15
ECS Hardware Configurations
Unstructured (Object and HDFS)
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS SMALL
GbE
10 GbE
10 GbE
Empty
2u 4 node
Blank
Blank
Blank
Blank
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
Not Used
360TB
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS MEDIUM
GbE
10 GbE
10 GbE
Empty
2u 4 node
Blank
Blank
Blank
Blank
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
1.4PB
© Copyright 2014 EMC Corporation. All rights reserved.
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS DENSE
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
2.9PB
Mixed Workload (Object, HDFS, Block)
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS SMALL
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
15 Disk x 6TB
Not Used
360TB Object
+ 120TB
RU
40
39
38
37
36
35
34
33
32
31
30
29
28
27
26
25
24
23
22
21
20
19
18
17
16
15
14
13
12
11
10
9
8
7
6
5
4
3
2
1
ECS MEDIUM
GbE
10 GbE
10 GbE
2u 4 node
2u 4 node
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
30 Disk x 1TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
60 Disk x 6TB
Not Used
1.4PB Object
+120TB
16
Caso de Uso: Conteúdo de Media Digital na Nuvem
Gravacão e acesso ao conteúdo de mídia a partir de qualquer dispositivo
Target Market: Enterprises, Service Providers
Situação
 Empresa de mídia deseja armazenar conteúdo digital DVR na
nuvem
 Demanda dos clientes para o acesso de dispositivos móveis
 Possibilitar a transmissão do conteúdo para qualquer lugar
DVR content
Solução
 ViPR Software ou ECS Appliance, hyperscale storage
 ViPR Object para o armzenamento eficiente dos dados
https://accesspoint.yourcompany.com
San Jose
Boston
© Copyright 2014 EMC Corporation. All rights reserved.
U.K.
Virginia
Benefícios de Negócio
 Aumentar as receitas e diferenciação de serviços
 Eficientemente armazenar PBs de conteúdo DVR
 Fornecer acesso global a partir de qualquer dispositivo em
qualquer local
17
Twinstrata: A ponte entre o DataCenter e Object Storage
ON-PREMISE
APPLICATIONS &
Use Cases
18
ECS
(object storage)
CloudArray
Backup
Archive
Primary
Storage
Data Reduction
iSCSI / NAS
Files
Volume-Based
Dynamic Cache
In-Cloud
Snapshots
API
Encryption
Bandwidth Auto Backup Instant
Controls
& Upgrade Recovery
© Copyright 2014 EMC Corporation. All rights reserved.
18
ViPR Data Services: Benefícios
 Flexibilidade e aproveitamento de recursos existentes
 Solução baseada em software permite a escolha da
melhor plataforma de armazenamento
 Suporte a hardware commodity(baixo custo)
 Integração com padrões/protocolos de
indústria(Amazon S3, OpenStack Swift, HDFS)
© Copyright 2014 EMC Corporation. All rights reserved.
19
Join the ViPR
Community…
Learn
Explore how-to
videos, helpful
guides, and
training
|
Try
Download ViPR
FREE with no
time limit – for
non-production
use
| Develop
Access SDKs,
FAQs, forums,
technical
documentation,
sample apps,
and more
| Collaborate
Ask the
experts, talk to
peers, share
ideas and
experiences
www.emc.com/viprcommunity
© Copyright 2014 EMC Corporation. All rights reserved.
20
OBRIGADO!
© Copyright 2014 EMC Corporation. All rights reserved.
21
Download

software defined storage