Ibm flash tms presentation 2013 04

IBM FlashSystem…IBM FlashSystem…Enterprise Storage in microseconds, not millisecondsEnterprise Storage in microseconds, not millisecondsAccélérez votre Business…Accélérez votre Business…Maintenant et facilement!Maintenant et facilement!Proposition de Valeur

Solutions et implémentation

Bénéfices clients

Contact:

Pierre-Jean BOCHARD [email protected] – 06 88 21 98 76

http://www-03.ibm.com/systems/storage/flash/index.html

Le portefeuille stockage IBM

IBM Smart Analytics Solutions

(ISAS)

Solutions intégréesSolutions intégrées

Haut de gammeXIV SONASDS8000

Midrangeet entréede gamme

Protectionet conservationdes donnés

Systèmes de stockage optimisésSystèmes de stockage optimisés

Tape LibraryTS3310

Tape Virtualization TS7720/7740

Tape AutomationTS3500

Tape drivesEnterprise & LTO

ProtecTIERTS7620/50

Tivoli Storage Productivity Center

Tivoli Storage FlashCopy Manager

Tivoli Storage Manager

Tivoli Key Lifecycle Manager

Logicielsde gestion

du stockage

Logicielsde gestion

du stockage

Innovation intégrée

Innovation intégrée

Storage Virtualization SW and SVC

Real-time Compression

Déduplication

Easy Tier

IBM Active Cloud EngineTM

Linear Tape File System (LTFS)

Virtual Storage Center

StorwizeV3700

DS3500DCS3700N series

Storwize V7000& Storwize V7000 Unified

2

SmartCloud Storage Access

Flash Storage Systems

FlashSystems

Durant les 10 dernières années:

• Vitesse CPU: croissance 8-10x

• Vitesse DRAM: croissance 7-9x

• Vitesse BUS: croissance 20x

• Vitesse RESEAU: croissance 100x

• Vitesse DISQUES: croissance 1.2x seulement

Le disque, goulot d’étranglement dans l’IT

1. Multiplier par 10 l’efficacité de vos applications… Oracle, SAP, BI, …. 2. Multiplier par 10 l’efficacité de vos serveurs… 3. Augmenter l’efficacité de vos opérations (backup, infra VDI,…)4. Réduire potentiellement les coûts de vos licences ISV?5. Réduire vos coûts d’hébergement, de bilan énergétique par 10 et +

SANS RE-ARCHITECTURER VOS APPLICATIONS, SANS RE-ARCHITECTURER VOS APPLICATIONS, SANS CHANGER VOS SERVEURSSANS CHANGER VOS SERVEURSAvec un ROI de quelques moisAvec un ROI de quelques mois

Que diriez vous si vous pouviez…Que diriez vous si vous pouviez…

‘FLASH will change the structure of our future systems……Texas Memory Systems, leader in FLASH OPTIMIZED SYSTEMS… We will be able to offer our clients flash optimized systems by integrating this technology in our overall portfolio’

‘FLASH will change the structure of our future systems……Texas Memory Systems, leader in FLASH OPTIMIZED SYSTEMS… We will be able to offer our clients flash optimized systems by integrating this technology in our overall portfolio’

Ambuj GOYALGM, System Storage & Networking Systems & Technology Group

• Les plus grosses installations de Flash en production dans le monde• En opération dans 10 places financières majeures dans le monde

• Utilisé par 7 des 11 plus gros opérateurs telcos dans le monde • Installés et en production dans 35 pays

• Envoyer un texto• Parier en ligne• Réserver un vol, une croisière• Utiliser un GAB• Trader en ligne• Acheter en ligne• Utiliser du wifi pre-payé• Jouer en ligne

TMS Flash Systems are everywhere …where Performance is Key for Business!

Proposition de valeur IBM FlashSystem

85% ReductionIn batch

processing times

85% ReductionIn batch

processing times

90% ReductionIn OLTP times

90% ReductionIn OLTP times

150-200 µs Latency

150-200 µs Latency

80% ReductionEnergy Usage

80% ReductionEnergy Usage

75% Footprint Reduction

Store one petabyte in a single floor tile.

Add compression and add up to 100%

more

Enterprise ReliabilityHigh Availability, 2D Flash RAIDTM and Variable Stripe RAIDTM

Faire un I/O: Baie de disques actuelle

Time

I/O Serviced by Disk

1. Issue I/O request (~ 100 μs)

2. Wait for I/O to be serviced (~ 5 000 μs)

3. Process I/O (~ 100 μs)

Time to process 1 I/O request = 200 μs + 5 000 μs = 5 200 μs

Server: CPU Utilization = Wait time / Processing time = 200 / 5 200 = ~4%

Processing~100µs ~100µs

Waiting~5000 µs

CPU State of server

1 I/O Request

Faire un I/O: Baie de disques avec des SSD

Time

I/O Serviced by SSD

1. Issue I/O request (~ 100 μs)

2. Wait for I/O to be serviced (~ 1 000 μs)

3. Process I/O (~ 100 μs)

Time to process 1 I/O request = 200 μs + 1 000 μs = 1 200 μs

Server: CPU Utilization = Wait time / Processing time = 200 / 2 200 = ~17%

Processing ~100µs ~100µs

Waiting ~1000 µs

CPU StateOf Server

1 I/O Request

Flash dans un format disque: Solid State Drive(SSD)

Problémes:

1/ Limitation des IO/sec due à la saturation des controleurs et bus internes

2/ Financier:

> 6 SSD Flash TMS

Faire un I/O avec une baie IBM FLASH:

Time

I/O Serviced by Flash Memory

1. Issue I/O request: ~ 100 μs

2. Wait for I/O to be serviced: ~ 200 μs (vs 5000 μs HDD)

3. Process I/O: ~ 100 μsTime to process 1 I/O request = 200 μs + 200 μs = 400 μs Utilisation CPU du serveur : Wait time / Processing time

200 / 400 = ~50% (versus 4% avec un I/O disque)

Processing~100µs ~100µs

Waiting ~200 µs

CPU State

Of Server

1 I/O FLASH

Un facteur 12L’application a ses

performances multipliées par 12 avec la Flash !

CPU plus utilisée moins de coeurs budget licences ISV réduit (Oracle, SQL)

~5000 µs

~100µs

1 I/O Disque

Positionnement des systèmes de disques IBM

Serveurs IBM Mainframe Serveurs Open

Perf

orm

ance

s (R

esp.

Tim

e, IO

ps) IBM Flash TMS

Relia

bilit

y, A

vaila

bilit

y, S

ervi

ceab

ility Block - SAN FC

System Z System P / I / PureSystemsUnified:SAN+NAS

Ultr

a H

igh

Hig

h M

ediu

m

microseconde

DS8870 SoNAS

SVC + DS8870 /V7000/XIV

Storwize Family

Storwize V7000 Unified

N series

Entr

y

XIV (One Tier/Grid)

milliseconde

NAS

SOD

Différentes qualité de Flash

Offre de baies FLASH IBM Pour toute taille de clientDe 1 TeraOctet dans 1 U à 1 PetaOctet dans 1 seul Rack!

De 450 000 I/O à 20 millions d’I/O par seconde!De 25 à 110 micro secondes de temps de réponse! (*)

(*) Temps de réponse classique d’une baie de disques: 5 millisecondes

FlashSystem 820 (eMLC) FlashSystem 720 (SLC)

FlashSystem 710 (SLC)FlashSystem 810 (eMLC)

Baie Flash 720 / 820 – A coeur ouvert1 U, 500Watts, 500 000 IOPS, latence: 25 (read) à 110 (write) microsecondes

Redundant Power Supplies

Redundant Fans

12 Flash Modules (10+1+1)

1U Chassis

N+1 batteries

Redundant Management

Control Processors

Redundant RAID controllers

Two Dual-Ported 8 Gb/s FC or40 Gb/s QDR IB Interfaces

RAID 5 across Flash Modules (10 data + 1 parity + 1 hot spare)

ExternalInterfaces

(FC, IB)

RAID Controllers

RAID 5 withinFlash Modules

(9 data + 1 parity)

TMS2D Flash RAID™

Protection des data - 2D Flash RAID™

3 modes d’implémentation d’une baie IBM Flash / TMS… … sans modifier l’infrastructure applicative existante

Environnement Virtualisé

Exemple d’infra en High Avalaibility avec SVC Stretched Cluster + IBM Flash / TMS

Room 1

Blade

Center 1

Blade Blade

IBM Flash

5TB

SANSAN

Storwize V7000

SSD

SAN SAN SAN SAN

SVC

Stretched cluster

Node 1

Blade Blade

SANSAN

SVC

Stretched cluster

Node 2

Storwize V7000

HDD

IBM Flash

5TB

Storwize V7000

SSD

Storwize V7000

HDD

Room 1

Blade

Center 2

En parallèle du stockage existant

Au niveau du SANSVC / V7000 Primary Copy of vDisk

Au niveau de l’OS (Volume Manager)AIX LVM (native least queue read)

Veritas (Preferred Read Plex)

Solaris SVM

Oracle ASM

Au niveau applicatifStandby/Reporting Instance

SQL AlwaysOn

Implementation Flash en parallèle du stockage existant

Cas réel: Environnement EMC

Baie Flash dédiée

Cas réel: Environnement SAP Infrastructure non IBM

• COCC, financial technology provider

• Custom Oracle ATM processing application

• Mirrored TMS hybrid Flash array

• CIO Chad Burney won InfoWorld CTO 25 award for performance and cost improvements

For Internal Customer Use Only - Texas Memory Systems Confidential

Enterprise Array, No FlashEnterprise Array, No Flash IBM Flash / TMSIBM Flash / TMS

2 million queries12.25 minutes to complete

16K Total IOPS4K per RAC Node

[oracle]$ time ./spawn_50.sh

real 12m15.434suser 0m5.464ssys 0m4.031s













A factor of over 9x improvement!

Performance Scenario: Oracle RAC, 4 Nodes

Problem•UFC provides digital content for over 130 platforms, transcoding created storage bottlenecksSolution•5TB of RamSan-710, equivalent to the performance of 2,200 15K RPM hard disk drivesBenefit•70% reduction in transcoding time•40% reduction in delivery time to 130 platforms

Problem•UFC provides digital content for over 130 platforms, transcoding created storage bottlenecksSolution•5TB of RamSan-710, equivalent to the performance of 2,200 15K RPM hard disk drivesBenefit•70% reduction in transcoding time•40% reduction in delivery time to 130 platforms

“The RamSan has just completely elminated bottlenecks. Everything is flowing smoothly” Danny Gold – UFC

UFC Case Study

Video production and distribution

The Research Computing and Cyberinfrastructure (RCC) group at Penn State University provides systems and services that are used extensively in computational and data-driven research and teaching by more than 5,000 faculty members and students.

The situation Research initiatives slowed by HDD To deliver on that mission, RCC operates computational clusters composed of 1,000 servers with 10,000 CPU cores. RCC’s storage infrastructure consists of a cluster of 14 servers running Red Hat Enterprise Linux 5. The servers are connected through 8 Gbps Fibre Channel HBAs to 900 TB of disk storage on a Storage Area Network (SAN) with that data served out over Ethernet to the computational clusters.

The RCC storage cluster is built on General Parallel File System (GPFS) of IBM®, a highly scalable clustered file system that leverages file metadata to achieve policy-based active management of files for backup, migration, archiving and index tagging of files.

It also places an extreme random I/O workload on the storage infrastructure by having to process metadata for those files on an ongoing basis. The GPFS metadata files are small—only 512 bytes—so capacity is not the issue. Rather, the IOPS requirements to process millions of files on an an ongoing basis were overwhelming Penn State RCC’s SAN infrastructure.

HPC infra at Penn University

The challenge Speed up nightly backups RCC had allocated two hundred 15K RPM hard disk drives to handle the metadata processing that managed the nightly backup of user data.

The group had to overprovision capacity of the drives in an attempt to generate acceptable IOPS to complete the backup operation in a brief overnight window so as not to impact production processes. Despite allocating a massive number of the disks to the operation, the nightly incremental backup were still taking up to 6 hours and degrading other system operations.

The solution High-performance, reliable RamSan-810 flash storage The team at RCC determined that a solid state storage solution was needed to effectively handle the IOPS load and replace the HDDs, which had been over provisioned in an attempt to boost IOPS.

“We didn’t need the capacity but we did need the performance,” said Vijay Agarwala, Sr. Director for Penn State’s RCC.

““There were operations, such as nightly backups which have to check the status of all the files in the system, that were being bottlenecked by the performance of those disks.

So it made sense to go with a Flash media array rather than continuing to throw traditional disk spindles at the problem,” said Jason Holmes, lead systems administrator at RCC.

“GPFS allows us to move the metadata from the disk to the RamSan online and once we did that the backups were reduced down to about an hour. So that was a huge difference,” said Holmes. “TMS for this application was the best solution largely because of its maturity and performance. It seemed very stable and it just worked out of the box.

The applications usage at RCC consists of an 85/15 read-write ratio, so eMLC offered a better value than the increased write performance—but higher cost—of a Single Level Cell system, such as the RamSan-710.

FlashSystem implementation

The result Instant six times performance boost

“With some of the other solutions we tested, we poked and pried at them for weeks to get the performance where the vendors claimed it should be,” said Michael Fenn, systems administrator at Penn State.

“With the RamSan we literally just turned it on and that’s all the performance tuning we did. It just worked out of the box.”

“GPFS allows us to move the metadata from the disk to the RamSan online and once we did that the backups were reduced down to about an hour. So that was a huge difference,”

“TMS for this application was the best solution largely because of its maturity and performance. It seemed very stable and it just worked out of the box.

Easy to implement, immediate benefits

Another thing we’ve seen is increased responsiveness in the file system with users, and commands like listing large directories run five times as fast as they did previously. The IOPS capacity of the RamSan has significantly speeded those up.”

Additional benefits

Swapping 200 power-hungry 15K hard disks for two RamSan-810s provided yet another benefit for RCC, reducing its power consumption for metadata storage in the GPFS file systems by 90 percent, from about 5000 watts down to just 500 watts.

The power savings are just part of the cascading cost savings that RamSan Flash storage creates. RamSan Flash storage systems not only require less power to operate, but also produce less heat and consumes less rack space, lowering data center cooling and floor space costs.

Problem•Nightly back up took 6 hours; degraded system performanceSolution•Implemented 4TB of RamSan-810Benefit•Backup window improved 6x to one hour

Problem•Nightly back up took 6 hours; degraded system performanceSolution•Implemented 4TB of RamSan-810Benefit•Backup window improved 6x to one hour

“With the RamSan we literally just turned it on and that’s all the performance tuning we did. It just worked out of the box”. Jason Holmes – Penn State University

Penn State Case StudyHPC / Computational Applications

Une solution IBM mature, opérationnelle chez plus de 300 clients

Ou souhaitez vous accélérer votre business?

Accélérer votre business rapidement, avec un ROI court

(90% bases SAP < 2TO) Solutions Business Intelligence IBM

Infrastructure: Accélérer les applications sans tout changer

Améliorer les perfs sur les applis business gourmandes en IO• Satisfaire les utilisateurs en un temps rapide et avec ROI court• Alignement plus rapide de l’IT sur le Business• Eviter de changer toute une infrastructure Risque, côuts, durée• Optimisation potentielle de côuts de license SW• Réduction potentielle du nombre de cœurs sur les serveurs

Intégrer aisément dans l’existant• Peu de changement opérationnel• Amélioration des opérations (chaines batch, backup)• Réduction potentielle des heures

Mieux utiliser le stockage en place• Optimisation durée de vie existant• Résolution pb de budget

Résoudre des problématiques de salle machine• Ajout de Flash / Disques espace, power, cooling maitrisés et réduits• Budget maitrisé si infra en location chez un hébergeur

Améliorer les perfs sur les applis business gourmandes en IO• Satisfaire les utilisateurs en un temps rapide et avec ROI court• Alignement plus rapide de l’IT sur le Business• Eviter de changer toute une infrastructure Risque, côuts, durée• Optimisation potentielle de côuts de license SW• Réduction potentielle du nombre de cœurs sur les serveurs

Intégrer aisément dans l’existant• Peu de changement opérationnel• Amélioration des opérations (chaines batch, backup)• Réduction potentielle des heures

Mieux utiliser le stockage en place• Optimisation durée de vie existant• Résolution pb de budget

Résoudre des problématiques de salle machine• Ajout de Flash / Disques espace, power, cooling maitrisés et réduits• Budget maitrisé si infra en location chez un hébergeur

Big Data, Analytics, ORACLE, SAP, HPC, VDI, Backup

Application: Architectes/Propriétaires,Line of Business Managers DSI

• Réduit les plaintes des users• Supporte plus d’utilisateurs• Réduit drastiquement les temps de réponse• rapide à MEO, sans changement applicatif

• Les meilleurs indicateurs: ROI rapide, TCO abaissé, économie potentielle de licence SW• Faible consommation électrique, dans 1 U

Administrateurs de base de données Responsible d’Infrastructure (Serveur ou Storage )

• Suprime les I/O waits• Réduit les temps de ‘query’• Accélère les applications• Evite d’entrer dans une architecture ‘vérouillée’ par le fournisseur (vs. Exadata)

• Integration sans peine dans l’infra existante• Faible consommation électrique, dans 1 U

Proposition de valeur d’IBM Flash

Line of Business, propriétaires de processus métier:• Quelles sont vos applications les plus critiques dans votre secteur d’activité?• Une amélioration d’un facteur 2 minimum de ces applications (temsp de réponse, nombre

d’utilisateurs) aurait quel impact sur vos résulats? • Avez vous une Stratégie Flash?

CIO, CTO, DBA: • Vos utilisateurs se plaignent ils d’un manque de performances?• La performance limite t elle vos objectifs business et/ou l’atteinte de vos niveaux de service• Connaissez vous le taux d’utilisation CPU de vos serveurs?• Comment mesurez vous la performance de vos applications métiers? De vos infrastructures?• Quelle est votre stratégie pour améliorer les performances? • Cela va t il nécessiter de remettre à plat l’architecture logicielle? Et l’architecture Serveurs /

Stockage?• Avez vous une problématique de coûts de licences (Oracle, Citrix, Vmware)?• Avez vous une probématique d’espace en salle machine, de consommation éléctrique et de

refroidissement? • Quelle performance aurez vous besoin dans un an?

Une solution IBM Flash apporte t elle de la valeur dans votre environnement business et IT?

go to http://www.redbooks.ibm.com and search for IBM FlashSystem

IBM FlashSystem 710 and IBM FlashSystem 810: http://www.redbooks.ibm.com/technotes/tips1002.pdf

IBM FlashSystem 720 and IBM FlashSystem 820: http://www.redbooks.ibm.com/technotes/tips1003.pdf

IBM FlashSystem in OLTP Database Environments: http://www.redbooks.ibm.com/technotes/tips0973.pdf

IBM FlashSystem in OLAP Database Environments: http://www.redbooks.ibm.com/technotes/tips0974.pdf

Configurations dans outil IBM e-config

Support avant-vente: Bruno SourbeEmail: [email protected] : 06.73.84.57.44

Benchmark: IBM Montpellier

Plus d’informations

Accélérer votre Business … C’est maintenant!Avec les solutions IBM FlashSystem

http://www-03.ibm.com/systems/storage/flash/index.html

Merci pour votre attention

Ibm flash tms presentation 2013 04

Technology

Transcript of Ibm flash tms presentation 2013 04