Solution Hitachi Content Platform

28
HITACHI CONTENT PLATFORM ET PLUS… LE PORTAIL CLOUD STORAGE DE VOS DONNÉES PARTAGÉES PRIMAIRES ET D’ARCHIVAGE [email protected]. JANVIER 2014

description

Hitachi File & Content Solutions - HCP est le portail Cloud Storage de vos données partagées primaires et d’archivage. Information produit sur le fonctionnel et les capacités de gestion d'un Stockage Objet ou Object Storage.

Transcript of Solution Hitachi Content Platform

Page 1: Solution Hitachi Content Platform

HITACHI CONTENT PLATFORM ET PLUS…

LE PORTAIL CLOUD STORAGE DE VOS DONNÉES PARTAGÉES PRIMAIRES ET D’ARCHIVAGE

[email protected]. JANVIER 2014

Page 2: Solution Hitachi Content Platform

PORTFOLIO SOLUTIONS MATÉRIELLES

Hitachi Command Suite

Hitachi Compute

Rack & Blade

Serveurs

CB500 CB2000

CR210

CR220 Cloud Computing

& SAN IP - FC

Cloud Storage, Big

Data & SAN IP

Hitachi Content

Platform Cloud & Core

Série 4000 Hitachi NAS

NAS High-performance

Hitachi Data Ingestor NAS Edge & Core

Hitachi Data

Discovery Suite Big Data Analytique

Série F

Hitachi NAS F NAS Bureautique

Série 3000

110 130

HUS Unifié Modulaire Bloc & File Module

Option

File M1 & M2

SAN FC & IP

Unified Compute Cloud Infrastructure

Virtual Storage

Platform Entreprise

SAN FC &

Mainframe

HCP AnyWhere Sync & Share

HANA

Virtual Tape Library Backup & Appliance

Page 3: Solution Hitachi Content Platform

ADRESSER LES NOUVEAUX MARCHÉS DES PRODUITS D’AUJOURD’HUI POUR L’IT DE DEMAIN

BIG

DATA

CLOUD

STORAGE

INFORMATION CONTENU INFRASTRUCTURE

STOCKAGE

OBJET

HDDS

Page 4: Solution Hitachi Content Platform

Lyon

Site 1

Bourges Grenoble

Site 2

Site 3

Lille

Roubaix

Site X

Caen

Hitachi Data Ingestor,

Hitachi Content Platform

ou Hitachi NAS

Core

Edge

Hitachi Content Platform

Hitachi Data Discovery Suite Service

ARCHITECTURE ROBO & CONTENT CORE ACCÈS DISTRIBUÉ AU CONTENU CONSOLIDÉ & SÉCURISÉ

Accès

Contenu Accès

Contenu

Microbiologie

Maternité

Radiologie IS

Urgence

Page 5: Solution Hitachi Content Platform

HITACHI CONTENT PLATFORM STOCKAGE WEB

Page 6: Solution Hitachi Content Platform

SOLUTION INDUSTRIELLE SIMPLIFIÉE ET AUTOMATISÉE

ADOPTEZ UNE POLITIQUE D’UTILISATION DE L’OBJET POUR VOS

FICHIERS, LE CLOUD STORAGE ET LA GESTION DE CONTENUS

• Favoriser le déploiement de métadonnées multiples

• Exploiter le contenu par l’analyse efficiente

• Inciter l’utilisateur à la production et la maîtrise de ses données originales

ADOPTEZ UNE POLITIQUE DE BON SENS

Archivez les données non utilisées

Baisser le nombre de sauvegardes

Consolidez plus en regroupant les silos de stockage

Distribuez de manière efficiente la gestion de votre IT

E-Discovery & réglementation pour réduire les risques

Facilitez l’approche Cloud pour des gains d’agilité

HITACHI CONTENT PLATFORM L’OFFRE A-B-C RECONNUE

Frappant : HCP-HDI

HCP Cloud Storage

Excellence Award

Visionary Product

Award HCP

Page 7: Solution Hitachi Content Platform

7

LAN

HDS CLOUD & OBJECT STORAGE INTÉGRATION & INDUSTRIALISATION

Virtualisation

FC

IP

Web

RAIN

Architecture

SAIN

Architecture

Composant complémentaire HDS

Extension fonctionnelle non HDS

Solution Hitachi Content Platform

Tier

Externe

File Tiering

Private Enterprise

Cloud Storage Service

Private

Cloud

Autre

Stockage

Tier

Externe

Virtualisation

Application

HDIM

Client &

Utilisateur

Métier &

Utilisateur

DICOM, HL7

& XDR

VNA

Storage Service

Search Bus

Architecture

HTTPS://

AD & LDAP

ROBO

CIFS, NFS

FTP & iSCSI

TA

PE

Application &

Utilisateur

Apps

Client &

Utilisateur

Intégration

Logicielle

Client &

Utilisateur

HSO-

MS

Plug-in

Page 8: Solution Hitachi Content Platform

OUVERTURE ET CONTINUITÉ DU SYSTÈME DE FICHIERS AU SYSTÈME D’OBJETS

Métadonnées

Système

Métadonnées

Personnalisées

ou Métier

Nom du fichier : CA53589.JPG

Taille du fichier : 105Ko

Date de création : 12 janvier 2010

Date de modification : 7 juin 2012

Catégorie : Famille

Description : le gâteau de mon anniversaire

Coordonnées GPS : 49 ° 30.0 ' - 123 ° 30.0 '

Diffusion sur Facebook : Oui

Envoyé par email à la famille : Non

Système de Fichiers

Fichier = Données +

Métadonnées Système

Objet = Fichier + Métadonnées

Personnalisées ou Métier

Système Objets

Données

Page 9: Solution Hitachi Content Platform

EXEMPLE IDENTIFICATION DU SINISTRE CONTRAT DE L’ASSURANCE

<claim id=1203 date=20110925>

<policy id=101>

<party id=1 type=car plate=509445>

<claim id=1203 date=20110925>

<policy id=101>

<estimate id=2344 estimator=124 date=20110930>

<claim id=1203 date=20110930>

<policy id=101>

<invoice id=72273881 vendor=2833>

<policy id=101>

<object type=car

plate=454756>

<customer id=2355>

<tow plate=454756>

Page 10: Solution Hitachi Content Platform

STRUCTURER LA DONNÉE PAR SA MÉTADONNÉE

VALORISER UNE DONNÉE NON STRUCTURÉE PAR DES MÉTADONNÉES

PERSONNALISÉES ET LA RECHERCHE

DONNEES

SYSTEM/POSIX

METADONNEES

Fichier : p12d67.jpg

Taille : 673124

Ingéré le : 12/1/12

Hash : 12ABD78F0E

ANNOTATIONS

Médical (DICOM) <record>

<doctor>

<name>John Smith</name>

</doctor>

<patient>

<name>John Smith</name>

<age>48</age>

</patient>

</record>

Image (EXIF) <taken>11/17/12</taken>

<aperture>5</aperture>

<ISO>400</ISO>

Facturation (Billing) <cost>$1,500</cost>

<insurance>yes</insurance>

Page 11: Solution Hitachi Content Platform

CYCLE DE VIE D’UN OBJET

Ajouter

Réduire

Conserver Effacer

Classer

Page 12: Solution Hitachi Content Platform

LES 2 FACES DU STOCKAGE OBJET

Page 13: Solution Hitachi Content Platform

LA RÉPONSE HITACHI CONTENT PLATFORM SOLUTION DE STOCKAGE OBJETS TOUT-EN-UN

Système

de Fichiers

• Ecriture & Lecture

• Tous formats de fichiers

• HTTPs (REST API) & cURL

• WebDAV

• HS3 (Amazon)

• CIFS & NFS

• SMTP

• DICOM, HL7 & XDS/XDSi*

Méta-

données

• Ecriture & Lecture

• Format XML & TXT

• HTTPs, WebDAV & cURL

• CIFS & NFS

• Metadata Query Engine

Gestion &

Service

• Empreinte (MD, RIPEMD, SHA)

• Versioning local et distant

• Rétention & WORM

• Duplication : jusqu’à 4 copies SLA

• Réplication** : n-n, n-1, 1-1-1, …

• Réplication sur Bandes*

• Shredding & Encodage AES

• Compression & Déduplication

• Multi-Tenants

• Active Directory & Object ACL

• File Tiering externe sur NFS

• Chargeback (facturation)

• HCP Data Migrator* (GUI et CLI)

• Spin-Down***

• Virtualisation de Stockage Tiers*

• Rapport & Contrôle :

• CPU, mémoire, réseau, disque,

volume, flux, …

• Alerte email, Syslog, SNMP;

RADIUS, M-API, …

• VLAN, IPv6, 10GbE, …

Hitachi Data Ingestor* :

• Remote Cache Disque

• Ecriture & Lecture

• CIFS, NFS & FTP

• 3 déclinaisons :

• VM, Single & Cluster

* Composant additionnel ** Licence par HCP *** Licence par HUS + Service * Client Logiciel gratuit livré de base

HCP AnyWhere* :

• Accès Mobilité

• Web, Windows, iOS

Indexation

de Contenu

HDDS - Recherche de contenu* :

• Rapport technique

• Audit probatoire

• Abonnement RSS

• +80 langues pour +400 formats

• Technologie Hitachi Search Bus

• Active Directory & LDAP

Page 14: Solution Hitachi Content Platform

HITACHI CONTENT PLATFORM ARCHITECTURE INTERNE ET COMPOSANTS

PRINCIPE DE L’APPLIANCE MATÉRIELLE ÉVOLUTIVE DE STOCKAGE

3 Modèles

• HCP 300

• HCP 500

• HCP 500XL

1 Modèle VM

• HCP VM

Page 15: Solution Hitachi Content Platform

MARCHÉS : OBJECT STORAGE, CLOUD STORAGE, BIG DATA ET ARCHIVAGE

HITACHI CONTENT PLATFORM RÉSUMÉ DE LA LIGNE PRODUIT

HCP 300 HCP 500 HCP 500XL HCP Virtual Machine

Protocoles Données HTTPs, WebDAV, S3, CIFS, NFS & SMTP en natif

Protocoles Admin. HTTPs, RADIUS, SNMP, Syslog, Hi-Track/HDvM, Management API & notification Email

Capacité min./max. 4To à 84To (DPL2)

8To à 140To (DPL1) 21To à 5Po 21To à 40Po 4To à 4.7Po

#Fichiers Max. 16 Milliards 64 Milliards 64 Milliards 32 Milliards

Maté

riel

#Contrôleurs 4 à 20 Serveurs 4 à 80 Serveurs 4 à 80 Serveurs 4 à 40 VM

#CPU / RAM 1x Quad Core / 12Go 2x Six Core / 12Go 2x Six Core / 12Go 8x vCPU / 12Go

#Ports IP 2x 1GbE 2 x 1GbE / 10GbE 2 x 1GbE / 10GbE 2x pNIC

#Ports FC - 2x 4Gb / 8Gb 2x 4Gb / 8Gb 2x pNIC

#DD Interne 6 x 3.5” (500Go à 1To) - 5 x 2.5” (500Go) via VMware

Baie SAN FC - Oui Oui via VMware

Spin-Down Non Oui via HUS Oui via HUS Non

Lo

gic

iel

Encryption Oui Oui Oui Oui

Copies réparties Oui Oui Oui Oui

Compression &

Single Instance Oui Oui Oui Oui

Réplication (Lic.) Oui Oui Oui Oui

Shredding Oui Oui Oui Oui

WORM Oui Oui Oui Oui

Page 16: Solution Hitachi Content Platform

HITACHI CONTENT PLATFORM GESTION CLOISONNÉE PAR TENANTS ET NAMESPACES

Namespace X

Namespace Y

Namespace Cardiologie

Co

mp

te 1

Co

mp

te 2

Tenant CHU

Domaine https://medical.region.fr https://admin.medical.region.fr

https://chu.medical.region.fr https://cardiologie.chu.medical.region.fr

Namespace B

Namespace…

Co

mp

te 1

Tenant CH

Namespace A

Co

mp

te …

Page 17: Solution Hitachi Content Platform

CRÉATION DE NAMESPACE UN TENANT PEUT CONTENIR PLUSIEURS DOMAINES INDÉPENDANTS

Gestionnaire

du Tenant

https://tenquota.private-cloud.ssp.fr

Protection Volume

Stratégie

Service

Tableau de bord

Page 18: Solution Hitachi Content Platform

DOMAINE DE DÉPÔT DES FICHIERS ACCÈS SÉCURISÉS AUX SOUS DOMAINES

Upload

Intégrité

Historique

Version : Backup

https://downloads1.tenquota.private-cloud.ssp.fr

Download

Utilisateur(s)

du Domaine : Utilisateur final ou

Application Métier

Page 19: Solution Hitachi Content Platform

AU SERVICE DE L’INTÉGRATION MÉTIER ACCÈS WEB STANDARD ET NON PROPRIÉTAIRE

Intégration HTTP(s)

1. REST API – REpresentational State Transfer

‒ GET, PUT, EXISTS & DELETE

‒ cURL – Client URL Request Library, Libcurl : C++, Java, .NET, Perl, PHP, Ruby...

‒ Définition Wikipedia

‒ […] REST n'est pas un protocole ou un format, c'est un style d'architecture, c'est le style architectural original du Web […] un composant lit ou modifie une ressource […] Une ressource est […] nommable […] peut évoluer avec le temps. Une représentation est une séquence d'octets, éventuellement accompagnée de métadonnées […]

2. WebDAV – Web-based Distributed Authoring and Versioning

‒ Extension du protocole HTTP : point de montage par URL

‒ Support des clients RFC 2518

‒ Définition Wikipedia

‒ […] permet de récupérer, déposer, synchroniser et publier des fichiers (et dossiers) rapidement et facilement […] Il saura gérer les droits d'accès aux fichiers (ou dossiers), en verrouillant momentanément les fichiers et dossiers édités […]

Page 20: Solution Hitachi Content Platform

UTILISER HTTP EST SIMPLE, RAPIDE ET EFFICACE ! EXEMPLES D’UTILISATION AVEC LIBCURL – DOMAINE PUBLIC

Envoyer le fichier foo.doc dans HCP

‒ curl –iT foo.doc http://www.arc.acme.com/fcfs_data/users/jeff/foo.doc

Envoyer le fichier bar.doc avec positionnement de sa rétention

‒ curl –iT bar.doc http://www.arc.acme.com/fcfs_data/users/jeff/foo.doc?retention=N+1y

Envoyer le fichier bar.doc dans le répertoire créé dans la même opération

‒ curl –iT bar.doc http://www.arc.acme.com/fcfs_data/ISV/f1/f2/f3/f4/f5/f6/bar.doc

Récupérer le fichier bam.doc

‒ curl http://www.arc.acme.com/fcfs_data/users/jeff/bam.doc > bam.doc

Récupérer le fichier bam.doc (seconde méthode)

‒ curl –o bam.doc http://www.arc.acme.com/fcfs_data/jeff/bam.doc

Récupérer les 500 premiers octets d’un fichier :

‒ curl –r 0-499 http://www.arc.acme.com/fcfs_data/users/jeff/bam.doc > bam.doc

Vérifier le fichier bam.doc

‒ curl –iI http://www.arc.acme.com/fcfs_data/users/jeff/bam.doc

Supprimer le fichier foo.doc

‒ curl –iX DELETE http://www.arc.acme.com/fcfs_data/users/jeff/foo.doc

Page 21: Solution Hitachi Content Platform

PRINCIPES DE FONCTIONNEMENT DU DISPOSITIF LOCAL

L’application écrit un fichier dans Hitachi Data Ingestor (HDI)

HDI réplique le fichier vers Hitachi Content Platform (HCP)

Lorsque la capacité du cache HDI atteint un seuil, HDI supprime le fichier de son cache et le substitue par un pointeur (lien ou stub d’une taille de 4Ko)

La lecture d’un lien provoque le rappel du fichier dans HDI

Les utilisateurs continuent d’accéder aux fichiers en toute transparence, peu importe le

statut du fichier (stockage court terme, archivage long terme)

HITACHI DATA INGESTOR FLUX DE DONNÉES

HDI HCP

Application

& Utilisateur

REST/HTTP(S)

ECRITURE SYNCHRO.

LECTURE RAPPEL

CIFS/NFS

SITE LOCAL DATA CENTER

Page 22: Solution Hitachi Content Platform

22

HCP ARCHITECTURE REMOTE OFFICE BRANCH OFFICE

IP WAN

HTTPs

RAIN

Architecture

SAIN

Architecture

ROBO

IP LAN

Site #1 Site #2 Site #3

ROBO ROBO

Sync Sync

Sites Distants • HDI = Archive, Sync & Share

• HNAS = Data Migration & Archive

• HCP = Web Services & Migration

Data Center

• HCP = Consolidation, Sécurisation Analyse

& Protection Multi-Sites

Data

Center #1 Data

Center #2

Site #4

ROBO

Réplication

Page 23: Solution Hitachi Content Platform

EXEMPLE D’UTILISATION POUR LA TRAÇABILITÉ D’EMAILS JOURNALISATION DIRECTE D’EMAIL VIA SMTP POUR MESSAGERIE

Journalisation via SMTP :

‒ RFCs 1652, 2821, 2822 et 2920

Performance d’ingestion

Visibilité fichiers et Web :

‒ CIFS, NFS, cURL, REST, WebDAV, .etc.

Intégrité garantie des données

Chaque message est écrit de façon unique dans un répertoire auto généré sous la forme :

‒ /YYYY/MM/DD/HH/MM/SSMSUU/

Capacité de mutualiser les pièces attachées :

‒ Single Instance

‒ Compression

Encodage bas niveau

Classe de rétention

Accès multi-niveaux

Indexation et recherche (option)

NFS CIFS Web 2.0

SMTP

Mailbox

Politique de gestion

Journal

Page 24: Solution Hitachi Content Platform

Contrôle de l’empreinte dans HCP

‒ Intégrée dans les métadonnées de l’archive.

‒ Contrôle de l’intégrité au dépôt, dans la période de conservation et à chaque consultation.

‒ Journalisation sur les archives.

‒ Contrôle lors des copies miroirs internes.

‒ Contrôle lors de la réplication.

‒ Audit spécifique sur la plate-forme.

Fonctionnalités exigées par un CFE (MUST) HCP

Période de maintien opérationnel du contenant Oui

Chiffrement du contenu Oui

Accès au déposant Oui

Intégrité (bit par bit) Oui

Confidentialité (contenu secret) vis-à-vis de tiers Oui

Confidentialité (contenu secret) vis-à-vis

d’administrateurs

Oui

Protection logique des données Oui

Protection physique Oui

Fonctionnalités souhaitées dans un CFE HCP

Disponibilité (QoS) Oui

Signature électronique Oui

Norme Afnor NF Z42-013:2009

‒ WORM logique : support fixe avec journal des événements

‒ Moyen cryptographique

‒ Hachage (empreinte) : Afnor, page 10, définition 3.15, « Fonction qui fait subir une succession de traitements à une donnée

quelconque fournie en entrée pour en produire une empreinte servant à identifier la donnée initiale. »

Norme Afnor NF Z42-020

‒ « Le Coffre Fort Electronique est un espace virtuel de stockage et de conservation sécurisé et réputé

inviolable permettant de restituer ce qui a été déposé sans altération. », FedISA Luxembourg – Livre Blanc.

ARCHIVAGE À VALEUR PROBATOIRE RESPECT DES NORMES ET DES RÉGLEMENTATIONS

Page 25: Solution Hitachi Content Platform

FERME SHAREPOINT

HCP

Backups

HNAS

CIFS HTTPs

Archiver en premier

‒ Déplacer les données inactives de la ferme MS SharePoint vers HCP

Backuper moins

‒ Réduire les coûts et le temps des sauvegardes

‒ Améliorer la performance et l’évolutivité

‒ Baisse du coût des capacités des serveurs SQL

Archiver en premier Backuper moins

EXEMPLE AVEC MICROSOFT SHAREPOINT HITACHI STORAGE OPTIMIZATION

Page 26: Solution Hitachi Content Platform

HITACHI CONTENT PLATFORM-DATA MIGRATOR

• Systèmes de fichiers locaux incluant les points de montages issus de partage NAS

• Tenant et Default Tenant

• Personnalisation des Métadonnées

• Définition de Profiles et de Tâches d’exécution

• Positionnement de rétention

• Interface graphique et CLI multi plates-formes

SUPPORTS

• Transferts automatisés et à la demande

• Outil sans surcoût de licence et de maintenance

• Aide à une meilleure intégration applicative

• Facile d’utilisation et d’accès par l’administrateur, un utilisateur ou à incorporer dans une prestation globale de service

BÉNÉFICES

DATA MIGRATOR EST UNE SOLUTION LOGICIELLE EMBARQUÉE AVEC HCP,

POUR LE TRANSFERT, LA COPIE ET LA SUPPRESSION DE DONNÉES VERS

ET DEPUIS HITACHI CONTENT PLATFORM EN ACCÈS WEB.

Page 28: Solution Hitachi Content Platform

TIREZ LE MEILLEUR PARTI DE VOS INFORMATIONS

MERCI