Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ......

16
Les réseaux à hautes performances Quadrics, Myrinet, Infiniband et Fiber-channel 1 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément ZUNINO Professeur : F. NOLOT

Transcript of Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ......

Page 1: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

Les réseaux àhautes performances

Quadrics, Myrinet, Infiniband et Fiber-channel

1 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Professeur : F. NOLOT

Page 2: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

2 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Plan

Rappel

Quadrics

Myrinet

Infiniband

Fiber Channel

Top 500

Page 3: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

3 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Rappel

• Noeud

Unité de calcul à mémoire partagée

• Cluster

Grappe de Noeuds ou Ferme de calcul

• Supercalculateur

Ordinateur à hautes performances

• Grille de calcul

Ensemble de clusters éloignés

Page 4: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

4 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Quadrics

• Constructeur et développeur de réseaux d’interconnexion haute performance et logiciel.

• Créé en 1996.

• Cartes, switches et software (Resource Management System, Linux Software)

• Latence = 1.7µs (ELAN 4)

• Débit = 10Gb/s

Page 5: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

5 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Quadrics

• QsNet II: adapté aux grappes de grands serveurs:

• QsNet II E-Series: adapté aux grappe de serveurs de 8 à 128 nœuds

• QsNet II R-Series: adapté aux grappe de serveurs de 256 à 4096 nœuds

• QsTenG

• Switches et cartes 10Gb Ethernet.

• Câbles de 15m maximum.

Page 6: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

6 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Myrinet

• Solution réseau haute-vitesse de Myricom.

• Standardisé en 1998 avec un débit de théorique 2Gb/s.

• Nouvelle version en 2005 avec un débit théorique de 10Gb/s;

• Fonctionne avec Ethernet TCP/IP et UDP/IP sur les plates formes: Linux, Windows, Solaris, MacOSXet FreeBSD grâce au driver Myri10GE.

Page 7: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

7 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Interface logiciel

Page 8: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

8 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Myrinet

Cable

Fibre Optique

Page 9: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

9 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Infiniband

• Utilisé depuis 2000

• Fusion de 2 technologies: Future I/O et Next Generation I/O

• 3 surcouches logicielles:

IPoIB: Internet Protocol over Infiniband

SDP: Sockets Direct Protocol

SRP: SCSI RDMA Protocol

Page 10: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

10 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Infiniband: CaractéristiquesSimple Double Quadruple

1X 2 Gbit/s 4 Gbit/s 8 Gbit/s

4X 8 Gbit/s 16 Gbit/s 32 Gbit/s

12X 24 Gbit/s 48 Gbit/s 96 Gbit/s

Latence 200 ns 140 ns ?

Page 11: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

11 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Infiniband: Exemple

Page 12: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

12 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Fiber chanel

• Protocole standardisé en 1994.

• Connexion haut débit entre un ordinateur et son système de stockage.

• Protocole standard des SAN.

• 3 topologies : Point to Point, Boucle, Switch.

• Paire torsadée ou fibre optique.

• Longues distances (plusieurs kms).

• Débit de 4Gb/s (double en 2008).

Page 13: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

13 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Fiber chanel

Page 14: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

14 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Fiber chanel

Cable Fibre Optique

Carte Dual-Channel PCI-Express

Page 15: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

15 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Top 500• Infiniband:

121 supercalculateurs.

3e, mis en place en 2007 pour le Mexico Computing Applications Center

• Mirynet: 18 supercalculateurs.

13e, mis en place en 2006 pour le Barcelona Supercomputing Center

• Quadrics 9 supercalculateurs.

TERA-10: 19e, mis en place en 2006 pour le CEA.

Page 16: Les réseaux à hautes performances - Florent NOLOT · Unité de calcul à mémoire partagée ... SRP: SCSI RDMA Protocol. 10 Master 2 STIC Info 2007/2008 Laurent MAURIZIO Clément

16 Master 2 STIC Info 2007/2008Laurent MAURIZIOClément ZUNINO

Bibliographie• Myrinet

• www.myri.com

• Quadrics• http://www.quadrics.com

• Infiniband• http://www.infinibandta.org

• Le Journal du Net• http://www.journaldunet.com/solutions/0501/050125_fibrechannel_

iscsi.shtml

• Symposium2006• http://symposium2006.oscer.ou.edu/oksupercompsymp2006_talk_pe

gan.pdf