Tableau résumé des propriétés des serveurs de Calcul Québec

De Wiki de Calcul Québec
Aller à : Navigation, rechercher
Autres langues :anglais 100% • ‎français 100%

Cette page liste les propriétés des serveurs de calcul conventionnels (processeurs multi-coeurs) de Calcul Québec. Pour les informations sur les serveurs dotés d'accélérateurs (GPU ou Xeon Phi), voir cette page.

Sommaire

Matériel

Briarée Briarée Noeuds contribué Colosse Cottos Guillimin (phase 1) Guillimin (phase 2) Mp2 Ms2 Psi
Nombre de nœuds 672 25 960 128 1200 382 1632 308 84
Processeurs Intel Xeon X5650 Westmere Intel Xeon E5-2670 v3 Haswell Intel Xeon X5560 Nehalem Intel Xeon E5472 Intel Xeon X5650 Westmere Intel Xeon E5-2670 Sandy Bridge (372), E5-4620 Sandy Bridge (2), E5-2650v2 Ivy Bridge (8) (noeuds) AMD Opteron 6172 Intel Xeon E5462 Intel Xeon X5650 Westmere
Cœurs par processeur 6 12 4 4 6 8 12 4 6
Fréquence des processeurs 2,67 GHz 2,3 Ghz 2,8 GHz 3,0 GHz 2,67 GHz 2,6 GHz 2,1 GHz 2,8 GHz 2,67 GHz
Mémoire cache par processeur 12 Mo 30 Mo 8 Mo 12 Mo 12 Mo 20 Mo 12 Mo 12 Mo 12 Mo
Cœurs par nœud 12 24 8 8 12 16 24 8 12
Mémoire par nœud 24(~316), 48(~312) ou 96(~42) Go(noeuds) 256(~20), 512(~5) Go(noeuds) 24 ou 48 Go 16 Go 24 (400), 36 (600) ou 72 (188) Go (noeuds) 64 (224), 128 (144), 256 (6), 384 (1), 512 (4) ou 1024 (1) Go (noeuds) 32(1588), 256(20) ou 512(2) Go (noeuds) 16 ou 32 Go 72 Go
Réseau InfiniBand QDR non bloquant InfiniBand QDR non bloquant InfiniBand QDR non bloquant InfiniBand DDR non bloquant InfiniBand QDR, moitié non bloquant, moitié 2:1 InfiniBand QDR, moitié non bloquant, moitié 2:1 InfiniBand QDR non bloquant sur 216 nœuds, 3,5:1 sur le reste InfiniBand DDR non bloquant par section de 22 nœuds (176 cœurs) Ethernet

Espace disque

Briarée Colosse Cottos Guillimin Mp2 Ms2 Psi
Stockage réseau (NFS) - Système $HOME - $HOME
$ARCHIVE
$HOME
$ARCHIVE
$HOME
Système de fichiers parallèle $HOME
(GPFS, 7,3 To),
$SCRATCH
(GPFS, 219 To)
$SCRATCH
(Lustre, 500 To, 17 Go/s)
$RAP/$HOME
(Lustre, 500 To, 12Go/s)
$SCRATCH
(Lustre, 151 To)
$HOME, /sb/project, /gs/project, $SCRATCH
(GPFS, 4 Po)
$PARALLEL_SCRATCH_MP2_... (Lustre, 393 To et 291 To) $PARALLEL_SCRATCH_MS2_... (Lustre, 156 To) -
Disques locaux $LSCRATCH
(182 Go/nœud)
- $LSCRATCH
(745 Go/nœud)
$LSCRATCH
(343 Go/nœud)
$LSCRATCH
(1 To/nœud)
$LSCRATCH
(438 Go/nœud)
/state/partition1
(522 Go/nœud)
Disque en mémoire (jusqu'à la moitié de la mémoire vive du nœud) $RAMDISK $RAMDISK /dev/shm $RAMDISK $RAMDISK $RAMDISK /dev/shm

Performance

T: Théorique; M: Mesurée

Briarée Colosse Cottos Guillimin Mp2 Ms2 Psi
Gflop/s par nœud (double précision) 128,16 (T) 89,6 (T) ; 89,54 (M) 96 (T) 128,16 (T) 201,6 (T) 89,6 (T) 128,16 (T)
Gflop/s par cœur 10,68 (T) 11,2 (T) ; 12,1 (M) 12 (T) 10,68 (T) 8,4 (T) 11,2 (T) 10,68 (T)
Débit de la mémoire vive par nœud (Go/s) 64,4(T) 64,4(T) ; 35,22 (M) - 64,4(T) 51,2 (T) 25,6 (T) -
Débit de la mémoire vive par cœur (Go/s) 5.37 (T) 8 (T) ; 4,4 (M) - 5.37 (T) 2,13 (T) 3,2 (T) -
Débit du réseau InfiniBand par nœud (Go/s) 4 (T) 4 (T) ; 3,58(M) 2 (T) 4 (T) 4 (T) 2 (T) -
Gflop/s par nœud / débit du réseau InfiniBand par nœud 32,04 (T) 22,4 (T) ; 25,01 (M) 48 (T) 32,04 (T) 50,4 (T) 44,8 (T) -

Logiciels

Briarée Colosse Cottos Guillimin Mp2 Ms2 Psi
Système d'exploitation Scientific Linux 6.3 CentOS 6.6 Linux CentOS 5 CentOS 6.5 Linux CentOS 6.5 Linux CentOS 5.5 Linux CentOS 5
Interpréteurs de commandes supportés Bash, tcsh, zsh Bash Bash, tcsh, zsh Bash Bash (défaut)
csh, tcsh
Bash (défaut)
csh, tcsh
Bash
Compilateurs C/C++/Fortran GCC, Intel GCC, Intel, PGI GCC, Intel GCC, Intel, PGI GCC, Intel, PGI, Pathscale GCC, Intel, PGI GCC, Intel
Compilateurs/langages (autres) Cuda, Python, Java, Perl, Mono (C#), R, Ruby Go, Java, Python, Perl, Mono (C#), R, Ruby, Lua, Octave Python, Java, Perl, Mono (C#), R, Ruby Python, Java, Perl, Julia, R, Ruby, Octave Python, Java, Perl, Haskell, R Python, Java, Perl, Haskell, R Python, Java, Perl
Versions de MPI OpenMPI, MPICH2, MVAPICH2 OpenMPI, MVAPICH2 OpenMPI, MVAPICH, MVAPICH2 OpenMPI, MVAPICH2, Intel MPI OpenMPI, MPICH, MVAPICH, MVAPICH2 OpenMPI, MPICH, MVAPICH, MVAPICH2 OpenMPI, MPICH2
Modules Modules sur Briarée Modules sur Colosse Modules sur Cottos Modules sur Guillimin Modules sur Mp2 Modules sur Ms2 Psi n'utilise pas les modules

Soumission de tâches

Briarée Colosse Cottos Guillimin Mp2 Ms2 Psi
Ordonnanceur Maui/Torque Moab/Torque Maui/Torque Moab/Torque Maui/Torque Maui/Torque Maui/Torque
Durée maximale
(sauf exceptions)
7 jours 48 heures 7 jours 30 jours 5 jours 5 jours -
Taille maximale des tâches (sauf exceptions) 2520 cœurs 32 nœuds / 256 cœurs ou selon l'allocation 384 cœurs 1560 cœurs selon allocation selon allocation -
Partage des nœuds Un seul usager par nœud, plusieurs tâches possibles Une seule tâche par nœud Un seul usager par nœud, plusieurs tâches possibles Partagés multi-usagers pour tâches séquentielles, une seule tâche par nœud sinon Une seule tâche par nœud Un seul usager par nœud, plusieurs tâches possibles Partagés multi-usagers
Queue de calcul par défaut soumet (queue de routage) - soumet (queue de routage) metaq qwork qwork default
Autres queues de calcul normale, courte, hp, hpcourte, test, longue - normale, courte, hp, hpcourte, test lm, xlm2, scalemp, debug
Autres attributs: westmere, sandybridge
qtest (1 h)
qfbb
qfat256 (256 Go)
qfat512 (512 Go; 3 jours)
qtest (1 h)
qlong (30 jours)
-
Outils personnels
Espaces de noms

Variantes
Actions
Navigation
Ressources de Calcul Québec
Outils
Partager