Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentes Révision précédente
Prochaine révision
Révision précédente
leria:centre_de_calcul:cluster [06/07/2020 10:53]
Chantrein Jean-Mathieu [IMPORTANT: Disponibilité et politique de gestion des ressources]
leria:centre_de_calcul:cluster [10/03/2021 18:49] (Version actuelle)
Leguy Jules [Environnements conda (Python)]
Ligne 43: Ligne 43:
 ==== Architecture matérielle ==== ==== Architecture matérielle ====
  
-|  Hostname ​           |  Modèle ​    ​| ​ Nombre de modèle identique ​ |  GPU         ​|  Nombre de GPU/​modèle ​ |  CPU                                                                                                            |  Nombre de CPU/​modèle ​ |  Nombre de cœurs/​CPU ​ |  Nombre de threads/​CPU ​ | Nombre de threads/​modèle ​ |  RAM      |  Espace de stockage local  |  Interconnection ​ | +|  Hostname ​      ​|  Modèle ​    ​| ​ Nombre de modèle identique ​ |  GPU               ​|  Nombre de GPU/​modèle ​ |  CPU                                                                                                                                                 ​|  Nombre de CPU/​modèle ​ |  Nombre de cœurs/​CPU ​ |  Nombre de threads/​CPU ​ |  Nombre de threads/​modèle ​ |  RAM      |  Espace de stockage local  |  Interconnection ​ | 
-|  star[254-253] ​      ​|  Dell R720  |  2                           ​| ​ Tesla K20m  |  2                     ​| ​ [[https://​ark.intel.com/​fr/​products/​75275/​Intel-Xeon-Processor-E5-2670-v2-25M-Cache-2-50-GHz-|intel-E5-2670]] ​ |  2                     ​| ​ 10                   ​| ​ 20                     ​| ​ 40                       ​|  64 Go    |  1To                       ​| ​ 2*10Gb/​s ​        | +|  star[254-253] ​ |  Dell R720  |  2                           ​| ​ Tesla K20m        |  2                     ​| ​ [[https://​ark.intel.com/​fr/​products/​75275/​Intel-Xeon-Processor-E5-2670-v2-25M-Cache-2-50-GHz-|intel-E5-2670]] ​                                      ​|  2                     ​| ​ 10                   ​| ​ 20                     ​| ​ 40                        |  64 Go    |  1To                       ​| ​ 2*10Gb/​s ​        | 
-|  star[246-252] ​      ​|  Dell R620  |  7                           ​| ​ X           ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​75275/​Intel-Xeon-Processor-E5-2670-v2-25M-Cache-2-50-GHz-|intel-E5-2670]] ​ |  2                     ​| ​ 10                   ​| ​ 20                     ​| ​ 40                       ​|  64 Go    |  1 To                      |  2*10Gb/​s ​        | +|  star[246-252] ​ |  Dell R620  |  7                           ​| ​ X                 ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​75275/​Intel-Xeon-Processor-E5-2670-v2-25M-Cache-2-50-GHz-|intel-E5-2670]] ​                                      ​|  2                     ​| ​ 10                   ​| ​ 20                     ​| ​ 40                        |  64 Go    |  1 To                      |  2*10Gb/​s ​        | 
-|  star[245-244] ​      ​|  Dell R630  |  2                           ​| ​ X           ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​91316/​Intel-Xeon-Processor-E5-2695-v4-45M-Cache-2-10-GHz-|intel-E5-2695]] ​ |  2                     ​| ​ 18                   ​| ​ 36                     ​| ​ 72                       ​|  128 Go   ​|  ​TODO                      ​|  2*10Gb/​s ​        | +|  star[245-244] ​ |  Dell R630  |  2                           ​| ​ X                 ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​91316/​Intel-Xeon-Processor-E5-2695-v4-45M-Cache-2-10-GHz-|intel-E5-2695]] ​                                      ​|  2                     ​| ​ 18                   ​| ​ 36                     ​| ​ 72                        |  128 Go   ​|  ​X                         |  2*10Gb/​s ​        | 
-|  star243 ​            ​|  Dell R930  |  1                           ​| ​ X           ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​93806/​Intel-Xeon-Processor-E7-4850-v4-40M-Cache-2-10-GHz-|intel-E7-4850]] ​ |  4                     ​| ​ 16                   ​| ​ 32                     ​| ​ 128                      |  1500 Go  |  1To                       ​| ​ 2*10Gb/​s ​        | +|  star243 ​       |  Dell R930  |  1                           ​| ​ X                 ​|  0                     ​| ​ [[https://​ark.intel.com/​fr/​products/​93806/​Intel-Xeon-Processor-E7-4850-v4-40M-Cache-2-10-GHz-|intel-E7-4850]] ​                                      ​|  4                     ​| ​ 16                   ​| ​ 32                     ​| ​ 128                       ​|  1500 Go  |  1To                       ​| ​ 2*10Gb/​s ​        | 
-|  star242 ​            ​|  Dell R730  |  1                           ​| ​ Tesla P100  |  1                     ​| ​ [[https://​ark.intel.com/​fr/​products/​92986/​Intel-Xeon-Processor-E5-2620-v4-20M-Cache-2-10-GHz-|intel-E5-2620]] ​ |  2                     ​| ​ 8                    |  16                     ​| ​ 32                       ​|  128 Go   ​| ​ 1 To                      |  2*10Gb/​s ​        | +|  star242 ​       |  Dell R730  |  1                           ​| ​ Tesla P100        |  1                     ​| ​ [[https://​ark.intel.com/​fr/​products/​92986/​Intel-Xeon-Processor-E5-2620-v4-20M-Cache-2-10-GHz-|intel-E5-2620]] ​                                      ​|  2                     ​| ​ 8                    |  16                     ​| ​ 32                        |  128 Go   ​| ​ 1 To                      |  2*10Gb/​s ​        | 
-|  ​TODO star[199-195] ​ |  Dell R415  |  5                           ​| ​ X           ​|  0                     ​| ​ [[https://​www.cpubenchmark.net/​cpu.php?​cpu=AMD+Opteron+6134&​id=1566|amd-opteron-6134]] ​                        ​|  1                     ​| ​ 8                    |  16                     ​| ​ 16                       ​|  32 Go    |  1 To                      |  2*1Gb/​s ​         | +|  star[199-195] ​ |  Dell R415  |  5                           ​| ​ X                 ​|  0                     ​| ​ [[https://​www.cpubenchmark.net/​cpu.php?​cpu=AMD+Opteron+6134&​id=1566|amd-opteron-6134]] ​                                                             |  1                     ​| ​ 8                    |  16                     ​| ​ 16                        |  32 Go    |  1 To                      |  2*1Gb/​s ​         | 
-|  ​TODO star[194-190] ​ |  Dell R415  |  5                           ​| ​ X           ​|  0                     ​| ​ [[https://​www.cpubenchmark.net/​cpu.php?​cpu=AMD+Opteron+4184&​id=278|amd-opteron-4184]] ​                         |  1                     ​| ​ 6                    |  12                     ​| ​ 12                       ​|  32 Go    |  1 To                      |  2*1Gb/​s ​         |+|  star[194-190] ​ |  Dell R415  |  5                           ​| ​ X                 ​|  0                     ​| ​ [[https://​www.cpubenchmark.net/​cpu.php?​cpu=AMD+Opteron+4184&​id=278|amd-opteron-4184]] ​                                                              ​|  1                     ​| ​ 6                    |  12                     ​| ​ 12                        |  32 Go    |  1 To                      |  2*1Gb/​s ​         ​
 +|  star100 ​       |  Dell T640  |  1                           ​| ​ RTX 2080 Ti       ​| ​ 4                     ​| ​ [[https://​ark.intel.com/​content/​www/​fr/​fr/​ark/​products/​123540/​intel-xeon-bronze-3106-processor-11m-cache-1-70-ghz.html|intel-xeon-bronze-3106]] ​    ​| ​ 1                     ​| ​ 8                    |  16                     ​| ​ 16                        |  96 Go    |  X                         ​| ​ 2*10 Gb/s        | 
 +|  star101 ​       |  Dell R640  |  1 (Molltech) ​               |  X                 ​| ​ 0                     ​| ​ [[https://​ark.intel.com/​content/​www/​fr/​fr/​ark/​products/​123550/​intel-xeon-silver-4114-processor-13-75m-cache-2-20-ghz.html|intel-xeon-silver-4114]] ​ |  1                     ​| ​ 20                   ​| ​ 40                     ​| ​ 40                        |  96 Go    |  1 To                      |  2*10 Gb/s        | 
 +|  star102 ​       |  Dell R740  |  1                           ​| ​ Tesla V100 32 Go  |  3                     ​| ​ [[https://​ark.intel.com/​content/​www/​us/​en/​ark/​products/​193390/​intel-xeon-silver-4208-processor-11m-cache-2-10-ghz.html|intel-xeon-server-4208]] ​    ​| ​ 2                     ​| ​ 8                    |  16                     ​| ​ 32                        |  96 Go    |  X                         ​| ​ 2*10 Gb/s        ​|
 ==== Architecture logicielle ==== ==== Architecture logicielle ====
  
Ligne 558: Ligne 561:
  
 Le chemin pour la bibliothèque Cplex est le chemin par défaut /​opt/​ibm/​ILOG/​CPLEX_Studio129 (version 12.9) Le chemin pour la bibliothèque Cplex est le chemin par défaut /​opt/​ibm/​ILOG/​CPLEX_Studio129 (version 12.9)
 +
 +
 +==== Environnements conda (Python) ====
 +
 +La commande **conda activate <​env_name>​**,​ permettant d'​activer un environnement conda n'est pas utilisable avec slurm. À la place, il faut utiliser au début du script de lancement :
 +
 + source ./​anaconda3/​bin/​activate <​env_name>​
 +
 +Il sera peut être également nécessaire de mettre à jour les variables d'​environnement et d'​initialiser conda sur le noeud de calcul :
 +
 + source .bashrc
 + conda init bash
 +
 +L'​environnement restera alors actif d'une exécution à une autre. Pour le désactiver,​ il faudra utiliser :
 +
 + source ./​anaconda3/​bin/​deactivate
 ===== FAQ ===== ===== FAQ =====
  
Ligne 652: Ligne 671:
   * keras   * keras
   * scikit-learn   * scikit-learn
-  * tenserflow +  * tensorflow 
-  * tenserflow-gpu # Sur nœuds gpu+  * tensorflow-gpu # Sur nœuds gpu
  
 ==== Nœuds GPU via apt-get ==== ==== Nœuds GPU via apt-get ====
leria/centre_de_calcul/cluster.1594025591.txt.gz · Dernière modification: 06/07/2020 10:53 par Chantrein Jean-Mathieu
CC Attribution-Noncommercial-Share Alike 4.0 International
Driven by DokuWiki Recent changes RSS feed Valid CSS Valid XHTML 1.0