Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentesRévision précédente
Prochaine révision
Révision précédente
ressources:ressources [2025/05/14 07:38] – modification externe 127.0.0.1ressources:ressources [2025/06/17 07:30] (Version actuelle) – [Un ensemble de plateaux techniques] equemene
Ligne 9: Ligne 9:
 ====== Une utilisation toujours croissante ====== ====== Une utilisation toujours croissante ======
  
-{{ :ressources:utilisateurscbp2019.png?400 |}}+Graphique de l'utilisation de la plateforme [[https://www.cbp.ens-lyon.fr/python/forms/CloudCBP|CloudCBP]] entre les années 2017 et 2024 pour les laboratoires en heures.sessions. 
 + 
 +{{ :ressources:cloudcbp_paranneestacked_pargroslabo_20172024.png?400 |}} 
 + 
 +Graphique de l'utilisation de la plateforme [[https://www.cbp.ens-lyon.fr/python/forms/CloudCBP|CloudCBP]] entre les années 2017 et 2024 pour le nombre d'utilisateurs. 
 + 
 +{{ :ressources:cloudcbp_paranneestacked_parutilisateurs_20172024.png?400 |}} 
 + 
 +Ces graphiques n'intègrent pas les autres plates-formes administrées par le CBP, à savoir : 
 +  * les deux portails galaxy [[https://diet.ens-lyon.fr]] et [[https://galaxy3.cbp.ens-lyon.fr|galaxy3]] (uniquement accessible en interne) 
 +  * la plateforme [[https://www.cbp.ens-lyon.fr/python/forms/ClusterCBP|ClusterCBP]]
 ====== Un ensemble de plateaux techniques ====== ====== Un ensemble de plateaux techniques ======
  
Ligne 15: Ligne 25:
  
 Maintenant, le Centre Blaise Pascal dispose d'un ensemble de [[developpement:productions:plateaux|plateaux techniques]] destinés à la formation, l'étude (de l'expérience au prototypage), le développement ou la qualification dans tous les segments de l'informatique scientifique : Maintenant, le Centre Blaise Pascal dispose d'un ensemble de [[developpement:productions:plateaux|plateaux techniques]] destinés à la formation, l'étude (de l'expérience au prototypage), le développement ou la qualification dans tous les segments de l'informatique scientifique :
-  * plateau multi-noeuds : 2 clusters de 64 noeuds r410 et r422, 1 cluster de 16 noeuds c6100, 1 cluster de 12 noeuds s9200+  * plateau multi-noeuds : 1 cluster de 64 noeuds c8220, 1 cluster de 4 noeuds c6100, 1 cluster de 12 noeuds s9200
   * plateau multi-coeurs : près de 250 machines disposant de 2 à 128 coeurs physiques dans 48 modèles différents   * plateau multi-coeurs : près de 250 machines disposant de 2 à 128 coeurs physiques dans 48 modèles différents
-  * plateau GPU : plus de 100 machines offrant plus de 135 GPU de 67 modèles différents +  * plateau GPU : plus de 150 machines offrant plus de 150 GPU dans plus de 70 modèles différents
-  * plateau "intégration logicielle" : distributions Debian, Ubuntu, CentOS +
-  * plateau "intégration matérielle" : Sparc 32, PowerPC, ARM (sur demande)+
   * plateau "Visualisation 3D" : 2 stations, 4 paires de lunettes, 2 vidéoprojecteurs   * plateau "Visualisation 3D" : 2 stations, 4 paires de lunettes, 2 vidéoprojecteurs
-  * plateau COMOD : "Compute On My Own Device" 
   * plateau Galaxy externe [[http://diet.ens-lyon.fr|Diet]]   * plateau Galaxy externe [[http://diet.ens-lyon.fr|Diet]]
   * plateau Galaxy interne [[http://galaxy3.cbp.ens-lyon.fr|Galaxy3]]   * plateau Galaxy interne [[http://galaxy3.cbp.ens-lyon.fr|Galaxy3]]
Ligne 37: Ligne 44:
   * un environnement d'administration simplifié [[developpement:productions:sidus|SIDUS]]   * un environnement d'administration simplifié [[developpement:productions:sidus|SIDUS]]
  
-L'[[gridengine4cbp|utilisation]] des clusters (plateaux multi-noeuds & multi-coeurs) se base sur GridEngine. +L'[[slurm4cbp|utilisation]] des clusters (plateaux multi-noeuds & multi-coeurs) se base sur Slurm. 
 ====== Espaces de stockage du CBP ====== ====== Espaces de stockage du CBP ======
  
 L'utilisateur dispose sur les machines **[[https://www.cbp.ens-lyon.fr/python/forms/CloudCBP|Cloud@CBP]]** de 6 espaces de stockage : L'utilisateur dispose sur les machines **[[https://www.cbp.ens-lyon.fr/python/forms/CloudCBP|Cloud@CBP]]** de 6 espaces de stockage :
   * son compte utilisateur **$HOME** : **partagé entre les machines**. Chaque utilisateur dispose d'un quota de **20 GB**. Il ne doit pas être trop sollicité pour des calculs nécessitant de gros transferts. Un archivage (permettant de revenir sur l'état du volume dans le passé) est réalisé chaque nuit.   * son compte utilisateur **$HOME** : **partagé entre les machines**. Chaque utilisateur dispose d'un quota de **20 GB**. Il ne doit pas être trop sollicité pour des calculs nécessitant de gros transferts. Un archivage (permettant de revenir sur l'état du volume dans le passé) est réalisé chaque nuit.
-  * l'espace temporaire **/tmp** : ce dossier est en mémoire vive. Rapide, il est raisonnable de ne pas trop le solliciter pour les gros volumes. Une fois la mémoire vive remplie, des dysfonctionnements peuvent apparaître. +  * l'espace temporaire **/tmp** : ce dossier est en mémoire vive. Rapide, il est raisonnable de ne pas trop le solliciter pour les gros volumes. Une fois la mémoire vive remplie, des dysfonctionnements apparaissent. 
-  * l'espace local **/local** : ce dossier correspond à un disque dur interne, d'un volume de **500 GB** à **50 TB**. La vitesse d'accès est d'une centaine de MB/s. Il n'est ni partagé, ni sauvegardé. Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /local/$USER''+  * l'espace local **/local** : ce dossier correspond à un stockage interne (disque dur ou NVMe), d'un volume de **500 GB** à **50 TB**. La vitesse d'accès est d'une centaine de MB/s. Il est archivé chaque nuit. Normalement, un espace personnel sur chaque machine à la première connexion ''/local/$USER''
   * l'espace vrac **/scratch** : **partagé entre les machines**, de **120 TB**, ni archivé, ni sauvegardé. Il dispose d'un accès rapide (autour de 100 MB/s) sur le réseau de la salle et très rapide (autour de 300 MB/s) sur le réseau du cluster. Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /scratch/$USER''   * l'espace vrac **/scratch** : **partagé entre les machines**, de **120 TB**, ni archivé, ni sauvegardé. Il dispose d'un accès rapide (autour de 100 MB/s) sur le réseau de la salle et très rapide (autour de 300 MB/s) sur le réseau du cluster. Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /scratch/$USER''
-  * l'espace vrac récent **/distonet**: **partagé entre les machines**, de **120 TB**, ni archivé mais sauvegardé. Il dispose d'un accès rapide sur le réseau de la salle (autour de 100 MB/s) et très très rapide sur le réseau du cluster (autour de 2 GB/s). Ne JAMAIS l'exploiter pour des traitements générant ou traitant au delà de 10000 fichiers ! Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /distonet/$USER'' +  * l'espace projets **/projects**: **partagé entre les machines**, de **120 TB**, archivé et sauvegardé. C'est un espace collaboratif. Il dispose d'un accès rapide sur le réseau de la salle et sur le réseau du cluster. Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /projects/users/$USER''
-  * l'espace projets **/projects**: **partagé entre les machines**, de **12 TB**, archivé mais non sauvegardé. C'est un espace collaboratif. Il dispose d'un accès rapide sur le réseau de la salle et sur le réseau du cluster. Pour l'exploiter, créer un dossier correspondant à son identifiant : ''mkdir /projects/users/$USER''+
  
 <note important>La règle la plus importante pour le stockage est : "On ne travaille PAS dans son $HOME"</note> <note important>La règle la plus importante pour le stockage est : "On ne travaille PAS dans son $HOME"</note>
Ligne 71: Ligne 77:
  
 La salle informatique M7-1H04 de travaux pratiques comprend : La salle informatique M7-1H04 de travaux pratiques comprend :
-  * **12 stations de travail Precision T5600** avec E5-2620 et 32/64 Go +  * **10 stations de travail Precision T5600** avec E5-2620 et 64 Go 
-    * **gtx690** : Nvidia GTX 690 avec 2x2Go +    * **gtx980** : Nvidia GTX 980 avec 4GB 
-    * **gtx680** : Nvidia GTX 680 avec 2Go, Nvidia GT1030 avec 2Go +    * **gtxtitan** : Nvidia RTX A4000 avec 16GB 
-    * **gtx980** : Nvidia GTX 980 avec 4Go, Nvidia GT1030 avec 2Go +    * **gtx780ti** : Nvidia RTX 3050 avec 6GB 
-    * **gtxtitan** : Nvidia GTX Titan avec 6Go, Nvidia K420 avec 2Go +    * **q4000alpha** : Nvidia P4000 avec 8Go et capacité 3D
-    * **gtx780ti** : Nvidia GTX 780Ti avec 3Go, Nvidia K2000 avec 2Go +
-    * **q4000alpha** : Nvidia K4000 avec 3Go et capacité 3D +
-    * **gtx960** : Nvidia GTX 960 avec 2Go, Nvidia GT710 avec 2Go +
-    * **gtx970** : Nvidia GTX 970 avec 2Go, Nvidia GT1030 avec 2Go+
     * **gtx980tialpha** : Nvidia GTX 980Ti avec 6Go, Nvidia GTX 750Ti avec 2Go     * **gtx980tialpha** : Nvidia GTX 980Ti avec 6Go, Nvidia GTX 750Ti avec 2Go
     * **gtx980tibeta** : Nvidia GTX 980Ti avec 6Go, Nvidia P600 avec 2Go     * **gtx980tibeta** : Nvidia GTX 980Ti avec 6Go, Nvidia P600 avec 2Go
     * **gtx980tidelta** : Nvidia GTX 980Ti avec 6Go, Nvidia K420 avec 1Go     * **gtx980tidelta** : Nvidia GTX 980Ti avec 6Go, Nvidia K420 avec 1Go
-    * **gt730** : Nvidia GT 730 avec 2Go, Nvidia RTX 2080 avec 8Go+    * **gt730** : Nvidia Nvidia RTX 2080 avec 8Go 
 +  * **2 stations de travail Precision T5600** avec E5-2670 et 128 Go 
 +    * **gtx960** : Nvidia RTX 2080 Super avec 8Go 
 +    * **gtx970** : Nvidia RTX 2080 Super avec 8Go
   * **4 stations de travail Precision T5610** avec 2 E5-2609v2 et 64 Go   * **4 stations de travail Precision T5610** avec 2 E5-2609v2 et 64 Go
-    * **gtx980beta** : Nvidia GTX 980 avec 4Go, Nvidia GT 1030 avec 2Go+    * **gtx980beta** : Nvidia GTX 980 avec 4Go
     * **gtx980tigamma** : Nvidia GTX980Ti avec 6Go,  Nvidia GTX 750 avec 2Go     * **gtx980tigamma** : Nvidia GTX980Ti avec 6Go,  Nvidia GTX 750 avec 2Go
     * **k40** : Nvidia K2000 avec 2Go, Nvidia Tesla K40 avec 12Go     * **k40** : Nvidia K2000 avec 2Go, Nvidia Tesla K40 avec 12Go
     * **gt640** : Nvidia GT 640 avec 2Go, Nvidia RTX 2070 avec 8Go     * **gt640** : Nvidia GT 640 avec 2Go, Nvidia RTX 2070 avec 8Go
   * **4 stations de travail Precision T7810** avec 2 E5-2630v3 et 32 Go   * **4 stations de travail Precision T7810** avec 2 E5-2630v3 et 32 Go
-    * **gtx780beta** : Nvidia GTX 780 avec 3Go, Nvidia K420 avec 2Go +    * **gtx780beta** : Nvidia RTX 2080 Super avec 8Go 
-    * **gtx780gamma** : Nvidia GTX 780 avec 3Go, Nvidia K420 avec 2Go +    * **gtx780gamma** : Nvidia GTX 1080 avec 8Go
-    * **gtx780delta** : Nvidia GTX 780 avec 3Go, Nvidia GT1030 avec 2Go+
     * **gtx1050ti** : Nvidia GTX 1050Ti avec 4Go, Nvidia P600 avec 2Go     * **gtx1050ti** : Nvidia GTX 1050Ti avec 4Go, Nvidia P600 avec 2Go
   * **2 stations de travail Precision 7820** avec 2 Silver 4114 et 64 Go   * **2 stations de travail Precision 7820** avec 2 Silver 4114 et 64 Go
-    * **p600alpha** : Nvidia P600 avec 2Go, Nvidia GTX 1080 avec 8Go +    * **p600alpha** : Nvidia RTX 2080 Super avec 8Go 
-    * **p600beta** : Nvidia P600 avec 2Go, Nvidia GTX 780 avec 8Go+    * **p600beta** : Nvidia RTX 2080 Super avec 8Go 
 +  * **2 stations de travail Precision 7825** avec  
 +    * **a400alpha** : Nvidia RTX 2080 Ti avec 12Go 
 +    * **a400beta** : Nvidia RTX 2080 Ti avec 12Go
   * **2 postes de travail Optiplex 790** avec 1 i3-2120 et 16 Go   * **2 postes de travail Optiplex 790** avec 1 i3-2120 et 16 Go
-    * **o790alpha** : Nvidia NVS 315 avec 1Go +    * **o790alpha** :  
-    * **o790beta** : Nvidia GT620 avec 1Go+    * **o790beta** : 
  
 Ces machines sont accessibles par SSH ou x2go : ''<nom>.cbp.ens-lyon.fr''  Ces machines sont accessibles par SSH ou x2go : ''<nom>.cbp.ens-lyon.fr'' 
Ligne 127: Ligne 134:
  
 Une vision d'ensemble de l'[[http://www.cbp.ens-lyon.fr/python/forms/CloudCBP|état des stations de travail]] sous [[developpement:productions:sidus|SIDUS]]. Une vision d'ensemble de l'[[http://www.cbp.ens-lyon.fr/python/forms/CloudCBP|état des stations de travail]] sous [[developpement:productions:sidus|SIDUS]].
-==== Machines ouvertes en salle 3IP à accélérateur AMD ou Nvidia ====+==== Machines ouvertes en salle 3IP à accélérateur AMD ====
  
   * **8 stations de travail ouvertes**   * **8 stations de travail ouvertes**
     * **fx9590** : processeur AMD FX9590 cadencé à 4715MHz      * **fx9590** : processeur AMD FX9590 cadencé à 4715MHz 
-      * AMD Radeon R9-Fury 
-      * AMD Radeon Nano 
     * **kaveri** : processeur AMD Kaveri A10-7850     * **kaveri** : processeur AMD Kaveri A10-7850
-      * AMD GPU d'un A10-7850 
-      * AMD Radeon HD7970 
-      * AMD Radeon R9-290 
     * **ryzen7** : processeur Ryzen7-1800X     * **ryzen7** : processeur Ryzen7-1800X
-      * AMD Radeon R9-Fury 
-      * AMD Radeon R9-380 
     * **skylake** : processeur Intel Skylake i7-6700K     * **skylake** : processeur Intel Skylake i7-6700K
-      * AMD Radeon R9-295X2 
-      * AMD RX Vega 64 
-    * **threadripper** : processeur ThreadRipper 1950X 
-      * AMD Radeon VII 
-      * AMD Radeon Vega 64 
  
      
Ligne 164: Ligne 159:
     * accès par **cocyte.cbp.ens-lyon.fr** avec soumission par [[ressources:slurm4cbp|Slurm]]     * accès par **cocyte.cbp.ens-lyon.fr** avec soumission par [[ressources:slurm4cbp|Slurm]]
  
-  * **24 stations d'intégration :** +
-    * **lenny32** & **lenny64** : distributions Debian Lenny 32/64 bits +
-    * **squeeze32** & **squeeze64** : distributions Debian Squeeze 32/64 bits +
-    * **wheezy32** & **wheezy64** : distributions Debian Wheezy 32/64 bits +
-    * **jessie32** & **jessie64** : distributions Debian Jessie 32/64 bits +
-    * **stretch32** & **stretch64** : distributions Debian Stretch 32/64 bits +
-    * **sid32** et **sid64** : distributions Debian Sid 32/64 bits +
-    * **ubuntu32-1004** & **ubuntu64-1004** : distributions Ubuntu 10.04 32/64 bits +
-    * **ubuntu32-1204** & **ubuntu64-1204** : distributions Ubuntu 12.04 32/64 bits +
-    * **ubuntu32-1404** & **ubuntu64-1404** : distributions Ubuntu 14.04 32/64 bits +
-    * **ubuntu32-1604** & **ubuntu64-1604** : distributions Ubuntu 16.04 32/64 bits +
-    * **centos32-55** & **centos64-55** : distributions CentOS 5.5 32/64 bits +
-    * **centos32-7** & **centos64-7** : distributions CentOS 7 32/64 bits  +
  
 ==== Machines virtuelles à accélérateur ==== ==== Machines virtuelles à accélérateur ====
Ligne 200: Ligne 183:
 ==== Stations Deep Learning à accélérateur ==== ==== Stations Deep Learning à accélérateur ====
  
-  * **6 stations de travail "ouvertes"** +Toutes les machines permettant des opérations de //Machine Learning// sont équipées de GPU (entre 1 et 4 unités).
-    * **openstation6** : 1 RTX 2080 Super avec 8GB, 1 GTX 1080 avec 8GB, espace de stockage de 4TB en SSHD +
-    * **openstation7** : 1 RTX 2080 Super avec 8GB, 1 GTX 780 avec 3GB, espace de stockage de 4TB en SSHD +
-    * **openstation8** : 1 RTX 2080 Super avec 8GB, 1 GTX 980 avec 8GB, espace de stockage de 4TB en SSHD +
-    * **openstation9** : 1 RTX 2080 Super avec 8GB, 1 GTX 1080 avec 8GB, espace de stockage de 4TB en SSHD +
-  * **5 serveurs rackables** +
-    * **r5400alpha** : Nvidia GTX 1080 avec 8GB, espace de stockage de 1TB en Raid1 +
-    * **r5400beta** : Nvidia GTX 1080 avec 8GB, espace de stockage de 1TB en Raid1 +
-    * **r720gpu1** : 2 Nvidia GTX 1080 Ti avec 8GB, espace de stockage de 13TB en Raid5 +
-    * **r730server6** : 2 Nvidia RTX 2080 Ti avec 12GB, espace de stockage de 13TB en Raid5 +
-    * **r740gpu2** : 2 Nvidia A100 avec 40GB, espace de stockage de 6TB en Raid5 +
-    * **rome4gpu** : 4 Nvidia RTX 2080 Super avec 8GB, espace de stockage de 3TB en Raid5 +
-    * **epyc1** : 2 Nvidia RTX 2080 Super avec 8GB, espace de stockage de 11TB en Raid5 +
-    * **epyc2** : 2 Nvidia RTX 2080 Super avec 8GB, espace de stockage de 11TB en Raid5 +
-    * **epyc3** : 2 Nvidia RTX 2080 Super avec 8GB, espace de stockage de 11TB en Raid5 +
-    * **epyc4** : 2 Nvidia RTX 6000 Super avec 24GB, espace de stockage de 11TB en Raid5 +
-    * **c4140** : 2 Nvidia Tesla V100 Super avec 16GB, espace de stockage de 50TB en Raid5+
  
-Ces machines sont accessibles par SSH et [[ressources:x2go4cbp|x2go]] : ''<nom>.cbp.ens-lyon.fr''+Il est possible de consulter en un clic l'ensemble de ces machines en sélectionnant **Machine à GPU classée par VRAM disponible** sur la page de [[https://www.cbp.ens-lyon.fr/python/forms/CloudCBP|CloudCBP]]. 
 + 
 +Ces machines sont accessibles par SSH et [[x2go4cbp|x2go]] : ''<nom>.cbp.ens-lyon.fr''
  
 ==== Serveurs "historiques" et récents, multicoeurs ==== ==== Serveurs "historiques" et récents, multicoeurs ====
Ligne 244: Ligne 213:
     * **epyc1** : serveur Supermicro avec 64 coeurs, 11TB de **/local**     * **epyc1** : serveur Supermicro avec 64 coeurs, 11TB de **/local**
     * **epyc2** : serveur Supermicro avec 128 coeurs, 11TB de **/local**     * **epyc2** : serveur Supermicro avec 128 coeurs, 11TB de **/local**
 +    * **epyc3** : serveur Supermicro avec 128 coeurs, 11TB de **/local**
 +    * **epyc4** : serveur Supermicro avec 64 coeurs, 11TB de **/local**
 ==== Infrastructure SIDUS ==== ==== Infrastructure SIDUS ====
  
ressources/ressources.1747208286.txt.gz · Dernière modification : de 127.0.0.1