Voir la source de Documentation complète


Ce livret a pour objectif de rassembler, en un document unique, les principales informations nécessaires à un utilisateur des moyens de GENCI avec ses calculateurs Adastra, Joliot-Curie et Jean-Zay hébergés respectivement dans les centres nationaux de calcul, du CINES, du TGCC et de l'IDRIS.

Il décrit les services disponibles dans les centres à propos des calculateurs de GENCI, des formations et des supports dispensés par les centres. Ce document détaille également les conditions d'éligibilité fixées par GENCI pour l'obtention des ressources et d'accès, mais également les différents types d'allocations et les procédures d'attribution.

Cependant, pour des informations spécifiques à chaque centre, il est nécessaire de consulter les sites web respectifs : [http://www.cines.fr CINES], [http://www.idris.fr IDRIS], [https://www-hpc.cea.fr/fr/TGCC.html TGCC].

Chacun des centres nationaux a d’autres activités indépendantes de GENCI, qui n’entrent pas dans le périmètre de ce livret.


<span id="table-des-matières"></span>

= Nos offres =

{{ block start important }}
<b>Vous trouverez toutes les informations spécifiques à chaque centre et à GENCI sur leurs sites web respectifs</b>

*GENCI : [http://www.genci.fr www.genci.fr]
*CINES : [https://www.cines.fr www.cines.fr]
*IDRIS : [http://www.idris.fr www.idris.fr]
*TGCC :
** [http://www-hpc.cea.fr/ www-hpc.cea.fr] (Informations générales du TGCC : présentation des machines, logiciels disponibles, etc.)
**[http://www-tgcc.ccc.cea.fr www-tgcc.ccc.cea.fr] (Informations techniques et actualités du TGCC : accès réservé aux utilisateurs disposant d’un ''login''/mot de passe au TGCC)
<br/>

<b>Pour toute assistance, contacter :</b>

* le CINES : [mailto:svp@cines.fr svp@cines.fr] tél : 04 67 14 14 14
* l’IDRIS : 
** pour la gestion des dossiers d'accès : [mailto:gestutil@idris.fr gestutil@idris.fr] tél : 01 69 35 85 12 et 85 13
**pour du support technique: [mailto:assist@idris.fr assist@idris.fr] tél : 01 69 35 85 55
* le TGCC  : [mailto:hotline.tgcc@cea.fr hotline.tgcc@cea.fr] tél : 01 77 57 42 42
* GENCI : [mailto:acces@genci.fr acces@genci.fr]
{{ end block }}

== Les moyens de GENCI dans les centres ==
Les moyens de GENCI sont répartis dans les 3 centres nationaux, 
[https://www.genci.fr/services/moyens-de-calcul une rapide description des 3 centres est disponible sous https://www.genci.fr/services/moyens-de-calcul]

Dans chacun des trois centres, GENCI fait héberger un calculateur composé de plusieurs partitions de génération et d'architectures différentes, scalaire ou accélérées, ayant des caractéristiques propres, mais également de fonctions spécifiques pour du pré/post-traitement ou visualisation.

{{ block start note }}
 En dehors des périodes d’arrêts planifiés dans les centres, les machines sont disponibles 24 h/24 et 7 j/7. Le support est accessible pendant les heures de bureaux de chaque centre (voir précisions sur les fiches de services). 
{{ end block}}

=== Services de calcul ===

{{ block start important }}
*Le CINES exploite le calculateur '''Adastra ''': supercalculateur HPE Cray EX4000 de 91,6 Pflop/s. Les principales caractéristiques techniques sont les suivantes :
** '''Adastra GENOA''' : 544 nœuds biprocesseurs (AMD EPYC Genoa/9654 (96 cœurs à 2,4 GHz) et à 768 Go de mémoire / nœud : '''104 448 cœurs'''
** '''Adastra GENOA HPDA''' (nœuds large mémoire) : 12 nœuds biprocesseurs (AMD EPYC Genoa/9654 (96 cœurs à 2,1 GHz) et à 2048 Go de mémoire / nœud : '''2304 cœurs'''
** '''Adastra MI250x''' : 356 nœuds accélérés mono-processeur AMD Epyc Trento (3<sup>e</sup> génération à 64 cœurs) avec 4 GPU AMD MI250X, 128 Go HBM2 par GPU et 256 Go de mémoire CPU : '''1424 GPU'''
** '''Adastra MI300A''' : 28 nœuds accélérés (4 APU AMD MI300A) avec 512 Go de mémoire / nœud : '''112 APU (GPU + CPU)'''
**[https://www.genci.fr/centre-informatique-national-de-lenseignement-superieur-cines Voir la description détaillée d'Adastra au CINES]

*L’IDRIS exploite le calculateur '''Jean Zay''' : supercalculateur HPE-SGI 8600 et ATOS XH3000 de 125,9 Pflop/s. Les principales caractéristiques techniques sont les suivantes :
**'''Jean-Zay CSL''' : 720 nœuds biprocesseurs (Intel Cascade Lake 6248 (20 cœurs à 2,5 GHz) avec 192 Go mémoire DDR4-2667 par nœud (soit 4,8 Go/cœur) : '''28 800 cœurs''' 
**'''Jean-Zay V100''' : 396 nœuds quadri-GPU (nVIDIA V100 (270 nœuds avec 32 Go de HBM et 126 nœuds avec 16 Go de HBM) pour un total de '''1584 GPU''' et de 31 nœuds de calcul octo-GPU nVIDIA V100-32 Go pour un total de '''248 GPU'''.
**'''Jean Zay A100''' : 52 nœuds octo-GPU (nVIDIA A100-80 Go avec 512 Go de mémoire par nœud et 2 processeurs AMD Rome de 32 cœurs et 3 nœuds octo-GPU nVIDIA A100-40 Go PCIe : '''416 GPU'''
**'''Jean-Zay H100''' : 364 nœuds quadri-GPU (nVIDIA H100-80 Go avec 512 Go de mémoire par nœud et 2 processeurs Intel Sapphire Rapid de 48 cœurs) : '''1 456 GPU'''
**[https://www.genci.fr/institut-du-developpement-et-des-ressources-en-informatique-scientifique-idris Voir la description détaillée de Jean Zay à l'IDRIS]


*Le TGCC exploite le '''Joliot-Curie/Irene''' :supercalculateur ATOS X1000-XH2000 de 20 Pflop/s.
** '''Joliot-Curie/Irene SKL''' : 1 656 nœuds biprocesseurs (Intel Skylake 8168 (24 cœurs à 2,7 GHz) 192 Go de mémoire DDR4 /nœud :'''79 488 cœurs''' 
** '''Joliot-Curie/Irene Rome''' : 2292 nœuds biprocesseurs (AMD Rome Epyc (64 cœurs à 2,6 GHz) 256 Go de mémoire DDR4 / nœud : '''293 376 cœurs'''
** '''Joliot-Curie/Irene V100''' : 32 nœuds biprocesseurs (Intel Cascade Lake (20 cœurs à 2,1 GHz)) et 4 GPU nVIDIA V100 avec 16Go chacun : '''128 GPU'''
** '''Joliot-Curie/Irene ARM A64FX''' (prototype) : 80 nœuds (Fujitsu FX700 monoprocesseur A64FX de 48 cœurs et 32 Go de mémoire HBM2 par nœud : '''3840 cœurs'''
** '''Plateforme Quantique''' (prototype) : Un émulateur quantique capable de simuler jusqu'à 40 Qubits parfaits et intriqués. Il permet d'utiliser différents émulateurs (Pulser, Perceval, MyQLM et d'autres à venir).
Il peut aussi servir de module d’hybridation entre calcul HPC et quantique.
**[https://www.genci.fr/tres-grand-centre-de-calcul-du-cea-tgcc Voir la description détaillée de Joliot-Curie au TGCC]
{{ end block }}

{{ block start warning }}
'''Usage des machines prototypes''' <br>

L'usage des machine prototypes est un cas particulier de l'usage classique des autres partitions car la demande de ressources sur ces machine est limitée et passe uniquement par '''une allocation dynamique''' (cf § [[#Allocation_Dynamique_(AD)| 3.4]])

L'usage de la machine prototype ARM A64FX, est limitée à une allocation de 5000 heures coeur.
Quant à l'allocation sur la plateforme quantique, elle est limitée à 100 heures.

{{ end block }}

Les services de calcul permettent l’exécution des codes utilisateurs. Ils sont destinés à des applications utilisant le plus souvent un fort parallélisme et répondant à des besoins en calcul intensif de niveau national.

Les moyens nationaux de calcul proposent une puissance cumulée de plus de 237 Petaflop/s.

Les projets retenus bénéficient d’une allocation d’heures sur un ou plusieurs calculateurs et peuvent calculer dans la limite de cette allocation. '''L’accès aux calculateurs est effectif après avoir rempli les formalités administratives du centre où est/sont hébergé(s) le ou les calculateur(s) concerné(s).'''

La soumission des calculs se fait par un système de files d’attente, prenant en compte les caractéristiques des travaux à exécuter, les disponibilités courantes du calculateur et une priorité propre au projet ('''''fair share'''''), ajustée dynamiquement tel que décrit ci-dessous.

Les files d’attente sont gérées par un gestionnaire de « ''batch ''» qui permet de réserver les ressources pendant la durée de l’exécution du travail en gérant la disponibilité des ressources et les priorités des travaux en file d’attente. Les ressources réservées sont décomptées de l’allocation d’heures de l’utilisateur une fois l’exécution terminée.

Les modalités et limites de réservation des ressources en nombre de cœurs et en durée de calcul peuvent différer suivant les centres et les partitions des supercalculateurs.


L’accès en interactif aux supercalculateurs est possible, mais les ressources disponibles sont alors très limitées.



<span id="services-de-pré-et-post-traitement"></span>

=== Services de pré/post-traitement et de visualisation ===

Les services de pré et post-traitement font référence à l’ensemble des activités de mise en forme des données en amont et en aval des services de calcul de production. Ils concernent les problématiques de reformatage de résultats, d’extraction de données, de génération de maillages, etc. Généralement, ils requièrent beaucoup de mémoire et/ou des entrées-sorties très intensives. Ces spécificités font que ces services de pré et post-traitement s’exécutent soit sur des machines particulières, soit sur des nœuds des machines de production.

Les trois centres nationaux proposent également des moyens de visualisation efficaces, une aide au choix des solutions logicielles présentes sur leur plate-forme et un support personnalisé à l’utilisation de ces logiciels. Les logiciels de visualisation disponibles sont : ParaView, VisIt, EnSight, … La liste détaillée est disponible sur les différents sites des centres.

Les services de pré/post-traitement et de visualisation sont opérés sur des machines spécifiques de GENCI disponibles au sein du cluster de calcul. 
{{ block start important }}
L’allocation d’heures disponibles par votre projet inclut ces ressources de pré/post-traitement et de visualisation. '''L’accès à ces nœuds spécifiques est possible sans demande particulière. Les heures utilisées dans ce cadre ne sont pas comptabilisées dans les demandes d’attribution d’heures de calcul.'''
{{ end block }}

'''Tout utilisateur ayant un compte ouvert sur un supercalculateur a donc automatiquement accès à ces services'''. Les modalités d’accès aux systèmes de fichiers des machines de calcul depuis les machines dédiées de pré et post-traitement et visualisation peuvent différer suivant les centres, une recopie manuelle des données sur un système de fichiers locaux à la machine pré-post étant parfois nécessaire. Suivant les centres, les utilisateurs disposent soit d'un quota ou d'un accès illimité à ces ressources.

{{ block start note}}

*'''CINES'''
**Le calculateur Adastra est équipé de nœuds de pré/post-traitement et de visualisation composés de 2 processeurs AMD Genoa 64 cœurs à 2,10 GHz, 2048 Go de mémoire DDR5-4800 par nœud, 2 NIC ''Slingshot'' 200 Gb/s et 3 SSD SAS MU de 3,2 To et 2 cartes graphiques NVIDIA A40.
*'''IDRIS'''
**Le calculateur Jean Zay est équipé de 4 nœuds à large mémoire, chacun avec 4 processeurs Intel Skylake 6132 de 12 cœurs à 3,2 GHz avec 3 To mémoire DDR4 2666 MT/s, un GPU NVIDIA V100 et un disque NVMe de 1,6 To le pré/post-traitement
**pour la visualisation distante, il dispose de 5 nœuds biprocesseurs Intel Cascade Lake 6248 de 20 cœurs à 2.5 GHz avec 192 Go de mémoire DDR4 et un GPU NVIDIA P6000.
*'''TGCC'''
**Le calculateur Joliot-Curie/Irene propose des nœuds pour le pré/post-traitement. Il s’agit de 5 nœuds à grosse mémoire de type Bull S6230 intégrant chacun 4 processeurs Intel Skylake 28 cœurs à 2,1 GHz, 1 GPU NVIDIA P100, 3 To de mémoire DDR 4 et 1 SSD NVMe de 1,6 To.
**pour la visualisation distante, il dispose de 20 nœuds de type bullx R421-E5 intégrant chacun 2 processeurs Intel Skylake 24 cœurs à 2,7 GHz, 1 GPU NVIDIA P100, 192 Go de mémoire DDR4 et 1 SSD NVMe de 800 Go.

{{ end block }}

===Service de gestion de données===
==== Services de stockage  ====

Chaque centre de calcul dispose de plusieurs espaces de stockage pour héberger les différents types de données des utilisateurs. Une fois votre compte ouvert, il est impératif de prendre connaissance des pratiques propres à chacun des centres, qu’on peut trouver sur leurs sites web respectifs. Cependant, dans chaque centre, on peut retrouver les espaces suivants :

{{ block start important }}

*Un espace appelé « '''CCFRHOME '''» : espace personnel, permanent, sauvegardé, avec des quotas en volume assez limités. C’est l’espace où vous vous trouvez quand vous vous connectez. Il est utilisé pour stocker les données peu volumineuses, mais critiques comme : les fichiers de personnalisation de session, les codes sources, des fichiers de paramètres de calcul, etc.

*Un espace '''global''' « '''CCFRSCRATCH »''' : non sauvegardé, il dispose d’excellentes performances en lecture/écriture. C’est un espace semi-permanent : dans le '''CCFRSCRATCH''', les fichiers peuvent être supprimés soit à la fin d’un ''job'' si vous le spécifiez, soit après un temps d’inutilisation (variable suivant les centres)''.''

*Un espace '''global''' « '''CCFRWORK''' » : permanent mais non sauvegardé, il dispose de bonnes performances en lecture/écriture. C’est un espace de travail, il est soumis à des quotas en volume mais assez larges en nombre ''d’inodes'' (fichiers et répertoires).

*Un espace de '''stockage''', appelé « '''CCFRSTORE »''' : avec des capacités de stockage en volume très importants, il est bien adapté pour héberger de gros fichiers d’archive de résultats de calcul pour la durée du projet. Il s’appuie sur un système de gestion hiérarchique de données (HPSS, DMF) afin d’offrir des volumes de stockage très importants grâce à l’utilisation de bandes magnétiques. Il est donc soumis à des quotas larges en volume, mais stricts en nombre d’''inodes''. Le CCFRSTORE bénéficie d’une sécurisation additionnelle.</p></blockquote></li></ul>

{{ end block }}

L’estimation du volume total de données générées par le projet ainsi que les principaux besoins en stockage dans les différents espaces doivent être précisés dans le cadre de la demande de ressources.

Les projets qui n’auraient pas pu exprimer correctement leurs besoins dans leur dossier de ressources, ou qui voient ces besoins évoluer significativement en cours d’appel doivent prendre contact avec le support des centres de calcul.

{{ block start warning }}
'''Durée de conservation des données''' <br>

Lorsqu’un compte utilisateur n’est plus rattaché à un projet DARI (en cas de non renouvellement du projet), le délai « garanti » d'accès au compte et la conservation des données associées est de '''6 mois après la fin du projet'''. Lorsqu’un compte est rattaché à un projet DARI mais qu’il est '''inactif''' depuis '''plus d’un an''' (aucune connexion sur les frontales ni aucune soumission de ''job''), sans réponse de son titulaire ou du chef de projet, le compte et les données associées peuvent être détruits.
{{ end block }}

GENCI n'offre pas de solution de stockage à long terme. Pour ce service vous pouvez vous rapprocher du '''CINES''' [https://www.cines.fr/archivage/comment-archiver-au-cines/ des informations complémentaires sont disponibles sur leur site.]

<span id="service-étude-darchivage"></span>

==== Service de transfert des données entre centres nationaux ====

Le réseau des Centres de Calcul Français ('''CCFR''') est un réseau dédié à très haut débit (10 Gb/s), qui interconnecte les trois centres de calcul nationaux CINES, IDRIS et TGCC. Ce réseau CCFR est mis à la disposition des utilisateurs pour faciliter les transferts de données entre les centres nationaux. Outre le transfert de données, l’accès interactif aux machines des centres via le réseau CCFR est proposé. Sont actuellement raccordées sur ce réseau les machines Joliot-Curie au TGCC, Jean Zay à l’IDRIS et Adastra au CINES.

Pour bénéficier du réseau CCFR, une demande doit être formulée auprès de l’un des centres de calcul lors de la demande de création du compte utilisateur en '''cochant la case''' '''« Je souhaite utiliser le réseau CCFR »''' sur le portail web eDARI. Cette demande peut également être réalisée ultérieurement auprès du support de l’un des centres de calcul par le responsable projet, pour les comptes utilisateurs rattachés à ce projet. Lorsqu’une demande est déposée auprès d’un centre de calcul, celle-ci est diffusée vers les autres centres et les autorisations d’accès sont automatiquement mises en cohérence dès lors qu’un compte valide existe pour l’utilisateur sur plusieurs centres.

Les accès aux ressources du réseau sont authentifiés au même titre que les accès aux centres de calcul. Deux modes d’authentification sont mis en œuvre : l’authentification unique (''Single Sign-On'') par certificat X509 (IDRIS et TGCC uniquement pour le moment) et l’authentification basique traditionnellement en vigueur entre les centres (mot de passe, etc.).

La documentation complète concernant les prérequis, les méthodes d’authentification et l’utilisation du service CCFR est disponible sur les sites web des centres :

* https://dci.dci-gitlab.cines.fr/webextranet/data_storage_and_transfers/index.html#between-computing-site-ccfr
* http://www.idris.fr/media/su/divers/ccfr_userdoc_fr.pdf
* https://www-tgcc.ccc.cea.fr (authentification requise)

==== Services d'accès à internet  ====
Les trois centres de calculs disposent chacun de règles spécifiques quant à l'accès à internet depuis le calculateur.


*'''Cas du CINES:''' 
L'accès direct à Internet depuis Adastra n'est pas autorisé pour des raisons de sécurité. Cependant, vous pouvez demander à autoriser des connexions sortantes spécifiques en remplissant un formulaire. Vous trouverez le formulaire et les instructions nécessaires dans la documentation d'Adastra à ce lien :  https://dci.dci-gitlab.cines.fr/webextranet/data_storage_and_transfers/index.html#authorizing-an-outbound-connection

== Le support des centres ==
=== Services d’assistance aux utilisateurs  ===

L’'''assistance''' est le point de contact privilégié permettant d’apporter une aide aux utilisateurs, au quotidien. Chaque centre a mis en place un accueil centralisé pour la prise en compte et le suivi des demandes utilisateurs par téléphone, ''e-mail'' ou autre moyen.

L’assistance au quotidien comprend :
*'''un service''' bilingue (français, anglais) '''de ''hotline'' ou de niveau 1''', accessible par téléphone, ''e-mail'' ou portail web, pendant les heures ouvrables. Il prend en charge les questions des utilisateurs tant sur la compréhension du contexte HPC-IA que sur l’utilisation de chacun des environnements disponibles. Il règle les problèmes qui sont de sa compétence et escalade au niveau 2 pour les demandes plus spécialisées.
*'''des''' '''services techniques de niveau 2''' qui prennent le relais pour toute question non résolue par le niveau 1, exigeant des connaissances spécifiques.</p></blockquote></li></ul>

Chacun des centres dispose d’un système de gestion des requêtes via des tickets d’incidents qui permettent d’en assurer le suivi.

Ce service d’assistance est complété par :
*des documentations en ligne ;
*des cycles de formations organisés par les centres ;
*un service d’expertise et d’accompagnement personnalisé pour l’évaluation et l’amélioration des codes de calcul.

L’essentiel de ces informations est disponible sur le site web de chaque centre.

*'''CINES'''
**Le point d’entrée de l’assistance aux utilisateurs des plates-formes du CINES est le service « svp » qui garantit une prise en compte rapide de la question et son suivi par la création d’un ticket, dans le respect des bonnes pratiques ITIL.
**Suivant la complexité et la spécificité du problème soulevé, svp en assure la résolution ou transmet le ticket à la liste d’experts adéquate.
**Par ailleurs, le CINES met à la disposition des utilisateurs une liste FAQ et un certain nombre de documents techniques en ligne permettant de comprendre les modalités d’accès et de mise en œuvre des moyens de calcul intensif du centre : https://www.cines.fr/calcul/
**Attribution et niveaux de service'''
***La permanence « svp » du CINES est assurée par téléphone au 04 67 14 14 14, ou par ''mail'' : [mailto:svp@cines.frl svp@cines.fr] les jours ouvrés du lundi au jeudi de 7 h à 18 h et le vendredi de 7 h à 17 h.

*'''IDRIS'''
**Les équipes de supports aux utilisateurs (SU HPC et SU IA), composées au total de 24 ingénieurs, sont les interfaces privilégiées entre l'IDRIS et ses utilisateurs. Leur mission consiste à aider les utilisateurs HPC ou IA à adapter leurs exigences scientifiques (codes de calcul, applications) aux moyens de calcul intensif de l'IDRIS, à tous les niveaux.
**Attribution et niveaux de service
***Les équipes SU (HPC et IA) de l’IDRIS assurent une permanence par messagerie ([mailto:assist@idris.fr assist@idris.fr]) ou par téléphone au 01 69 35 85 55, du lundi au jeudi de 9 h à 18 h et le vendredi de 9 h à 17 h 30.

*'''TGCC'''
**Le TGCC offre un service d’accueil centralisé ou « ''hotline'' ». Cette ''hotline'' transmet ensuite les demandes, si elle ne peut pas les traiter, auprès des différentes équipes du TGCC en fonction des thématiques (système, stockage, applicatif, …).
**Des équipes d’experts CEA peuvent être mobilisées pour assurer le support niveau 3 en cas de besoin. De nombreuses recommandations et bonnes pratiques sont également disponibles sur le site web des utilisateurs https://www-tgcc.ccc.cea.fr
**Attribution et niveaux de service'''
***Il est accessible par téléphone de 8 h 30 à 17 h 30 les jours ouvrés au 01 77 57 42 42 ou par ''mail'' à [mailto:hotline.tgcc@cea.fr hotline.tgcc@cea.fr].


<span id="services-de-support-applicatif"></span>

=== Services de support applicatif  ===

L’évolution des architectures et les exigences croissantes de performances impliquent l'adaptation des applications de façon à tirer parti de cette puissance de calcul. Cette adaptation requiert technicité, compétences expertes et une grande expérience dans tous les domaines du calcul numérique intensif. Pour cela, les centres nationaux accompagnent les utilisateurs en leur proposant des services d’aide au développement et à l’optimisation de leurs applications sur les supercalculateurs.

Le support applicatif recouvre les notions suivantes :

* conseil au niveau de la méthodologie d’optimisation à suivre ;
* conseil à l’utilisation des outils de débogage ou d’analyse de performances au niveau de l’optimisation séquentielle ou parallèle du code (vectorisation, optimisation des accès mémoire, optimisation des communications MPI, des entrées-sorties, choix des bibliothèques scientifiques les plus performantes, optimisation algorithmique, etc.).

*'''CINES'''
**Le département calcul intensif du CINES met à disposition des moyens matériels et logiciels avancés et propose une assistance pour faciliter l’activité de modélisation des chercheurs. Le CINES propose également un support avancé et personnalisé pour les projets nécessitant une expertise spécifique afin de réaliser un passage à l’échelle ou une optimisation des performances.

*'''IDRIS'''
**Au-delà du support applicatif de base, assuré dans le cadre de l’assistance utilisateurs, l’IDRIS propose un support avancé aux utilisateurs, pour les projets HPC ou IA qui auraient besoin d’une aide spécifique via des services à haute valeur ajoutée''' '''au service des développeurs via ce lien http://www.idris.fr/support_avance.html. Cette aide permet, par exemple, d’exploiter efficacement les moyens de calcul disponibles (optimisation, passage à l’échelle, vectorisation, débogage, portage sur architecture hybride accélérée GPU, utilisation de l’IA dans les codes de calcul…).
**L’évaluation des demandes de support avancé à un projet de calcul intensif se fait sur la base des aspects techniques du projet, de la capacité de l’IDRIS à fournir un support efficace, voire de l’avis des comités thématiques sur la pertinence scientifique du projet. Les projets sélectionnés reçoivent l'aide d'ingénieurs de l'IDRIS sur une période de temps déterminée (3 mois renouvelables).

*'''TGCC'''
**Au travers de son activité de support applicatif, le TGCC assure la prise en compte de demandes de soutien pour porter ou optimiser des codes applicatifs et de l’assistance aux utilisateurs dans ces opérations. En complément, un service de type « développement applicatif » peut être proposé suivant certaines modalités de financement, afin d’aider au développement des codes des utilisateurs.
**Pour le service de type « développement applicatif », organisé sur le mode « projet », le demandeur doit rédiger un cahier des charges. Ce document est ensuite validé et/ou complété par le centre puis donne lieu à une estimation financière (non prise en charge par le centre) et un planning de réalisation de la part du centre.

=== Services de mise à disposition de logiciels ===

En plus des compilateurs et des bibliothèques MPI indispensables pour compiler et exécuter des codes parallèles, des logiciels thématiques (principalement de chimie), des bibliothèques (scientifiques ou propres aux entrées-sorties) et des outils (d’analyse de performance/profilage, de débogage (TotalView, DDT, etc.), de développement et de gestion de programmes sources) sont mis à disposition des utilisateurs.

Certains sont soumis soit à autorisation soit à licence et nécessitent, dans ce cas, des droits particuliers. Ces logiciels sont généralement gérés avec la commande module qui permet entre autres de lister les différentes versions disponibles.

'''La liste exhaustive des logiciels installés et maintenus par chacun des centres ainsi qu’une documentation associée décrivant les modalités de leur utilisation est disponible sur le site de chacun des centres''', en suivant les liens indiqués ci-dessous.

Également disponible ici:     <span id='btnModalSoft' class='btnLinkModal'>Liste des logiciels installés</span>

Les utilisateurs souhaitant utiliser des logiciels spécifiques mis à disposition par les centres peuvent désormais l’indiquer dans le formulaire de demande d’heures DARI, tout en veillant à vérifier leur disponibilité sur la machine ciblée.

{{ block start important }}
La liste des logiciels déjà installés dans les centres est consultable dans la [https://www.edari.fr/faq#softs '''FAQ''' ] et est complétée pour chaque centre ci-dessous.

*'''CINES'''
**La liste des logiciels installés sur Adastra est disponible ici: https://dci.dci-gitlab.cines.fr/webextranet/software_stack/index.html

*'''IDRIS'''
**L’IDRIS offre un large éventail de logiciels de '''Chimie''', décrits sur : http://www.idris.fr/simulato/
**Les bibliothèques et les outils de gestion de codes, de débogage, de profilage et d’analyse de performances disponibles à l’IDRIS sont accessibles sur : http://www.idris.fr/jean-zay/
**Les piles logicielles spécifiques à '''l’intelligence artificielle (IA)''' sont disponibles sur : http://www.idris.fr/jean-zay/gpu/jean-zay-gpu-logiciels-ia.html

*'''TGCC'''
**La liste des logiciels proposés par le TGCC est disponible dans le lien "environnement logiciel" sur : https://www-hpc.cea.fr/fr/Form-Doc.html accès public)

{{ end block }}

Sur demande justifiée, les utilisateurs peuvent demander l’installation de nouvelles versions ou de nouveaux logiciels aux équipes d’assistances des centres.

=== Services de formations ===

Pour faciliter le transfert de connaissance à destination de leurs utilisateurs, des programmes de formation sont mis en place, ouverts aussi bien à la recherche publique que privée, couvrant tous les aspects techniques relatifs au HPC ou à l’IA. Ces formations, à fort caractère appliqué, concernent aussi bien les langages de programmation scientifique que la parallélisation (MPI, OpenMP, hybride MPI+OpenMP), l’utilisation des accélérateurs (CUDA, OpenACC, OpenCL), l’optimisation et le débogage de codes, la visualisation, l’utilisation des ressources de calcul disponibles dans les centres, etc. Le programme et les modalités d’inscription à ces formations, propres à chacun des centres, sont disponibles sur leur site web respectif.

Les besoins en formation peuvent être indiqués dans le cadre de la demande DARI, mais les modalités de délivrance du service sont régies par chacun des centres.

*Le '''CINES''' organise des formations et des hackathons pour la communauté des utilisateurs. Ces formations couvrent entre autres :'''
**l’introduction aux architectures parallèles et au supercalculateur ;
**l’optimisation de codes ;
**l’initiation à la parallélisation avec MPI et OpenMP ;
**pour tout contact et demande d'inscriptions :[mailto:formation@cines.fr formation@cines.fr]

*L’'''IDRIS''' propose un programme soutenu d’actions de formation''', alliant cours magistraux et de nombreux TP d’applications, dispensées sous forme de 60 journées de formation par an, réparties en une vingtaine de sessions, 
**axées principalement sur :
***les langages de programmation scientifique (C/Fortran90/Fortran2003)
***le parallélisme (MPI, OpenMP, Hybride MPI+OpenMP, débogage à l’échelle, OpenACC-OpenMP/GPU, PETSc, vectorisation SIMD)
***l’intelligence artificielle (Introduction Pratique au ''Deep Learning'' (IPDL) et ''Deep Learning'' Optimisé sur Jean Zay (DLO-JZ))
**Les inscriptions à ces sessions de formation sont gratuites pour le personnel du CNRS et de l’enseignement supérieur, payante via ''CNRS Formation Entreprises'' sinon. Le calendrier prévisionnel, le contenu détaillé des formations ainsi que les modalités d’inscription sont disponibles sur le site : https://cours.idris.fr/
**Les supports de cours et des TP sont librement téléchargeables sur http://www.idris.fr/formations/supports_de_cours.html
**Certaines de ces formations sont aussi dispensées dans le cadre de PRACE (PTC, [http://www.training.prace-ri.eu https://training.prace-ri.eu]

*Le '''TGCC''' organise des formations pour répondre aux besoins de ses utilisateurs. Ces formations portent sur :
**l’utilisation du TGCC et de son environnement pour de nouveaux utilisateurs ;
**la programmation MPI, OpenMP, hybride, etc. ;
**les environnements de développement : compilateurs Intel, Intel trace analyser, débogueur ;
**l’usage avancé de Joliot-Curie (dans le cadre de PRACE/PTC).
**Elles peuvent aussi être organisées à la demande des représentants utilisateurs.
**L'inscription à ces formations se fait via le support du TGCC par mail: [mailto:hotline.tgcc@cea.fr hotline.tgcc@cea.fr]

Des séminaires, des journées thématiques d’information et de débat sont également régulièrement organisées par les centres pour mettre en exergue l’utilité du calcul haute performance et de l’intelligence artificielle, leurs spécificités, leurs problématiques et partager des retours d’expérience autour de certaines thématiques ciblées.

= Conditions d'éligibilité pour une demande d'allocation =
{{:Conditions_éligibilité}}

= Modalités d'allocation =
<b id="ModalitesAllocationRessources"></b>
{{:Modalités_allocation}}

= Modalités d'accès aux calculateurs =
<b id="ModalitesAccesCalculateurs"></b>
{{:Modalités_d'accès_machines}}

= Vie du projet =
<b id="VieDuProjet"></b>
{{:Vie_du_projet}}

=Annexes=
== Valorisation des ressources de GENCI et coefficients de normalisation ==

=== Valorisation des heures de calcul ===

C'est une moyenne, sur l’ensemble du parc de GENCI, des coûts complets financiers, divisés par les heures disponibles et pondérée par la puissance cœur ou GPU de chaque partition des calculateurs. Ce calcul se fait en fonction de l'architecture CPU ou GPU.

À titre indicatif, la valorisation des heures sur les machines en production est la suivante :

{|class="wikitable"
!style="background: #864DA9; color:white;"| '''Centres''' 
!style="background: #864DA9; color:white;"| '''Supercalculateurs'''
!style="background: #864DA9; color:white;"| '''Valorisation de l’heure en centimes d’euro HT par cœur ou GPU'''
|-
| rowspan="4" |'''IDRIS'''
| Jean Zay CSL
| <span class="param_DARI_Cout_Heure_JZ_CPU"></span>
|-
| Jean Zay V100
| <span class="param_DARI_Cout_Heure_JZ_V100"></span>
|-
| Jean Zay A100
| <span class="param_DARI_Cout_Heure_JZ_A100"></span>
|-
| Jean Zay H100
| <span class="param_DARI_Cout_Heure_JZ_H100"></span>
|-
| rowspan="3" |'''TGCC'''
| Joliot-Curie SKL
| <span class="param_DARI_Cout_Heure_IRENE_SKL"></span>
|-
| Joliot-Curie Rome
| <span class="param_DARI_Cout_Heure_IRENE_ROME"></span>
|-
| Joliot-Curie V100
| <span class="param_DARI_Cout_Heure_IRENE_V100"></span>
|-
| rowspan="3" |'''CINES'''
| Adastra MI200
| <span class="param_DARI_Cout_Heure_ADASTRA_GPU"></span>
|-
| Adastra MI300
| <span class="param_DARI_Cout_Heure_ADASTRA_APU"></span>
|-
| Adastra Genoa
| <span class="param_DARI_Cout_Heure_ADASTRA_CPU"></span>
|}

=== Valorisation du stockage === 
C'est une moyenne, sur l’ensemble du stockage du parc de GENCI, des coûts complets financiers divisés par les volumétries disponibles pour chaque espace (Work ou Store) en fonction de leurs technologies respectives. À titre indicatif, la valorisation des espaces de stockage est listée dans le tableau ci-dessous :

{|class="wikitable"
!width="42%" style="background: #864DA9; color:white;"| '''Type de stockage'''
!width="57%" style="background: #864DA9; color:white;"| '''Valorisation du To sur 1 an en € HT'''
|-
| '''Work'''
| <span class="param_DARI_Cout_Work_CINES"></span>
|-
| '''Store'''
| <span class="param_DARI_Cout_Store_CINES"></span>
|}

Remarque : Il n'y a pas de valorisation des espaces temporaires SCRATCH/TMP car ils sont intégrés dans le coût du calculateur.

=== Puissances relatives entre les partitions ou machines ===

Depuis l’origine de GENCI les puissances relatives entre les partitions ou machines sont listées par technologie (CPU ou GPU) dans le tableau ci-après. Elles sont établies à partir des retours d’expérience lors de la mise en production des calculateurs.

Par exemple, la quantité de travail effectuée sur un calculateur sera la même avec 2 heures-cœurs d’Ada ou 1 heure de Joliot-Curie Skylake/Intel ; autrement dit, un cœur Skylake est deux fois plus puissant qu'un cœur d’Ada. GENCI a choisi de ne pas comparer les architectures CPU et GPU, les technologies, les algorithmes utilisés dans les codes, leur optimisation n’étant pas comparables.

{|class="wikitable"
!width="28%" style="background: #864DA9; color:white;" colspan="4"| Coefficients de normalisation entre calculateurs ou partitions
|-
| rowspan="4" | Architecture CPU x86
| rowspan="2" | TGCC
| Joliot Curie (Skylake/Intel)
| <span class="param_DARI_Facteur_Normalisation_IRENE_SKL"></span>
|-
| Joliot Curie (Rome/AMD)
| <span class="param_DARI_Facteur_Normalisation_IRENE_ROME"></span>
|-
| rowspan="1" |CINES
| Adastra (Genoa/AMD)
| <span class="param_DARI_Facteur_Normalisation_ADASTRA_CPU"></span>
|-
| rowspan="1" |IDRIS
| Jean Zay (Cascade Lake/Intel)
| <span class="param_DARI_Facteur_Normalisation_JZ_CPU"></span>
|-
| rowspan="6" |Architecture GPU
| rowspan="1" |TGCC
| Joliot Curie (V100/Nvidia)
| <span class="param_DARI_Facteur_Normalisation_IRENE_V100"></span>
|-
| rowspan="3" |IDRIS
| Jean Zay (V100/Nvidia)
| <span class="param_DARI_Facteur_Normalisation_JZ_V100"></span>
|-
| Jean Zay (A100/Nvidia)
| <span class="param_DARI_Facteur_Normalisation_JZ_A100"></span>
|-
| Jean Zay (H100/Nvidia)
| <span class="param_DARI_Facteur_Normalisation_JZ_H100"></span>
|-
| rowspan="2" |CINES
| Adastra (MI250x/AMD)
| <span class="param_DARI_Facteur_Normalisation_ADASTRA_GPU"></span>
|-
| Adastra (MI300A/AMD)
| <span class="param_DARI_Facteur_Normalisation_ADASTRA_APU"></span>
|}

Le tableau d’équivalence entre partitions de supercalculateurs mis en œuvre ci-avant sert aux calculs :

* de l’empreinte carbone,
* du coût financier par partition,
* de la volumétrie des transferts de projets d’une partition à une autre lors de l’attribution,
* des heures normalisées pour comparer les heures entre partition/machine/centre.

=== Calcul des émissions de Gaz à Effet de Serre ===

Les chiffres servant à calculer l'empreinte carbone des projets sont issus du calcul des empreintes des calculateurs de GENCI par type d'architecture (CPU ou GPU) avec la méthode du collectif [https://labos1point5.org/les-rapports/estimation-empreinte-calcul| Labos 1point5] moyennées et pondérées en fonction des puissances relatives de chaque partition des calculateurs de GENCI. Par conséquent, pour une même puissance consommée et pour une architecture particulière, accéléré par exemple, le bilan Eq CO₂ sera le même, quel que soit le GPU utilisé (V100, A100, MI250x et suivant).

Le périmètre du calcul est le même pour les 3 centres, c'est-à-dire : les équipements informatiques (calcul, stockage temporaire, réseau, etc.), le système d’alimentation et de refroidissement. Pour aucun des 3 centres la construction et l’entretien du bâtiment, ainsi que l’activité du personnel (transports) ne sont pris en compte.

Voici les valeurs d'émission de CO2 par architecture:
{|class="wikitable"
!style="background: #864DA9; color:white;"| '''Architecture''' 
!style="background: #864DA9; color:white;"| '''Emissions'''
|-
|'''CPU'''
| <span class="param_DARI_GES_CPU"></span> g EqCO<sub>2</sub>
|-
|'''GPU'''
| <span class="param_DARI_GES_GPU"></span> g EqCO<sub>2</sub>
|}

== L'envionnement EuroHPC ==

[[File:eurohpc_logo.png]] <br>
En 2018, la Commission européenne a mis en place une agence européenne de moyens consacrée au calcul intensif, à l'IA, et au calcul quantique, dénommée [https://eurohpc-ju.europa.eu/ EuroHPC Joint Undertaking ], qui a notamment lancé des programmes d'acquisition de 3 machines pré-exascale et de 2 machines exascale.


{{ block start note }}
Si les ressources de GENCI ne suffisent plus ou que celles demandées grèvent significativement l’exploitation des centres nationaux, le porteur de projet est encouragé à utiliser l’infrastructure européenne EuroHPC (https://eurohpc-ju.europa.eu/), particulièrement si ses besoins en ressources sont au-delà de 50 Mh-cœur CPU ou 500 kh GPU.
{{ end block }}

=== Les calculateurs Européens d'EuroHPC ===

EuroHPC met à disposition de la recherche européenne, académique, publique ou privée, neuf [https://eurohpc-ju.europa.eu/supercomputers/our-supercomputers_en supercalculateurs] situés dans toute l'Europe.

Les types de processeurs de chacun des supercalculateurs sont résumés ci-dessous:

{|class="wikitable"
!style="background: #864DA9; color:white;"| '''Nom du Supercalculateur''' 
!style="background: #864DA9; color:white;"| '''CENTRE/PAYS'''
!style="background: #864DA9; color:white;"| '''CONSTRUCTEUR/INTEGRATION'''
!style="background: #864DA9; color:white;"| '''PROCESSEURS CPU'''
!style="background: #864DA9; color:white;"| '''PROCESSEURS GPU'''
|-
|'''[https://www.lumi-supercomputer.eu/ LUMI]'''
| IT Center for Science (CSC) / Finlande
| Cray EX
| AMD MILAN
| AMD MI250X
|-
|'''[https://leonardo-supercomputer.cineca.eu/?__cf_chl_tk=0uuPcUfJjOBKSZZBItjO4zJ5Si.WIVxpj1BL_WKS.Pk-1726142470-0.0.1.1-7657 Leonardo]'''
| CINECA / Italie
| ATOS BullSequana XH2000
| Intel Ice-Lake / Sapphire Rapids
| Nvidia A100
|-
|'''[https://www.bsc.es/marenostrum/marenostrum-5 Marenostrum 5]'''
| Barcelona Supercomputing Center / Espagne
| ATOS BullSequana XH3000 / Lenovo ThinkSystem
| Intel Sapphire Rapids/ Intel Emeralds Rapids/ Nvidia Grace Superchip
| Nvidia H100 
|-
|'''[https://luxembourg.public.lu/en/invest/innovation/meluxina-superordinateur.html Meluxina]'''
| LuxProvide / Luxembourg
| ATOS BullSequana XH2000
| AMD ROME
| Nvidia A100
|-
|'''[https://www.it4i.cz/en/infrastructure/karolina Karolina]'''
| IT4Innovations National Supercomputing Center / Tchéquie
| HPE Apollo 2000Gen10 Plus and HPE Apollo 6500
| AMD ROME
| Nvidia A100
|-
|'''[https://docs.discoverer.bg/resource_overview.html Discoverer]'''
| Sofia Tech Park / Bulgarie
| ATOS BullSequana XH2000
| AMD ROME
| ---- NON ----
|-
|'''[https://www.izum.si/en/hpc-en/ Vega]'''
| IZUM / Slovénie
| ATOS BullSequana XH2000
| AMD ROME
| Nvidia A100
|-
|'''[https://www.macc.fccn.pt/resources#deucalion Deucalion]'''
| MACC / Portugal
| Fujitsu PRIMEHPC ARM / ATOS BULL SEQUANA
| A164FX (ARM) /  AMD ROME
| Nvidia A100
|-
|'''[https://www.fz-juelich.de/en/ias/jsc/jupiter Jupiter]'''
| Juhlich Supercomputing centre / Allemagne
| EVIDEN BullSequana XH3000
| SiPearl Rhea1
| Nvidia GH200
|}


Le consortium Jules Verne, piloté par la France, a été retenu par EuroHPC pour accueillir au TGCC, la 2<sup>e</sup> machine exascale européenne.

=== Les types d'accès sur EuroHPC ===

{{ block start important }}

L'agence EuroHPC offre plusieurs '''types d'accès''' aux calculateurs en fonction du montant d'heures souhaitées, de l'architecture et de la machine cible : Attention les volumétries indiquées le sont en 'heures/noeud', vous devez donc les adapter selon le calculateur d'EuroHPC choisit.
<br>

*'''[https://eurohpc-ju.europa.eu/eurohpc-ju-call-proposals-benchmark-access_en Les Benchmark access]''':
Les accès se font tous les mois, pour une période d'allocation de trois mois maximum.<br>
La volumétrie d'heures demandées est au minimum de 2 kh heures nœuds CPU ou de 200 à 3,5 kh nœuds GPU suivant la partition ciblée. 
*'''[https://eurohpc-ju.europa.eu/eurohpc-ju-call-proposals-development-access_en Les Development access]''': 
Les accès se font tous les mois, pour une période d'allocation d'une année.<br>
La volumétrie d'heures demandées minimum entre 3 kh et 4,5 kh nœuds CPU et entre 400h et 4,5kh nœuds GPU suivant la partition ciblée
*'''[https://eurohpc-ju.europa.eu/eurohpc-ju-access-call-ai-and-data-intensive-applications_en Les AI and Data-Intensive Applications Access]''':
Les accès se font 2 fois par an (date limite autour d'avril et juin), pour une période d'allocation d'une année.<br>
La volumétrie d'heures demandées minimum entre 7,1 kh et 50 kh nœuds uniquement sur les partitions accélérées suivant la partition ciblée. 
*'''[https://eurohpc-ju.europa.eu/eurohpc-ju-call-proposals-regular-access-mode_en Les Regular access]''':
Les accès se font tous les 6 mois (date limite autour de mars et septembre), pour une période d'allocation d'une année.<br>
La volumétrie d'heures demandées est au minimum entre 32 kh et 80 kh nœuds CPU et entre 15 kh et 88 kh nœuds GPU suivant la partition ciblée. 
*'''[https://eurohpc-ju.europa.eu/eurohpc-ju-call-proposals-extreme-scale-access-mode_en Les Extreme scale access ]''':
Les accès se font tous les 6 mois (date limite autour d'avril et octobre), pour une période d'allocation d'une année.<br>
La volumétrie d'heures demandées est au minimum entre 120 kh et 240 kh nœuds CPU et entre 165 kh et 245 kh nœuds GPU suivant la partition ciblée. 
{{ end block }}

=== Le support d'applications européen : EPICURE ===

Le 1er février 2024, EuroHPC JU a lancé un nouveau projet [https://eurohpc-ju.europa.eu/epicure-new-ri-project-launched-eurohpc-ju-2024-02-07_en EPICURE]. Ce projet vise à améliorer les services d'assistance aux utilisateurs pour les candidats retenus dans le cadre des accès aux calculateurs EuroHPC.   

Ce projet offre une assistance aux utilisateurs en établissant et en exploitant un service européen de support aux applications HPC, partagé par plusieurs centres mais coordonné par [https://csc.fi/en/about-us/what-csc/ le CSC - IT center for Science] situé en Finlande. Ce service sert à encourager la meilleure utilisation possible des supercalculateurs par les chercheurs européens.

Tous les centres européens participant à l'initiative sont répertoriés 
[https://eurohpc-ju.europa.eu/research-innovation/our-projects/epicure_en ici ] dont le CINES.