Changes between Version 1 and Version 2 of BasculeCCRTTGCC


Ignore:
Timestamp:
07/12/11 12:09:43 (13 years ago)
Author:
mafoipsl
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • BasculeCCRTTGCC

    v1 v2  
    11= Bascule CCRT vers TGCC = 
    22 
    3 Cette page décrit les étapes nécessaires pour la bascule du CCRT vers le TGCC de nos chaînes de calcul. 
     3Cette page décrit les étapes nécessaires pour intégrer dans nos chaines de calcul les évolutions dues à la bascule du CCRT vers le TGCC. 
    44 
    55== Constat == 
     
    77L'utilisation de /dmnfs comme espace de stockage est à revoir. Au TGCC, l'espace fichier : $STOREDIR est un espace d'archivage. Son utilisation doit être l'archivage de fichiers de grande taille. 
    88 
    9 == Chaine de calcul == 
     9== Evolution de la chaine de calcul == 
    1010 
    1111 * Utilisation de l'espace /scratch par les simulations en cours d'execution,  
    1212 * Gestion/ménage de l'espace /scratch par la chaine,   
    13  * Output : Ajout d'étape de compactage des fichiers Output (create_pack). On essaye par 10 ans. 
     13 * Output : Ajout d'étape de compactage des fichiers Output (voir outil create_pack).  
     14    * On essaye par 10 ans. Voir calcul dimension.  
     15    * Stockage du résultat dans STOREDIR 
    1416 * Analyse : Stockage des fichiers Analyse tels quels sur STOREDIR.  
    15    * Création depuis /scratch ou depuis fichiers Outputs compactés 
     17   * Création depuis /scratch ou depuis fichiers Output compactés sur STOREDIR 
    1618   * Prévoir accès par dods des fichiers SE et TS. 
    1719 * Restart : prévoir sélection d'un fichier par an dans /scratch avant stockage dans STOREDIR 
    18  * Debug : fichiers gardés sur /scratch seulement? seulement les 10 premières années compactés et gardés? 
    19  * ATLAS et MONITORING : fichiers gardés sur /work avec accès par dods. 
     20 * Debug :  
     21  * fichiers gardés sur /scratch seulement?  
     22  * seulement les 10 premières années compactés et gardés? 
     23 * ATLAS et MONITORING :  
     24   * fichiers gardés sur /work avec accès par dods. 
     25   * tar et stockage sur STOREDIR 
    2026 
    2127== Transition == 
     
    2733 * Restart : sélection de 1/12 et transfert 
    2834 
    29 == Dimension des resosurces == 
     35== Dimension des ressources == 
    3036 * dimension espace /scratch pour les simus : 6 fois 50 ans soit 30 To au départ. Prévoir 50 To l'année suivante. 
    3137 * dimension dods ATLAS et MONITORING : 10 To  
     
    3541   * Basé sur create_SE 
    3642   * prend 10 ans, fait les nccat, stocke sur STOREDIR 
    37  * create_pack pour extension : 
     43   * extension possible pour les simulations prolongées dans un 2ème temps 
     44 
     45== Moyen terme == 
     46 * faire les simus par an 
     47 * utilisation de l'ioserver pour éviter l'étape rebuild 
     48 * stockage en netcdf4 compressé