| 42 | | Les post-traitements des simulations faites sur vargas se font actuellement sur ulam. Nous rencontrons des difficultés insurmontables dans les post-traitements sur ulam et en l'état, il est impossible de réaliser des simulations de type CMIP5 historical en production. Il faudrait pouvoir post-traiter les simulations faites sur vargas sur vargas elle-même. Il s'agit des jobs de rebuild, TS et Monitoring, SE et ATLAS. Pour cela il faudrait sur vargas : |
| 43 | | * disposer des outils nco et C° nécessaires (rappeler la liste svp) |
| 44 | | * avoir la possibilités de lancer jusque 150 jobs à la fois, en classe scalaire sur vargas. C'est ce que peut soumettre le script !TimeSeriesChecker de vérification des TS |
| 45 | | * avoir la possibilité de tourner une vingtaine de jobs de type scalaire simultanément |
| 46 | | * disposer de l'espace TMPDIR nécessaire à ces jobs de post-traitements qui tourneraient simultanément. |
| 47 | | |
| 48 | | Chiffres issus de la simu v3.historicalV52 qui a tourné entre mai et juin 2011 : |
| 49 | | |
| 50 | | Une simulation de type historical (1850-2006, 157 ans) tourne en lançant 40 jobs enchainés sur vargas (<10h). L'execution s'est étalée sur une période de 1 mois environ. Elle a lancé au fur et à mesure les jobs de post-traitements sur ulam puis le rattrapage des TS a été lancé à la main. En tout : |
| 51 | | * 156 jobs de rebuilds, (<10h) 9 à refaire à la main à cause de souci d'accès aux fichiers gaya |
| 52 | | * 15 jobs de SE (moyennes saisonnières), (<10h) |
| 53 | | * 30 jobs de monitoring (<1h) |
| 54 | | * 45 jobs d'atlas (<1h) |
| 55 | | * 464 jobs de !TimeSeries (TS) en direct (<20h) |
| 56 | | * 166 jobs de TS (<20h) de rattrapage (via le script !TimeSeriesChecker) |
| 57 | | |
| 58 | | Les jobs de TS peuvent partir en time limit exceeded. Le max de temps réel étant actuellement de 20h. |
| | 42 | * Les post-traitements des simulations faites sur vargas se font actuellement sur ulam. Nous rencontrons des difficultés insurmontables dans les post-traitements sur ulam et en l'état, il est impossible de réaliser des simulations de type CMIP5 (historical) en production. |
| | 43 | * Il faudrait pouvoir post-traiter les simulations faites sur vargas sur vargas elle-même. Il s'agit des jobs de rebuild, TS et Monitoring, SE et ATLAS. Pour cela il faudrait sur vargas : |
| | 44 | * disposer des outils nco et C° nécessaires (rappeler la liste svp) |
| | 45 | * avoir la possibilités de lancer jusque 150 jobs à la fois, en classe scalaire sur vargas. C'est ce que peut soumettre le script !TimeSeriesChecker de vérification des TS |
| | 46 | * avoir la possibilité de tourner une vingtaine de jobs de type scalaire simultanément par utilisatueur |
| | 47 | * disposer de l'espace TMPDIR nécessaire à ces jobs de post-traitements qui tourneraient simultanément. |
| | 48 | * Chiffrages issus de la simu v3.historicalV52 qui a tourné entre mai et juin 2011 : |
| | 49 | * Une simulation de type historical (1850-2006, 157 ans) tourne en lançant 40 jobs enchainés sur vargas (<10h). |
| | 50 | * L'execution s'est étalée sur une période de 1 mois environ. Elle a lancé au fur et à mesure les jobs de post-traitements sur ulam puis le rattrapage des TS a été lancé à la main. En tout : |
| | 51 | * 156 jobs de rebuilds, (<10h) 9 à refaire à la main à cause de souci d'accès aux fichiers gaya |
| | 52 | * 15 jobs de SE (moyennes saisonnières), (<10h) |
| | 53 | * 30 jobs de monitoring (<1h) |
| | 54 | * 45 jobs d'atlas (<1h) |
| | 55 | * 464 jobs de !TimeSeries (TS) en direct (<20h) |
| | 56 | * 166 jobs de TS (<20h) de rattrapage (via le script !TimeSeriesChecker) |
| | 57 | * Les jobs de TS peuvent partir en time limit exceeded. Le max de temps réel étant actuellement de 20h. |
