ÉcoleCQ2019: Difference between revisions
Jump to navigation
Jump to search
No edit summary |
No edit summary |
||
| Line 6: | Line 6: | ||
* Aller sur le wiki de Calcul Canada et chercher École 2019 | * Aller sur le wiki de Calcul Canada et chercher École 2019 | ||
* Téléverser le fichier de soumission proposé sur le wiki sur le cluster | * Téléverser le fichier de soumission proposé sur le wiki sur le cluster | ||
* | * Augmenter la durée de la tâche à 2 minutes avec nano | ||
* Soumettre la tâche | * Soumettre la tâche | ||
* Récupérer les fichiers de résultats | * Récupérer les fichiers de résultats | ||
| Line 34: | Line 34: | ||
|contents= | |contents= | ||
#!/bin/bash | #!/bin/bash | ||
#SBATCH --time= | #SBATCH --time=00:00:30 | ||
#SBATCH --account=def-xyz | #SBATCH --account=def-xyz | ||
#SBATCH --ntasks=1 | #SBATCH --ntasks=1 | ||
Revision as of 21:34, 16 May 2019
École de printemps Calcul Québec 2019
Analyse de données avec Python - Objectifs
Intro au supercalculateur
- Aller sur le wiki de Calcul Canada et chercher École 2019
- Téléverser le fichier de soumission proposé sur le wiki sur le cluster
- Augmenter la durée de la tâche à 2 minutes avec nano
- Soumettre la tâche
- Récupérer les fichiers de résultats
Intro à OpenRefine
- Importer le projet OpenRefine produit par la job
- Faire un undo sur les données manquantes
- Remplacer les données manquantes par un 0
- Ajouter une colonne saison
- Sauvegarder le jeu de données résultats
Intro à Pandas / Python
- Téléverser le résultat vers Jupyter
- Ouvrir le jeu de données résultat avec Pandas
- Calculer la moyenne du nombre d'extermination par arrondissement
- Calculer la somme d'exterminations par saison par année
- Tracer un bar graph stacked du nombre d'extermination total par saison, par année
Intro au supercalculateur
Script de soumission
File : job.sh
#!/bin/bash
#SBATCH --time=00:00:30
#SBATCH --account=def-xyz
#SBATCH --ntasks=1
#SBATCH --cpus-per-task=1
#SBATCH --mem=512M
/project/def-sponsor00/projet/bin/simulation_punaises.py 5000