Translations:Storage and file management/12/fr: Difference between revisions

From Alliance Doc
Jump to navigation Jump to search
No edit summary
No edit summary
 
(33 intermediate revisions by 5 users not shown)
Line 1: Line 1:
<tabs>
<tab name="Cedar">
{| class="wikitable" style="font-size: 95%; text-align: center;"
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Caractéristiques des systèmes de fichiers  
|+Caractéristiques des systèmes de fichiers  
! Espace
!  
! Quota par défaut
! Quota par défaut
! Basé sur Lustre
! Basé sur Lustre
Line 9: Line 11:
! Monté sur des nœuds de calcul
! Monté sur des nœuds de calcul
|-
|-
| ''home''
|/home
|50Go et 500K fichiers par utilisateur<ref>Ce quota est fixe et ne peut être modifié.</ref>
|50Go et 500K fichiers par utilisateur<ref>Ce quota est fixe et ne peut être changé.</ref>
|Cedar, oui; Graham, non
|oui
(système de fichiers en réseau)
|oui
|oui
|non
|non
Line 18: Line 19:
|oui
|oui
|-
|-
| ''scratch''
|/scratch
|20To (100To sur Graham) et 1M fichiers par utilisateur<ref>Présentement, l'espace scratch ne peut pas être augmenté et un quota supplémentaire de 100To par utilisateur s'applique temporairement sur Graham. Ce quota sera ramené à 20To quand une solution technique sera déployée.</ref>
|20To et 1M fichiers par utilisateur
|oui
|oui
|non
|non
|oui, les fichiers de plus de 60 jours <ref>Selon la valeur de <tt>ctime</tt> pour le fichier.</ref>
|les fichiers de plus de 60 jours sont purgés<ref>Pour plus d'information, voir la [[Scratch purging policy/fr | politique de purge automatique]].</ref>
peuvent être purgés
|oui
|oui
|oui
|oui
|-
|-
| ''projet''
|/project
|1To et 5M fichiers par groupe<ref>L'espace projet peut être augmenté à 10To par groupe en recourant au service d'accès rapide. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au [[Technical support/fr|soutien technique]].</ref>
|1To et 500K fichiers par groupe<ref> L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide, pourvu que le quota pour l'espace project soit au minimum 1To et que le total pour les quatre grappes d'usage général soit au maximum 43To. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au [[Technical support/fr | soutien technique]].</ref>
|oui
|oui
|oui
|oui
Line 35: Line 35:
|oui
|oui
|-
|-
| ''nearline''
|/nearline
|5To par groupe
|2To et 5000 fichiers par groupe
|oui
|oui
|non
|oui
|non
|}
<references />
À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section <i>Stockage</i> dans [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/service-dacces-rapide la page web <i>Service d'accès rapide</i>]. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/concours-pour-lallocation-de-ressources concours annuel pour l’allocation de ressources].
</tab>
<tab name="Graham">
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Caractéristiques des systèmes de fichiers
!
! Quota par défaut
! Basé sur Lustre
! Copié pour sauvegarde
! Purgé
! Disponible par défaut
! Monté sur des nœuds de calcul
|-
|/home
|50Go et 500K fichiers par utilisateur<ref>Ce quota est fixe et ne peut être changé.</ref>
|non
|non
|oui
|non
|oui
|oui
|-
|/scratch
|20To et 1M fichiers par utilisateur
|oui
|non
|non
|les fichiers de plus de 60 jours sont purgés<ref>Pour plus d'information, voir la [[Scratch purging policy/fr | politique de purge automatique]].</ref>
|oui
|oui
|-
|/project
|1To et 500K fichiers par groupe<ref> L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au [[Technical support/fr | soutien technique]].</ref>
|oui
|oui
|non
|non
|oui
|oui
|-
|/nearline
|10To et 5000 fichiers par groupe
|oui
|oui
|non
|non
|oui
|non
|non
|}
|}
<references />
<references />
Des copies de sauvegarde des espaces projet et ''home'' sont faites chaque soir; elles sont conservées pendant 30 jours.<br />
À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section <i>Stockage</i> dans [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/service-dacces-rapide la page web <i>Service d'accès rapide</i>]. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/concours-pour-lallocation-de-ressources concours annuel pour l’allocation de ressources].
Les fichiers supprimés sont conservés pendant 60 jours. Pour récupérer une version antérieure d'un fichier ou d'un répertoire, contactez le [[Technical support/fr|soutien technique]] en indiquant le chemin (''path'') complet et la date.<br />
</tab>
Pour copier des données à partir de l'espace de stockage ''nearline'' vers les espaces projet, ''home'' ou ''scratch'', contactez le [[Technical support/fr|soutien technique]].
<tab name="Béluga et Narval">
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Caractéristiques des systèmes de fichiers
!
! Quota par défaut
! Basé sur Lustre
! Copié pour sauvegarde
! Purgé
! Disponible par défaut
! Monté sur des nœuds de calcul
|-
|/home
|50Go et 500K fichiers par utilisateur<ref>Ce quota est fixe et ne peut être changé.</ref>
|oui
|oui
|non
|oui
|oui
|-
|/scratch
|20To et 1M fichiers par utilisateur
|oui
|non
|les fichiers de plus de 60 jours sont purgés<ref>Pour plus d'information, voir la [[Scratch purging policy/fr | politique de purge automatique]].</ref>
|oui
|oui
|-
|/project
|1To et 500K fichiers par groupe<ref> L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au [[Technical support/fr | soutien technique]].</ref>
|oui
|oui
|non
|oui
|oui
|-
|/nearline
|1To et 5000 fichiers par groupe
|oui
|oui
|non
|oui
|non
|}
<references />
À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section <i>Stockage</i> dans [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/service-dacces-rapide la page web <i>Service d'accès rapide</i>]. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au [https://alliancecan.ca/fr/services/calcul-informatique-de-pointe/acces-aux-ressources/concours-pour-lallocation-de-ressources concours annuel pour l’allocation de ressources].
</tab>
<tab name="Niagara">
{| class="wikitable"
!
!colspan="2"| Quota
!align="right"| Taille des blocs
! Durée
! Copié pour sauvegarde
! Sur nœuds de connexion
! Sur nœuds de calcul
|-
| $HOME
|colspan="2"| 100Go par utilisateur
|align="right"| 1Mo
|
| oui
| oui
| lecture seule
|-
|rowspan="6"| $SCRATCH
|colspan="2"| 25To par utilisateur (dynamique pour les groupes)
|align="right" rowspan="6" | 16Mo
|rowspan="6"| 2 mois
|rowspan="6"| non
|rowspan="6"| oui
|rowspan="6"| oui
|-
|align="right"|jusqu'à 4 utilisateurs par groupe
|align="right"|50To
|-
|align="right"|jusqu'à 11 utilisateurs par groupe
|align="right"|125To
|-
|align="right"|jusqu'à 28 utilisateurs par groupe
|align="right"|250To
|-
|align="right"|jusqu'à 60 utilisateurs par groupe
|align="right"|400To
|-
|align="right"|plus de 60 utilisateurs par groupe
|align="right"|500To
|-
| $PROJECT
|colspan="2"| par allocation de groupe (RGR ou PPR)
|align="right"| 16Mo
|
| oui
| oui
| oui
|-
| $ARCHIVE
|colspan="2"| par allocation de groupe
|align="right"|
|
| 2 copies
| non
| non
|-
| $BBUFFER
|colspan="2"| 10To par utilisateur
|align="right"| 1Mo
| très court
| non
| oui
| oui
|}
<ul>
<li>[https://docs.scinet.utoronto.ca/images/9/9a/Inode_vs._Space_quota_-_v2x.pdf Inode vs. Space quota (PROJECT et SCRATCH)]</li>
<li>[https://docs.scinet.utoronto.ca/images/0/0e/Scratch-quota.pdf Quota dynamique par groupe (SCRATCH)]</li>
<li>Pas de stockage local sur les nœuds de calcul.</li>
<li>L'espace Archive (ou ''nearline'') se trouve sur [https://docs.scinet.utoronto.ca/index.php/HPSS HPSS].</li>
<li>La copie de sauvegarde est un instantané récent et non l'archivage complet des données.</li>
<li><code>$BBUFFER</code> (pour [https://docs.scinet.utoronto.ca/index.php/Burst_Buffer Burst Buffer]) est un espace de stockage plus rapide pour les données temporaires.</li></ul>

Latest revision as of 20:57, 6 May 2024

Information about message (contribute)
This message has no documentation. If you know where or how this message is used, you can help other translators by adding documentation to this message.
Message definition (Storage and file management)
<tabs>
<tab name="Cedar">
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Filesystem Characteristics 
! Filesystem
! Default Quota
! Lustre-based
! Backed up
! Purged
! Available by Default
! Mounted on Compute Nodes
|-
|Home Space
|50 GB and 500K files per user<ref>This quota is fixed and cannot be changed.</ref>
|Yes
|Yes
|No
|Yes
|Yes
|-
|Scratch Space
|20 TB and 1M files per user
|Yes
|No
|Files older than 60 days are purged.<ref>See [[Scratch purging policy]] for more information.</ref>
|Yes
|Yes
|-
|Project Space
|1 TB and 500K files per group<ref>Project space can be increased to 40 TB per group by a RAS request, subject to the limitations that the minimum project space per quota cannot be less than 1 TB and the sum over all four general-purpose clusters cannot exceed 43 TB. The group's sponsoring PI should write to [[technical support]] to make the request.</ref>
|Yes
|Yes
|No
|Yes
|Yes
|-
|Nearline Space
|2 TB and 5000 files per group
|Yes
|Yes
|No
|Yes
|No
|}
<references />
Starting April 1, 2024, new Rapid Access Service (RAS) policies will allow larger quotas for the project and nearline spaces. For more details, see the "Storage" section at [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/rapid-access-service Rapid Access Service].  Quota changes larger than those permitted by RAS will require an application to the annual [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/resource-allocation-competition Resource Allocation Competition (RAC)]. 
</tab>
<tab name="Graham">
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Filesystem Characteristics 
! Filesystem
! Default Quota
! Lustre-based
! Backed up
! Purged
! Available by Default
! Mounted on Compute Nodes
|-
|Home Space
|50 GB and 500K files per user<ref>This quota is fixed and cannot be changed.</ref>
|No
|Yes
|No
|Yes
|Yes
|-
|Scratch Space
|20 TB and 1M files per user
|Yes
|No
|Files older than 60 days are purged.<ref>See [[Scratch purging policy]] for more information.</ref>
|Yes
|Yes
|-
|Project Space
|1 TB and 500K files per group<ref>Project space can be increased to 40 TB per group by a RAS request. The group's sponsoring PI should write to [[technical support]] to make the request.</ref>
|Yes
|Yes
|No
|Yes
|Yes
|-
|Nearline Space
|10 TB and 5000 files per group
|Yes
|Yes
|No
|Yes
|No
|}
<references />
Starting April 1, 2024, new Rapid Access Service (RAS) policies will allow larger quotas for project and nearline spaces. For more details, see the "Storage" section at [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/rapid-access-service Rapid Access Service].  Quota changes larger than those permitted by RAS will require an application to the annual [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/resource-allocation-competition Resource Allocation Competition (RAC)].  
</tab>
<tab name="Béluga and Narval">
{| class="wikitable" style="font-size: 95%; text-align: center;"
|+Filesystem Characteristics 
! Filesystem
! Default Quota
! Lustre-based
! Backed up
! Purged
! Available by Default
! Mounted on Compute Nodes
|-
|Home Space
|50 GB and 500K files per user<ref>This quota is fixed and cannot be changed.</ref>
|Yes
|Yes
|No
|Yes
|Yes
|-
|Scratch Space
|20 TB and 1M files per user
|Yes
|No
|Files older than 60 days are purged.<ref>See [[Scratch purging policy]] for more information.</ref>
|Yes
|Yes
|-
|Project Space
|1 TB and 500K files per group<ref>Project space can be increased to 40 TB per group by a RAS request. The group's sponsoring PI should write to [[technical support]] to make the request.</ref>
|Yes
|Yes
|No
|Yes
|Yes
|-
|Nearline Space
|1 TB and 5000 files per group
|Yes
|Yes
|No
|Yes
|No
|}
<references />
Starting April 1, 2024, new Rapid Access Service (RAS) policies will allow larger quotas for project and nearline spaces. For more details, see the "Storage" section at [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/rapid-access-service Rapid Access Service].  Quota changes larger than those permitted by RAS will require an application to the annual [https://alliancecan.ca/en/services/advanced-research-computing/accessing-resources/resource-allocation-competition Resource Allocation Competition (RAC)].  
</tab>
<tab name="Niagara">
{| class="wikitable"
! location
!colspan="2"| quota
!align="right"| block size
! expiration time
! backed up
! on login nodes
! on compute nodes
|-
| $HOME
|colspan="2"| 100 GB per user
|align="right"| 1 MB

| yes
| yes
| read-only
|-
|rowspan="6"| $SCRATCH
|colspan="2"| 25 TB per user (dynamic per group)
|align="right" rowspan="6" | 16 MB
|rowspan="6"| 2 months
|rowspan="6"| no
|rowspan="6"| yes
|rowspan="6"| yes
|-
|align="right"|up to 4 users per group
|align="right"|50TB
|-
|align="right"|up to 11 users per group
|align="right"|125TB
|-
|align="right"|up to 28 users per group
|align="right"|250TB
|-
|align="right"|up to 60 users per group
|align="right"|400TB
|-
|align="right"|above 60 users per group
|align="right"|500TB
|-
| $PROJECT
|colspan="2"| by group allocation (RRG or RPP)
|align="right"| 16 MB

| yes
| yes
| yes
|-
| $ARCHIVE
|colspan="2"| by group allocation
|align="right"| 
|
| dual-copy
| no
| no
|-
| $BBUFFER
|colspan="2"| 10 TB per user
|align="right"| 1 MB
| very short
| no
| yes
| yes
|}
<ul>
<li>[https://docs.scinet.utoronto.ca/images/9/9a/Inode_vs._Space_quota_-_v2x.pdf Inode vs. Space quota (PROJECT and SCRATCH)]</li>
<li>[https://docs.scinet.utoronto.ca/images/0/0e/Scratch-quota.pdf dynamic quota per group (SCRATCH)]</li>
<li>Compute nodes do not have local storage.</li>
<li>Archive (a.k.a. nearline) space is on [https://docs.scinet.utoronto.ca/index.php/HPSS HPSS]</li>
<li>Backup means a recent snapshot, not an archive of all data that ever was.</li>
<li><code>$BBUFFER</code> stands for [https://docs.scinet.utoronto.ca/index.php/Burst_Buffer Burst Buffer], a faster parallel storage tier for temporary data.</li></ul>

<tabs>

Caractéristiques des systèmes de fichiers
Quota par défaut Basé sur Lustre Copié pour sauvegarde Purgé Disponible par défaut Monté sur des nœuds de calcul
/home 50Go et 500K fichiers par utilisateur[1] oui oui non oui oui
/scratch 20To et 1M fichiers par utilisateur oui non les fichiers de plus de 60 jours sont purgés[2] oui oui
/project 1To et 500K fichiers par groupe[3] oui oui non oui oui
/nearline 2To et 5000 fichiers par groupe oui oui non oui non
  1. Ce quota est fixe et ne peut être changé.
  2. Pour plus d'information, voir la politique de purge automatique.
  3. L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide, pourvu que le quota pour l'espace project soit au minimum 1To et que le total pour les quatre grappes d'usage général soit au maximum 43To. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au soutien technique.

À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section Stockage dans la page web Service d'accès rapide. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au concours annuel pour l’allocation de ressources.

Caractéristiques des systèmes de fichiers
Quota par défaut Basé sur Lustre Copié pour sauvegarde Purgé Disponible par défaut Monté sur des nœuds de calcul
/home 50Go et 500K fichiers par utilisateur[1] non oui non oui oui
/scratch 20To et 1M fichiers par utilisateur oui non les fichiers de plus de 60 jours sont purgés[2] oui oui
/project 1To et 500K fichiers par groupe[3] oui oui non oui oui
/nearline 10To et 5000 fichiers par groupe oui oui non oui non
  1. Ce quota est fixe et ne peut être changé.
  2. Pour plus d'information, voir la politique de purge automatique.
  3. L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au soutien technique.

À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section Stockage dans la page web Service d'accès rapide. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au concours annuel pour l’allocation de ressources.

Caractéristiques des systèmes de fichiers
Quota par défaut Basé sur Lustre Copié pour sauvegarde Purgé Disponible par défaut Monté sur des nœuds de calcul
/home 50Go et 500K fichiers par utilisateur[1] oui oui non oui oui
/scratch 20To et 1M fichiers par utilisateur oui non les fichiers de plus de 60 jours sont purgés[2] oui oui
/project 1To et 500K fichiers par groupe[3] oui oui non oui oui
/nearline 1To et 5000 fichiers par groupe oui oui non oui non
  1. Ce quota est fixe et ne peut être changé.
  2. Pour plus d'information, voir la politique de purge automatique.
  3. L'espace /project peut être augmenté à 40To par groupe en recourant au service d'accès rapide. La demande doit être faite par le chercheur principal responsable pour le groupe en s'adressant au soutien technique.

À compter du 1er avril 2024, le service d’accès rapide permettra des quotas plus élevés pour les espaces /project et /nearline; pour plus d’information, voir la section Stockage dans la page web Service d'accès rapide. Si vous avez besoin de plus de stockage que ce qui est offert par le service d’accès rapide, vous devrez présenter une demande au concours annuel pour l’allocation de ressources.

<tab name="Niagara">

Quota Taille des blocs Durée Copié pour sauvegarde Sur nœuds de connexion Sur nœuds de calcul
$HOME 100Go par utilisateur 1Mo oui oui lecture seule
$SCRATCH 25To par utilisateur (dynamique pour les groupes) 16Mo 2 mois non oui oui
jusqu'à 4 utilisateurs par groupe 50To
jusqu'à 11 utilisateurs par groupe 125To
jusqu'à 28 utilisateurs par groupe 250To
jusqu'à 60 utilisateurs par groupe 400To
plus de 60 utilisateurs par groupe 500To
$PROJECT par allocation de groupe (RGR ou PPR) 16Mo oui oui oui
$ARCHIVE par allocation de groupe 2 copies non non
$BBUFFER 10To par utilisateur 1Mo très court non oui oui