Gestion des données grille
Généralités
Composants grille
Deux éléments sont à connaitre afin de manipuler des fichiers sur la grille.
- Le LFC (LCG File Catalog) qui est une base de données qui contient les informations sur la localisation des fichiers sur la grille.
- Le SE (Storage Element) qui fournit l'espace de stockage des fichiers.
Les fichiers
L'unité primaire de donnée sur la grille est le fichier.
Il existe plusieurs façons d'identifier un fichier sur la grille:
- Identifiants absolus
- GUID (Grid Unique IDentifier)
- LFN (Logical File Name) -> un alias utilisateur
- Identifiants relatifs
- SURL (Storage URL) -> pour identifier les réplicas
- TURL (Transport URL)
Tutoriels
Attention ! La plupart des exercices nécessitent une authentification
[lambert@lpsc-ui ~]$ voms-proxy-init --voms xxx
- Utiliser un LFC
- Manipulation de fichiers sur la grille
ALICE VO
Les fichiers
L'accès aux fichiers ALICE se fait par l'intermédiaire de l'environnement shell aliensh en connaissant leur chemin/LFN ou un GUID.
Tutoriels
Attention ! La plupart des exercices nécessitent la configuration de l'environnement ALICE et une authentification sous aliensh
[lambert@lpsc-ui ~]$ alien-token-init flambert [lambert@lpsc-ui ~]$ source /tmp/env_$UID
- Configuration de l'environnement ALICE au LPSC
- Manipulation de fichiers sur la grille dans l'environnement aliensh.
ATLAS VO
Composants grille
- Dans le cas de l'expérience ATLAS, les espaces disques des SE sont "divisés" en space-token.
Les space-token ATLAS sont des espaces réservés, accessibles en fonction des rôles VOMS au sein de la VO ATLAS.
Les datasets
Les expériences comme ATLAS préfèrent manipuler des ensembles de fichiers nommés dataset.
Des outils comme 'DQ2' permettent de manipuler les datasets.
Pour ATLAS, AMI est l'outil officiel de recherche de datasets.
Tutoriels
Attention ! La plupart des exercices nécessitent une authentification
[lambert@lpsc-ui ~]$ voms-proxy-init --voms atlas