wiki:dataMgt

Gestion des données grille

Généralités

Composants grille

Deux éléments sont à connaitre afin de manipuler des fichiers sur la grille.

  • Le LFC (LCG File Catalog) qui est une base de données qui contient les informations sur la localisation des fichiers sur la grille.
  • Le SE (Storage Element) qui fournit l'espace de stockage des fichiers.

Les fichiers

L'unité primaire de donnée sur la grille est le fichier.
Il existe plusieurs façons d'identifier un fichier sur la grille:

  • Identifiants absolus
    • GUID (Grid Unique IDentifier)
    • LFN (Logical File Name) -> un alias utilisateur
  • Identifiants relatifs
    • SURL (Storage URL) -> pour identifier les réplicas
    • TURL (Transport URL)

Tutoriels

Attention ! La plupart des exercices nécessitent une authentification

[lambert@lpsc-ui ~]$ voms-proxy-init --voms xxx

ALICE VO

Les fichiers

L'accès aux fichiers ALICE se fait par l'intermédiaire de l'environnement shell aliensh en connaissant leur chemin/LFN ou un GUID.

Tutoriels

Attention ! La plupart des exercices nécessitent la configuration de l'environnement ALICE et une authentification sous aliensh

[lambert@lpsc-ui ~]$ alien-token-init flambert
[lambert@lpsc-ui ~]$ source /tmp/env_$UID

ATLAS VO

Composants grille

  • Dans le cas de l'expérience ATLAS, les espaces disques des SE sont "divisés" en space-token.
    Les space-token ATLAS sont des espaces réservés, accessibles en fonction des rôles VOMS au sein de la VO ATLAS.

Les datasets

Les expériences comme ATLAS préfèrent manipuler des ensembles de fichiers nommés dataset.

Des outils comme 'DQ2' permettent de manipuler les datasets.
Pour ATLAS, AMI est l'outil officiel de recherche de datasets.

Tutoriels

Attention ! La plupart des exercices nécessitent une authentification

[lambert@lpsc-ui ~]$ voms-proxy-init --voms atlas

previous ; next

Last modified 4 years ago Last modified on 19/10/2020 16:06:44
Note: See TracWiki for help on using the wiki.