Réunion VizieR - grands catalogues - 06/10/2020

Présents (masqués) : Thomas B., Marianne B., Gilles L., Giacomo M., Pierre O., Emmanuelle P., François-Xavier P., Patricia V.

Catalogues en cours

GPS1+

F.-X. a récupéré les données.
=> Vérification des formats et sélection des colonnes en cours (Giacomo) => Fait
=> Vérification des labels (Emmanuelle) : à faire => Fait

CatWISE 2020 (II/365) (Redmine 6584)

~2 milliards de sources IR, combinaison WISE+NEOWISE.

Giacomo a sélectionné 80 colonnes sur les 350 initiales.
F.X. a réajusté la table.
=> Ecriture ReadMe (Emmanuelle) : à faire.

SDSS DR16 en priorité 0

En attente d'information côté Sloan (Victor Paul) => il manque des sources dans les données récupérées !
=> F.X. va relancer.

ATLAS - REFCAT2, IV/37 (Redmine 5816)

=> Thomas doit nettoyer certaines valeurs. 0.00 pour Teff, 9.999 & 0.0 pour zmag, e_zmag, etc.
=> Emmanuelle reprendra la suite (catalogue ApJ commencé par Tiphaine)

A noter : les ?=9.999 dans les ReadMe qui permettent d'afficher une valeur vide à la place de 9.999 dans VizieR ne fonctionnent pas pour les grands catalogues (encore moins s'il y a plusieurs valeurs de NULL différentes).

F.-X. a modifié son code pour pouvoir indiquer en métadonnée les valeurs nulles de chaque colonne. La transformation du fichier binaire pour avoir une valeur vide en sortie sera possible et il y aura toujours la trace de la valeur modifiée en métadonnées.

Catalogue pour Coralie de 3 colonnes seulement mais juste un ID Gaia

Positions à récupérer à partir de l'ID Gaia...
=> En cours chez F.-X.

Corrections

Gaia DR2

Suite à une question utilisateur sur cds-question, il va falloir ajouter une note sur la colonne des erreurs de magnitudes calculées par le CDS qui utilisent une vieille formule de la DR1 sans prendre en compte le ZP pour la conversion VegaMag de la DR2... (Offset de l'ordre de 0.002mag).

=> Patricia attend une note claire et définitive de Giacomo pour l'ajouter dans la DR2 car il va falloir recharger tout Gaia !

Catalogue à venir

Gaia DR3 is coming...

Pour début décembre.

Thomas va devoir ajouter certaines tables de x-match qui n'avaient pas été sélectionnées pour la DR2...

A voir pour faire un join de tables directement utilisables -- ce serait bien dans TAP mais trop long ?

Patricia a une demande A&A pour une table de 600 millions de lignes (et 6 colonnes)...

=> Il faut voir s'il est intéressant de récupérer ce catalogue (probablement mesures pour sources Gaia) ! Demander à Giacomo.

Commande colmeta pour écrire automatiquement la description, unité, formats d'une table à partir d'un label standard.

F.-X. a travaillé sur le programme colmeta - voir GitLab : http://cdsgit.u-strasbg.fr/pineau/catana ou bien colmeta -h pour voir l'aide sur cdsarc.

La commande peut s'utiliser directement dans VI ( :42,65!colmeta -sud , par ex.) ou s'appliquer en ligne de commande sur un fichier ( cat fichier|colmeta -sfudp > desc par ex.).

A partir d'une description (sortie de anafile ou fits2a par exemples) où on ajoute des noms de labels standards, la commande permet de remplir automatiquement :
- l'unité (option -u)
- la description (option -d) qui est automatiquement découpée pour tenir dans les 80cc imposés par le ReadMe
- le format (option -f)
- un fichier avec les ucd1+ correspondants (option -p)

Par exemple, si on a RAsexa en A11, le découpage en h, min, s avec les bons formats/unités et descriptions est automatique.

Les labels e_ etc. sont également alignés correctement (décalés de 2 espaces par rapport à la valeur correspondante).

Cela fonctionne déjà plutôt bien (démo ok) et on continue à affiner au fur et à mesure pour ajouter des labels standards, etc. grâce aux "issues" que l'on peut ajouter dans GitLab.

-- EmmanuellePerret - 2020-10-06