Réunion VizieR 25/08/2015

Présents : Sylvain G., Gilles L., Pierre O., Emmanuelle P., Patricia V.

Pierre :

Discussion avec Alberto Accomazzi (NASA ADS)

Lors de l'IAU, Pierre a discuté avec Alberto. Ce dernier souhaite ajouter plus d'information aux catalogues VizieR, notamment :
1. La/les longeur(s) d'onde:

Dans VizieR, elles sont affichées sous forme d'une petite barre graphique pour indiquer UV, IR, Opt, etc.
A priori, cette information vient des mots-clefs ADC_Keywords qui sont renseignés par les documentalistes.
A vérifier car pour le catalogue J/AJ/123/2772, les longueurs d'onde affichées sont : Opt, IR, Rad alors que les mots-clefs sont "Stars, giant ; Masers ; Infrared sources ; Radio sources ; Spectroscopy"...
La table des METAkeywords correspondante indique "optical, IR, Radio, Stars, Spectroscopy, Masers" en kwname.

G.L.: Je confirme que les longueurs d'ondes viennent des mots clés ADC_keywords du fichier ReadMe (et de la uniquement!).
Concernant le catalogue J/AJ/123/2772, la longueur d'onde "Optical" a été ajoutée automatiquement par un mapping qui implique que lorsque le mot clé "Spectroscopy" existe alors on ajoute la longueur d'onde "Optical". Le mapping est issu de la table ADCkwdef: ex: http://cdsarc.u-strasbg.fr/local/viz-bin/VizieR-4?-source=ADCkwdef&adc=Spectroscopy

2. Les types de données associées s'il y en a :

Dans VizieR, ce sont les catégories SED, Image, Cube, Timeserie, Spectrum, etc.
Elles sont remplies par les documentalistes dans la balise \vizContent du .status
Elles se retrouvent dans METAtab, dans la colonne flags.

=>Il faudrait ajouter une ancre au fichier envoyé toutes les semaines à ADS qui contient la liste des catalogues ajoutés afin qu'il puisse récupérer simplement ces données.
Jusqu'à présent, Alberto utilisait le registry VO pour récupérer les informations mais on ne sait pas trop via quelle(s) requête(s)...

G.L.: petite note sur le registry:
les catalogues VizieR sont mis dans les registries du VO sous la forme de ressource et service d'acces positionel (s'il existe des positions).
On peut utiliser par exemple le registry de GAVO: http://dc.zah.uni-heidelberg.de/wirr/q/ui/fixed
Choisir dans le formulaire "Access URL" , "contains", nom du catalogue
Puis , pour avoir les details cliquez sur le lien "IVOA Identifier ("ivoid")"

Venue de Greg Schwarz et Gus Muench (édition scientifique de l'AAS)

Pierre voit avec Mark et Françoise cet après-midi pour proposer un planning des 3 demi-journées où ils seront là (31/08 et 01/09). Ils viennent aussi avec 2 personnes de l'IOP (donc aspects plus techniques).

Ce dont ils ont souhaité discuter :
1. Une revue des difficultés d'ingestion de leurs tables dans VizieR pour des possibilités d'amélioration.

=> Voir le document de suivi sur quelques mois (ci-joint).
Pierre a déjà bien insisté sur le problème des coordonnées manquantes et des identificateurs incomplets/absents lors de l'IAU (cf présentation ci-joint)...
On peut profiter de la présence des gens de l'IOP pour insister sur les problèmes techniques pour récupérer une table en ligne dont une partie des valeurs n'existe que sous forme d'image (après vérification, l'accès Stacks que l'IOP nous avait fourni ne permet pas de récupérer ces valeurs car le format XML ne les contient pas non plus. => voir l'exemple du J/ApJS/218/26, table 5 avec Gilles). Cela se produit dès qu'il y a des exposants/indices dans une table...
Insister aussi sur le fait que les ascenseurs dans les 2 sens ne sont pas forcément pratiques pour lire une table...

E.P: en fait, le format XML contient bien les valeurs au milieu de balises spéciales (vu avec Gilles). Il faudrait voir avec l'IOP si ces balises sont toujours les mêmes et si des changements sont à prévoir ou bien si elles sont relativement stables. (Le répertoire J/ApJS/218/26 contient la version XML récupérée du Stacks.)

2. Les possibilités d'amélioration telles qu'ajout de liens, informations...
N.B. : A&A propose aux auteurs de tagger leurs objets via la balise \object. Cette liste est ensuite récupérée par SIMBAD (voir les détails techniques avec Anaïs/Soizick qui sont en train de modifier certaines choses). A priori l'AAS ne propose pas ce genre de chose ?

Gilles propose qu'on leur montre le temps passé sur leurs articles. => Sortir les statistiques d'ingestion sur une même période pour les journaux de l'AJ, ApJ, ApJS par rapport à tout le reste.

Il faudra leur présenter notre travail d'ingestion en insistant sur les données de départ et ce qu'on a ajouté pour avoir un tel résultat en sortie (sans faire de démo directement avec les commandes).
Emmanuelle propose de partir du document de présentation ci-joint. On peut aussi reprendre un des exemples du document listant les ref. à problème pour montrer pourquoi il y avait du travail supplémentaire à faire pour ces références là.

Gilles :

Passage en tout Postgres prochainement

Depuis mai 2015, Gilles prépare le changement de la base Sybase vers une base entièrement Postgres (ce qui règle de nombreux problèmes techniques). Il risque d'y avoir quelques bugs lors de la mise en place.
=> On propose d'attendre la fin du Conseil du CDS les 13-14 octobre pour faire le changement...

Patricia :

A&A et grosse volumétrie...

Les données associées sont souvent volumineuses et A&A ne semble pas y voir de problème particulier...
Ici, 100Go de données à entrer. Patricia a proposé que Pierre & Ada voit les données avant pour savoir si c'est vraiment intéressant pour VizieR...

-- EmmanuellePerret - 2015-08-25