Message-ID: <465B58A8.2070403@iap.fr>
Date: Tue, 29 May 2007 00:33:12 +0200
From: Emmanuel Bertin <bertin@iap.fr>
MIME-Version: 1.0
To:  teralist@iap.fr
Subject: [teralist] Synthese des semaines du 07/05 au 21/05
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: 7bit
Reply-To: teralist@iap.fr
Precedence: list
Sender: petidomo GRAND POSTIER <petidomo@iap.fr>

Chers tous,

voici une synthese partielle et partiale des activites couvrant cette
longue periode du 07/05 au 28/05! A noter que je n'ai pas eu de retour de Fred.

Processing T04 (Yannick, Henry, Emmanuel, Fred, Mireille, Mathias):
- Yannick indique que la preparation de la release T0004 se poursuit et semble
en voie d'achevement. Si l'on se refere aux objectifs cibles le 10 avril: 80% de
T0004 pret pour le CFHT users meeting et 100% prets pour fin mai, nous n'en
sommes pas loin.  Compte tenu des ponts qui s'accumulent pendant ce joli mois de
mai, ce n'est pas trop mal.
- W1/W2/W3/W4: Yannick rappelle qu'il reste a inserer les E(B-V) dans les
catalogues.  Les images + les masques sont prets. Fred a paracheve le travail a
la main pour deux stacks (chi2 manquant) et a produit  5 stacks r additionnels
(4 W4 et 1 W3) qui sont hors spec en termes de masse d'air mais qui nous
permettent de delivrer 5 champs en plus avec des images chi2 dont 4 en ugriz.
Mireille a termine et compile les diagrammes couleur-couleurs et les catalogues
ugriz.  Mathias a produit les comparaisons photometriques avec le SDDS et les
cartes de distribution des offsets pour visualiser d'eventuels gradients ou
systematiques. Il y a un effet sensible sur les bord de W3 en bande r (~0.03
mag), et en bande i pour W1 (~0.12 mag).  Aucune discussion, action ni decision
sur ce probleme a ce jour (pour cause de ponts+DUNE a Bonn). Fred a depose les
images W1 et W2 sur la zone d'acces pour le CADC. Il reste encore un stack W3
qui apparait en doublon dans la base de donnees et qu'il faudra nettoyer.
Mathias detaille les statistiques photometriques:
-* W1: 21 champs en commun avec SDSS tous avec offset < 0.03 mag SAUF
-** deux champs en g offset de 0.05 mag (021021-075600 et 023319-07000),
-** deux champs en i avec une grande offset de 0.15 mag (021021-075600) et 
021021-085200 et une avec 0.07 mag (021410-085200).*Mathias demande ce qu'il 
faut faire? Correction des offset??*
-* W3: 41 champs en commun avec SDSS tous avec offset < 0.03 mag SAUF
-** u: 5 champs: Tous offset entre 0.2 et 0.32 mag --> solution??
-** g: 141139+543031 offset de 0.05 mag
-** r: 135820+562331: offset de 0.05 mag
-** i: 135846+552631: offset de 0.05, 140433+571831 (0.07 mag), 140525+543031 
(0.05), 14113+571831 (0.05 mag)
-** z: 135933+533431 (0.05 mag), 140525+543031 (0.05 mag), 140540+533431 (0.05 
mag), 141139+543031 (0.05), 141754+523831 (0.09 mag), 141201+514231 (0.05 mag)
-* W4: 13 champs en commun avec SDSS, tous avec offset < 0.03 mag SAUF
-** u: comment W3 offset constant de 0.2 -0.3 mag pour toutes les u --> solution?
-** g:0220930+0023000: 0.05 mag
-** r: 221706+01100 (0.05 mag)
-** z: 220930+002300 (0.05 mag), 221706-003100 (0.07 mag), 221706+011900 (0.05 mag)
*Emmanuel demande: bizarrement l'offset sur le bord de W3 est interrompu par un 
champ d'offset contraire; serait-il possible que ces stats soient perturbees par
quelques outliers comme des etoiles saturees non reperees comme telles?*
- Suite au CFHTLS user's meeting, Emmanuel a emis la crainte que la limitation
de SWarp a des corrections photometriques statiques de la variation d'echelle
des pixels entraine un biais centre-bord de pres de 0.04 mag sur tous les stacks
(flux sous-estimes sur les bords). En fait, SWarp corrige a l'echelle de chaque
CCD, ce qui fait que ces effets sont limites a +/- 0.01 mag sur les images
MEGACAM (et moins encore sur les images WIRCAM, moins distordues). Mireille a
effectue des comptages de galaxies sur des anneaux; il en ressort que les
comptages sont plus importants dans un anneau intermediaire qu'au centre et sur
les bords. Mathias a realise des comparaisons photometriques avec le SDSS, et si
une variation centre-bord monotone est souvent visible (de quelques centiemes de
mag au plus), la pente n'est pas constante de stack a stack et de signe
variable! Dans tous les cas on ne retrouve pas de comportement pouvant expliquer
l'exces de galaxies "en anneau" releve par les comptages de Mireille.
- Deep-25: les comparaisons par Mathias de la photometrie du stack D2-25
(meilleurs 25% en seeing) avec le SDSS, ainsi que les diagrammes couleur-couleur
trahissaient un offset en bande r de 0.07 mag. Apres examen du scamp.xml, il
s'est avere que le script d'Henri avait flagge photometrique des poses qui ne
l'etaient pas. Une fois la selection et le stack refaits, les diagrammes
couleur-couleur ne montrent plus de desaccord avec D2-T0003. La totalite de D-25 
est prete, Mireille et Mathias ont procede aux analyses et controles 
multi-couleur (offset avec SDSS reduit a 0.01 mag en r). Emmanuel a lance le 
nouveau PSFEx sur quelques stacks Deep-25, et trouve une largeur a mi-hauteur 
allant de 0.60" a 0.72" du centre vers le bord, pour une FWHM moyenne calculee a 
partir de FLUX_RADIUS de 0.77".
- Deep-85: Depuis le 14 mai, Henri a fait plusieurs tentatives pour calculer les 
solutions astrometriques en s'affranchissant de la trop grande quantite de 
contextes impliques pour la memoire disponible (32 Go). Limiter les contextes 
astrometriques aux filtres donne des residus trop larges (le motif des 
distorsions change peut-etre legerement entre certains QRUNID?). La solution en 
cours de calcul est simplement effectuee bande par bande, avec 2MASS en 
reference. L'usage d'un catalogue LDAC i commun n'a pas donne de bons resultats 
(bug SCAMP ou desequilibre de la solution lorsque les estimations d'erreur des 
positions du catalogue de reference sont trop petites?).
Yannick avertit qu'il y a la une urgence: pour le moment, rien de
produit encore. C'est inquietant car Fred sera absent et non joignable du jeudi
31 au lundi 4, Yannick part a Stockholm du 7 au 9 et du 10 au 13 (il sera donc
la le week-end du 9-10), Henry part a NYC pour une semaine a partir du 10 juin.
Il est donc, indispensable que tout les .head .ahead soient produits d'ici
mercredi et que Fred tente de lancer le stacking de tous les D-85.  Dans tous
les cas, on ne sera pas en mesure de delivrer D-85 au CADC avant le prmeier
juin, mais compte tenu du transfert en cours des data W , puis D-25, ce n'est
pas critique... mais il faut que tout soit livre tres rapidement desormais.
D-85 est donc l'URGENCE.  Lorsque D-85 est termine, on stoppe et on passe a la
phase d'etude et developpement de T0005.
- Il reste a produire les plots definitifs pour les statistiques sur
l'astrometrie, le seeing et une table T0004 equivalente a la table T0003.
- Transfert CADC: Le transfert se poursuit *Emmanuel demande: quelle fraction 
deja transferee, a quel debit moyen?*. Suite a la videoconf du 23 mai et avec
l'accord du CADC on deposera effectivement les catalogues ldac de facon que les
utilisateurs puissent disposer de catalogues pour les champs qui n'ont par gri
et donc pas d'images et de catalogues chi2 . Fred delivrera un "ldac2cat" au
CADC pour la transformation TFITS en ASCII. *Emmanuel demande: quelle deadline?*
En parallele, on teste l'interface du CADC pour leur faire des suggestions sur
les produits les plus utiles a mettre en acces et sur l'interface CADC de
selection/distribution.

MEGACAM P.I. (Mireille)
- Mireille a note puis traite les data PI 06AH44 et 06BH11 de Tully. Les donnees 
ont ete releasees le 23/5/2007.

Developpement software (Chiara, Gregory, Emmanuel):
- Controle qualite automatique: Gregory continue a travailler sur les defauts 
etendus et se concentre actuellement sur la detection des contours (pupilles et 
trainees diverses). Actuellement seule la detection des trainees satellite 
fonctionne sur les images astronomiques. *Emmanuel demande: Gregory, as-tu deja 
des estimations de la fiabilite de la technique pour la collection de defauts 
que je t'avais compilee?*
- MissFITS: Emmanuel a signale un bug dans la lecture de plusieurs images en 
ligne de commande: corrige par Chiara. Le configure.ac et l'affichage ont ete 
mis a jour. Les listes sont desormais lues en input. L'incompatibilite des 
images splittees a partir des MEF avec FITSverify est corrigee (modification de 
la fonction prim_head dans fitshead.c). Le probleme d'ecriture des headers pour 
certaines images WIRCam subsiste (similaire au problemes de WeightWatcher).
- SCAMP: Chiara a fait de nombreux rajouts dans la feuille XSLT de toutes les 
tables presentes dans le XML, et corrige une typo dans le XML. Emmanuel a 
corrige une limitation importante qui empechait les MEFs avec des points-zero 
differents par detecteur d'etre correctement ajustes photometriquement. Enfin 
grace a Akim Demaille, le probleme des $datarootdir reporte par des utilisateurs 
sur plusieurs systemes semble avoir ete corrige.
- SWarp: le probleme avec les projections parametrees du type ZPN a ete corrige, 
offrant une meilleur compatibilite avec les definitions recentes du WCS.
- Morphologie des galaxies: Emmanuel continue a travailler a plein sur les 
mesures morphologiques des galaxies par ajustement.

Hardware/systeme (Chiara, Fred, Emmanuel)
- Fred a temporairement installe les nouvelles machines dans le nouveau rack 
(sans onduleur). Malheureusement les systemes de rail ne semblent pas bien 
s'adapter au rack; les machines sont donc posees sur des plateaux.
- Chiara a installe IDL sur mix10, a partir des instructions de Henry.
- *Chiara demande s'il serait possible d'envoyer les mails automatiques 
signalant la "mort" d'une machine a teraop (par exemple) plutot qu'a 
magnard@iap.fr?*
- Emmanuel mentionne encore une tentative de spamming sur le forum (l'indelicat 
a ete banni quasiment immediatement). A noter que MyBB est en retard de 3 versions.

Misc. (Yannick, Emmanuel, Chiara)
- La commande LDLC-pro (ventilo de boitier pour Chiara, clavier pour Emmanuel, 
souris pour Henry) a ete livree. Les 3 items sont installes et operationnels.
- Suite a un crash du jukebox de filtre dans l'obturateur de MEGACAM, la camera 
a ete remplacee par WIRCAM il y a 10 jours. *Quoi de neuf depuis?*.
- Rapport TERAPIX pour l'IAP, rapport pour le CNAP:  les deux rapports furent
acheves et delivres par Yannick les 12 et 21 mai respectivement, avec des 
contributions de Chiara, Emmanuel et Henry. Pas de retour a ce jour.
*Emmanuel demande: peut-on poster quelque part sur le site le rapport?*
- Projet DUnE: la reunion a Bonn des 24 et 25 mai etait la derniere du
consortium dans son ensemble avant la remise du document a l'ESA le 28 juin. Le
document final doit etre pret le 4 juin, il sera soumis aux agences nationales
pour commentaires, puis revue une derniere fois le 15 juin.  Avec Emmanuel nous
avons produit une premiere version se rapportant au processing.  Nous devons
finaliser cette section pour le 31 mai (hum...).
- *Chiara demande a Emmanuel de lui adresser le PDF de sa presentation au CFHT 
user's meeting.*
- *Chiara demande si des membres TERAPIX presentent quelque chose a l'ADASS 
(23-26 septembre 2007, deadline 1 juillet)?*
http://www.adass.org:8080/Conferences/2007/Venue/events/calendar


WIRCAM P.I. (Chiara)
- *Chiara aimerait avoir des commentaires sur sa documentation (personne n'a 
repondu).* http://terapix.iap.fr/article_intranet.php?id_article=565
- La semaine du 21 au 15 mai a ete occupee par le travail avec Loic Albert et 
Chi-Hung Yan. Voila quelques points de discussion.
Points a revoir par Loic:
-* defauts horizontaux subsistant sur le detecteur en haut a gauche (images Willott)
-* solution astrometrique lineaire manquant de fiabilite
-* termes de couleurs pour la bande Y inconnus
Une fois ces points regles la production recommencera avec l'actuelle correction 
de crosstalk et un masquage des objets a 1.5 sigma en premiere passe. Pour WIRDS 
Loic preparera un set de donnees sans aucune correction de crosstalk et un set 
avec la derniere et l'on regardera les differences.
De son cote Chiara doit verifier l'influence du bug SCAMP (voir plus haut) sur 
les calibration photometriques (en cours). Chiara modifiera sa soustraction en 
double passe de facon a prendre les memes images que Loic dans sa soustraction 
en premiere passe.
- Questions en suspens:
-* QualityFITS au CFHT pour WIRCam.
-* Soustraction en double passe au CFHT.
-* Comment Chi-Hung peut-il aider TERAPIX? Suggestions, documentation des softs 
ou packaging pour Mac?

Amicalement,
			Emmanuel.