Message-ID: <4740C44D.9060509@iap.fr>
Date: Mon, 19 Nov 2007 00:01:33 +0100
From: Emmanuel Bertin <bertin@iap.fr>
MIME-Version: 1.0
To: teralist@iap.fr
Subject: [teralist] Synthese de la semaine du 13/11 au 18/11
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: 7bit
Reply-To: teralist@iap.fr
Precedence: list
Sender: petidomo GRAND POSTIER <petidomo@iap.fr>

Chers tous,

voici une synthese partielle et partiale des activites couvrant la
periode du 13/11 au 18/11 a partir des bilans de Mathias, Yannick, Chiara et Fred.

Par ordre arbitraire:

T04 (Fred):
- Fred a repere 17 fichiers veroles parmi les data .gz de T0004 pour le CADC:
CFHTLS_D-25_g_022559-042940_T0004.cat.gz
CFHTLS_D-25_g_100028+021230_T0004.cat.gz
CFHTLS_D-25_g_141927+524056_T0004.cat.gz
CFHTLS_D-25_g_221531-174356_T0004.cat.gz
CFHTLS_D-25_i_022559-042940_T0004.cat.gz
CFHTLS_D-25_i_100028+021230_T0004.cat.gz
CFHTLS_D-25_i_141927+524056_T0004.cat.gz
CFHTLS_D-25_i_221531-174356_T0004.cat.gz
CFHTLS_D-25_r_022559-042940_T0004.cat.gz
CFHTLS_D-25_r_100028+021230_T0004.cat.gz
CFHTLS_D-25_r_141927+524056_T0004.cat.gz
CFHTLS_D-25_r_221531-174356_T0004.cat.gz
CFHTLS_D-25_u_022559-042940_T0004.cat.gz
CFHTLS_D-25_u_100028+021230_T0004.cat.gz
CFHTLS_D-25_u_141927+524056_T0004.cat.gz
CFHTLS_D-25_u_221531-174356_T0004.cat.gz
CFHTLS_D-25_z_022559-042940_T0004.cat.gz
Ils sont en cours de re-ajout des e(B-V).

Processing MEGACAM P.I. (Mireille, Mathias):
- Mireille a notifie Daniel Rouan de la decision prise au terameeting precedent 
concernant les dates et heures d'observation dans les donnees reduites (a 
propager dans les headers FITS de sortie).
- Mireille a resume a Mathias dans un mail a la teralist les differentes etapes 
pour copier les donnees PI sur ftpix.
- Mathias a fini les procedures pour le traitement des donnees PI. Il les a 
testees sur les donnees de G.Soucail et obtenu des resultats identiques a ceux 
de Mireille.
- Mathias a commence a traiter les premieres images des donnees d'Annie Robin. 
L'extraction de PSF fonctionne mais il y a pas mal de choses a regler. Mathias 
detecte pres de 700000 sources sur un seul stack, ce qui represente 5-6 millions 
de sources au total.
- Mathias a demande a Emmanuel d'ajouter des statistiques sur la dispersion de 
photometrie en fonction de la magnitude. Emmanuel le fera sous forme de courbe 
(probablement en decembre).
- Logs des donnees CFHT: Kanoa a repondu aux messages concernant la mise a 
disposition de tous les log des observations PI/LS de Megacam/WIRCam. Il nous 
propose deux options: la mise a disposition des "QSO night reports" sous la 
forme de fichiers log que nous devrions alors recuperer pour chaque programme ou 
un acces sous la forme  de requetes a leur base de donnees.  Yannick a differe 
la reponse de facon que nous prenions une decision pendant un tera-meeting.

Processing WIRCAM P.I. (Chiara, Patrick):
- Donnees WIRDS: Le champ D4 a ete delivre. Le champ D1 a ete stacke; le quality 
assessment est en cours (la connexion au CDS est en panne, Chiara devra donc 
refaire les QualityFITS pour avoir les plots SCAMP). La calibration du champ D3 
est en cours.
- Donnees Walawender: Les donnees ont ete re-reduites par Patrick et delivrees. 
Walawender n'a pas repondu mais il a telecharge les donnees.
- Donnees Deharveng: les nouvelles donnees sont disponibles et L.Deharveng est 
la prochaine en liste d'attente. Chiara demande s'il est possible de commencer 
son traitement? Chiara peut telecharger les donnees quelque part pour avancer.
- Jean-Louis Monin passera a Paris jeudi matin pour clarifier certains points du 
traitement de ses donnees.
- Chiara a communique a Loic et sur le Forum qu'elle ne s'occupera plus de\ 
WIRCam a partir du premier decembre.

Developpements (Gregory, Fred, Chiara, Emmanuel):
- Interface pipeline (resume de Yannick): La reunion demandee par Gregory 
concernant l'interface SPICA-2 s'est deroulee vendredi en presence de Chiara, 
Emmanuel, Fred, Gregory, Mathias, Patrick et Yannick. Il n'en est pas vraiment
ressorti de propositions concretes de la part des "utilisateurs" et 
satisfaisantes pour Gregory.  Gregory attendait qu'on lui decrive la 
quasi-totalite des taches maitresses du processing pour les prevoir et les 
integrer tres en amont dans un design le plus global possible. La perspective 
methodique de Gregory est opposee aux points de vue plus pragmatiques qui ont 
propose de voir la mise en place tres concretement de la premiere etape. Il 
s'agit plus particulierement des premiers niveaux de l'interface, ou les listes 
des images, des runs, des instruments ainsi que les premiers outils de selection 
et filtre seraient presents et ou les fonctions de selection et d'ingestion 
seraient operationnelles. Avec Gregory nous sommes donc convenus qu'il 
consacrerait la prochaine semaine a la mise en place de ces premiers elements. 
Il reste qu'il faut effectivement preciser plus globalement et rigoureusement 
nos besoins a Greogry et qu'une interaction plus soutenu avec Gregory est 
indispensable, avaec sans doute des reunions plus periodiquement sur l'interface 
base de donnees-pipeline-utilisateur. *Emmanuel s'est par ailleurs engage aupres 
de Gregory a faire le point quotidiennement avec lui.*
- Script Condor: Fred a place son script sous svn ( 
http://terapix.iap.fr/wsvn/index/private/software/condor/condor_transfert.pl?op=file&rev=0&sc=0. 
Il y a ajoute la possibilite de transferer des repertoires, mais il n'y a pas 
moyen de copier des liens symboliques par ftp (a moins d'installer un serveur 
ftp qui gere les tar on-the-fly tel wu-ftpd).
- Fred a verifie la version de QualityFITS de Chiara avant replication sur tout 
le cluster. Tout est OK, sauf que QualityFITS ne "verra" pas ~/.qualityfitsrc ou 
les binaires qui sont dans le PATH. Fred va donc modifier QualityFITS pour qu'il 
n'utilise les variables d'environnement PATH et HOME que si elles sont definies, 
afin que cela fonctionne sous Condor et avec le meme comportement qu'avant.
- MissFITS: Chiara a fait une release publique (version 2.2.7): cette version 
corrige essentiellement des bugs dans l'ecriture du XML. L'esthetique du XSLT 
est amelioree. Elle est installee sur le cluster.
- WeightWatcher: Chiara a fait une release publique (version 1.8.6). 
L'esthetique du XSLT est amelioree. Elles est installee sur le cluster. A noter 
que Patrick est pret a continuer la maintenance des deux packages. Les deux 
versions releasees sont relativement propres, pas de TODO urgents en suspens. 
Patrick devrait avoir le temps de comprendre comment ils sont fait avant le 
prochain bug report.
- PSFEx: Emmanuel a fini l'implementation de la PCA et de ses options dans le 
nouveau PSFEx. En gros cela permet de modeliser une reponse impulsionnelle 
variable avec une tres grande robustesse, en economisant au maximum le nombre de 
degres de liberte. Le revers de la medaille est qu'un tel modele ajuste tres mal 
une PSF de qualite "inhabituelle". Emmanuel compte donc s'en servir pour voir si 
les donnees d'une qualite inhabituellement mauvaise sont reperables grace a leur 
chi2.
- SWarp: Emmanuel a mis sur SVN la version qu'il avait amelioree pour DES (acces 
a une extension particuliere et generalisation a tous les keywords de la 
procedure de gestion des listes d'images implementee initialement par Chiara).
- Emmanuel suggere d'utiliser Stuff, SkyMaker, SWarp, SExtractor dans un script 
pour effectuer une mesure automatisee de la qualite avec laquelle les objets 
peuvent etre detectes et mesures sur les images PI ou publiques (completude par 
type de galaxie, en fonction de la brillance de surface, qualite des mesures de 
forme).

Machines / Cluster (Fred, Yannick):
- Le nouveau rack d'accueil des futures machines du cluster a ete receptionne 
jeudi dernier puis transporte et installe dans la salle informatique par 
Christophe Gobet, Fred et Yannick.  Fred a verifie qu'il a bien ete monte 
completement et correctement avant livraison.
- 4 stations de travail et 26 disques de 1To devraient etre livres cette 
semaine. Un probleme d'approvisionnement pour les CPUs Barcelona est a craindre 
chez Agorus...
- La commande du portable de Patrick a ete passee sur la ligne Terapix.
- La ligne Efigi est presque vide: il ne reste que 600 euros.

Postes/misc (Yannick, Chiara)
- Yannick a rencontre plusieurs fois Nicole Blondin et Laurent Vigroux pour le 
probleme des primes de Mathias Monnerville.  Les interventions aupres de la DRH 
et de la Presidence de l'Universite Paris 6 n'ont pas encore conduit a un 
reglement definitif du probleme. Les troubles actuels dans les universites ne 
favorisent pas la mise en haute priorite d'un probleme particulier portant sur 
une derogation au reglement.  Yannick a convenu avec Laurent Vigroux qu'une 
solution (positive!) sera trouvee dans tous les cas.
- Chiara signale qu'une lampe de table manque toujours dans le bureau 213.

Amicalement,
			Emmanuel.