Message-ID: <46070224.8040304@iap.fr>
Date: Mon, 26 Mar 2007 01:13:40 +0200
From: Emmanuel Bertin <bertin@iap.fr>
MIME-Version: 1.0
To:  teralist@iap.fr
Subject: [teralist] Synthese de la semaine du 19/03 au 25/03
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: quoted-printable
Reply-To: teralist@iap.fr
Precedence: list
Sender: petidomo GRAND POSTIER <petidomo@iap.fr>

Chers tous,

voici une synthese partielle et partiale des activites couvrant la=20
periode du 18/03 au 25/03! A noter:
*Je remercie les personnes qui m'on envoye leurs bilans, mais (a=20
l'exception de Mireille et Chiara qui le font deja) je vous serais=20
reconnaissant si au lieu d'une laconique enumeration de vos activites=20
vous pouviez un peu mettre les choses en perspective (ne serait-ce que=20
me specifier si c'est fini ou toujours en chantier!!), recenser les=20
mails auxquels vous esperiez des reponses que vous n'avez pas eues, vos=20
projets et attentes sur les actions en cours etc. Je sais bien que cela=20
fait partie des activites d'un gestionnaire de projet, mais a ce niveau=20
de detail cela m'economiserait quelques heures penibles de=20
"ramasse-miettes" chaque semaine a naviguer entre les differents e-mails=20
envoyes et leurs non-reponses. Merci!*

Donc, par ordre arbitraire:

Processing T04 (Yannick, Henry, Emmanuel, Fred, Mathias):
- Yannick a construit les 199 masques pour l'ensemble des champs D1, D2,=20
D3, D4 et W1, W2, W3, W4 (disponibles sur=20
/home/nis/mellier/CFHTLS_Mask_Full). Les listes completes des pointes=20
ont ete envoyees sur teralist.
- Henry rapporte que la moitie des stacks foire soit pour des pbs=20
astrometriques, soit des crashes dans les copies de LDAC. Le calcul de=20
l'astrometrie se fait donc en dehors de SPICA (dont la ligne de commande=20
est utilisee).
- Henry a experimente plusieurs rayons de selection autour des Deep avec=20
SPICA: les petits rayons semblent fournir une meilleurs solution=20
astrometrique, mais peuvent creer sur les bords des ecarts par rapport=20
au catalogue de reference.
- Henry effectue le controle qualite des stacks resultants; pour l'heure=20
au moins un stack (D2-i) est de "qualite production". Le processing de=20
D1 est en cours, avec un rayon de selection de 1.6 degres et 2MASS en=20
reference. Si tout va bien, cela devrait etre fini mardi ou mercredi.
- Emmanuel a compare les resultats de SCAMP obtenus sur le stack u de=20
test avec en reference le catalogue USNO-B1 d'une part, et le catalogue=20
2MASS d'autre part. Le passage a 2MASS reduit l'amplitude de l'erreur=20
interne de 40%. Les catalogues des poses de W1, W2, W3 et W4 fournis par=20
Henry ont ete astrometrees en quelques heures. Un SCAMP de 1500=20
catalogues consomme un peu plus de 20Go de RAM (dont la moitie pour la=20
resolution du systeme). Les resultats semblent pour l'essentiel=20
excellents, avec des dispersions en interne allant de 23 a 34 mas.=20
*Quelques pbs de photometrie sont a signaler en bande r dans chaque stack=
*.
- Fred a calcule les md5sum et les CRC des 15850 cartes de poids. J.J.=20
Kavelaars rapporte un pb de "e" au lieu de "E" dans les notations=20
exponentielles des headers des cartes de poids renvoyees au CADC. Fred=20
fait remonter le pb aux flat-fields; il a une solution pour corriger=20
cela. * Fred je dois avouer que je n'ai pas bien compris les 300 octets=20
de ton resume; ce "filtrage des images =E0 uploader au cadc -> symlink su=
r=20
une s=E9lection de 6509 sur les 15850 weight", c'est la correction des=20
"e"? Kesako "download des CRC du CADC", " et "dump filename - grade -=20
comments"?*
- Kanoa est en train de s'occuper tu pb des Skyprobes encore manquants.
- *Pb d'espace disque sur mix4?*
- Mathias a prepare un catalogue issu du SDSS pour le W4 (ses scripts=20
ont ete ameliores), et a travaille avec N.Regnault sur la transformation=20
u(SDSS)-u(MEGACAM)

Processing MEGACAM P.I. (Mireille, Emmanuel, Chiara):
- Traitement des data de Daniel Rouan 07AD95 : 60 images filtre g pour 2
champs differents avec des seeing allant de 0.75 a 1.75". Mireille a=20
rencontre des problemes pour trouver une bonne solution. Emmanuel a
finalement trouve les bons parametres a mettre dans SCAMP=20
(-ASTREF_CATALOG 2MASS -ASTREF_WEIGHT 1000). *Mireille aimerait=20
comprendre comment il a "intuite" ces parametres pour une prochaine fois.=
*
- Les images de 07AD95 ont ete swarpees et 2 stacks et les catalogues=20
associes ont ete crees. Cette partie a ete livree jeudi soir.
- D. Rouan  voulait egalement chaque image swarpee + son catalogue.
Ceci est fait, les catalogues individuels ont ete crees avec Sextractor
mode double image avec l'image stackee comme ref. Mireille trouve des=20
petits pbs de photometrie lorsqu'elle compare les MAG_AUTO du stack aux=20
MAG_AUTO des catalogues individuels: il y a un shift constant de
~0.02 mag (elle montrera qqs plots lundi). Elle aimerait comprendre=20
l'origine de ce decalage.
- Chiara n'a pas ecrit le README officiel avec demande au PI de prevenir=20
quand ils ont telecharge les donnees. Yannick avait rajoute l'info dans=20
un mail de Mireille pour les PIs.

Machines / Cluster (Emmanuel, Fred):
- Emmanuel a mentionne un pb de resolution des graphes Ganglia a 3 et 6h=20
de resolution. Fred n'a pas d'explication.
- Fred a investigue en profondeur le pb de la saturation du nombre de=20
ports ouverts rapporte par Henry, et lie a l'utilisation conjointe et=20
intensive de rcp et NIS/NFS: l'issue par une solution LDAP/NFS,=20
LDAP/Samba, ou plus simplement scp, ftp ou rsync. * Quid des protocoles=20
de transfert impliques dans Condor?*

Web, doc (Yannick, Chiara)
- Yannick a cree une page "SPICA for dummies" et des FAQ (pour nous et a=20
poser a Laurent Domisse).
- Chiara a publie des plots sur la qualite d'image de WIRCam:
http://terapix.iap.fr/spip_redirect.php?id_article=3D670
- Chiara a rearrange la page "TERAPIX library" par theme
http://terapix.iap.fr/article_intranet.php?id_article=3D672 *Commentaires=
?*
- Chiara n'a pas poste les liens aux tutorials en ligne: elle nous avait=20
demande quelques contribution avant de le faire; elle n'a pas recu=20
beaucoup de reponses (a part les tutorials XML qu'elle encore rajouter).

Developpement software (Emmanuel, Chiara):
- Emmanuel a corrige un pb de sensibilite du MATCHing de SCAMP a des=20
artefacts brillants dans le coin des images, qui causaient des=20
instabilites dans les solutions initiales. Le matching du nouveau SCAMP=20
(>=3D1.3.6) est un petit peu moins "pointu", mais beaucoup plus fiable.=20
Mais l'essentiel des problemes avec le stack u de test etait du a une=20
sortie en NaN des fonctions de resolution de systeme lineaire d'ATLAS=20
lorsque compile avec le compilateur INTEL. Repasser a gcc (V1.3.7) a=20
tout regle. Fred a installe la derniere version sur le cluster.
- sur Kiravix, ainsi que sur les machines du cluster sont installees des=20
versions perimees de la librairie FFTW. Une mise-a-jour en version 3.1.2=20
apportera un gain d'environ 8% dans les phases de matching de SCAMP (a=20
partir de la version 2.3.8) sur les architectures 64 bits.
- Emmanuel a corrige le pb de plantage rapporte par Chiara et ajoute une=20
gestion correcte du path du filtre XSLT dans PSFEX 2.0.2 (propage=20
egalement a SCAMP). Chiara a modifie (sur SVN) le filtre XSLT issu de=20
SCAMP pour lui faire afficher les donnees de PSFex. Le pb rapporte par=20
Chiara de NaN dans les statistiques, dans les cas ou PSFNSUPER>0, n'a=20
lui pas encore ete corrige.
- Emmanuel et Henry trouvent les nouvelles pages QualityFITS peu=20
lisibles avec ces monstrueuses vignettes 1024x1024... * Commentaires?*
- Chiara a import des scripts de SPICA sur SVN... Personne n'a utilise=20
SVN pour propager les corrections sur les machines. *Chiara demande:=20
"pourriez-vous me clarifier si vous etes interesses a l'utiliser?=20
J'eviterai ainsi de perdre mon temps en cherchant les script relatifs=20
aux pages web."*
- SoS: La partie de construction des masques est terminee. Chiara=20
s'attaque a la production du fond de ciel et a sa soustraction: le but=20
est enlever dans cette etape les dependences aux softs Bertin.

Postes, management, misc. (Mathias, Yannick):
- Mathias a recu la notification officielle d'attribution de 5kEUR par=20
le PNPS pour "la machine a mouvements propres".
- Yannick a rencontre Eric Lesquoy lundi dernier apres le tera-meeting=20
qui serait ravi de travailler avec nous, mais il a des pb de sante et=20
part a la retraite en avril. Eric Lesquoy sonde autour de lui au CEA.=20
Il a suggere plusieurs personnes, parmi lesquelles Jim Rich qui pourrait=20
tres bien faire de l'operation (a deja ce type de job sur EROS). Pour le=20
moment Yannick attend un retour d'Eric sur ses investigations.
- Laurent Vigroux a rencontre Jean-Marie Hameury mercredi matin.=20
Compte-tenu de l'urgence, Jean-Marie est pret a debloquer des credits=20
immediatement pour que nous recrutions un CDD pendant quatre mois et=20
ainsi finir la release T0004. Une solution plus stable et a plus long=20
terme est a l'etude. Le recrutement en urgence sera fait en dressant un=20
profil qui sera envoye a l'ANPE. La mise en place des credits sera sans=20
doute faite via l'universite P6 et devrait prendre 10 a 15 jours.  Entre=20
temps, il faudrait dresser un profil tres focalise "operation". *A tous,=20
si vous connaissiez une personne interessee par un job de ce type=20
pendant quelques mois, faites-signe a Yannick.*
- Yannick a "mis en place l'avenant au MoU Terapix+INSU/CFHT/CADC".=20
*Yannick, peux-tu en dire un peu plus?*
- Les minutes video-conf du 15 mars sont desormais a disposition sur les=20
pages TERAPIX et CFHT.

WIRCAM (Henry, Chiara):
- Henry a demande a Herve, qui est OK, de relancer son script de=20
controle des points-zeros WIRCAM en utilisant MAG_APER au lieu de=20
MAG_AUTO. *Henry ou en est-on concernant les mesures MAG_APER?*.
- Donnees Willott: deuxieme iteration avec Loic pour la correction de=20
crosstalk; Chiara a produit les weight maps (qualityFITS) et swarpe les=20
donnees. Elle doit encore regarder le stack et le mettre a disposition=20
pour Loic sur ftp.
- Donnees Cuby-Willis (Hibon): Pascale Hibon a pretraite les donnees=20
WIRDS (PI willott) correspondants au champ de Cuby narrow band. Chiara=20
les a telechargees et soustraites du fond de ciel en premier passe. Les=20
qualityFITS sont en cours et seront termines dimanche soir. Douze images=20
narrow band du runid 06BF46 etaient 'perdues' au CFHT. Elles sont=20
maintenant disponibles. Loic en a soustraites sept (constante de temps=20
pas bonne pour les autres):  Chiara n'a rajoute au stack preliminaire=20
que ces sept-la. Elle ne va soustraire en deuxieme passe que ces sept-la=20
a cause de problemes de format. Chiara doit terminer le traitement pour=20
la fin-mars.
- Donnees Monin: Chiara attend que Loic mette a disposition les images.

Amicalement,
			Emmanuel.