Minutes for the terameeting of July 16th, 2008

Present: Lila, Mathias, M., Patrick, Fred, Henry, , Yannick.

Please read the summary (updated) : Yannick's summary document

Points additionnels :

I. CFHTLS Release T0005:

- Attribution erronnee de nom d'utilisateurs de certains jobs SPICA2-Condor:

Fred nous a explique la raison du probleme: le numero d'utilisateur associe au compte de Lila (sur clix, exporte par les NIS) etait le meme que celui d'un compte condorN local. Il semble que des fichiers aient ete uploades, apres la tache condor, par NFS plutot que par ftp via curl (La raison de cela est a elucider). L'Id du proprietaire du fichier est alors le user condor qui a realise la tache, qui, vu d'une machine différente apparait comme le login hadji si le numero d'utilisateur est le meme. Fred a modifie le numero d'utilisateur de Lila.

- Catalogues morphologiques: reponse a la question d'Emmanuel

- Q: "Quid des ajustements de modeles? Le nouveau SExtractor est pret depuis mai, mais il faut toujours inclure explicitement cette etape dans les scripts de fabrication des catalogues finaux. J'avais teste les resultats il y a quelques mois deja, mais si quelqu'un avait la possibilite de faire des tests plus approfondis (notamment avec des images chi2) ca serait pas mal. J'aimerai discuter des parametres a inclure dans les catalogues finaux, ainsi que du nombre de champs a traiter au total pour evaluer precisemment le temps de calcul. Enfin si ca ne gene personne, j'aimerais bien avoir la version 2.7.2 installee. Elle est fonctionnellement equivalente a la 2.7.1, mais corrige les bugs trouves depuis. SVP dites-moi ce que vous en pensez. "

- R: Apres discussions avant et pendant le tera-meeting, nous avons converge sur cette solution: les parametres caracterisant les ajustements de modeles seront mis dans les catalogues T0005, mais pas dans les premiers que nous devons delivrer en juillet (Normalement). C'est un peu trop risque de mettre des nouveaux parametres dans une release officielle alors que nous n'avons pas fait de tests pour verifier que tout etait ok, ou pour optimiser ces parametres selon les proprietes des donnees. On risque d'etre oblige de modifier ces catalogues plusieurs fois , une fois livres au CADC. De plus, proposer ces parametres dans les tous premiers catalogues de T0005 mettrait une tres grosse pression sur la release T0005 et ceux qui la produisent car on a compris que produire ces catalogue prendra beaucoup de temps sur les machines, sans compter qu'il faudra verifier ces catalogues avant diffusion. On est pret et d'accord pour faire tourner ces ajustements dans le courant du mois d'aout, lorsque la release sera delivree. On annoncera et on mettra a disposition des CFHTLS-users ces catalogues, une fois qu'ils seront produits, sur les pages Terapix, independemment de la release T0005 delivree en juillet. A noter que pour les memes raisons, on a convenu pendant le tera-meeting d'adopter la meme procedure pour les evaluations de la completness des stacks avec le nouvel outil de Henry.

Bien sur, toutes les images T0005 peuvent etre utilisees des maintenant pour faire des tests, au fur et a mesure qu'elles seront produites - c'est a dire des cette semaine, si tout se deroule bien - pour W1. Anthony et Emmanuel peuvent les utiliser pour EFIGI quand ils le veulent.

Pour l'installation de la version 2.7.2, pas de probleme, mais il faudrait juste prevenir Yannick (Fred ?) des que c'est fait pour qu'il fasse tous les catalogues T0005 avec la meme release SExtractor. Ca ne doit cependant pas changer grand chose pour la release pour les QFITSin deja produits.

Fred installera cette version des qu'Emmanuel donne le feu vert.

- Completude des stacks T0005:

Les calculs de completude faits par Henry sont plus rapides, plus precis et plus rigoureux que les precedents. Cependant, l'outil demande encore des verifications, notamment la coherences des resultats pour les evaluations dans le cas de galaxies bulge/disk/bulge+disk . Ils montrent aussi que la completude peut varier d'au moins 0.5 mag. selon les types . Pour les evaluations des limites de stacks Terapix il y a donc deux point de vues: (1) une estimation rapide qui peut etre faite de la meme facon des pour les releases precedentes, en ne mettant que des etoiles simulees. Outre que c'est rapide et sans equivoque, cela permet d'etre homogene avec les releases precedentes. (2) une evaluation fine qui sera faite apres la livraisioon de la release et mise sur les pages/tables Terapix de T0005. On y ajoutera les plots de limites de detection dans un plan mag-brillace de surface.

II. Hardware, Terapix et CFHTLS clusters:

 Terapix cluster : Fred va stopper les machines pix5, pix6, pix7 et pix8 ainsi que la baie fiber channel qui est en alarme permanente.

 cosmix5: Fred a copie une fraction des donnees de Goldmann et Fu sur mix21. Il va copier les data de Goldmann sur son disque USB 1.5 To pour le mettre a disposition sur une autre machine cosmix.

 mix2: il est prevu de stopper bientot mix2 PENSEZ A FAIRE DES BACKUP RAPIDEMENT de vos data sur MIX2 !!.

 Fred lancera le marche pour disposer de devis pour 3 fcix4 a prendre sur les credits Megacam et l'ANR UltraVISTA

III. Utilisation de Condor:

Entre Yannick pour la production de T0005, Mathias M. pour les tests SPICA2/QFITS-in , Patrick et Henry pour WIRCam, le partage des ressources demande un peu de discipline et de comprehension. Lorsque qu'un gros job Condor doit etre lance, il est important de le signaler a tous et de verifier que la gene occasionnee ne sera pas penalisante pour les autres. D'une facon generale, sauf cas exceptionnel, il faut toujours laisser une machine libre du cluster Terapix general et une machine Terapix WIRCam (mix9 ou mix10). Cette regle est modulable selon les besoins et selon l'utilisation effective et previsible des ressources au lancement d'un job et pendant toute sa duree.