Chers tous Voici le resume des activites de la semaine du 23 au 30 septembre 2007. Alertez moi s'il manque des points que vous jugez importants. Le Tera-meeting est prevu demain lundi 30 septembre a 10:30, salle 281. {{I. T0004 (Fred, Yannick):}} Fred a mis a disposition du CADC les catalogues chi2 corriges. Yannick et JJ Kavelars se sont mis d'accord pour que la mise en ligne au CADC des nouveaux catalogues soient assortis d'un warning sur les pages du CADC. Le CADC se charge de prevenir tous les utilisateurs identifies au CADC et qui ont recupere les anciens catalogues. Yannick n'a pas encore verifie si le CADC a effectue ces taches, mais c'est a controler. {{II. PI MEGACAM (Mireille, Emmanuel, Mathias):}} Mireille a relance le Scamp avec les 558 ldac des 3 runs 04AF09+05AF14+ 07AF18 en utilisant le catalogue de reference astrometrique GSC2.2 en bande Rf. Cette fois Mireille a impose le SN_THRESHOLD a 50.,200. pour eviter de saturer la memoire comme cela s'etait produit le week end dernier. Les .png semblent satisfaisants. Selon Emmanuel les solutions trouvees sont tres correctes. Mireille a donc pu poursuivre le traitement des data 07AF18. Il y a 15 champs. Toutes les images sont swarpees, le QFITSout est termine pour le filtre i. Selon Mireille tout est a peu pres correct, sauf pour Bul02 et Bul03: les figures montrant leur erreur astrometrique externe bidimensionnelle presentent un double pic. Cependant, la dispersion rms relativement au catalogue externe est correcte pour les deux champs, avec 0.40" . Les images couleur des stacks sont faites et sont en cours d'examen visuel. Pour Bul01, Mireille a refait le Swarp avec la nouvelle astrometrie pour 04AF09 et 05AF14. Mathias a donne une liste d'etoiles ayant un mouvement propre connu pour verifier s'il est decelable sur les images prises a 3 ans d'intervalle. Malheureusement ces etoiles sont toutes saturees. Mathias a regarde l'astrometrie sur 04AF09 et 05AF14. Selon lui, comme on pouvait s'y attendre, pour obtenir une mesure de mouvement propre dans cette region (soit environ 5 mas/an) il faut un traitement specifique (extraction de sources avec PSF, ajustement rigoureux , par exemple par moindre carrées, etc.. ). La balle est donc dans le camp du PI qui a propose le projet scientifique. Dans ce cas, Terapix se contente de proceder a un traitement homogene des trois runs d'Annie Robin avec le meme catalogue et de valider, puis laisse la main a Annie Robin. Par ailleurs, Mireille et Emmanuel explorent la suggestion d'Emmanuel de tester les resultats avec 2MASS en 2eme pass en supprimant dans les .ahead les keywords en PVi_j. Mireille a lance un Scamp test; il est en cours. {{III. WIRCam (Chiara):}} - Chiara a ajoute a la distribution SVN pour le traitement de WIRCam des petites procedures de service. Les deux articles dans l'intranet ont ete mis a jour en consequence. - Monin. Chiara a termine les stack sont prets: elle s'occupera de leur evaluation qualite et de la mise a disposition une fois installee a Urbana. - Bouvier IC 348. Chiara a termine l'evaluation de qualite, sa calibration astro-photometrique tourne en ce moment. Concernant le traitement en parallele avec les donnees Megacam correspondantes, Chiara souligne que les deux points de contact entre les jeux de donnees WIRCam et Megacam sont la calibration avec Scamp (Notamment tenter de faire un Scamp avec les filtres infrarouges et le z ensemble?) et le stacking (avec l'idee de construire les stacks finaux WIRCam en utilisant le header du stack z Megacam). Chiara a donc besoin de savoir si ces donnees ont ete recuperees. - Willot-Kneib (WIRDS). Selon la page WIRCam de Loic Albert au CFHT, http://www.cfht.hawaii.edu/Instruments/Imaging/WIRCam/WIRCamPreprocQueue.html le status du processing CFHT des donnees Willot-Kneib est identique a celui des donnes de Bouvier. Comme Chiara a pu les telecharger, WIRDS devrait donc etre disponible sous peu. Chiara attend le feu vert du CFHT et des infos de Henry pour effectuer le telechargement. Chiara souligne le gain que permet Condor: desormais le facteur limitant en vitesse est l'inspection des images a l'oeil. {{IV. Software (Chiara, Emmanuel:}} - PSFEx: ameliorations de modelisation de la PSF dans PSFEx (seulement en version SVN pour l'instant). - Skymaker: ajout d'un mode "GRID" et "GRID_NONOISE" dans SkyMaker pour les tests PSFEx (seulement en version SVN pour l'instant). {{V. DB-T0005 (Chiara, Emmanuel, Gregory):}} - Chiara a fait petit resume pour Gregory concernant des champs de la base actuelle (dbspica) qui sont remplis apres l'etape de QualityFITS sur les images. Emmanuel a envoye un resume de la reunion avec Gregory et Chiara concernant les developpements en cours se rapportant a T0005 et sa base de donnees: - Emmanuel suggere d'abreger les investigations de Gregory concernant un redemarrage automatique_ des procedures d'ingestion en cas de reboot du serveur; la justification etant qu'il y a des points plus urgents maintenant que Gregory a defini une procedure "safe" pour toutes les transactions (non-pas que le pb de la recuperation ne soit pas important, mais cela doit rester selon Emmanuel une procedure exceptionnelle qui ne justifie pas une automatisation a outrance, et surtout les longs developpements associes). - Les points places en priorite a court terme sont: --1. la construction de l'interface web (avec Django par exemple). L'interface de Laurent est une bonne base de depart, mais la nouvelle interface devra avoir la capacite de definir de maniere ergonomique des "paniers" (lots d'image). A partir de ces paniers il devra a terme etre possible de lancer les differentes phases de traitement (QualityFITSation, calibrations et stacking). Gregory verra avec Yannick et Mireille pour ce qui concerne les champs de notation. --2. l'ingestion des metadonnees QualityFITS. Compte-tenu des incertitudes concernant les futurs developpements de QualityFITS, et en particulier le format de sortie XML, il est suggere de faire un ingesteur base sur le format actuel (vanilla XML). -- 3. Une inconnue reste l'acces aux donnees et metadonnees lui-meme. Fred avait adopte le principe de l'URI, a partir duquel un script devait permettre d'acceder aux fichiers de facon transparente. Emmanuel voudrait connaitre la situation concernant le developpement de ce script? {{VI. Data tests re-processees pour T0005 (Yannick)}} Jean-Charles a besoin d'un jeu complet de donnees qui permettrait au CFHT puis a Terapix de comparer les donnees "anciennes" avec les donnees "re-masterisees" par le CFHT. Jean-Charles et Yannick ont convenu d'utiliser un jeu permettant des comparaisons precises allant assez loin dans les tests. Il y aura donc deux blocs compacts de T0004 , un de 3x3 W1 et un de 3x3 W4, selectionnes parmi ceux dont des stacks sont disponibles dans tous les filtres ugriz de Megacam: W1(-0,+1) W1(1,+1) W1(2,+1) W1(-0,+2) W1(1,+2) W1(2,+2) W1(-0,+3) W1(1,+3) W1(2,+3) W4(2,-2) W4(1,-2) W4(0,-2) W4(2,-1) W4(1,-1) W4(0,-1) W4(2,0) W4(1,0) W4(0,0) La priorite etant les filtres z et i. Yannick a envoye a Jean-Charles les deux listes detaillees des images individuelles composant ces 18 stacks T0004, ugriz de W1 et W4. Cette liste est dans le fichier joint a ce resume sur la page web du summary du Tera-meeting. {{VII. Materiel/budget (Delphine, Mathias, Yannick:)}} Les 3 keuros PNPS motifie a Besancon sont en cours de transfert vers Terapix/IAP. Si les delais annonces sont corrects, ces credits seront disponibles dans le courant de la semaine du 1er octobre. Pour les 2 keuros d'avance PNPS (credits 2007 notifiables debut 2008), Delphine ayant semble t-il fait une erreur sur le bon de commande, elle doit recommencer la procedure. {{VIII. Personnels (Yannick):}} Conformement a ce qu'avait promis Jean-Marie Hameury la semaine derniere, un nouveau poste CDD IR de 36 mois est mis a disposition de Terapix. Il est disponible IMMEDIATEMENT et doit etre pourvu obligatoirement dans l'annee budgetaire courante (ie avant fin 2007). Yannick a contacte un certain nombre de personnes pouvant connaitre des candidats disponibles et interesses. Le poste etant a pourvoir tout de suite, si un Terapixien connait des candidats potentiels, il peut les contacter immediatement. Par ailleurs, Jean-Marie confirme qu'il ouvrira un poste IR CDI pour Terapix en 2008. Il ne peut cependant prendre aucun engagement defintif avant de connaitre les details de son budget de l'annee prochaine. Yannick avait aborde la semaine derniere l'idee de faire participer plus activement Mathias au processing PI Megacam et/ou WIRCam pour etre en mesure d'effectuer ces taches dans la perspective des departs. Mathias a repondu positivement. Il aimerait que que Mireille et/ou Chiara fassent une "petite formation" de traitment de données de PI pour en apprendre toutes les etapes et etre ainsi en mesure de faire le travail. {{IX. Cluster:}} - Fred a definitivement regle le probleme du "cexec terapixclix" - Fred a regle le probleme des SMART long sur le cluster. En fait, ils etaient desactives depuis le 4 aout, sauf pour les disques systeme. Emmanuel a demande a Fred s'il pensait laisser les tests longs sur les disques systeme. Cela pourrait poser des pbs avec Condor, notamment. Selon Fred, ces tests qui permettent de prévenir la défaillance d'un disques ne devraient pas poser de problèmes a Condor car les disques systeme sont peu sollicites, contrairement aux disques des RAIDs. - Emmanuel suggere une migration de mix7 vers une version plus recente du systeme, a l'instar des autres machines, afin d'avoir un cluster homogene. - L'arret des machines cos1/2/3/4 du cluster cosmix a ete differe a cause du retard de certains utilisateurs a effectuer une sauvegarde de leurs donnees stockees sur les disques de ces machines vers ceux des cosmix/2/3/4. - Pour Fred : le merdouillage de la teralist. - Pour Fred: Fred a installe condor sur fcix3 fcix ftpix fcix2 : est-ce que il y a encore besoin de separer les deux clusters terapix et Condor pour c3? Sauf si la modification fut faite effectivement au cours des derniers jours, le default de cexec etant le cluster 'condor', les logiciels installes ne le sont pas par default sur toutes les machines sur lesquelles Condor tourne. - Les pieces manquantes du nouveau rack n'avaient pas encore ete livrees a la date du vendredi 28 septembre. {{X. Divers:}} - Henry souligne ses difficultes a intercalibrer photometriquement les images WFCAM en utilisant le catalogue 2MASS dans Scamp comme une reference photometrique. Emmanuel rappelle qu'a ce jour Scamp n'utilise pas les catalogues de reference pour la calibration photometrique. - Pour Fred: voir item "qualityFITS" en section III du resume de la semaine derniere. - Pas de nouvelles de Jean-Charles concernant les images photometriques sans PHOT_C .