Return-Path: Received: from carignan.iap.fr ([unix socket]) by carignan (Cyrus v2.1.18-IPv6-Debian-2.1.18-1) with LMTP; Mon, 17 Sep 2007 11:41:08 +0200 X-Sieve: CMU Sieve 2.2 Return-path: Received: from mix.iap.fr ([194.57.221.39] helo=terapix.iap.fr) by carignan.iap.fr with esmtp (Exim 4.50) id 1IXD65-0008Bq-Fg; Mon, 17 Sep 2007 11:40:53 +0200 Received: from petidomo by terapix.iap.fr with local (Exim 3.36 #1 (Debian)) id 1IXD5t-0006tq-00; Mon, 17 Sep 2007 11:40:41 +0200 Received: from cairanne.iap.fr ([194.167.0.198]) by terapix.iap.fr with esmtp (Exim 3.36 #1 (Debian)) id 1IXD5t-0006ti-00 for ; Mon, 17 Sep 2007 11:40:41 +0200 Received: from kiravix.iap.fr ([194.57.221.16]) by cairanne.iap.fr with esmtp (Exim 4.50) id 1IXD64-0003GY-Qe for teralist@iap.fr; Mon, 17 Sep 2007 11:40:52 +0200 Message-ID: <46EE4BA8.2010009@iap.fr> Date: Mon, 17 Sep 2007 11:40:56 +0200 From: Emmanuel Bertin MIME-Version: 1.0 To: teralist@iap.fr Subject: [teralist] Synthese de la semaine du 10/09/2007 au 16/09/2007 Content-Type: text/plain; charset=ISO-8859-1; format=flowed Content-Transfer-Encoding: 7bit Reply-To: teralist@iap.fr Precedence: list Sender: petidomo GRAND POSTIER X-Spam-Checker-Version: SpamAssassin 3.0.3 (2005-04-27) on cairanne.iap.fr X-Spam-Level: X-Spam-Status: No, score=-2.6 required=5.0 tests=BAYES_00 autolearn=ham version=3.0.3 Chers tous, voici une synthese partielle des activites TERAPIX sur la periode du 10/09 au 16/09/07! Je n'ai pas eu de retour de Fred. MEGACAM CFHTLS (Henry, Mathias): - Apres un mail de Marguerite Pierre rapportant des erreurs anormalement petites dans les catalogues chi2 de T04, les investigations de Henry on revele que tous les catalogues chi2 produits par post_spica.pl etaient faux (pas de carte de poids pour l'image de mesure). A l'aide de Condor, Henry a relance une extraction de 326 catalogues chi2 (accompagnes de leurs fichiers XML). Ils sont actuellement dans /data/mix7/raid1/hjmcc/cfhtls/t04/chi2_redo/cat. Henry n'a pa re-extraire que les catalogues pour lesquels il a pu retrouver les images chi2 et les cartes de poids pour les images scientifiques. Il semble que certaines cartes de poids manquent a l'appel (100 catalogues restent a extraire ce lundi matin). *Demande de Henry a Fred: /data/mix?/raid?/processing/postspica/chi2/ est-il le seul path pour les images chi2, ou y-a-t-il d'autres images ailleurs?* MEGACAM P.I. (Mireille, Emmanuel): - Mirelle a commence a traite les donnees PI 07AF18 d'A. Robin. La notation a ete effectuee mais Mireille a rencontre un pb curieux avec SCAMP: seule une partie des observations d'un meme champ semble etre calibrable avec 2MASS en catalogue de reference. La reponse d'Emmanuel sur le sujet ne l'a pas convaincue (et Emmanuel non plus d'ailleurs :-) ). Developpements T05 (Henry, Gregory, Olivier, Emmanuel): - D'apres l'experience de Henry avec Condor, il semble que la facon la plus efficace d'operer QualityFITS soit de copier les images de calibration sur les repertoires locaux de chaque machine, et ensuite de transferer les images scientifiques. Il semble egalement plus efficace de demarrer Condor a partir d'une partition /raid2 pour accelerer les performances de recuperation des fichiers calcules. - Gregory poursuit son travail sur le blindage de la base en cas de crash. Le format de la base a ete migre de MyISAM vers InnoDB. Toutes les requetes de modifications de la base qui sont effectuees ne sont soumises qu'a un seul commit(). Ce qui veut dire que si l'ordi plante, s'eteint ou passe par la fenetre, le script d'alimentation de la base ne modifiera pas celle ci incompletement. Gregory investigue maintenant le fonctionnement des logs de MySQL (configuration, format) afin de pouvoir renseigner une procedure de redemarrage apres un eventuel crash. - Olivier Ricou a installe une premiere version rudimentaire du systeme de webservice sur efigix. Basee sur Globus, elle permet d'executer des jobs Condor depuis l'exterieur en respectant les protocoles de webservices Globus (format XML des requetes, partage des ressources, etc.). Olivier a effectue une petite demo a Emmanuel, incluant lancement de taches simples et annulation d'un job. Plus d'info cette semaine (un poster doit etre prepare pour l'ADASS). Outreach (Henry, Emmanuel): - Henry a produit des images TIFF couleurs en plein resolution des images Deep T04 pour Jean Mouette pour la realisation de grands posters 4x2m, a partir des reglages d'Emmanuel: ftp://ftpix.iap.fr/pub/hjmcc/cfhtls/tif_t04/ Management/Financing/Jobs (Yannick, Mathias, Chiara) - Le mois de septembre est le mois critique des rapports d'activite Terapix et des demandes de credits, c'est pour l'essentiel ce dont Yannick s'est occupe au retour de l'ESA. Les demandes portent sur: 6 keuros a l'IAP, 20 keuros Terapix-Megacam INSU et PNC et 15 keuros WIRCam INSU. Mathias s'est charge de la demande PNG pour financer ses missions a TERAPIX. - Yannick a corrige et finalise les sections Terapix du rapport d'activite de l'IAP (2004-2007) et du futur plan quadriennal 2008-2011. Elles ont et envoyees a Laurent Vigroux et Martin Lemoine qui se chargent de l'edition (dead line mercredi 19 septembre pour finalisation et envoi a l'Universite P6 et au CNRS le 3 octobre). - Yannick a egalement prepare et depose les demandes Terapix-Megacam et Terapix-WIRCam pour l'INSU sur LABINTEL, ainsi que PNC (deadlines 14 septembre). - Machine PNPS: Mathias a discute avec Delphine qui va envoyer une facture de 2kEuro a Besancon. Apres cela, Besancon transferera l'argent a Paris.. - Chiara s'est presentee a son interview a Orsay jeudi 13 septembre. Les resultats devraient etre connus cette semaine. Developpements software (Chiara, Emmanuel) - WeightWatcher: plusiers bugs corriges par Chiara. La correction a ete testee sur quelques centaines d'images WIRCam. La version 1.8.6 est disponible en release interne, et installee sur le cluster terapixclix. - MissFITS: Un bug corrige par Chiara. La correction a ete testee sur quelques centaines d'images WIRCam. La version 2.2.6 est disponible en release interne et installee sur le cluster terapixclix. - Scamp: La manipulation des noms des plot comme ecrits dans la sortie XML n'etait pas coherente avec le fichier de configuration (ce qui provoquait l'absence des plot dans la feuille de style dans certains cas): corrige par Chiara. - Chiara demande a Emmanuel: avant de faire une release je pensais rajouter a l'XML les infos demandee par Daniel Durand (voir mail), parce il a oublie le reply-all. Quest-ce que tu en penses?* - Emmanuel a fixe son programme de developpement pour son sejour a UIUC et Fermilab: il mettra au point sur les simulations realistes d'images DES un algorithme de photometrie des galaxies optimise pour les redshifts photometriques, et independant de la PSF, et revisitera l'algorithme de deblending de SExtractor. Systeme/hardware (Chiara, Emmanuel) - Chiara rappelle qu'efigix ne peut toujours pas envoyer de mail en tant que user condor. - Emmanuel mentionne que le serveur Apache a "saute" sur clix et a du etre relance. - Emmanuel a installe la version 1.3.12 de SCAMP sur le cluster terapixclix. WIRCAM (Chiara) - Chiara a rajoute des messages d'erreurs dans le script de soustraction du fond de ciel: en absence d'images essentielles pour le traitement le script sort en erreur et envoie un mail avec les details. - La distribution subsky sur SVN et les pages de l'intranet http://terapix.iap.fr/article_intranet.php?id_article=701 http://terapix.iap.fr/article_intranet.php?id_article=730 ont ete mise a jours. Chiara a elle-meme reteste la chaine de traitement comme decrite dans l'article. - Loic vient d'envoyer un mail a Chiara et Emmanuel ou il signale que le processing de Willott/Bouvier/Monin est en cours au CFH, et nous pose quelques questions concernant SExtractor et SCAMP. Amicalement, Emmanuel.