Chers tous Voici le resume des activites de la periode du 3 au 12 octobre 2008. Alertez moi s'il manque des points que vous jugez importants. Le Tera- meeting est prevu ce lundi 13 octobre a 14:30: 14:30, salle 281 Je serai en reunion pour le fete de la science salle du conseil, ce matin a partir de 09:30 (voir la fin du bilan, 1er item des "divers"). Amicalement Yannick {{I. Processing T0005: Yannick, Mathias S., Fred}} Yannick a recu de nouvelles images du CFHTLS qui manquaient dans les derniers set d'images qu;'il fallait evaluer pour le CFHTl. Ces images ont ete finalement QFITS-ees, notees et le resume a ete envoye a Herve Aussel et Jean-Charles Cuillandre. C'est au cours du lancement de ces QFITS que Yannick s'est rendu compte que le nouveau PSFEx n'est pas comptatible avec QFITS. Notamment au moins 3 Keywords semblent avoir ete changes. Voici les messages: > WARNING: PSF_NAME keyword unknown > WARNING: SAMPLE_MAXELONG keyword unknown > WARNING: PSF_NAME keyword unknown Mathias S. a cree des catalogues ugriz avec MAG_AUTO pour toutes les WIDE. Offset versus seeing: Il y a une dependance (surtout en u) seeing versus offset : un grand seeing donne un offset un peu plus grand - MAIS c'est pas pour toutes les filtres (par example i,z). Bilan complet de l'etude MAG_AUTO sur le WIDE: On gagne pour toutes les champs de WIDE en u,g et i (0.01 -0.02) mag, par contre on perd en r et z (0.02). Update des tables et pages information de T05 sur spica (liens et corrections de texte). {{II. Processing Megacam PI: Mathias, Patrick Yannick}} Lancement de Scamp sur les mouvements propres. Emmanuel a cree une Scamp "special" avec une sortie de mouvements propres -lancement de Scamp -encore en cours.. Projet NGVS: - Yannick et Patrick ont rencontre Simona Mei et son etudiant Anand Raichoor pour leur expliquer comment fonctionnait le processing et comment sont calculees les magnitudes dans les stacks. Ananad Raichoor a pu ainsi comprendre pourquoi il trouvait des corrections de points zeros aberrantes. Tout est rentre dans l'ordre sur cette question. - Patrick a montre des exemples de stacks avec les soustractions de fond de ciel a Anand et Simona. Il a lance de nouveaux stacks au cours de la semaine sur d'autres champs du projet PILOT Mei+Ferrarese. - Nous avons demande a Anand et Somina d'evaluer ces stacks en construisant des profils radiaux de brillance de surface sur M87 puis en soustrayant ensuite un modele a l'image. En cours. {{III. Processing WIRCam (Henry, Patrick):}} All the WIRDS-D3 images which had been processed by Patrick's guide box correction script have been sky-subtracted and stacked. Henry did not manage to make an assessment of image quality with respect to the previous stack with the guidebox correction. Previously, the guide box correction had been applied to images AFTER the sky subtraction, so Henry would hope that the quality of the final stack would be better (less guidebox residuals). In the previous final stack, residuals from the guide-box propaged through the sky-subtraction. - Donnees Bouvier 07BF99 : Probleme important d astrometrie en bande H et CH4. Les autres bandes sont correctes. Presence de nombreuses sources saturees dans le catalogue issu de QFITS sur les images soustraites de fond de ciel. - Barmby : Preparation de la release. Des pointes sans ON-OFF seront sans doute difficiles a exploiter pour obtenir une etude de brillance de surface a grand rayon. {{IV. Spica2 developpement: Mathias M., Greg.}} - La partie de l'application relative au processing des donnees a ete graphiquement remaniee. Le choix des icones est plug clair, l'ergonomie de l'interface s'en trouve amelioree. Par ailleurs les temps de chargements des pages relatives aux plugins de processing sont bien meilleurs qu'auparavant puisque l'ensemble du code des plugins n'est plus charge d'un seul coup dans sa totalite mais au cas par cas, en fonction du type de processing choisi sur la page: http://clix.iap.fr:8000/spica2/processing/ - Environ 30% de l'implementation du plugin Scamp a ete effectue. Le plugin devrait etre fonctionnel pour le prochain tera-meeting. - Le "batch selection mode" du selecteur d'images a ete ameliore. Les selections calculees a partir des donnees du fichier XML en entree sont maintenant consultables depuis l'interface web. On peut donc facilement verifier si les images contenues dans une selection sont bien celles que l'on veut processer. - Integration d'un gros morceau de code de Greg permettant de generer un fichier bitmap a la volee affichant sur une sphere les images ainsi que des ellipses decrivant les selections effectuees. Pour le moment, la visualisation n'est disponible que dans la partie "batch selection". Il reste a l'integrer egalement dans la partie "selection simple" des images. Pour le plot de la selection d'images: La selection est desormais dans un cercle (ou l'on peut affiner la definition au augmentant le nombre de points) au lieu d'un rectangle de selection. La visualisation du plot de la selection se fait via l'interface web, et montre notamment l'ellipse projetee et les zone couvertes par chaque image. - En mode selection simple, le selecteur d'images utilisait du code 3rdParty pour afficher la liste des images selectionnees. Ce code etait a la fois lourd a telecharger et peu efficace sur de gros volumes de donnees (toutes les images de T0005). L'utilisation du widget GPL dhtmlxGrid a donc ete abandonnee au profit d'un nouveau widget maison bien plus efficace (beaucoup plus reactif). L'avantage immediat de cette solution est de permettre de lever definivement la limitation du nombre d'images selectionnees en une fois. Par exemple, les 1797 images de W1 ne pouvaient etre selectionnees en une seule fois avec l'ancien widget dhtmlxGrid. {{IV. Developpement software: Emmanuel, Fred, Patrick }} Developpements SPICA2: - Emmanuel a fourni a Greg 2x5 images (MEF) Megacam avec un WCS "bidouille" les faisant passer pour des champs incluant le pole nord et le meridien a 0h. Developpements divers: - Emmanuel a termine la mise-a-jour de tous ses logiciels selon le nouveau schema (compilation icc avec optimisations SSE3/SSE4, linking dynamique, multithreading systematique, dependences RPM et paths compatibles avec les distributions Fedora Core), et les a mis a disposition sur le compte pipeline de Kiravix en attendant une release publique. Il les a tous installes sur le cluster, mais a du retropedaler pour PSFEx (3.2.1->3.0) et SCAMP (1.5.1 ->1.4.7-MP) car la version de la librairie PLPlot sur le cluster est trop ancienne. D'autre-part ATLAS ne semble pas y avoir ete compilee en version parallele. Fred a retrograde PSFEx encore davantage (->2.4.2) pour conserver la compatibilite avec la version actuelle de QFITS. - Emmanuel a delivre une version experimentale de SCAMP contenant une sortie fonctionnelle des catalogues "merged" en FITS binaire a Mathias S. pour tester le calcul des mouvements propres (risque en champ encombre!). La version n'est malheureusement pas parallelisee en raison de la version d'ATLAS disponible sur le cluster. Fred a patché (patch terapix incluant les polices de caractère dans la librairie) et compilé la dernière version de plplot (/home/nis/root.nis/softs/opteron/plplot/plplot-5.9.0/build_dir/), les librairies manquantes pour la dernière version de psfex (libcsironn.so.0 et libqhull.so.5) n'apparaissent pas pour autant... Developpement WIRCam (Patrick): Plusieurs objets satures sont presents dans les catalogues issus de QFITS. Le probleme est le suivant : Les pixels a -20000 (environ) du centre des objets satures sont flagges comme des cosmiques par SExtractor. Ils sont donc etendus (d'un ou de deux pixels dans toutes les direction) et masques. En consequence de quoi les pixels les plus brillants de l'objet (autour des pixels brules a -20000) sont masques. Or ces pixels etaient les seuls qui permettaient a SExtractor de reconnaitre qu'il s'agissait d'un objet sature. L'objet est donc detecte et analyse comme un objet normal alors qu'il est tres fortement sature. Les solutions envisagees sont une nouvelle retine : Chiara a envoye a Patrick son set d'entrainement pour la creation d'un nouvelle retine qui rejeterait ces cas particulier. Une autre possibilite consiste a faire un traitement post SExtractor et detecter ces cas a posteriori et retirer les objets du catalogue. Patrick est en en train d'investiguer les deux possibilites. Developpement Crosstalk : Le script de correction comporte maintenant egalement la methode "Aussel" de fit des donuts de crosstalk. Je teste cette partie en ce moment. On peut donc choisir entre : - la mediane simple sur les 32 ampli (Loic) - La mediane sur les 8 amplis contigues (Wei-Hao) - Le fit des donut et leur soustraction (Aussel) Tout cela pourra etre iteratif (plusieurs passages pour corriger des residus). Ces methodes seront testees en cours de semaine sur les donnees WIRDS de Henry. Une premiere etapes sera de tester ces methodes sur des images deja soustraites du fond de ciel. Si cela se revele insuffisant, le correctif sera calcule a partir des images soustraites, puis appliques aux images preprocesses qui seront a leur tour soustraites du fond de ciel. {{VI. Hardware/system/cluster (Fred):}} Fred s'ext occupe des PUMA et de la mise en eouvre des commandes. Les devis pour les 3 machines de calcul + disques spares + unités batterie pour fcix{3,4} sont chez Sylvie. Les commandes suivantes sont donc parties: - 2 machines 2U, 8 coeurs 2.1GHz, 12TB disk brut (10.5TB utile en RAID5), 16GB RAM, Carri 2*4213.39euros ............ 8426.78 euros - 1 machine 3U, 8 coeurs 2.1GHz, 24TB disk brut (21 TB utile en RAID6), 64GB RAM, Carri ....................... 7398.41 euros - 5 disques 1.5TB Seagate spare Carri 5*165? .............. 825 euros - 2 batterie back up pour cartes RAID de fcix3 et fcix4, Carri .. 213.20 euros Pour le serveur de stockage, Fred hésite encore, penchant maintenant plus vers la solution Chenbro 9U. Fred a contacte John Ouellette au sujet de leur experience de ce boîtier (ils ont les mêmes au CADC). Boîtier 5U AIC-IPC: * Avantages: - plus dense (14.4To/U) * Inconvénients: - très long (dépasse à l'arrière de la baie) - accès des disques par le dessus (besoin de tirer le chassis sur ses rails) - 800 euros plus cher que le Chenbro Boîtier 9U Chenbro * Avantages: - disques accessibles en façade * Inconvénients: - 4 U de plus dans la baie - 75kg au lieu de 50kg (boîtier vide) Il faudrait que nous decidions aujourd'hui. {{VI. Divers (All):}} Fete de la Science: Yannick a une reunion lundi matin concernant la Fete de la Science. Le projet est une observation temps reel avec MegaCAm depuis le telescope CFHT avec des cameras video dans le telescope et dehors, des interviews avec l'operateur du telescope et Jean-Charles Cuillandre. Yannick a d'abord obtenu le ok de Jean-Charles (ca sera pendant un week end: celui du 22-23 novemrbe, et comme on n'a pas le droit de commencer avant 14:00.. ca veut dire que Jean-Charles devra attendre jusqu'a 2h du matin). Yannick a ensuite obtenu l'autorisation officielle de la Direction du CFHT , qu'il a transmise a la Direction de l'IAP (oui, pour des raisons de securite au CFHT et parce que Jean-Charles est employe de la societe CFHT, c'est assez formel). Les volonraires seraint bienvenus pour cette Fete de la Science. A noter que cette demo CFHT-IAP sera suivie par les organisateurs de AMA09 qui pensent le faire en juillet 2009 a l'UNESCO pour l'annee mondiale de l'Astronomie. Il faut le faire bien, donc. Mais on l'a deja fait il y a deux ans et ce fut l'activite qui a eu le plus gros succes aupres du public venu a l'IAP. Emmanuel a quitte TERAPIX le 6 octobre. Son depart effectif au niveau hardware/software devrait se faire plus ou moins en biseau sur une periode de plusieurs semaines (essentiellement pour des contraintes liees a la these d'Anthony). Les taches dotproject qui pouvaient l'etre ont ete fermees. Fred a enleve Emmanuel de teralist. Fred signale que le nom de domaine terapix.org expire bientôt, le renouvelle-t-on ? Yannick a pris contact avec deux candidates pour le poste CDD IR pour une interview. En parralele il a negocier avec l'INSU et Laurent Vigroux pour que le budget du poste soit pret le 1er novembre. Ce dernier point est acquis. Mais das tous les cas, il sera difficile a la candidate selectionnee de venir avnt le 1er decembre. En ce qui concerne le dysfonctionnement de teralist au cours du week end, cest un pb de mail a l'IAP. Yannick a envoye unn mail de plainte a Laurent Vigroux sur ce pb qui est recurrent et pour lequel aucun plan d'action ne semble avoir ete prevu et n'a ete explique aux utilisateurs.