Chers tous Voici le resume des activites de la periode du 20 au 27 octobre 2008. Alertez moi s'il manque des points que vous jugez importants. Le Tera- meeting est prevu mardi 28 octobre a 10:30, salle 281. Amicalement Yannick {{I. Processing T0005 et T0006: Yannick, Fred}} Yannick a recu une nouvelle requete du CFHT pour l'evaluation des donnees Wide T0006 avant le prochain run (qui a commence avant-hier). Fred a recupere les donnees, puis Yannick a recupere un residu oublie par le CFHT. Toutes les donnees ont ete QFITS-sees samedi et notees dimanche. Sur 268 images, 19 sont a refaire (ce qui est plus eleve que la moyenne). Les notes ont ete envoyees au CFHT et a Herve Aussel et les observations seront reprogrammees ce soir ou demain pour des observations prioritaires. {{II. Processing Megacam PI: Yannick, Patrick}} 08AC24-Mike Hudson: Yannick a lance les QFITS. Toutes les donnees sont pretes pour le SCAMP+SWARP. Il reste a harmoniser avec les data WIRCAm car Mike Hudson nous a confirme qu'il souhaitait un processing combine et homogene MegaCam+WIRCam. NGVS : - Patrick a termine les stacks shallow. Un probleme est survenu dans la soustraction de la composante constante du fond de ciel. Celle ci est estime en prenant la mediane des pixels du chip. Dans le cas de M87 on est oblige de masquer 90% du chip et l'estimation du fond sur les 10% restant n'est pas parfaite. Il faudrait utiliser le code de Lila pour avoir la meilleure valeure a soustraire. - La soustraction du fond sur les images deep est en cours {{III. Processing WIRCam Patrick:}} WIRDS : - Deux nouveaux runs sont telecharges sur fcix4 par Patrick. Cela represente environ 300Go de donnees brutes (images sans correction de crosstalk) - La soustraction du fond est presque achevee pour le subset D3-1 destine a tester les algoritmes de suppression du crosstalk. Un premier stack a ete realise (sans correction) pour servir de temoin. Lodieu : - Les 1600 images ont passees Qfits et ont ete inspectees par Patrick. Il y a beaucoup de poses inutilisables en raison de PSF tres etendues et allongees ou en raison de problemes avec l'instrument. - Des essais de scamp sont en cours mais ils ne convergent pas encore. Il faut enlever des images mauvaises du set. {{IV. Spica2 developpement: Mathias M., Greg.}} Greg a ajoute dans le batch mode du selecteur d'images: -- le calcul et l'affichage des positions des images sur le ciel a partir de la multi-selection sauvergardee -- la prise en compte de l'etat des check boxes ( "Display sky visualisation" et "Plot all images point"). L'arithmetique associee au choix de ces options fonctionne 1. Lorsque "Display sky visualisation" et checke, les selections du fichier xml sont plotees 2. Lorsque "Plot all images point" est aussi checke on plot aussi toutes les positions des images sur le visuel Par contre lorsque l'on genere la visualisation a partir d'un multiselection sauvegardee les cercles de selection sont remplaces par une representation par la couleur des sous selections. L'implementation du plugin SCAMP par Mathias M. et Greg suit son cours. Ajout de la nouvelle regle de selection des qualityFits discutee lors du dernier tera-meeting: pour determiner les chemins vers les fichiers LDAC a utiliser a partir d'une liste de selection d'images pour le processing SCAMP: pour chaque image de la selection, l'application cherche le dernier qualityFITS de l'utilisateur concerne ayant termine avec succes. Sur la page du plugin SCAMP, le boutton 'Add to cart' a ete remplace par un boutton 'Validate input data' qui permet de lancer des tests permettant de savoir si la base contient les informations necessaires au lancement du SCAMP sur le cluster. Lorsque ces tests terminent avec succes, l'application propose a l'utilisateur (fonctionnalite discutee au dernier meeting) s'il souhaite affiner et definir manuellement (en cochant/decochant) la liste des fichiers LDAC a utiliser pour le processing SCAMP. Le script wrapper_processing.py envoye sur le cluster et responsable de l'execution de SCAMP et de l'ingestion des resultats dans la base est en cours de modification. Il faudrait que Mathias M., Yannick, Greg et Patrick puissent discuter des modalites d'ingestion des resultats disponibles dans scamp.xml (bloquant). http://clix.iap.fr:8000/spica2/processing/scamp/ - Le Widget de selection d'images permet desormais de sauvegarder, de charger ou de supprimer des listes de selections en mode batch. La gestion des operations sur les selections est donc complete dans les deux modes (single et batch). Misc: - Spica2 change de nom! Le candidat retenu est 'Youpi' pour 'YOUr PIpeline' ou 'YOUr processing PIpeline' (a definir). Mathias M. demande si on opte pour 'Youpi' ou 'Youpi!' (avec point d'exclamation final). {{V. Developpement software: Patrick }} - Des tests sont en cours pour le script de flag des objets satures de SExtractor. Pour l'instant le script assigne un flag 256 a ces images. Un ensemble d'outils de manipulation fits (table et images) pourrait etre installe sur le cluster (Ftools). Il permet de gerer en ligne de commande les tables fits, ajouter et retirer des elements. Le test est concluant sur mon destop, des verifications pour une installation sur le cluster sont en cours. {{VI. Hardware/system/cluster Fred:}} - La panne du Desktop de Gregory etait due a l'alimentation. Fred a fait le diagnostic et remplacer l'alimentation vendredi soir. - Problème sur mix19, mix18: Fred a installe un nouveau kernel (2.6.25-gentoo-r7) sans patch AMD. mix18 va devoir être re-installée. - Carte mère mix3... en attente de nouvelles pour une Tyan 4882. Une date pour le changement des CPU B2 restants devrait aussi être fournie... - Fred a termine toutes les commandes. Tout est parti a temps la semaine derniere. Un resume des commandes a ete envoye sur teralist. Bilan à jour avec les numéros de bon de commandei (les machines SLS ne sont pas payees par erapix et sont pour SLS2, mais Fred s'est charge des devis+commandes): - *L16261/MEGACA/08* 2 machines 2U, 8 c?urs 2.1GHz, 12TB disk brut (10.5TB utile en RAID5), 16GB RAM - Carri 2*4213.39? .......... 8426.78 ? - *L16261/MEGACA/08* 1 machine 3U, 8 c?urs 2.1GHz, 24TB disk brut (21 TB utile en RAID6), 64GB RAM - Carri ..................... 7398.41 ? - *L16261/MEGACA/08* 5 disques 1.5TB Seagate spare - Carri 5*165? ................................................................ 825 ? - *L16259/MEGACA/08* 2 batterie back up pour cartes RAID de fcix3 et fcix4 - Carri ............................................... 213.20 ? - *L16322/MEGACA/08* KVM cosmix - Carri .......................................................................................... 656.65 ? - *L16320/MEGACA/08* 2 quad core 2.1GHz upgrade mix10 - Carri 2*258.5 ............................................................ 517 ? - *L16326/MEGACA/08* 1 écran 24" Dell 2408FPW .................................................................................... 472 ? - *L16397/MEGACA/08* 2 quad station I9000 - Carri 2*1108.03 ...................................................................... 2216.06 ? - *L16377/MEGACA/08* 1 machines 2U, 8 c?urs 2.1GHz, 12TB disk brut (10.5TB utile en RAID5), 16GB RAM - Carri 4213.39? .......... 4213.39 ? - *L16377/MEGACA/08* 6 disques 1.5To -> ftpix Carri 6*165? ...................................................................... 990 ? - *L16384/MEGACA/08* 6 disques 1.5To -> ftpix Carri 6*165? ...................................................................... 990 ? - *L16396/MEGACA/08* 8 disques spares (cosmix, mix7, (mix{8,9}, efigix, fcix2)) Carri 3*45.5+3*175.5+2*67.6 ...................... 798.2 ? - *L16398/MEGACA/08* 2 disques spares Hitachi 400Go - LCDI ....................................................................... 108.7 ? - *L16376/MEGACA/08* 1 barebone Tyan GT24 Spica2 - 1quad opteron 2GHz 8GB RAM, 2 disques 300Go velociraptor en RAID - Carri ...... 2106.56 ? - *L16373/MEGACA/08* 5 claviers logitech QWERTY - Carri .......................................................................... 82.38 ? - *L16399/MEGACA/08* câbles RJ45 LDLC ............................................................................................ 39.60 ? - *L16404/MEGACA/08* divers LDLC ................................................................................................. 842.11 ? --------- Total 30896.04 ? - *L16287/DESIR/08* 1 serveur de stockage 9U 2 Xeons 2.5GHz 8GB RAM 2x24x1.5TB disk - Carri ...................................... 13761.44 ? - *L16287/DESIR/08* 6x2x2GB RAM pour fcix{3,4} et clix - Carri ................................................................... 792 ? --------- Total 14553.44 ? - *L16288/SL2S/08* upgrade machine sl2s: 9 disques 1.5TB - Carri - 9*165? ...................................................... 1485 ? - *L16289/SL2S/08* upgrade machine sl2s: 4x2x2GB RAM - Carri - 4*156? .......................................................... 624 ? --------- Total 2109 ? Total Carri: 46096.07 ? {{VII. Divers (All):}} Poste CCD-IR: Yannick a telephone a la seconde candidate CDD IR. Elle s'appelle Mamta Pommier. Elle est indienne et est actuellement a Leiden. Son mari est francais et ils souhaitent revenir sur Paris. Contrairement a Yuliana Goranova, elle a sa these. Elle tres orientee developpement logiciels (C, Python), mais oriente vers le processing de donnees dans le domaine radio GMRT et LOFAR). Elle a aussi une tres bonne experience en X, mais tres peu en Visible ou en proche infrarouge. Elle attend un bebe humain pour le 30 decembre, et ne sera donc pas disponible avant le 1er mars. On etudie l'option d'avoir Yuliana Goranova en IE d'abord (sans these) et en IR ensuite (apres soutenance). Mais rien de decide encore. Doc et Rapport T0005: Yannick a redige et envoye le rapport Terapix pour le SAC qui de deroule cette semaine. Henry en a corrige l'anglais. Yannick redige en ce moment une doc pour la release T0005. Elle sera prete d'ici la fin de la semaine. Les commentaires sur cette doc qui a ete envoyee sur teralist sont les bienvenus. Yannick en profite pour corrige les pages web de la release T0005.