Message-ID: <46AE5606.6000000@iap.fr>
Date: Mon, 30 Jul 2007 23:20:06 +0200
From: Emmanuel Bertin <bertin@iap.fr>
MIME-Version: 1.0
To:  teralist@iap.fr
Subject: [teralist] Synthese de la semaine du 24/07/2007 au 30/07/2007
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: 7bit
Reply-To: teralist@iap.fr
Precedence: list
Sender: petidomo GRAND POSTIER <petidomo@iap.fr>

Chers tous,

voici une synthese partielle des activites couvrant la periode du 24/07 au 
30/07! Je n'ai pas eu de retour de Fred et de Mathias.

Scories processing T0004 (Yannick, Fred, Mathias)
- Yannick a suivi avec Fred les transferts et le processing QFITS de 06BF26 
(Soucail: 116 images, QFITS termine) et des images Deep manquantes dans T0004 : 
~1000 images, 740 terminees).  Plusieurs arrets consecutifs aux flat manquants 
qu'il fallait recuperer au CFHT et aux pbs de connexions avec le CFHT ont 
empeche une recuperation rapide. Les QFITS Deep qui auraient du etre termine 
vendredi ou samedi tournent donc encore.
- *Emmanuel demande: Mathias a-t-il du nouveau concernant les transformations 
photometriques MEGAPRIME-SDSS?*

MEGACAM P.I. (Mireille, Fred):
- Les data de Soucail 06BF26 sont en cours de traitement par Mireille. La 
notation est terminee, et SCAMP a ete lance.

Developpements T05 (Chiara, Gregory, Emmanuel):
- La base de donnee prototype est en phase de test: le but est de la remplir au 
moyen d'un script Python, afin de pouvoir effectuer des requetes dessus et de 
verifier sa stabilite et la justesse de son architecture (en particulier les 
relations entre les tables). Les premiers tests de Gregory et Chiara sur de 
fausses donnees ont ete interrompus pour des erreurs de MySQL qui n'ont pas ete 
comprises tout de suite. Gregory a alors prefere s'investir dans l'ecriture d'un 
script un peu plus elabore (parcours de dossier d'images, lecture d'une partie 
des mots-cles necessaires a une premiere phase d'ingestion, connexion a la base 
et remplissage de celle ci); ce travail est en cours, ainsi que l'apprentissage 
de PyFITS et de Python. Emmnuel et Chiara ont indique a Gregory comment faire un 
mapping correct entre les keywords des headers des images MEGACAM et WIRCAM, et 
les champs de la base prototype.
- La definition des images 'coaddition' semble plus compliquee que ce que Chiara 
croyait: reflexions en cours.
- Emmanuel a lance sur le cluster TERAPIX des jobs impliquant 2To de donnees 
(SWarp, SExtractor, PSFEx) au moyen de Condor. Tout s'est bien passe, a part un 
pb systeme d'efigix samedi matin (voir plus loin). Le rendement moyen 
d'utilisation des CPUs (et de la bande passante) etait de l'ordre de 50% sur 32 CPU.
- Olivier suggere d'investiguer dCache ( http://www.dcache.org ) pour acceder 
aux donnees a travers Condor.

Developpements software (Emmanuel)
- Emmanuel ecrit en ce moment l'article decrivant PSFEx. La documentation en 
sera tiree. La release officielle est prevue pour la fin aout.

Systeme/hardware (Emmanuel)
- la teralist a encore completement dec... cette semaine, avec des blocages 
d'une heure, typiquement. Ca devient penible. *Emmanuel demande: Fred 
pourrais-tu regarder ce qui se passe STP? Merci.*
- Efigix est montee de maniere inattendue a une charge de 30 samedi matin vers 
04:00, au milieu d'une distribution de jobs Condor (c'est elle qui distribuait 
les jobs). Une activite I/O parasite semble etre a l'origine de cette charge; 
Emmanuel a du la rebooter pour reprendre un fonctionnement normal. Des messages 
d'erreur SMART ont ete recus. Emmanuel a suspecte la procedure automatique 
hebdomadaire longue de verification SMART d'etre en cause, mais Fred confirme 
l'avoir retiree. Le mystere demeure donc. A noter que le reboot de la machine 
semble avoir perturbe l'envoi de certain fichiers aux taches (mais pas 
l'execution et la recolte des taches elles-meme).

Web (Chiara)
- Chiara a importe sur SVN les scripts PHP Spica de Laurent.

Misc (Yannick, Emmanuel)
- Gregory a recu la sacoche pour son future ordinateur portable, mais elle n'a 
pas la bonne taille.
- Le cahier des charges concernant le web service QualityFITS a ete fourni a 
Eric Slezak.
- Gregory a finalement decide de prendre le poste CDD compte tenu du salaire qui 
est plus avantageux qu'un poste equivalent CDI IE CNRS ou un poste CDD IE 
Universite.  Pour le CDI, les admissibles sont connus, mais aucun ne s'est 
encore manifeste.


WIRCAM (Chiara)
- Tom Dwelly demande le traitement du RUNID 07AO06 (avec les images precedentes 
du RUNID 06AO02): la demande a ete rajoutee dans la queue.
- Loic a annonce a Chiara qu'il lui enverra les donnees Willott et Monin "bientot"
- Les donnees COSMOS ont ete effacees par Chiara.
- Chiara signale que les donnees WIRDS qui correspondent au champ D2 sont 
communes au projet COSMOS et Chris Willott a clairement dit a Loic "The COSMOS 
observations are being reduced separately by the COSMOS team so you do not have 
to do anything for those."

Amicalement,
			Emmanuel.