Message-ID: <46916843.5090908@iap.fr>
Date: Mon, 09 Jul 2007 00:42:11 +0200
From: Emmanuel Bertin <bertin@iap.fr>
MIME-Version: 1.0
To:  teralist@iap.fr
Subject: [teralist] Synthese des semaines du 18/06/2007 au 08/07/2007
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: 7bit
Reply-To: teralist@iap.fr
Precedence: list
Sender: petidomo GRAND POSTIER <petidomo@iap.fr>

Chers tous,

voici une synthese partielle et partiale des activites couvrant cette
longue periode du 18/06 au 08/07! Comme d'habitude je n'ai pas recu de synthese
de Fred. Les points le concernant sont donc "interpoles".

Processing T04 (Yannick, Mireille, Henry):
- Le pb de l'astrometrie de D3-85 i a finalement ete resolu en utilisant D3-25 i 
comme reference (en prenant soin d'ecarter les etoiles saturees).
- Henry a calcule les aires effectives avec la nouvelle version de WeightWatcher.
- *Henry a emis le souhait de voir supprimer la protection par mot de passe de 
la table T03 ( http://terapix.iap.fr/cplt/tab_t03ym.html )*
- Mise en place de T0004 avec le CFHT et le CADC: Yannick a effectue un controle 
des fichiers disponibles, des acces et de l'interface de distribution au CADC.
- Yannick a produit et installe les pages Terapix specifiques a T0004:
http://terapix.iap.fr/rubrique.php?id_rubrique=241
http://terapix.iap.fr/article.php?id_article=715
(re-actualisation de la version de T0003)
http://terapix.iap.fr/article.php?id_article=712
http://terapix.iap.fr/article.php?id_article=713
- Henry et Yannick ont produit la page:
http://terapix.iap.fr/article.php?id_article=717
- *Emmanuel demande: quid de la grande table synthetique comme celle des 
releases precedentes?*
- Les questions recues par Yannick pour le moment se rapportent surtout a cet 
offset de la bande u: date de debut du pb, origine, moyen de la corriger. Pour
90% des questions, les reponses etaient deja dans les pages Terapix, mais 
Yannick pense adjoindre une page specifique pour ce pb. C'est en cours.
*Emmanuel demande: nous avons une section du forum dediee aux donnees CFHTLS, 
pourrais-tu systematiquement demander a tes interlocuteurs de s'y reporter et 
d'y poser leurs questions, ce qui t'epargnerait d'avoir a repondre personnellement?*
- *Henry demande de s'il serait possible de rendre disponibles les catalogues 
combines prepares par Mireille. Ce sont les produits que les gens veulent le 
plus, mais ils semblent ne pas avoir ete inclus pour des raisons de difficulte 
de nommage.*

MEGACAM P.I. (Mireille):
- Les donnees 07AD85 "Atteia" et 07AD89 "Rouan" ont ete reduites et mises a 
disposition par Mireille
- *Emmanuel demande: ont-elles ete recuperees?*.

Systeme/ Hardware (Fred, Yannick, Mathias, Emmanuel)
- Fred et Olivier (Ricou) ont installe et configure de maniere basique Condor 
sur les machines 64bits du cluster. Le pb de hostname a ete regle, et Condor 
fonctionne maintenant depuis toutes les machines *Emmanuel demande: cela semble 
avoir eu comme consequence de supprimer la reference a la machine dans les 
e-mails de notification d'installation, Fred peux-tu corriger ca?*. Il est 
egalement possible de lancer les jobs depuis sa machine de bureau, a la 
condition d'ajouter de clix en serveur DNS dans son /etc/resolv.conf. Emmanuel a 
pu faire plusieurs tests (pas tres charges en I/O cependant) avec succes 
(Anthony a eu moins de chance). mix5 a plante durant l'un de ces tests, mais 
cela a ete gere sans accroc par Condor. Il reste cependant toujours a tester le 
transfert en masse de donnees et d'affiner la configuration (notamment pour les 
taches multithreadees). *Emmanuel demande: Fred, quand penses-tu pouvoir t'en 
occuper?*.
- Emmanuel a redige une petite doc d'utilisation de Condor. *Emmanuel demande: 
Fred, peux-tu de ton cote rediger le petit cookbook d'installation?*
- L'alimentation du PC de Yannick a claque, et a ete remplacee par Fred; mais la 
nouvelle est tres bruyante. *Emmanuel demande: Fred, reste-t-il des alims 
silencieuses d'avance pour les machines desktop?*
- Yannick a contribue pour 2700 EUR (PNC CFHTLS) a la machine financee par le 
PNPS afin de pouvoir acheter une machine de puissance raisonnable.
- l'UPS PowerWare a ete livree le 27 juin. *Emmanuel demande: est-elle deja 
installee?*

Developpement software (Chiara, Gregory, Emmanuel):
- Chiara a rajoute la macro de Akim Demaille a tous les logiciels qui ne 
l'avaient encore et modifie les fichiers spec.in pour generaliser la procedure 
de packaging en RPM. Elle peut ainsi desormais packager sur clarix.
- Sextractor: Chiara a ecrit une feuille de style XSLT preliminaire (elle 
n'avait pas encore ete ecrite...): elle rajoute le print de epoch (qui avait ete 
oublie) dans le XML, mais pour ses images, qui n'ont pas de keyword EPOCH, elle 
est toujours zero. *Chiara demande: A quoi sert EPOCH dans SExtractor? Il s'agit 
d'un keyword 'deprecated'.*
- WeightWatcher: les "#" ne sont desormais plus obligatoires dans les .reg. Du 
travail a encore ete effectue sur l'ecriture des headers (allocation d'espace 
pour les keywords a rajouter). Chiara a mis a jour la documentation. La version 
1.8.4 est enfin stable!
- SWarp: Chiara a ajoute les options SATLEV_KEYWORD et SATLEV_DEFAULT au fichier 
de configuration. La saturation de sortie sera affichee dans le keyword 
"SATURATE" du stack: il s'agit de la plus petite parmi toutes les saturations 
des fichiers .resamp.fits, une fois tous les recalages astrometriques e 
photometriques appliques. Une archive RPM de test est disponible.
- MissFITS: encore quelque modifications de Chiara dans la librairie FITS 
d'Emmanuel pour repondre aux criteres FITS: point critique pour MissFITS parce 
qu'il transforme les images d'un format a l'autre. Toutes les modifications de 
la librairie ont ete propagees a WeigthWatcher. La version 2.2.4 est disponible.
- Gregory a effectue, avec un leger retard, sa demo de detection de trainees de 
satellites basee sur la librairie OpenCV. Il reste quelques points a ameliorer, 
notamment du point de vue de l'ajustement automatique des seuils de detection, 
mais les resultats sont prometteurs. Il est decide de mettre temporairement de 
cote ces developpements pour les 2 mois qui viennent, afin de s'occuper du 
developpement du pipeline de T05. Les ameliorations restant a apporter sont la 
prise en charge de fichiers FITS avec gestion de Multi Extension Files, une 
soustraction de fond de ciel similaire a SWarp, la prise en charge du binning 
(taille_image/8), l'ecriture et exportation de fichiers '.reg'

Developpements T05 (Emmanuel, Chiara, Gregory, Anthony):
- Gregory, Chiara, Emmanuel et Anthony ont decide d'utiliser Dia pour la 
modelisation graphique UML du nouveau pipeline. Apres un mini-cours d'UML par 
Gregory, la distribution des taches a ete effectuee comme suit. Du point de vue 
statique:
- Gregory a genere une premiere serie de diagrammes d'utilisation.
- Gregory et Chiara ont genere un diagramme d'activite du pipeline.
- Emmanuel doit s'occuper de generer un jeu preliminaire de tables pour la base 
de donnees avec DBDesigner4 (deadline: mercredi 11).
- Fred serait la personne la plus competente pour s'occuper du diagramme de 
deploiement (pas de retour de sa part pour l'instant).
- Il reste le point de vue dynamique avec les diagrammes de sequence, de 
collaboration et d'etats. *Distribution des taches a effectuer en terameeting.*
- *Emmanuel demande: Gregory, pourrais-tu creer et organiser le repository SVN 
de developpement du pipeline?*

Misc. (Yannick, Gregory, Emmanuel, Fred)
- MEGACAM a subi des avaries le 17 juin dernier. Le filtre i a ete endommage et 
doit etre remplace (nouveau filtre prevu pour octobre). Les rails de support 
etaient tordus et ont du etre remplace. WIRCAM a ete utilise entre temps.
- Des livre sur UML ont ete achetes par Gregory *Question d'Emmanuel: serait-il 
possible de mettre a jour les pages intranet a ce propos?*
- L'ecran 24" de Yannick a ete derobe, et remplace par celui de Henry, qui a du 
coup pris l'ex-ecran de Laurent. Emmanuel a profite de l'occasion pour s'acheter 
un ecran de 30" et une carte graphique dual-link (commandes par Fred sur les 
credits EFIGI), et laissera son 24" en echange.

WIRCAM (Chiara, Henry)
- Procedure de soustraction de fond ciel: rajout de l'option pour garder les 
images du ciel. Page de description sur l'intranet 
http://terapix.iap.fr/article_intranet.php?id_article=701 *Chiara demande: 
commentaires? Est-elle comprehensible? On m'a demande de laisser un cookbook, 
est-il suffisant?*
- Comparaison stack COSMOS: la comparaison entre le stack COSMOS et TERAPIX est 
a refaire. Henry n'avait pas inclus le RUNID 05BH89 dans le stack, contrairement 
a Chiara. Les RUNIDs COSMOS 05BH36 et 05BH89 ont ete mis a disposition de David 
Sanders il y a maintenand plus d'un an (voir 
http://clix.iap.fr/spica/admin/admin-spica/survey/pi_runid.php) *Chiara demande: 
que va-t-on faire de ces donnees? Apres un an j'ai le droit de les effacer?*
- Donnees Bouvier: un stacking separe a ete fait pour les poses courtes et 
longues, la frontiere entre les deux etant a 5 secondes. Termine, delivre et 
telecharge. Images intermediaires (skyframes, CHECKIMAGES BACKGROUND a different 
BACK_FILTERSIZE) preparees et delivrees. Chiara en a profite pour tester une 
etape en plus de la soustraction du background. En gros elle a rajoute une etape 
de remise a zero du fond des images independente de SWarp: chaque image est 
soustraite du fond de ciel dans SExtractor (CHECKIMAGE -BACKGROUND) en masquant 
les objets detectes sur le stack preliminaire. Le stacking est fait apres sans 
aucune soustraction de fond de ciel (SUBTRACT_BACK N). Pas encore de retour de 
Bouvier/Moreaux.
- Telechargement des images de test pour le stack 'shallow': le but est de 
verifier que les defauts horizontaux du chip 4 ont disparus dans la nouvelle 
version du pretraitement. Chiara a teste en meme temps l'etape supplementaire de 
soustraction de fond de ciel, elle donne des resultats tres satisfaisants. 
Chiara laisse tomber les tests avec la liste d'images utilisees par Loic en 
premiere passe.
- La requete de Mike Hudson (RUNID 07AC28) a ete mise dans la queue.

Amicalement,
			Emmanuel.