by
YME
- Updated October 20th, 2007
Minutes for the terameeting of October 14th 2007
Present (10:30-11:15): Mireille, Henry, Mathias, Yannick
Present (11:30-12:15): Fred, Henry, Yannick
Yannick's summary document
Megacam PI (Mireille, Emmanuel, Mathias, Yannick):
The stacks Mireille started last Friday to run over the week end had to be re-done today because of network problems at Observatoire de Paris. New stacks in progress, ready very soon, Mireille said. Mathias will check the 3-color TIFF images.
Mireille will check whether the shifts between the past and new Scamps of 04AF09 Bul01 pure pure random or systematics. This shift means terapix may have to run Scamp on ALL data each time Annie Robin will ask Terapix to process a new RunID. In order to anticipate potential difficulties and prepare a better work plan for her data, Mathias will ask Annie the total duration of her project, the occurence of RunID over the coming months/years and an estimate of the total amount of data she expect per RunID.
Megacam/WIRCam PI (Chiara (virtually), Mireille, Henry, Yannick):
Mireille did not get feed back from Bouvier about the stacks and catalogs she released. Unless Chiara got news, Yannick will ask him.
Mathias asked whether the Ks photometric calibration Chiara faced on may be due a problems with the sky subtraction. We all believe Chiara did check this carefully, but, just in case, we will ask Chiara (see -a). Henry remind Herve Aussel used his own tools to calibrate their WIRCam data and may be using his scripts is an option to look at. This has to be clarified since it may be the manual fine tunning Chiara did is basically what Herve did (see -b).
a - Answer from Chiara to Mathias: Cher Mathias,
les problemes de calibration en Ks (et tous filtres 2MASS-like cf mon mail du 12/10 a Bouvier cc teralist), sont dus a l'inconsistence entre temps de poses differents. J'ai eu des problemes similaires dans la calibration de Monin, mais je ne m'etais pas trop inquietee, parce que une simple redefinition des images photometriques dans scamp avait resolu les incongruences. Je vous rappelle que pour la definition des images photometriques je n'ai pas (comme pour MegaCam) les metadonnees du CFHT, il faut donc que je construits des criteres utilisant temps de poses (WIRCam est fortement non-lineaire), absorption par rapport a 2MASS calculee par Loic et Delta point zero calcule par Scamp. La difference entre monin et bouvier est que Monin a utilise plusieurs temps de pose entre 10 et 20 secondes, Bouvier a utilise deux series de temps de poses bien differents (en K 5 et 15, en J 10 45, en H 5 10). Je vous rappelle aussi que les donnees WIRCam de la 'nouvelle vague' ont une photometrie completement differente a cause de la correction de linearite introduite par Loic.
ADDENDUM : La difference entre mes stacks et 2MASS est un decalage systematique qui ne depends pas de la magnitude (au moins dans la limite de ce qu'on peut voir, vu la dispersion de ce type de plot).
b - Answer from Chiara to Henry Cher Henry,
ca n'a absolument rien a voir avec ce que fait Herve. Extrait de ma synthese:"La seule solution que j'ai trouvee est faire du tuning sur chaque set d'images (heuresement bouvier veut des stack separes) et modifier les informations photometriques dans les headers qui contiennent l'astrometrie commune." Je m'excuse si mon francais n'est pas assez precis. J'essayrai d'etre plus claire. Je tourne scamp sur chaque set d'images separement (poses courtes Ks , poses longues Ks, poses courtes H, poses longues H... etc.) et je rajoute le FLXSCALE trouve aux headers produits par la premiere calibration, qui est celle utilisee pour le stack MegaCam par Mireille. Le tuning est fait sur les criteres de photometrie, et sur les parametres scamp (selection des objets, type de photometrie).
Yannick wonder why the Ks calibration did not work while the CH4 stacks are already delivered. Does it mean there is no photometry calibration problems with these filters, though he expected more difficulties with these filters than with usual broad band ones (see -c).
c - Answer from Chiara to Yannick Cher Yannick, Extrait de mon mail a bouvier cc teralist: "Malheuresement je n'ai aucun moyen pour verifier a posteriori la calibration photometrique dans les filtres CH4On/Off. Mais comme les images ont toutes le meme temps de pose la coherence interne devrait etre respectee." A part une plus ou moins bonne dispersion calcule par scamp je n'ai pas de catalogues de reference pour comparer la photometrie du stack final en CH4On/Off: j'ai juste verifier que les deux stacks (On Off) n'aient pas de difference systematiques, vu que ce qui interesse dans ce cas est voir si une structure est switched off or on dans ce filtre. Parcontre quand je fait un stack dans un filtre 2MASS-like je verifie a posteriori son accord avec 2MASS: dans le cas de bouvier je verifie des systematiques par rapport a 2MASS, systematiques qui dependent du temps de pose des images utilisees dans le stack
T0005 (ALL):
We have a request from C. Willot for a series of 70% best seeing Deep stacks for T0005. Yannick thinks it is a good idea. he sent an email to the CFHTLS Steering group. But the impact on Terapix must be evaluated. Yannick ask Mathias to select 25%, 70% and 85% best seeing Deep images in all filters and provide the histograms, the total number of images, the mean and median seeing of each. That will help to see what we really gain as compared to the 85%.
Hardware (Fred, Emmanuel (virtually), Henry, Yannick) :
Fred released the PUMA for the two sets of nodes: efigix* and mix* as well as for fcix4 RAID disks (20TB). He also ask for quotations for Emmanuel's new PC.
We suggest to leave out the 64GB option, too expensive and that will not solve the Deep stacks anyway. Instead we suggest to buy CPUs for fcix2/3/4 in order to increase the efficiency of those nodes in a Condor context.
Fred will install scamp-1.4.0 on all nodes.
Misc. (All):
We suggest to send an email to CDS about this change of catalog format issue. What happened with the 2MASS catalog may happen again in the future. It would be wise CDS send warning to a mailing list when the do modifications in catalogs.
Yannick summarized the current status of the IR CDD: 2 candidates Patrick Hudelot and Olivier Herent. Both seem ok. Emmanuel has interviewed Herent and will interview Hudelot this afternoon. Decision soon because we are short in time.
Chiara signale que les images COSMOS D2 reprocessees par Loic, actuellement sur le disque de mix10, sont inutilisees. Chiara voudrait savoir si elle peut les effacer (pour gagner de la place) ou bien si Henry souhaite les retraiter? : Henry answered yesterday: "no, I would like to look at them to see how much better Loic's reduction is than ours. Don't delete them. They are ALL the cosmos-d2 images (05+06)? " .
Il faudrait que Fred investigue le probleme pour en faire un diagnostic plus precis. : Fred did not find out yet why this happen.
Par ailleurs Chiara demande s'il possible de reutiliser cexec pour installer les softs sur le cluster? : Fred does not recommend this at the moment.
Chiara demande si ce probleme du swapping de la memoire est reel, et si , dans le cas contraire, elle peux continuer a utiliser fcix? : Fred did not looked at this problem. He does not recommend to use fcix until it is fixed.
Next tera-meeting: Monday 22, 10:30 , room 281
