Theli-Forum

von **spiegelei** » Donnerstag 9. April 2020, 20:40

Hallo,
damit nicht alles durcheinander kommt mache ich mal einen neuen Thread für das RC2 auf.
Habe grade die RC2 gebaut, da kommt jetzt bei HDU reformatting

Code: Alles auswählen: ... ... M45_180000ms-filter_Red_4-Group_000 : Applying mask ... ERROR: Data processing in /home/kmueller/Astro/Objects/M45/200125_theli3/lights_red unsuccessful. Abort.

Das ist in der RC1 noch durchgelaufen.Im science-Verzeichnis bleiben auch die Originaldateien stehen, allerdings ist deren Größe zwar die Originalgröße, aber es ist kein Inhalt drin.
Die Flats und die Darks/Bias sind durchgelaufen. Das scheint aufzutreten, wenn die letzte Datei in der internen Liste bearbeitet wird.
fitsio ist seit dem letzten Versuch nicht mehr verändert worden....

Gruß
Karsten

von **mischa** » Donnerstag 9. April 2020, 21:06

Kannst du mir mal einen minimalen datensatz hochladen, mit dem sich das bei dir reproduzieren laesst?

danke,

mischa

von **spiegelei** » Donnerstag 9. April 2020, 21:36

Hallo Mischa,
falscher Alarm. Da war wohl von einem der letzten Abstürze eine beschädigte Datei übriggeblieben. Ich habe die Originaldateien noch mal ins Verzeichnis kopiert, da ging es wieder.
Jetzt kommt der nächste Anlauf mit scamp....
Gruß Karsten

von **spiegelei** » Donnerstag 9. April 2020, 22:03

Hallo,
so, beim Versuch der Astrometrie tritt jetzt folgendes auf:

Code: Alles auswählen: ############################################## Downloading astrometric reference catalog for lights_red ############################################## Catalog = PANSTARRS-DR1 Max allowed pm = unconstrained Field center RA = 03:47:00.00 Field center DEC = +24:07:00.0 Target name = M45 Magnitude limit = 14 Radius = 120' Retrieving key CORNERS_CRVAL1 for images in lights_red ... Retrieving key CORNERS_CRVAL2 for images in lights_red ... Retrieving key DATE-OBS for images in lights_red ... vizquery command: vizquery.py -mime=tsv -out.max=170000 -c.rm=120 -c='56.750000000000+24.116666666667' -out=_RAJ -out=_DEJ -source=II/349/ps1 -out=gmag,rmag,imag rmag=0..14 4597 PANSTARRS-DR1 reference sources retrieved at this location: RA = 56.750000000000 DEC = +24.116666666667 radius = 120' ############################################## Calculating astrometric solution for lights_red ############################################## POSANGLE_MAXERR = 180 POSITION_MAXERR = 16 PIXSCALE_MAXERR = 1.05 CROSSID_RADIUS = 14 ASTREF_WEIGHT = 1.0 SN_THRESHOLDS = 5,20 ASTR_INSTRUKEY = PHOT_INSTRUKEY = DISTORT_DEGREES = 3 DISTORT_GROUPS = DISTORT_KEYS = Astrometric solver = Scamp Matching method = Scamp STABILITY_TYPE = INSTRUMENT MOSAIC_TYPE = UNCHANGED FPA mode = IGNORE_PRIOR Match flipped images = N Checkplot resolution = ERROR: lights_red : Not all images have matching .scamp files! Abort. *** DONE ***

In ./theli/tmp, wo ja eigentlich eine Datei scamp_cats stehen sollte steht nur eine theli_mystd_anet.cat.

Gruß
Karsten

von **mischa** » Freitag 10. April 2020, 17:04

Kannst du mal im cat/ verzeichnis nachsehen, fuer welche deiner roten Bilder keine *.scamp dateien vorhanden sind? Das sollte eigentlich nicht passieren, ohne dass eine Warnung ausgegeben wird.

Im uebrigen kannst du bei einem Projekt komplett von vorne anfangen, in dem du mit Klick auf den Festplattenstapel (mittleres icon, rechts neben dem Projektnamen) alle Daten zuruecksetzt.

mischa

von **spiegelei** » Freitag 10. April 2020, 17:50

Hallo Mischa,
ich habe heute nahezu alles noch mal neu gebaut :roll:

(Atlas,Sextractor, swarp, scamp, theli).
Aktuell habe ich nun 3x Theli installiert - die RC1 und RC2 unter Suse und die RC2 in de VM unter Ubuntu.

Alle Versionen erzeugen im cat-Verzeichnis

Code: Alles auswählen: iview M45_180000ms-filter_Red_10-Group_000_1.cat M45_180000ms-filter_Red_11-Group_000_1.cat M45_180000ms-filter_Red_12-Group_000_1.cat M45_180000ms-filter_Red_13-Group_000_1.cat M45_180000ms-filter_Red_14-Group_000_1.cat M45_180000ms-filter_Red_15-Group_000_1.cat M45_180000ms-filter_Red_16-Group_000_1.cat M45_180000ms-filter_Red_17-Group_000_1.cat M45_180000ms-filter_Red_18-Group_000_1.cat M45_180000ms-filter_Red_19-Group_000_1.cat M45_180000ms-filter_Red_1-Group_000_1.cat M45_180000ms-filter_Red_1-Group_000.scamp M45_180000ms-filter_Red_2-Group_000_1.cat M45_180000ms-filter_Red_3-Group_000_1.cat M45_180000ms-filter_Red_4-Group_000_1.cat M45_180000ms-filter_Red_5-Group_000_1.cat M45_180000ms-filter_Red_6-Group_000_1.cat M45_180000ms-filter_Red_7-Group_000_1.cat M45_180000ms-filter_Red_8-Group_000_1.cat M45_180000ms-filter_Red_9-Group_000_1.cat refcat

Die RC1 erzeugt bei "Create Catalogs" unter .theli/tmp die scamp_cat (nur ein Eintrag, die Datei aus dem cat-Verzeichnis) und die theli_mystd_anet.cat, die RC2 (Suse/Ubuntu) nur die theli_mystd_anet.cat.

Bei der RC1 macht dann scamp irgendwas und bietet dann den (leeren) Kontrollplot zum Bestätigen an. Bei RC2 kommt irgendwann ein Popup-Fenster mit der Liste der fehlenden Dateien und dann kann man ja erst mal nicht weitermachen.
Was mir bei der Astrometrie übrigens aufgefallen ist, er lädt am Anfang nochmal den Referenzkatalog runter, auch wenn man das schon manuell gemacht hat.
Noch was - das iView ist eine ganz tolle Sache - ein dickes Lob.

Gruß Karsten

von **mischa** » Samstag 11. April 2020, 09:14

Hi Karsten,

kannst du "create source cat" mal mit verbosity = "debug" laufen lassen (zu finden unter einstellungen), und mir die ausgabe im monitor schicken?

mischa

von **spiegelei** » Samstag 11. April 2020, 11:29

Hallo Mischa,
anbei der Output nach "create_cat".
Gruß
Karsten

von **mischa** » Samstag 11. April 2020, 15:06

Wenn du statt 'sextractor' die theli-interne methode zur Erzeugung der Quellkataloge verwendest, geht es dann?

von **spiegelei** » Samstag 11. April 2020, 15:48

Hi Mischa
bei allen 3 Theli's

Code: Alles auswählen: Merging source catalogs ... M45_180000ms-filter_Red_1-Group_000 : 1938 sources after filtering... M45_180000ms-filter_Red_10-Group_000 : 1638 sources after filtering... M45_180000ms-filter_Red_11-Group_000 : 1664 sources after filtering... M45_180000ms-filter_Red_12-Group_000 : 1580 sources after filtering... M45_180000ms-filter_Red_13-Group_000 : 1325 sources after filtering... M45_180000ms-filter_Red_14-Group_000 : 1373 sources after filtering... M45_180000ms-filter_Red_15-Group_000 : 1368 sources after filtering... M45_180000ms-filter_Red_16-Group_000 : 1240 sources after filtering... M45_180000ms-filter_Red_17-Group_000 : 1141 sources after filtering... M45_180000ms-filter_Red_18-Group_000 : 919 sources after filtering... M45_180000ms-filter_Red_19-Group_000 : 844 sources after filtering... M45_180000ms-filter_Red_2-Group_000 : 2051 sources after filtering... M45_180000ms-filter_Red_3-Group_000 : 2022 sources after filtering... M45_180000ms-filter_Red_4-Group_000 : 1831 sources after filtering... M45_180000ms-filter_Red_5-Group_000 : 1915 sources after filtering... M45_180000ms-filter_Red_6-Group_000 : 1891 sources after filtering... M45_180000ms-filter_Red_7-Group_000 : 1808 sources after filtering... M45_180000ms-filter_Red_8-Group_000 : 1655 sources after filtering... M45_180000ms-filter_Red_9-Group_000 : 1668 sources after filtering... ERROR: M45_180000ms-filter_Red_1-Group_000 : Merged only 19 out of 1 catalogs for scamp! Abort.

tmp-Verzeichni ist in allen 3 Fällen leer.

Gruß
Karsten

von **spiegelei** » Samstag 11. April 2020, 18:15

Hi Mischa,
nebenbei mal eine Verständnisfrage - die Cats werden ja von Sextractor und/oder Theli scheinbar ordentlich erzeugt (iView zeight prima die source- und refcats an). Am Ende kommt dann die Meldung Merging source catalogs..., das klingt für mich, als wenn alle *.cat zu dem *.scamp zusammengefasst werden (kommt auch größenmäßig in etwa hin). Dann wäre ja theoretisch das Vorhandensein nur einer *.scamp erst mal erklärbar...
Gruß
Karsten

PS: Sind bei der Meldung von der Theli-cat Erzeugung "Merged only 19 out of 1 catalogs for scamp!" die Zahlen verdreht?

von **mischa** » Samstag 11. April 2020, 18:36

Hallo Karsten,

pro Bild gibt es nur einen scamp-Katalog. Bei professionellen Kameras mit mehreren Detektoren werden die zu einem .scamp Katalog zusammengefasst. Bei einer Einzelchip-kamera handelt es sich im Grunde nur um eine Umformatierung.

Die Zahlen sind nicht verdreht. Verstehen tue ich das aus der Ferne nicht. Am besten waere es wohl, due wuerdest mir einen minimalen Rohdatensatz schicken, z.b. 3 Bias, 3 Flat und 3 Lights. Dann kann ich sehen, ob da eventuell was gleich am Anfang bei der header-Formatierung nicht richtig passt.

mischa

von **spiegelei** » Samstag 11. April 2020, 18:41

Hi Mischa,
ich stelle mal was zusammen. Ob ich das von hier aus auf den Firmenserver hochladen kann muss ich sehen, sonst erst Dienstag.
Auf welche Art und Weise passiert eigentlich die Erzeugung der .scamp?

Gruß
Karsten

von **mischa** » Samstag 11. April 2020, 18:54

Die .scamp Kataloge sind "binary FITS tables". Die kann man sich mit der cfitsio library erstellen. THELI passt entweder die SExtractor-Kataloge an, oder schreibt die internen kataloge entsprechend raus.

von **spiegelei** » Samstag 11. April 2020, 18:56

Hi Mischa,
kann man das auch über die Kommandozeile machen?
Gruß
Karsten

Theli-Forum

Bug Report Theli V3 RC2

Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Re: Bug Report Theli V3 RC2

Wer ist online?