Bug Report Theli V3 RC2

Alles über das neue Theli 3 - bitte keine Beiträge vom alten Theli (2) hier posten, es gibt eine extra Unterforumfür das alte Theli

Bug Report Theli V3 RC2

Beitragvon spiegelei » Donnerstag 9. April 2020, 20:40

Hallo,
damit nicht alles durcheinander kommt mache ich mal einen neuen Thread für das RC2 auf.
Habe grade die RC2 gebaut, da kommt jetzt bei HDU reformatting
Code: Alles auswählen
...
...
M45_180000ms-filter_Red_4-Group_000 : Applying mask ...
ERROR: Data processing in /home/kmueller/Astro/Objects/M45/200125_theli3/lights_red unsuccessful.
Abort.


Das ist in der RC1 noch durchgelaufen.Im science-Verzeichnis bleiben auch die Originaldateien stehen, allerdings ist deren Größe zwar die Originalgröße, aber es ist kein Inhalt drin.
Die Flats und die Darks/Bias sind durchgelaufen. Das scheint aufzutreten, wenn die letzte Datei in der internen Liste bearbeitet wird.
fitsio ist seit dem letzten Versuch nicht mehr verändert worden....

Gruß
Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Donnerstag 9. April 2020, 21:06

Kannst du mir mal einen minimalen datensatz hochladen, mit dem sich das bei dir reproduzieren laesst?

danke,

mischa
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Donnerstag 9. April 2020, 21:36

Hallo Mischa,
falscher Alarm. Da war wohl von einem der letzten Abstürze eine beschädigte Datei übriggeblieben. Ich habe die Originaldateien noch mal ins Verzeichnis kopiert, da ging es wieder.
Jetzt kommt der nächste Anlauf mit scamp....
Gruß Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Donnerstag 9. April 2020, 22:03

Hallo,
so, beim Versuch der Astrometrie tritt jetzt folgendes auf:
Code: Alles auswählen
##############################################
Downloading astrometric reference catalog for lights_red
##############################################

Catalog = PANSTARRS-DR1
Max allowed pm = unconstrained
Field center RA = 03:47:00.00
Field center DEC = +24:07:00.0
Target name = M45
Magnitude limit = 14
Radius = 120'

Retrieving key CORNERS_CRVAL1 for images in lights_red ...
Retrieving key CORNERS_CRVAL2 for images in lights_red ...
Retrieving key DATE-OBS for images in lights_red ...
vizquery command:
vizquery.py -mime=tsv -out.max=170000 -c.rm=120 -c='56.750000000000+24.116666666667' -out=_RAJ -out=_DEJ -source=II/349/ps1 -out=gmag,rmag,imag rmag=0..14
4597 PANSTARRS-DR1 reference sources retrieved at this location:
RA = 56.750000000000
DEC = +24.116666666667
radius = 120'

##############################################
Calculating astrometric solution for lights_red
##############################################

POSANGLE_MAXERR = 180
POSITION_MAXERR = 16
PIXSCALE_MAXERR = 1.05
CROSSID_RADIUS = 14
ASTREF_WEIGHT = 1.0
SN_THRESHOLDS = 5,20
ASTR_INSTRUKEY =
PHOT_INSTRUKEY =
DISTORT_DEGREES = 3
DISTORT_GROUPS =
DISTORT_KEYS =
Astrometric solver = Scamp
Matching method = Scamp
STABILITY_TYPE = INSTRUMENT
MOSAIC_TYPE = UNCHANGED
FPA mode = IGNORE_PRIOR
Match flipped images = N
Checkplot resolution =

ERROR: lights_red : Not all images have matching .scamp files!
Abort.

*** DONE ***


In ./theli/tmp, wo ja eigentlich eine Datei scamp_cats stehen sollte steht nur eine theli_mystd_anet.cat.

Gruß
Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Freitag 10. April 2020, 17:04

Kannst du mal im cat/ verzeichnis nachsehen, fuer welche deiner roten Bilder keine *.scamp dateien vorhanden sind? Das sollte eigentlich nicht passieren, ohne dass eine Warnung ausgegeben wird.

Im uebrigen kannst du bei einem Projekt komplett von vorne anfangen, in dem du mit Klick auf den Festplattenstapel (mittleres icon, rechts neben dem Projektnamen) alle Daten zuruecksetzt.

mischa
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Freitag 10. April 2020, 17:50

Hallo Mischa,
ich habe heute nahezu alles noch mal neu gebaut :roll: (Atlas,Sextractor, swarp, scamp, theli).
Aktuell habe ich nun 3x Theli installiert - die RC1 und RC2 unter Suse und die RC2 in de VM unter Ubuntu.

Alle Versionen erzeugen im cat-Verzeichnis
Code: Alles auswählen
iview
M45_180000ms-filter_Red_10-Group_000_1.cat
M45_180000ms-filter_Red_11-Group_000_1.cat
M45_180000ms-filter_Red_12-Group_000_1.cat
M45_180000ms-filter_Red_13-Group_000_1.cat
M45_180000ms-filter_Red_14-Group_000_1.cat
M45_180000ms-filter_Red_15-Group_000_1.cat
M45_180000ms-filter_Red_16-Group_000_1.cat
M45_180000ms-filter_Red_17-Group_000_1.cat
M45_180000ms-filter_Red_18-Group_000_1.cat
M45_180000ms-filter_Red_19-Group_000_1.cat
M45_180000ms-filter_Red_1-Group_000_1.cat
M45_180000ms-filter_Red_1-Group_000.scamp
M45_180000ms-filter_Red_2-Group_000_1.cat
M45_180000ms-filter_Red_3-Group_000_1.cat
M45_180000ms-filter_Red_4-Group_000_1.cat
M45_180000ms-filter_Red_5-Group_000_1.cat
M45_180000ms-filter_Red_6-Group_000_1.cat
M45_180000ms-filter_Red_7-Group_000_1.cat
M45_180000ms-filter_Red_8-Group_000_1.cat
M45_180000ms-filter_Red_9-Group_000_1.cat
refcat


Die RC1 erzeugt bei "Create Catalogs" unter .theli/tmp die scamp_cat (nur ein Eintrag, die Datei aus dem cat-Verzeichnis) und die theli_mystd_anet.cat, die RC2 (Suse/Ubuntu) nur die theli_mystd_anet.cat.

Bei der RC1 macht dann scamp irgendwas und bietet dann den (leeren) Kontrollplot zum Bestätigen an. Bei RC2 kommt irgendwann ein Popup-Fenster mit der Liste der fehlenden Dateien und dann kann man ja erst mal nicht weitermachen.
Was mir bei der Astrometrie übrigens aufgefallen ist, er lädt am Anfang nochmal den Referenzkatalog runter, auch wenn man das schon manuell gemacht hat.
Noch was - das iView ist eine ganz tolle Sache - ein dickes Lob.

Gruß Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Samstag 11. April 2020, 09:14

Hi Karsten,

kannst du "create source cat" mal mit verbosity = "debug" laufen lassen (zu finden unter einstellungen), und mir die ausgabe im monitor schicken?

mischa
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Samstag 11. April 2020, 11:29

Hallo Mischa,
anbei der Output nach "create_cat".
Gruß
Karsten
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Samstag 11. April 2020, 15:06

Wenn du statt 'sextractor' die theli-interne methode zur Erzeugung der Quellkataloge verwendest, geht es dann?
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Samstag 11. April 2020, 15:48

Hi Mischa
bei allen 3 Theli's
Code: Alles auswählen
Merging source catalogs ...
M45_180000ms-filter_Red_1-Group_000 : 1938 sources after filtering...
M45_180000ms-filter_Red_10-Group_000 : 1638 sources after filtering...
M45_180000ms-filter_Red_11-Group_000 : 1664 sources after filtering...
M45_180000ms-filter_Red_12-Group_000 : 1580 sources after filtering...
M45_180000ms-filter_Red_13-Group_000 : 1325 sources after filtering...
M45_180000ms-filter_Red_14-Group_000 : 1373 sources after filtering...
M45_180000ms-filter_Red_15-Group_000 : 1368 sources after filtering...
M45_180000ms-filter_Red_16-Group_000 : 1240 sources after filtering...
M45_180000ms-filter_Red_17-Group_000 : 1141 sources after filtering...
M45_180000ms-filter_Red_18-Group_000 : 919 sources after filtering...
M45_180000ms-filter_Red_19-Group_000 : 844 sources after filtering...
M45_180000ms-filter_Red_2-Group_000 : 2051 sources after filtering...
M45_180000ms-filter_Red_3-Group_000 : 2022 sources after filtering...
M45_180000ms-filter_Red_4-Group_000 : 1831 sources after filtering...
M45_180000ms-filter_Red_5-Group_000 : 1915 sources after filtering...
M45_180000ms-filter_Red_6-Group_000 : 1891 sources after filtering...
M45_180000ms-filter_Red_7-Group_000 : 1808 sources after filtering...
M45_180000ms-filter_Red_8-Group_000 : 1655 sources after filtering...
M45_180000ms-filter_Red_9-Group_000 : 1668 sources after filtering...
ERROR: M45_180000ms-filter_Red_1-Group_000 : Merged only 19 out of 1 catalogs for scamp!
Abort.

tmp-Verzeichni ist in allen 3 Fällen leer.

Gruß
Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Samstag 11. April 2020, 18:15

Hi Mischa,
nebenbei mal eine Verständnisfrage - die Cats werden ja von Sextractor und/oder Theli scheinbar ordentlich erzeugt (iView zeight prima die source- und refcats an). Am Ende kommt dann die Meldung Merging source catalogs..., das klingt für mich, als wenn alle *.cat zu dem *.scamp zusammengefasst werden (kommt auch größenmäßig in etwa hin). Dann wäre ja theoretisch das Vorhandensein nur einer *.scamp erst mal erklärbar...
Gruß
Karsten

PS: Sind bei der Meldung von der Theli-cat Erzeugung "Merged only 19 out of 1 catalogs for scamp!" die Zahlen verdreht?
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Samstag 11. April 2020, 18:36

Hallo Karsten,

pro Bild gibt es nur einen scamp-Katalog. Bei professionellen Kameras mit mehreren Detektoren werden die zu einem .scamp Katalog zusammengefasst. Bei einer Einzelchip-kamera handelt es sich im Grunde nur um eine Umformatierung.

Die Zahlen sind nicht verdreht. Verstehen tue ich das aus der Ferne nicht. Am besten waere es wohl, due wuerdest mir einen minimalen Rohdatensatz schicken, z.b. 3 Bias, 3 Flat und 3 Lights. Dann kann ich sehen, ob da eventuell was gleich am Anfang bei der header-Formatierung nicht richtig passt.

mischa
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Samstag 11. April 2020, 18:41

Hi Mischa,
ich stelle mal was zusammen. Ob ich das von hier aus auf den Firmenserver hochladen kann muss ich sehen, sonst erst Dienstag.
Auf welche Art und Weise passiert eigentlich die Erzeugung der .scamp?

Gruß
Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Re: Bug Report Theli V3 RC2

Beitragvon mischa » Samstag 11. April 2020, 18:54

Die .scamp Kataloge sind "binary FITS tables". Die kann man sich mit der cfitsio library erstellen. THELI passt entweder die SExtractor-Kataloge an, oder schreibt die internen kataloge entsprechend raus.
mischa
Moderator
 
Beiträge: 1205
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Bug Report Theli V3 RC2

Beitragvon spiegelei » Samstag 11. April 2020, 18:56

Hi Mischa,
kann man das auch über die Kommandozeile machen?
Gruß
Karsten
Atik 383 - AP80/560 - GSO RC 8" - LX50 8" SC - TSAPO65Q - CGEM
Theli 3 - SUSE Leap 15.1/64 - Dual XEON 12K/24T - 32GB
Die meisten großen Erfindungen beginnen nicht mit "HEUREKA" sondern mit "Das ist aber komisch....."
Benutzeravatar
spiegelei
 
Beiträge: 197
Registriert: Donnerstag 29. September 2011, 15:15
Wohnort: Chemnitz

Nächste

Zurück zu Theli 3 - Das neue Theli

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 1 Gast