Schon wieder zu wenig Speicher

Wie arbeite ich mit Theli, wie verarbeite ich in Theli erstellten Bilder ?
Forumsregeln
Bitte die Beiträge kurz fassen, so kann man sie nachher besser finden. Sollte ein Problem gelöst sein, dann einen neuen Beitrag eröffnen. Ebenso wenn die Ursache eine ganz andere ist, oder es Offtopic wird.

Schon wieder zu wenig Speicher

Beitragvon Knickohr » Mittwoch 23. November 2011, 12:05

*grrr*

Mir geht der Speicher schon wieder aus :

theli@theli:~$ dmesg
...
[1213893.213666] Free swap = 0kB
[1213893.213668] Total swap = 3227640kB
[1213893.259127] 4177904 pages RAM
[1213893.259130] 85898 pages reserved
[1213893.259131] 3032 pages shared
[1213893.259133] 4068287 pages non-shared
[1213893.259136] Out of memory: kill process 17056 (create_skysub_g) score 3640320 or a child
[1213893.259141] Killed process 20593 (fitsgauss)

theli@theli:~$ dmesg | grep -i killed
[1208587.660779] Killed process 17164 (fitsgauss)
[1209007.817171] Killed process 17456 (fitsgauss)
[1209406.463944] Killed process 17712 (fitsgauss)
[1209813.908836] Killed process 17968 (fitsgauss)
[1210229.600740] Killed process 18231 (fitsgauss)
[1210628.801071] Killed process 18486 (fitsgauss)
[1211028.660951] Killed process 18740 (fitsgauss)
[1211028.886142] Killed process 1021 (ssh-agent)
[1211444.458504] Killed process 19005 (fitsgauss)
[1211845.177447] Killed process 19255 (fitsgauss)
[1212237.113297] Killed process 19511 (fitsgauss)
[1212647.544632] Killed process 19774 (fitsgauss)
[1213050.644204] Killed process 20018 (fitsgauss)
[1213455.089438] Killed process 20285 (fitsgauss)
[1213893.259141] Killed process 20593 (fitsgauss)

Ich werde mal den Swap-Space vergrößern. Na hoffentlich muß ich nicht schon wieder Hardware aufrüsten :cry: :shock:

Thomas
Benutzeravatar
Knickohr
Moderator
 
Beiträge: 631
Registriert: Donnerstag 29. September 2011, 12:01
Wohnort: Blaustein

Re: Schon wieder zu wenig Speicher

Beitragvon Knickohr » Mittwoch 23. November 2011, 14:23

Sagt mal Leute,

das gibts doch fast nicht ?!

Hab den swap mal kräftig vergrößert :shock:

Image1.gif

fitsgauss beansprucht den kompletten RAM und zieht noch über 7GB swap !

Es sind vorgestern "nur" ca. 50 Aufnahmen mehr dazu gekommen und fitsgauss krallt sich gleich soviel mehr Speicher ?

Wie soll das erst werden, wenn ich noch mehr Bilder da rein schmeiße ? :mrgreen:

Kein Wunder, das "der Gauss" da eine Woche lang braucht, das durchzurechen.

Thomas
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.
Benutzeravatar
Knickohr
Moderator
 
Beiträge: 631
Registriert: Donnerstag 29. September 2011, 12:01
Wohnort: Blaustein

Re: Schon wieder zu wenig Speicher

Beitragvon mischa » Mittwoch 23. November 2011, 18:10

Hallo Thomas,

lass das Ding einfach mal liegen. Die sky-subtraction mit Gauss habe ich extrem ineffizient programmiert.
Dabei ist das Problem nicht 'fitsgauss', sondern ein anderes tool, welches versucht, den Hintergrund adaptiv
in grosse Loecher reinzufitten, bevor die Glaettung laeuft. Das habe ich mittlerweile behoben (ist
ungefaehr 100-1000mal schneller). Die convolution-routine habe ich parallelisiert, aber die macht
(in der bisherigen THELI-Version) nur einen sehr kleinen Anteil aus.
Dass die 90% deines Speichers frisst kann ich mir absolut nicht erklaeren. Wieviele Pixel hat dein Einzelbild,
und wie gross hast du den Glaettungsradius eingestellt? Lad mir doch mal eines dieser Bilder hoch, bei dem
'fitsgauss' auf 90+% memory hochgeht, zusammen mit den skysub parametern?

mischa
mischa
Moderator
 
Beiträge: 1266
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Schon wieder zu wenig Speicher

Beitragvon Knickohr » Mittwoch 23. November 2011, 18:45

Hallo Mischa,

na die Einzelbilder sind von einer EOS 450D, 4272x2848 Pixel, das Mosaik hat 45.000x15.000 Pixel (weißte doch ;-) ).

DT 1.5, DMIN 5, Size 1000 (ein Test). Mit 256 hat es mir zu sehr an der Milchstraße geknabbert :?

Brauchste wirklich ein Bild ? Das paßt hier nicht ins Forum rein (8,5MB).

Bist ein Schatz :P Wo kann ich die neue Version downloaden ? Ist noch nicht auf der offiziellen Theli-Seite.

Thomas
Benutzeravatar
Knickohr
Moderator
 
Beiträge: 631
Registriert: Donnerstag 29. September 2011, 12:01
Wohnort: Blaustein

Re: Schon wieder zu wenig Speicher

Beitragvon mischa » Mittwoch 23. November 2011, 18:50

die Einzelbilder sind von einer EOS 450D, 4272x2848 Pixel, das Mosaik hat 45.000x15.000 Pixel (weißte doch ;-) ).


die groesse des mosaiks hat damit gar nichts zu tun. 'fitsgauss' laeuft sequenziell auf den einzelbildern.

auf das update wirst du noch ein paar tage warten muessen. ich hab grade nachtschicht bis sonntag.

mischa
mischa
Moderator
 
Beiträge: 1266
Registriert: Freitag 7. Oktober 2011, 14:07
Wohnort: Chile

Re: Schon wieder zu wenig Speicher

Beitragvon Knickohr » Mittwoch 23. November 2011, 18:56

mischa hat geschrieben:auf das update wirst du noch ein paar tage warten muessen. ich hab grade nachtschicht bis sonntag.

Ochhh ... Aber sich im Forum rumtreiben ! :o

Schon OK, ich laß das mal rechnen. Bin mal gespannt, was da raus kommt. Ich schätze mal, wenn das pro Bild ca. 10 Minuten dauert, dann bin ich ich frühestens 2 Wochen damit fertig. Abbrechen kann ichs ja immer noch.

Thomas
Benutzeravatar
Knickohr
Moderator
 
Beiträge: 631
Registriert: Donnerstag 29. September 2011, 12:01
Wohnort: Blaustein


Zurück zu Arbeiten mit Theli

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 16 Gäste

cron