IPS frisst unaufhaltsam Speicher (gelöst!)

Archiv Allgemeine Diskussion (2.x/3.x)
1

…und ich kann mir keinen Reim drauf machen.

Gestern gegen 21:00 Uhr den Dienst neugestartet mit 55MB und jetzt gegen 19:00 Uhr bei 185MB. Aktuelle Version #1840.

Leider muss ich das einfach so darstellen, weil weder etwas sinnvolles im Log dazu steht, noch ich irgendeinen anderen Hinweis zur Problemlösung beitragen kann. Mir ist das jedoch erst ab Version #1838 aufgefallen, kann aber schon vorher gewesen sein. Nur habe ich das so nicht beobachtet, weil ich zeitgleich mit IPS auf einen anderen „Server“ umgezogen bin.
Meine „waghalsige“ Vermutung geht in Richtung des neuen Datenbankhandlings, denn vorher konnte ich absolut keine Memoryleaks beobachten.
Ich habe keine Idee… denn an den Scripts resp. IPS wurden seither keine Veränderungen vorgenommen:confused:

Vielleicht hat irgendjemand eine Idee, wo man ansetzen könnte?!

Eine Schleife in einem Script kann ich aber ausschließen, denn wie geschrieben, wurde an der Programmierung nichts verändert, sondern nur neue Updates eingespielt und konnte bis „irgendwann“ keinen überproportional steigenden Speicherbedarf ausmachen.

Ich bin ratlos!

Edit:

Festgestellt habe ich das eigentlich erst, dass Webfront kaum noch bedienbar war und mehr als träge bei der Bedienung an den „Terminals“ reagierte. Nach Überprüfung mit Taskmanager stellte ich eine Speichernutzung von 465 MB durch IPS fest.
Nur ein Dienstneustart schaffte Abhilfe.

2

… und bei mir wird es ätzend langsam.

Aufruf des Objektbaums inzwischen ca. 30s.
Aufbau Webfront sogar > 2min.

3

Dazu würde ich jetzt wieder fragen, um Hintergrundinformationen zu erlangen…

Am „Server“ direkt, oder remote per Konsole?

Aufbau Webfront sogar > 2min.

Am „Server“ direkt, oder Client?

P.S. Was sagt denn deine Speicherauslastung und welches IPS-Build hast du in Verwendung?

4

Bei mir ist es immer die Console (Dashboard), welche pro Tag ein paar hundert MB frisst.
Nächtliches neustarten ist ein muss.
Beim Dienst habe ich es noch nicht festgestellt, benutze allerdings auch keine Datenbanken.

Grüße,
Doc

5

habe gerade ganz plötzlich ein ähnliches Phänomen. Habe folgendes festgestellt:

  1. ich habe gestern probehalber eine HMS-FTK-Instanz installiert. Das hatte zur Folge das automatisch ein FTDI-IO-Instanz erstellt wurde und eine FHZ1X00PC-Splitter Instanz. Letzters war mir nicht aufgefallen, führte aber heute zu reichlich Fehlern im IPS, brachte vermutlich auch die Geräteliste im Server durcheinander

  2. ich habe heute erstmalig eine Squeezebox eingebunden.

Im Auswertescript gibt es einige Variablen, deren Bedeutung mir zu dem Zeitpunkt nicht klar war, also habe ich dieser unverändert stehen lassen (sind die letzten Codezeilen im Script):


			if($chunks[0] == "duration")
			{
				SetValue(17495 /*[Squeezebox\Schlafzimmer\Länge]*/, date('i:s', $chunks[1]));
				SetValue(12610 /*[Objekt #12610 existiert nicht]*/, sprintf('%01.0f', $chunks[1]));
			}
			if(GetValue(17495 /*[Squeezebox\Schlafzimmer\Länge]*/) !== "00:00") {
			    //slider(34996 /*[Objekt #34996 existiert nicht]*/, 100/GetValue(12610 /*[Objekt #12610 existiert nicht]*/)*GetValue(37989 /*[Objekt #37989 existiert nicht]*/), GetValue(40778 /*[Objekt #40778 existiert nicht]*/), GetValue(30117 /*[Objekt #30117 existiert nicht]*/));
				slider2(47930 /*[Squeezebox\Schlafzimmer\Position Neu]*/, 100/GetValue(12610 /*[Objekt #12610 existiert nicht]*/)*GetValue(37989 /*[Objekt #37989 existiert nicht]*/));
			}

die Folge war, das der IPS-Task im Speicherverbrauch von 68 MB auf über 500MB anstieg,die IPS-Konsole extrem langsam wurde und das WFE ständig Verbindungsfehler meldete. Ebenso drehte das Ereignisprotokoll vom IPS durch. Ich hab dann die betroffenen Zeilen erstmal auskommentiert, innerhalb von 5 Minuten hat sich das System beruhigt, der Speicherverbrauch ging langsam runter auf 69MB.

War auch das erste Mal, das ich so ein heftiges Problem hatte (ganz klarer Anwenderfehler!), habs aber durch die Logmeldungen sehr schnell eingrenzen und beheben können. Evtl. hilft Euch das weiter.

6

Hallo Doc,

Dashboard habe ich nicht im Einsatz… nur WF.

Ich habe auf meinem neuen System aber nur 1GB phys. Speicher zur Verfügung und hätte gern, wenn ich mal für’n 14tägigen Urlaub das Haus verlasse, dass sich das System nicht selbst „aufgegeben“ hat. So lange man es täglich überprüfen kann, ist das ja kein Ding… immer mal den Dienst neuzustarten, aber selbst das sollte es nicht sein:rolleyes:

7

Ist schon klar, wer will das schon.
Vielleicht gibt es da ja wirklich ein Problem.

Da ich in der Vergangenheit immer wieder je nach Version mit Problemen dieser Art zu tun hatte, habe ich mir mal ein Script gebastelt, welches bei längerfristiger Prozessor oder Speicherbelastung Nachts um 3 den Rechner sicherheithalber neu startet.
Das läuft bei mir immer im Hintergrund mit, egal ob es gerade mit IPS Probleme gibt oder nicht. Nur so zur Sicherheit.
Die Konsole wird aber sowieso immer nachts neu gestartet.

Doc

8

Alles von Remote.
Das ging aber früher deutlich schneller.

CPU Last sehr gering.
Speicher müsste ich mal mitloggen lassen, habe auch nur 1GB.

9

Habe ich auch… normal 5% bis zu Peaks von über 40%. Das ist aber normal, je nach Auslastung des Systems, wenn man Scripts im Sekundenbereich ausführen lässt.

Speicher müsste ich mal mitloggen lassen, habe auch nur 1GB.

Ja mach das ruhig mal… entweder per Logging…

<?
$xx = Sys_GetProcessInfo();
SetValueInteger('Integer-ID-Variable' , ($xx['IPS_WORKINGSETSIZE']));
?>

…oder per regelmäßiges „manuell“-Controlling über den Taskmanager -> „STRG+ALT+ENTF“

P.S. Die Integervariable musst du natürlich erst anlegen, die ID im „Miniscript“ einsetzen und das Logging dafür aktivieren.

10

Nochmal zu Doc:)

Klar kan man sich solche „Hilfs-Krücken“ bauen, aber das will ich einfach nicht, obwohl ich daran auch schon dachte:rolleyes:
Die Ursache herauszufinden und evtl. Abhilfe zu schaffen finde ich aber allgemein interessanter… deshalb bin ich aus der Deckung, als eigentlich erfahrener IPS-Anwender, mit meinem Problem ausgetreten und hoffe auch ohne konkreten Hinweis eine Lösung zu erfahren. In die Tiefen des Sytems zu blicken und daraus meine Erkenntnisse zu gewinnen, ist mir bei dem Problem nicht gelungen.
Im allgemeinen ist „Brain“ eingeschalten, aber hier gebe ich auf!

11

Hallo Doc,

Kannst Du mir bitte in groben Zügen erklären wie Das Neustartscript bei Dir aussieht. Sowas wollte ich auch zur Sicherheit einbauen!

Gruß Tommy

12

@Tommy

ist ganz simpel.
Ich messe z. B. einfach die CPU Auslastung eimal die Stunde. Wenn drei mal nacheinander die Last >95% auf einem Kern ist, wird für Nachts der Neustart vorgemerkt.
Wir bis dahin mal eine geringere Last gemessen, wird der Merker wieder zurück gesetzt und nichts passiert.

So ist sichergestellt, das auch bei Problemen mit externen Programmen die mit auf dem Server laufen wie Squeezserver usw. keinen Stillstand von IPS verursachen können.

Sind nur ein paar Zeilen, bin jedoch gerade nicht am IPS Rechner.

Grüße,
Doc

13

Hallo.

Bei mir traten vergleichbare Probleme konkret unter zwei Voraussetzungen auf.

  1. Tagelanges offen lassen der Konsole (= Faulheit).
  2. Überlaufen der PHP-Queue (= Tabelle alles rot).

Punkt 1 habe ich durch Selbstdisziplin erledigt, Punkt 2 war eigentlich immer auf ein fehlerhaftes Skript oder eine nicht sauber abgefangene Fehlersituation in einem Skript oder einer Instanz zurückzuführen.

Ansonsten muß ich seit #1838 echt eine Lanze für IPS brechen. Ab dieser Version läuft das System bei mir so stabil wie ich es mir immer gewünscht hatte. IPSWatchdog hatte sonst immer alle 1-2 Tage eingegriffen - nun ist er seit erscheinen der #1838 arbeitslos.

Grüsse.

14

Beides kann ich ausschließen.
Wie geschrieben… eigentlich bin ich mir keiner eigenen Schuld bewusst, aber man weiss ja nie… keine Ahnung warum sich das System, auf dem IPS läuft, nun so verhält, sonst hätte ich einen etwaigen Ansatz zur Problemlösung gerne beigetragen… komme mir vor, als wenn ich IPS erst seit 2 Wochen „probiere“:frowning: und eine Lösung scheint weit, weil ich nicht irgendeinen Ansatz finden kann…

15

Hallo Doc,

kannst Du mal dein Skript für das Rebbot von IPS veröffentlichen.

16

Ja, das hätte ich auch gern. Gruß Jens

17

Hallo zusammen,

zunächst muss ich sagen, das bei mir IPS derzeit absolut stabil läuft (neuste Version). Von daher würde ich einmal anfangen, Skripte und Module stilllegen
um festzustellen wo es schieflaeuft denn es scheint ja nicht den Kern zu
betreffen.

VG
Stephan

18

Da gebe ich Dir recht.

Nur das nimmt meistens sehr viel Zeit in Anspruch und
auf die schnelle ist es doch eine Lösung.

19

Das kann ich auch nur bestätigen.

Probleme bei mir sind bisher meist entstanden, weil in Scripten Webtimeouts, falsche Schleifen, sonstige PHP-Fehlermeldungen, … waren.
Auch IP-Schnittstellen führen mal zu Problemen, wenn die Gegenseite nicht mehr oder nicht mehr richtig funktioniert.

20

Auch mein IPS läuft stabil, nur leidet das System an permanenten Speicherschwund:rolleyes:

Wie ich auch bereits schon schrieb, kann ich Fehler in den Scripten ebenfalls ausschließen, da ich mit Sicherheit sagen kann, dass IPS „früher“ (vor 1-1,5 Monaten) noch mit normaler Speicherlast lief und das wochenlang.

Probleme bei mir sind bisher meist entstanden, weil in Scripten Webtimeouts, falsche Schleifen, sonstige PHP-Fehlermeldungen, … waren.

Da fällt mir jetzt nur eine Änderung ein, die ich seither vorgenommen hatte.
Ich habe im Webfront ein paar Container mit Links zu Webseiten (niederschlagsradar) gefüllt. Siehe hier… http://www.ip-symcon.de/forum/f56/unterkategorie-container-anzeigen-12641/

Wenn es jetzt nur einfach wäre, einzelne Punkte der Webfront-Konfiguration zu deaktivieren, könnte man schnell mal überprüfen, ob das Problem dadurch verschwindet. So bleibt einem ja nur diese „Punkte“ komplett zu löschen.
Und man muss sich alles notieren, wie’s eingerichtet war, das man es wieder herstellen kann, wenns keinen Erfolg brachte…

Ich werd’s auf alle Fälle mal probieren.