[wiregate] Wiregate Dienste tlw. nicht aktiv

[greentux]

Mein Wiregate befand sich heute im folgenden Zustand:
- Visu lief nicht (time out, also auch kein Webserver)
- ssh ging nicht
- Webmin Fehlanzeige
Nach Reboot ging alles. Analyse:
- in /var/log/messages und syslog gab es nichts Auffälliges
- in eib.log wurde bis zum Schluß geloggt. Allerdings gibt es eine Stelle, wo das Log "kaputt" aussieht. Also ein großer Ascii-Wirrwarrblock im Log. Zeitlich korrelliert das mit meinem Reboot.
Die Dienste gingen schon vorher nicht mehr.

Any ideas?

[makki]

Netzwerk weg?

Makki

P.S.: Der Müll im Log kann passieren beim Stecker-ziehen..

[greentux]

Mmmmh. Und wieso gehts dann nach Reboot?
Ok, bleibt ein Switchport oder der Wiregateport. Ich werds beobachten. Danke für die Idee...

[greentux]

Wieder aufgetreten. ARP läuft auch nicht mehr. Also werd ich mal den Switchport tauschen.

[greentux]

arp läuft doch (mir war nur die arping man page gerade nicht präsent).
was bleibt?
monitor ran und weiterschauen oder?

[makki]

Ist sicher am einfachsten, da mal schauen (Konsole ist auf ALT+F2)
ping
ifconfig
dmesg

Evtl. irgendwelche Port-Security features die es ausknipsen und sich nach link down/up resetten:
ifdown eth0
ifup eth0

Makki

[greentux]

Leider hatte ich das root pw nicht parat.
Egal reboot und nu hab ichs.
Was zu sehen ist:
[ 124.211745] wiregated.pl[2630]: segfault at 27 ip 080a38c0 sp bfbc31b0 error 4 in perl[8048000+131000]

kann aber nicht zum Netzproblem beitragen.

Hier verliert er das Netz (kein ntp mehr):
Aug 26 04:31:21 wiregate400 ntpd[2272]: kernel time sync status change 4001
Aug 26 04:48:24 wiregate400 ntpd[2272]: kernel time sync status change 0001
Aug 26 05:36:03 wiregate400 OWFS[16161]: DEFAULT: ow_usb_msg.cS9490_open(263) Opened USB DS9490 bus master at 2:4.
Aug 26 05:36:04 wiregate400 OWFS[16161]: DEFAULT: ow_usb_cycle.cS9490_ID_this_master(191) Set DS9490 2:4 unique id to 81 3E 7C 2F 00 00 00 F2
Aug 26 05:36:04 wiregate400 OWFS[16161]: DEFAULT: ow_usb_msg.cS9490_open(263) Opened USB DS9490 bus master at 1:3.
Aug 26 05:36:04 wiregate400 OWFS[16161]: DEFAULT: ow_usb_cycle.cS9490_ID_this_master(191) Set DS9490 1:3 unique id to 81 9E 39 2F 00 00 00 95
Aug 26 06:13:48 wiregate400 ntpd[2272]: kernel time sync status change 4001
Aug 26 07:28:16 wiregate400 ntpd[2272]: no servers reachable

Ist jetzt aber auch nicht so spannend...
Sehr seltsam.
Ich habe jetzt Keyboard + Monitor dran und den Switchport gewechselt. Schauen wir mal.

[greentux]

Schreibt der watchdog irgenwohin, das er die Kiste rebootet? Ggf. auch noch warum?

[makki]

Nö, wie auch. An der Uptime sieht man es natürlich; es wäre aber gefühlt so in etwa das dritte Mal in 3J das dieser Fall überhaupt eintritt..

Makki

[greentux]

Naja, der watchdogd stellt einen Zustand x fest und rebootet. Ich möchte eben den Reboots auf die Schliche kommen. Bis dato rebootet die Kiste 3 Mal die Woche. Und ehe ich das nun einpacke und euch damit belästige, würde ich gern sehen, was abgeht.
Daher wäre es schön zu sehen, wann watchdogd so zuschlägt.

Wenn ich mir jetzt allerdings mal die default config vom watchdogd anschaue, verstehe ich fast nicht, warum der überhaupt läuft...

Dann frag ich mal so: was wäre aus eurer langjährigen Erfahrung Grund für Reboots?

[makki]

Da gibt es eigentlich nur 2 regelmässige Gründe: Stromausfall oder ein HW-Defekt. Wenn keine wilden Sachen getrieben/angesteckt werden und es unmotiviert durchstartet, tauschen wir es lieber aus!
Ggfs. morgen einfach kurz melden dann machen wir ein RMA-Ticket auf..

Makki

[greentux]

Oha, ich hatte noch auf den Watchdog gehofft...
Gute, lass es mich noch ein paar Tage beobachten. Es ist ja parallel das Problem, das Netz tlw. ausfällt. Da stehen ja nun Monitor, Tastatur und root pw bereit.

[greentux]

Mittlerweile ist das Verhalten wie folgt:
IRgendwann zum Zeitpunkt x ist kein Netz mehr vorhanden, es wird aber noch 1 Wire und KNX bedient.
Zum Zeitpunkt x+4 h (grob) rebootet die Kiste dann.
Meine Vermutung (bitte Meinung): Irgendwas macht heavy load, so dass Netz als erstes nicht mehr erreichbar ist. Irgendwann rebootet die Kiste ggf aus thermischen Gründen???

Ich habe jetzt mal ein script geschrieben, welches alle 5 Minuten einen Prozesslastauszug speichert...

[makki]

Nur kurz, das script kannste Dir sparen, alles relevante wird grundsätzlich aufgezeichnet
http://wiregateXXX/collection3/bin/index.cgi

Makki

[greentux]

Leider nein. Ich sehe ja nicht, welcher Prozess heavy load macht. In den Bildern unten ist zu sehen, wie das Netz ausfällt und was parallel mit Prozessen und Load passiert. Kurz vor Reboot geht richtig die Post ab...