Server friert ebeim zugriff auf swap ein ?!?!

adler · 29.11.2007, 17:25

hallo,

habe eine problem mit einem server ... sobald ein paar KB auf das swap gehen fangen die processe kswapd mit 100% last zu laufen und der server friert ein.

nichts geht mehr.

hat jemand eine idee was da falsch sein kann?

hier der top output nachdem nichts mehr geht.

top - 17:19:13 up 24 min, 2 users, load average: 5.56, 4.19, 2.69
Tasks: 23965 total, 6 running, 23959 sleeping, 0 stopped, 0 zombie
Cpu(s): 1.6%us, 98.4%sy, 0.0%ni, 0.0%id, 0.0%wa, 0.0%hi, 0.0%si, 0.0%st
Mem: 24689808k total, 24622260k used, 67548k free, 0k buffers
Swap: 8388600k total, 8k used, 8388592k free, 47280k cached

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
213 root 25 0 0 0 0 R 100 0.0 20:24.67 kswapd1
28862 root 25 0 2628 520 436 R 100 0.0 4:12.17 checkproc 214 root 25 0 0 0 0 R 80 0.0 3:24.00 kswapd0
8200 root 17 0 22332 17m 868 R 20 0.1 4:11.13 top
1 root 16 0 784 308 256 S 0 0.0 0:00.95 init
2 root RT 0 0 0 0 S 0 0.0 0:00.00 migration/0
3 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/0
4 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/1
5 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/1
6 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/2
7 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/2
8 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/3
9 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/3
10 root 10 -5 0 0 0 S 0 0.0 0:00.06 events/0
11 root 10 -5 0 0 0 S 0 0.0 0:00.04 events/1
12 root 10 -5 0 0 0 S 0 0.0 0:00.08 events/2
13 root 10 -5 0 0 0 S 0 0.0 0:00.03 events/3
14 root 10 -5 0 0 0 S 0 0.0 0:00.00 khelper
15 root 10 -5 0 0 0 S 0 0.0 0:00.00 kthread
22 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/0
23 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/1
24 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/2
25 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/3
26 root 11 -5 0 0 0 S 0 0.0 0:00.00 kacpid
211 root 15 0 0 0 0 S 0 0.0 0:00.00 pdflush
212 root 15 0 0 0 0 S 0 0.0 4:14.23 pdflush
215 root 11 -5 0 0 0 S 0 0.0 0:00.00 aio/0
216 root 11 -5 0 0 0 S 0 0.0 0:00.00 aio/1
217 root 10 -5 0 0 0 S 0 0.0 0:00.00 aio/2
218 root 10 -5 0 0 0 S 0 0.0 0:00.00 aio/3
436 root 11 -5 0 0 0 S 0 0.0 0:00.00 cqueue/0
437 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/1
438 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/2
439 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/3
440 root 11 -5 0 0 0 S 0 0.0 0:00.00 kseriod
471 root 10 -5 0 0 0 S 0 0.0 0:00.00 kpsmoused
918 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/0
919 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/1
920 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/2
921 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/3
922 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/0
923 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/1
924 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/2
925 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/3
938 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsbufd
939 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfssyncd
996 root 21 -4 7128 680 332 S 0 0.0 0:00.28 udevd
1632 root 10 -5 0 0 0 S 0 0.0 0:00.01 khubd
1681 root 20 0 0 0 0 S 0 0.0 0:00.00 shpchpd_event
2651 root 10 -5 0 0 0 S

gaelic · 29.11.2007, 18:04

kernel bug? welche version?

hats schon mal funktioniert? seit wann tritt das auf?

Philipp · 29.11.2007, 20:51

Zitat:

Tasks: 23965 total, 6 running, 23959 sleeping, 0 stopped, 0 zombie

Was läuft denn auf diesen Server

CM²S · 30.11.2007, 10:36

Mach mal eine 2 Swap Partition

und adde sie mit swapon , entferne dann den anderen swap mit swapoff ...

und schau ob es dann noch immer passiert...

ciao
CM²S

gaelic · 01.12.2007, 12:05

Zitat:

Original geschrieben von Philipp
Was läuft denn auf diesen Server

25000 geforkte apaches

Stefan Söllner · 01.12.2007, 14:05

Zitat:

Original geschrieben von gaelic
25000 geforkte apaches

adler · 07.12.2007, 10:34

OS Verion SLES 10 SP 1

kernel wurde auf 2.6.16.46-0.14 hochgerüstet ... keine änderung

auf der Maschine (HP 385 DL G2 2 x Opteron dualcore 2800Mhz, 24GB RAM) ist nur SLES 10 SP 1 und die aktuelle PSP 7.90 von HP installiert. SAP wude installier aber nicht gestartet .... wegen dem problem ....

swap partition habe ich schon mehrmals angelegt 8GB bis 48GB... keine Änderung.

und zu guter letzt ... der HP support tappt im Dunklen.

werde heute mal eine platte zeihen und sie in einen baugleichen server stecken ... um ggf. HW fehler auszuschliessen.

adler · 12.12.2007, 17:14

ein kollege hat unter /usr/bin/ ein file mit dem namen hostname und de minhalt "hostname" ohne echo (im stress

) angelegt ....

das ergibt eine schöne recursion und der server steht in 0,nix

kleine änderung grosse wirkung

gruss
adler

29.11.2007, 17:25	#1
adler Veteran Registriert seit: 23.04.2002 Alter: 48 Beiträge: 309	Server friert ebeim zugriff auf swap ein ?!?! hallo, habe eine problem mit einem server ... sobald ein paar KB auf das swap gehen fangen die processe kswapd mit 100% last zu laufen und der server friert ein. nichts geht mehr. hat jemand eine idee was da falsch sein kann? hier der top output nachdem nichts mehr geht. top - 17:19:13 up 24 min, 2 users, load average: 5.56, 4.19, 2.69 Tasks: 23965 total, 6 running, 23959 sleeping, 0 stopped, 0 zombie Cpu(s): 1.6%us, 98.4%sy, 0.0%ni, 0.0%id, 0.0%wa, 0.0%hi, 0.0%si, 0.0%st Mem: 24689808k total, 24622260k used, 67548k free, 0k buffers Swap: 8388600k total, 8k used, 8388592k free, 47280k cached PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 213 root 25 0 0 0 0 R 100 0.0 20:24.67 kswapd1 28862 root 25 0 2628 520 436 R 100 0.0 4:12.17 checkproc 214 root 25 0 0 0 0 R 80 0.0 3:24.00 kswapd0 8200 root 17 0 22332 17m 868 R 20 0.1 4:11.13 top 1 root 16 0 784 308 256 S 0 0.0 0:00.95 init 2 root RT 0 0 0 0 S 0 0.0 0:00.00 migration/0 3 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/0 4 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/1 5 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/1 6 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/2 7 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/2 8 root RT 0 0 0 0 S 0 0.0 0:00.01 migration/3 9 root 34 19 0 0 0 S 0 0.0 0:00.00 ksoftirqd/3 10 root 10 -5 0 0 0 S 0 0.0 0:00.06 events/0 11 root 10 -5 0 0 0 S 0 0.0 0:00.04 events/1 12 root 10 -5 0 0 0 S 0 0.0 0:00.08 events/2 13 root 10 -5 0 0 0 S 0 0.0 0:00.03 events/3 14 root 10 -5 0 0 0 S 0 0.0 0:00.00 khelper 15 root 10 -5 0 0 0 S 0 0.0 0:00.00 kthread 22 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/0 23 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/1 24 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/2 25 root 10 -5 0 0 0 S 0 0.0 0:00.00 kblockd/3 26 root 11 -5 0 0 0 S 0 0.0 0:00.00 kacpid 211 root 15 0 0 0 0 S 0 0.0 0:00.00 pdflush 212 root 15 0 0 0 0 S 0 0.0 4:14.23 pdflush 215 root 11 -5 0 0 0 S 0 0.0 0:00.00 aio/0 216 root 11 -5 0 0 0 S 0 0.0 0:00.00 aio/1 217 root 10 -5 0 0 0 S 0 0.0 0:00.00 aio/2 218 root 10 -5 0 0 0 S 0 0.0 0:00.00 aio/3 436 root 11 -5 0 0 0 S 0 0.0 0:00.00 cqueue/0 437 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/1 438 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/2 439 root 10 -5 0 0 0 S 0 0.0 0:00.00 cqueue/3 440 root 11 -5 0 0 0 S 0 0.0 0:00.00 kseriod 471 root 10 -5 0 0 0 S 0 0.0 0:00.00 kpsmoused 918 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/0 919 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/1 920 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/2 921 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfslogd/3 922 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/0 923 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/1 924 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/2 925 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsdatad/3 938 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfsbufd 939 root 10 -5 0 0 0 S 0 0.0 0:00.00 xfssyncd 996 root 21 -4 7128 680 332 S 0 0.0 0:00.28 udevd 1632 root 10 -5 0 0 0 S 0 0.0 0:00.01 khubd 1681 root 20 0 0 0 0 S 0 0.0 0:00.00 shpchpd_event 2651 root 10 -5 0 0 0 S

30.11.2007, 10:36	#4
CM²S Elite Registriert seit: 27.03.2000 Ort: Wien Alter: 55 Beiträge: 1.168	hmmm.... Mach mal eine 2 Swap Partition und adde sie mit swapon , entferne dann den anderen swap mit swapoff ... und schau ob es dann noch immer passiert... ciao CM²S ____________________________________ \"wann amoi de blaun denen grean an rodn dewich ausroin, daunn siach i schwoaz\" Gedicht aus \"Eigfleischte Wegetaria und aundare meakwürdikeiten, Andreas Nastl http://lichtschwarz.tv

12.12.2007, 17:14	#8
adler Veteran Registriert seit: 23.04.2002 Alter: 48 Beiträge: 309	gelöst ein kollege hat unter /usr/bin/ ein file mit dem namen hostname und de minhalt "hostname" ohne echo (im stress ) angelegt .... das ergibt eine schöne recursion und der server steht in 0,nix kleine änderung grosse wirkung gruss adler

29.11.2007, 18:04	#2
gaelic nugent Registriert seit: 28.08.2001 Beiträge: 2.500	kernel bug? welche version? hats schon mal funktioniert? seit wann tritt das auf?

07.12.2007, 10:34	#7
adler Veteran Registriert seit: 23.04.2002 Alter: 48 Beiträge: 309	OS Verion SLES 10 SP 1 kernel wurde auf 2.6.16.46-0.14 hochgerüstet ... keine änderung auf der Maschine (HP 385 DL G2 2 x Opteron dualcore 2800Mhz, 24GB RAM) ist nur SLES 10 SP 1 und die aktuelle PSP 7.90 von HP installiert. SAP wude installier aber nicht gestartet .... wegen dem problem .... swap partition habe ich schon mehrmals angelegt 8GB bis 48GB... keine Änderung. und zu guter letzt ... der HP support tappt im Dunklen. werde heute mal eine platte zeihen und sie in einen baugleichen server stecken ... um ggf. HW fehler auszuschliessen.

Aktive Benutzer in diesem Thema: 1 (Registrierte Benutzer: 0, Gäste: 1)