nForce Watchdog problems

[Neil Joseph Schelly]

I'm hoping someone here may be able to offer a pointer.  Googling for this 
stuff yields years worth of worthless information so far.

Essentially, I have a couple of brand new servers setup running Debian with 
stock 2.6.17-2-amd64 kernels from Etch.  The two gigabit network interfaces 
are using the forcedeth driver and when a load starts to access the machines, 
the network cards stop.  This even spans reboots.

The console gets a lot of output like below and the network interfaces are 
down - completely inaccessible.  Even the switchport drops the link light.

Does anyone have any experience with this or pointers?
-N


NETDEV WATCHDOG: eth0: transmit timed out
eth0: Got tx_timeout. irq: 00000000
eth0: Ring at 37ce4000: next 256 nic 0
eth0: Dumping tx registers
  0: 00002000 000000ff 00000003 004f03ca 00000000 00000000 00000000 00000000
 20: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
 40: 0420e20e 0000a855 00002e20 00000000 00000000 00000000 00000000 00000000
 60: 00000000 00000000 00000000 0000ffff 0000ffff 0000ffff 0000ffff 00000000
 80: 003b0f3e 40000001 00150001 007f0028 0000061c 00000001 00000000 00002d16
 a0: 0016070f 00000016 e3d1a000 00002708 005e0001 00000100 ffffffff 0000ffff
 c0: 10000101 00000001 00000001 00000001 00000001 00000001 00000001 00000001
 e0: 00000001 00000001 00000001 00000001 00000001 00000001 00000001 00000001
100: 37ce4800 37ce4000 007f00ff 00000000 00010064 00000000 0000002c 37ce4800
120: 37ce4240 2d89e202 a0000029 15f39810 8000061c 37ce480c 37ce4150 00200010
140: 00304120 00002600 00000000 00000000 00000001 00000000 00000000 00000000
160: 00000000 00000000 00000000 00000000 01000080 0000c000 00000000 00000000
180: 00000016 00000008 0294796d 00008103 00000045 00000081 0000059e 00008583
1a0: 00000016 00000008 0294796d 00008103 00000045 00000081 00000080 00008183
1c0: 00000016 00000008 0294796d 00008103 00000045 00000081 00000080 00008183
1e0: 00000016 00000008 0294796d 00008103 00000045 00000081 00000080 00008183
200: 00007770 00000000 00000000 00000000 00000000 00000000 00000000 00000000
220: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
240: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
260: 00000000 00000000 fe027001 00000100 00000011 000000a3 fe027011 000001a3
280: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
2a0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
2c0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
2e0: 00000000 00000000 00000000 00000000 00000000 00000001 00000001 00000001
300: 80212000 00000000 00000000 00000000 00000000 00002000 00000000 00000000
320: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
340: 00000000 00000000 00000000 00000000 00000000 00000020 99e6e3cf 00000000
360: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
380: 00000000 00000000 00000000 00000000 00000000 00000000 00000002 00000000
3a0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
3c0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
3e0: 02211000 00000001 00000000 00000000 00000000 00000000 00000000 00000000
400: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
420: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
440: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
460: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
480: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
4a0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
4c0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
4e0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
500: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
520: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
540: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
560: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
580: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
5a0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
5c0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
5e0: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
600: 00000000 00000000 00000000 00000000 00000000 00000000 00000000 00000000
eth0: Dumping tx ring
000: 00000000 37b00002 a0000029 // 00000000 37c74a02 a0000029 // 00000000 
37c74e02 a0000029 // 00000000 37c74002 a0000029
004: 00000000 37ba0a02 a0000029 // 00000000 37ba0802 a0000029 // 00000000 
37ba0402 a0000029 // 00000000 37c09a02 a0000029
008: 00000000 7dc67202 a0000029 // 00000000 37c6c402 a0000029 // 00000000 
37c6cc02 a0000029 // 00000000 37cdf602 a0000029
00c: 00000000 37a5de02 a0000029 // 00000000 37c6c802 a0000029 // 00000000 
37d32802 a0000029 // 00000000 37c6c602 a0000029
010: 00000000 37d32002 a0000029 // 00000000 37d32a02 a0000029 // 00000000 
37aef402 a0000029 // 00000000 37aef202 a0000029
014: 00000000 37a57802 a0000029 // 00000000 7dc66e02 a0000029 // 00000000 
37a57402 a0000029 // 00000000 7dc66802 a0000029
018: 00000000 37d32202 a0000029 // 00000000 37a5a602 a0000029 // 00000000 
37a5a202 a0000029 // 00000000 37a60402 a0000029
01c: 00000000 37829c02 a0000029 // 00000000 37829002 a0000029 // 00000000 
37829202 a0000029 // 00000000 37829402 a0000029
020: 00000000 37d32c02 a0000029 // 00000000 37af4802 a0000029 // 00000000 
37af4402 a0000029 // 00000000 37af4e02 a0000029
024: 00000000 37af4c02 a0000029 // 00000000 37af4202 a0000029 // 00000000 
37af4602 a0000029 // 00000000 37af4a02 a0000029
028: 00000000 7de84e02 a0000029 // 00000000 7de84a02 a0000029 // 00000000 
7de84802 a0000029 // 00000000 7de84002 a0000029
02c: 00000000 37cdf002 a0000029 // 00000000 37cdf202 a0000029 // 00000000 
37a59e02 a0000029 // 00000000 37c09802 a0000029
030: 00000000 7de84c02 a0000029 // 00000000 37a5c602 a0000029 // 00000000 
37926202 a0000029 // 00000000 37c09602 a0000029
034: 00000000 37926402 a0000029 // 00000000 37c9f202 a0000029 // 00000000 
37c9f602 a0000029 // 00000000 37c9f002 a0000029
038: 00000000 37c9f402 a0000029 // 00000000 37c17802 a0000029 // 00000000 
37c17a02 a0000029 // 00000000 37c17002 a0000029
03c: 00000000 37c17c02 a0000029 // 00000000 37a63602 a0000029 // 00000000 
37a63802 a0000029 // 00000000 37a63402 a0000029
040: 00000000 37a63a02 a0000029 // 00000000 37a63c02 a0000029 // 00000000 
37a63202 a0000029 // 00000000 37c45802 a0000029
044: 00000000 37c2e602 a0000029 // 00000000 37c2ec02 a0000029 // 00000000 
37c2e202 a0000029 // 00000000 37c2e002 a0000029
048: 00000000 37a63e02 a0000029 // 00000000 37a57c02 a0000029 // 00000000 
37a57602 a0000029 // 00000000 37c2e802 a0000029
04c: 00000000 37a57e02 a0000029 // 00000000 37a57a02 a0000029 // 00000000 
37a5f402 a0000029 // 00000000 37a5f802 a0000029
050: 00000000 37a5fc02 a0000029 // 00000000 37aefe02 a0000029 // 00000000 
37aef802 a0000029 // 00000000 37aef602 a0000029
054: 00000000 37a5aa02 a0000029 // 00000000 37aef002 a0000029 // 00000000 
37c74402 a0000029 // 00000000 37aefa02 a0000029
058: 00000000 37c74802 a0000029 // 00000000 37c74602 a0000029 // 00000000 
7dc66402 a0000029 // 00000000 7dc66a02 a0000029
05c: 00000000 37c6ce02 a0000029 // 00000000 37c6c002 a0000029 // 00000000 
37c9f802 a0000029 // 00000000 37926602 a0000029
060: 00000000 37c74c02 a0000029 // 00000000 7dc67002 a0000029 // 00000000 
7dc67602 a0000029 // 00000000 7dc67402 a0000029
064: 00000000 7dc67c02 a0000029 // 00000000 37afe202 a0000029 // 00000000 
37afe002 a0000029 // 00000000 37afe402 a0000029
068: 00000000 37afee02 a0000029 // 00000000 7de84202 a0000029 // 00000000 
37a62002 a0000029 // 00000000 37a62c02 a0000029
06c: 00000000 7de84602 a0000029 // 00000000 7dc66202 a0000029 // 00000000 
7dc66002 a0000029 // 00000000 37a62602 a0000029
070: 00000000 37c2e402 a0000029 // 00000000 37a5f002 a0000029 // 00000000 
37a5f602 a0000029 // 00000000 3791a202 a0000029
074: 00000000 3791a002 a0000029 // 00000000 3791a402 a0000029 // 00000000 
3791ac02 a0000029 // 00000000 3791aa02 a0000029
078: 00000000 37c2ee02 a0000029 // 00000000 3791a602 a0000029 // 00000000 
37a57202 a0000029 // 00000000 3791a802 a0000029
07c: 00000000 37cbb602 a0000029 // 00000000 37c17402 a0000029 // 00000000 
37c17202 a0000029 // 00000000 37c17e02 a0000029
080: 00000000 37c45002 a0000029 // 00000000 37cdf402 a0000029 // 00000000 
37cdf802 a0000029 // 00000000 37cbb002 a0000029
084: 00000000 37c45402 a0000029 // 00000000 37afe602 a0000029 // 00000000 
7dc67a02 a0000029 // 00000000 37c6ca02 a0000029
088: 00000000 37a60002 a0000029 // 00000000 37d32e02 a0000029 // 00000000 
37d32602 a0000029 // 00000000 37ba0602 a0000029
08c: 00000000 37a62202 a0000029 // 00000000 37a62802 a0000029 // 00000000 
37a62402 a0000029 // 00000001 14c79e02 a0000029
090: 00000000 37a60a02 a0000029 // 00000001 14c79a02 a0000029 // 00000001 
14c79802 a0000029 // 00000001 14c79c02 a0000029
094: 00000001 14c79402 a0000029 // 00000001 14c79202 a0000029 // 00000001 
14c79002 a0000029 // 00000001 1525ce02 a0000029
098: 00000001 1525cc02 a0000029 // 00000001 1525c602 a0000029 // 00000001 
1525c002 a0000029 // 00000001 1525c202 a0000029
09c: 00000001 1525c802 a0000029 // 00000001 1525ca02 a0000029 // 00000001 
14c79602 a0000029 // 00000001 1525c402 a0000029
0a0: 00000001 151acc02 a0000029 // 00000001 151aca02 a0000029 // 00000001 
151ac802 a0000029 // 00000001 151ac602 a0000029
0a4: 00000001 151ac002 a0000029 // 00000001 151ac202 a0000029 // 00000001 
151ac402 a0000029 // 00000001 13961e02 a0000029
0a8: 00000001 151ace02 a0000029 // 00000001 13961a02 a0000029 // 00000001 
13961802 a0000029 // 00000001 13961c02 a0000029
0ac: 00000001 13961402 a0000029 // 00000001 13961202 a0000029 // 00000001 
13961002 a0000029 // 00000001 164bfe02 a0000029
0b0: 00000001 164bfc02 a0000029 // 00000001 164bf202 a0000029 // 00000001 
164bf402 a0000029 // 00000001 164bfa02 a0000029
0b4: 00000001 164bf002 a0000029 // 00000001 164bf802 a0000029 // 00000001 
13961602 a0000029 // 00000001 164bf602 a0000029
0b8: 00000001 1250bc02 a0000029 // 00000001 1250ba02 a0000029 // 00000001 
1250b802 a0000029 // 00000001 1250b602 a0000029
0bc: 00000001 1250b002 a0000029 // 00000001 1250b202 a0000029 // 00000001 
1250b402 a0000029 // 00000001 2a1a8e02 a0000029
0c0: 00000001 1250be02 a0000029 // 00000001 2a1a8a02 a0000029 // 00000001 
2a1a8802 a0000029 // 00000001 2a1a8c02 a0000029
0c4: 00000001 2a1a8402 a0000029 // 00000001 2a1a8202 a0000029 // 00000001 
2a1a8002 a0000029 // 00000001 293c5e02 a0000029
0c8: 00000001 293c5c02 a0000029 // 00000001 293c5202 a0000029 // 00000001 
293c5402 a0000029 // 00000001 293c5a02 a0000029
0cc: 00000001 293c5002 a0000029 // 00000001 293c5802 a0000029 // 00000001 
2a1a8602 a0000029 // 00000001 293c5602 a0000029
0d0: 00000001 16626c02 a0000029 // 00000001 16626a02 a0000029 // 00000001 
16626802 a0000029 // 00000001 16626602 a0000029
0d4: 00000001 16626002 a0000029 // 00000001 16626202 a0000029 // 00000001 
16626402 a0000029 // 00000001 117c6e02 a0000029
0d8: 00000001 16626e02 a0000029 // 00000001 117c6a02 a0000029 // 00000001 
117c6802 a0000029 // 00000001 117c6c02 a0000029
0dc: 00000001 117c6402 a0000029 // 00000001 117c6202 a0000029 // 00000001 
117c6002 a0000029 // 00000001 10a9ae02 a0000029
0e0: 00000001 10a9ac02 a0000029 // 00000001 10a9a202 a0000029 // 00000001 
10a9a402 a0000029 // 00000001 10a9aa02 a0000029
0e4: 00000001 10a9a002 a0000029 // 00000001 10a9a802 a0000029 // 00000001 
117c6602 a0000029 // 00000001 10a9a602 a0000029
0e8: 00000001 13380c02 a0000029 // 00000001 13380a02 a0000029 // 00000001 
13380802 a0000029 // 00000001 13380602 a0000029
0ec: 00000001 13380002 a0000029 // 00000001 13380202 a0000029 // 00000001 
13380402 a0000029 // 00000001 150dee02 a0000029
0f0: 00000001 13380e02 a0000029 // 00000001 150dea02 a0000029 // 00000001 
150de802 a0000029 // 00000001 150dec02 a0000029
0f4: 00000001 150de402 a0000029 // 00000001 150de202 a0000029 // 00000001 
150de002 a0000029 // 00000001 1508ae02 a0000029
0f8: 00000001 1508ac02 a0000029 // 00000001 2d424202 a0000029 // 00000001 
2d424402 a0000029 // 00000001 2d424802 a0000029
0fc: 00000001 2d424602 a0000029 // 00000001 2c8c5402 a0000029 // 00000001 
2cfccc02 a0000029 // 00000001 2c0f6e02 a0000029
nv_stop_tx: TransmitterStatus remained busy<7>eth0: tx_timeout: dead entries!