Fibre Channel (SAN)

Reply
Contributor
Posts: 28
Registered: ‎11-11-2010

SAN Switch Status Down & Marginal

Hello There,

 

I have some old SAN Switch 12000 FOS v5.0.3b that showing marginal or down status because of some faulty/marginal port. I have tried to change some SFP but the status was not changing.

 

switch2dc:admin> switchstatusshow
Switch Health Report                        Report time: 02/12/2014 01:08:00 PM
Switch Name:     switch2dc
IP address:    10.204.9.136
SwitchState:    DOWN
Duration:    12831:06

Power supplies monitor    HEALTHY
Temperatures monitor      HEALTHY
Fans monitor              HEALTHY
WWN servers monitor       HEALTHY
Standby CP monitor        HEALTHY
Blades monitor            HEALTHY
Flash monitor             HEALTHY
Marginal ports monitor    DOWN
Faulty ports monitor      HEALTHY
Missing SFPs monitor      HEALTHY


Port 011  is MARGINAL
Port 058  is MARGINAL
Port 063  is MARGINAL

 

Before that i have tried to clear the counter error using statsclear cmd, but some of the counter (link loss, link fail,&loss sig) are not reset.

 

Before statsclear

switch2dc:admin> porterrshow
        frames  enc  crc  too  too  bad  enc disc link loss loss frjt fbsy
       tx   rx   in  err shrt long  eof  out   c3 fail sync  sig
     =====================================================================
  0:   14m  10m   0    0    0    0    0  113m   0  1.3k  68m   0    0    0
  1:  4.0m 3.8m   0    0    0    0    0   14m   0  192  393k   0    0    0
  2:  1.7g 3.6g   0    0    0    0    0  135k   0    3  3.9k   4    0    0
  3:  1.9g 3.7g   0    0    0    0    0   29m   0  651  2.0m   0    0    0
  4:   12k  23k   0    0    0    0    0  1.8m   0   35  623k   0    0    0
  5:  2.2g 282m   0    0    0    0    0   19k   0   27   54    0    0    0
  6:  2.1g 1.0g   0    0    0    0    0   23m   0  481  957k   0    0    0
  7:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
  8:  333m 602m 277m 242m 100m 490  460m 2.9g 124m 694k 132m 628    0    0
  9:   28k  22k   0    0    0    0    0  3.3m   0   28  361k   0    0    0
 10:   29k  37k   0    0    0    0    0  1.2g   0   98  2.2g   0    0    0
 11:  3.5g 3.9g   0    0    0    0    0   10m   0  248  556k   0    0    0
 12:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 13:  271m  85m   0    0    0    0    0  886m   0   64  1.4g 582    0    0
 14:  3.7m 1.5m   0    0    0    0    0  390m   0   21  1.4g   0    0    0
 15:  1.4m 1.4m   0    0    0    0    0  803m   0    2  1.4g   0    0    0
 16:  3.4k 5.7k   0    0    0    0    0  416k   0    9   17k   1    0    0
 17:   32m 3.9m   0    0    0    0    0  4.4k   0   14   22    0    0    0
 18:  2.2g 681m   0    0    0    0    0   51k   0   21   21    0    0    0
 19:  1.2g 230m   0    0    0    0    0  7.9m   0   40  594k   0    0    0
 20:  3.7g 3.5g   0    0    0    0    0   19    0    1    4    1    0    0
 21:  1.6g 3.7g   0    0    0    0    0   11    0    1    3    1    0    0
 22:  1.4g 274m   0    0    0    0    0  375k   0    3    4    0    0    0
 23:  802m 533m   0    0    0    0    0   82m   0  1.6k 3.9m   0    0    0
 24:  3.8g 1.1g   0    0    0    0    0  106k   0  222  433    0    0    0
 25:  2.8g 3.1g   0    0    0    0    0   99k   0  207  399    0    0    0
 26:  2.4g 3.9g   0    0    0    0    0   80k   0  247  475    0    0    0
 27:  3.2g 759m   0    0    0    0    0   79k   0  248  481    0    0    0
 28:  8.1m  28m   0    0    0    0    0   98m   0   76  133m   0    0    0
 29:  3.6k 3.9k   0    0    0    0    0  813    0    1    1    0    0    0
 30:  3.0g 1.3g   0    0    0    0    0  2.1m   0   38  562k   0    0    0
 31:  2.1g 4.1g   0    0    0    0    0  6.9k  56   44    3    1    0    0
 32:  379  320    0    0    0    0    0  322k   0    3    3    2    0    0
 33:  1.5g 2.1g   0    0    0    0    0   30m   0  627  6.6m   0    0    0
 34:  2.7k  14k   0    0    0    0    0  1.7g   0    7  1.8g   0    0    0
 35:  1.0g 993m   0    0    0    0    0   23m   0   81   25m   0    0    0
 36:  1.5g 1.1g   0    0    0    0    0   22k   4   76  143    1    0    0
 37:  2.0g 178m   2    1    0    0    1   57m   4   46  111m   0    0    0
 38:  134m  97m   0    0    0    0    0   26m   0  326   14m   0    0    0
 39:  4.1g 3.2g   0    0    0    0    0   19m   0  376  822k   0    0    0
 40:  2.9g 866m   0    0    0    0    0  1.3k   3    1    4    1    0    0
 41:  3.5g 851m   0    0    0    0    0   15    4    1    3    1    0    0
 42:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 43:  3.4g 858m   0    0    0    0    0  2.7m   0   22  466k   0    0    0
 44:  488m 489m   0    0    0    0    0  5.2m   0  126  265k   0    0    0
 45:   13k  21k   0    0    0    0    0  6.4m   0   36  3.3m   0    0    0
 46:  730m 505m   0    0    0    0    0   69m   0   74   99m   0    0    0
 47:  3.6g 2.4g   0    0    0    0    0    9   39   15    0    0    0    0
 48:  1.3g 2.9g   0    0    0    0    0  5.2m   0  150  322k   0    0    0
 49:  1.7g 2.0g   0    0    0    0    0   50m   0  131  128m   0    0    0
 50:  2.6g 2.1g   0    0    0    0    0  1.1m   0   25   84k   0    0    0
 51:  2.7g 3.8g   0    0    0    0    0  3.2m   0   28  200k   0    0    0
 52:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 53:  2.6g 2.2g   0    0    0    0    0  6.4m   0  100  1.5m   0    0    0
 54:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 55:  108k  62k   0    0    0    0    0   29m   0   39  173k  21k   0    0
 56:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 57:   11k  14k   0    0    0    0    0  1.3m   0   21  170k   0    0    0
 58:   11m  12m   0    0    0    0    0  492m   0    9  717m   0    0    0
 59:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 60:  2.0k 8.2k   0    0    0    0    0  560k   0    1    2    0    0    0
 61:   29m 6.6m   0    0    0    0    0   55m   0   57   82m   2    0    0
 62:  1.8g 3.6g   0    0    0    0    0  2.2m   0   14  1.3m   0    0    0
 63:  1.9g 1.0g   0    0    0    0    0  1.0g   0   23  2.0g   0    0    0

 

After Statsclear
switch2dc:admin> statsclear
switch2dc:admin> porterrshow
        frames  enc  crc  too  too  bad  enc disc link loss loss frjt fbsy
       tx   rx   in  err shrt long  eof  out   c3 fail sync  sig
     =====================================================================
  0:    0    0    0    0    0    0    0    0    0  1.3k  68m   0    0    0
  1:    0    0    0    0    0    0    0    0    0  192  393k   0    0    0
  2:    0    0    0    0    0    0    0    0    0    3  3.9k   4    0    0
  3:    0    0    0    0    0    0    0    0    0  651  2.0m   0    0    0
  4:    0    0    0    0    0    0    0    0    0   35  623k   0    0    0
  5:    0    0    0    0    0    0    0    0    0   27   54    0    0    0
  6:  515  1.0k   0    0    0    0    0    0    0  481  957k   0    0    0
  7:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
  8:    0    0    0    0    0    0    0    0    0  694k 132m 628    0    0
  9:    0    0    0    0    0    0    0    0    0   28  361k   0    0    0
 10:    0    0    0    0    0    0    0    0    0   98  2.2g   0    0    0
 11:    0    0    0    0    0    0    0    0    0  248  556k   0    0    0
 12:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 13:    0    0    0    0    0    0    0    0    0   64  1.4g 582    0    0
 14:    0    0    0    0    0    0    0    0    0   21  1.4g   0    0    0
 15:    0    0    0    0    0    0    0    0    0    2  1.4g   0    0    0
 16:    0    0    0    0    0    0    0    0    0    9   17k   1    0    0
 17:    0    0    0    0    0    0    0    0    0   14   22    0    0    0
 18:    0    0    0    0    0    0    0    0    0   21   21    0    0    0
 19:    0    0    0    0    0    0    0    0    0   40  594k   0    0    0
 20:    5    3    0    0    0    0    0    0    0    1    4    1    0    0
 21:    6    3    0    0    0    0    0    0    0    1    3    1    0    0
 22:    0    0    0    0    0    0    0    0    0    3    4    0    0    0
 23:    0    0    0    0    0    0    0    0    0  1.6k 3.9m   0    0    0
 24:  639  1.2k   0    0    0    0    0    0    0  222  433    0    0    0
 25:  140  146    0    0    0    0    0    0    0  207  399    0    0    0
 26:  1.8k 1.9k   0    0    0    0    0    0    0  247  475    0    0    0
 27:  1.2k 2.8k   0    0    0    0    0    0    0  248  481    0    0    0
 28:    0    0    0    0    0    0    0    0    0   76  133m   0    0    0
 29:    0    0    0    0    0    0    0    0    0    1    1    0    0    0
 30:    0    0    0    0    0    0    0    0    0   38  562k   0    0    0
 31:    0    0    0    0    0    0    0    0    0   44    3    1    0    0
 32:    0    0    0    0    0    0    0    0    0    3    3    2    0    0
 33:    6    6    0    0    0    0    0    0    0  627  6.6m   0    0    0
 34:    0    0    0    0    0    0    0    0    0    7  1.8g   0    0    0
 35:    0    0    0    0    0    0    0    0    0   81   25m   0    0    0
 36:  5.1k  31k   0    0    0    0    0    0    0   76  143    1    0    0
 37:  106  212    0    0    0    0    0    0    0   46  111m   0    0    0
 38:    0    0    0    0    0    0    0    0    0  326   14m   0    0    0
 39:  316  575    0    0    0    0    0    0    0  376  822k   0    0    0
 40:    3    6    0    0    0    0    0    0    0    1    4    1    0    0
 41:    3    6    0    0    0    0    0    0    0    1    3    1    0    0
 42:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 43:   11   10    0    0    0    0    0    0    0   22  466k   0    0    0
 44:  1.9k 209    0    0    0    0    0    0    0  126  265k   0    0    0
 45:    0    0    0    0    0    0    0    0    0   36  3.3m   0    0    0
 46:    0    0    0    0    0    0    0    0    0   74   99m   0    0    0
 47:   41k 167k   0    0    0    0    0    0    0   15    0    0    0    0
 48:    0    0    0    0    0    0    0    0    0  150  322k   0    0    0
 49:    0    0    0    0    0    0    0    0    0  131  128m   0    0    0
 50:    0    0    0    0    0    0    0    0    0   25   84k   0    0    0
 51:   18   81    0    0    0    0    0    0    0   28  200k   0    0    0
 52:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 53:  153k 755    0    0    0    0    0    0    0  100  1.5m   0    0    0
 54:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 55:    0    0    0    0    0    0    0    0    0   39  173k  21k   0    0
 56:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 57:    0    0    0    0    0    0    0    0    0   21  170k   0    0    0
 58:    0    0    0    0    0    0    0    0    0    9  717m   0    0    0
 59:    0    0    0    0    0    0    0    0    0    0    0    1    0    0
 60:    0    0    0    0    0    0    0    0    0    1    2    0    0    0
 61:    0    0    0    0    0    0    0    0    0   57   82m   2    0    0
 62:  5.0k 982    0    0    0    0    0    0    0   14  1.3m   0    0    0
 63:    0    0    0    0    0    0    0    0    0   23  2.0g   0    0    0

 

So i have some question:


- How to resolve the down/marginal status?

- How to clear the rest of counter which are not cleared by statsclear cmd?

 

nb. these status also occure on other SAN Switch 12000 with FOS v5.0.3b and SAN Switch 4100 FOS v4.4.0b

External Moderator
Posts: 4,787
Registered: ‎02-23-2004

Re: SAN Switch Status Down & Marginal

[ Edited ]

command "switchstatuspolicyshow" give the output of component who the switch get from Healthy to Marginal when component is faulty or our or range.

 

with command "switchstatuspolicyset" you can set the value.

 

 

btw. for 4.4 is very old, if you have access to all Package required for Upgrade, i would suggest to upgrade to newest release.

 

for 12000 FOS 5.0.5f is available

TechHelp24
Valued Contributor
Posts: 524
Registered: ‎03-20-2011

Re: SAN Switch Status Down & Marginal

regarding clearing the stats - try portstatsclear/slotstatsclear

Contributor
Posts: 28
Registered: ‎11-11-2010

Re: SAN Switch Status Down & Marginal

for cmd "switchstatuspolicyset" I can only set policy regarding faulty/marginal port counter. But I want to solve about current faulty/marginal SFP that have not changed to Healty status after replacing the SFP with "switchstatusshow" output. Is it FOS bug or physical problem?

External Moderator
Posts: 4,787
Registered: ‎02-23-2004

Re: SAN Switch Status Down & Marginal

--->>>Is it FOS bug or physical problem?

 

I've at the moment no access to all FOS 5.0.x Release Notes, and cannot review if this is a Bug or not., last time i worked with FOS 5.0.x is 3+ Years ago.

 

can you please collect "errshow" output and post here ?

 

 

TechHelp24
Contributor
Posts: 28
Registered: ‎11-11-2010

Re: SAN Switch Status Down & Marginal

Hello TechHelp24,

 

attached some errdump and switchstatusshow output of the 12000 SAN Switches.

 

 

External Moderator
Posts: 4,787
Registered: ‎02-23-2004

Re: SAN Switch Status Down & Marginal

FW-1437
Message <timestamp>, [FW-1437], <sequence-number>,, WARNING, <system-name>, Switch status
change contributing factor faulty ports: <Num of faulty ports>. (Port(s)
<unknown>.
Probable Cause Indicates that the switch status is not in a healthy state. This occurred because the number of
faulty ports is greater than or equal to the policy set by the switchStatusPolicySet command. A port
is considered faulty due to hardware failure such as a faulty small form-factor pluggable (SFP) or port.
Recommended
Action
Replace any faulty or deteriorating small form-factor pluggables (SFPs).
Severity WARNING

TechHelp24
Contributor
Posts: 26
Registered: ‎09-11-2012

Re: SAN Switch Status Down & Marginal

Run the following commands:

sfpshow 11 -all | grep RX

sfpshow 11 -all | grep TX


sfpshow 58 -all | grep RX

sfpshow 58 -all | grep TX


sfpshow 63 -all | grep RX

sfpshow 63 -all | grep TX

 

Post the results here.

 

As this is a lower FOS version, these *may* not work. If they do not, you can grab the information for Port Administrator in Web Tools (Advanced).

 

Valued Contributor
Posts: 761
Registered: ‎06-11-2010

Re: SAN Switch Status Down & Marginal

Hi,

 

With that version, the only way to clear al the counters is by rebooting the switch.

 

Rgds

Join the Community

Get quick and easy access to valuable resource designed to help you manage your Brocade Network.