hedwig5
Goto Top

Switch-Module in Cisco Catalyst 6500 funktionieren nicht bzw. unzuverlässig

Hallo!

Bei einem Cisco Catalyst 6506 funktionieren die Switch-Module beim Starten des Switches nicht zuverlässig (Fehlermeldung: 00:08:32: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Fabric channel errors)).

Was mich wundert, ist daß bis gestern das Switch-Modul in Slot 2 anstandslos läuft und heute gestern dann plötzlich dieses Switch-Modul nicht mehr bootbar war, dafür aber das Switch-Modul in Slot 1 problemfrei lief. Also habe ich alle Kabel in das erste Switch-Modul gesteckt und heute Morgen lief es auch.

Was kann ich ausprobieren / checken. Bei einem solchen Verhalten glaube ich nicht wirklich an ein Hardware-Problem.

Hier meine Hardware:

scout#sh mod
Mod Ports Card Type Model
--- ----- -------------------------------------- ------------------ -----------
1 48 SFM-capable 48 port 10/100/1000mb RJ45 WS-X6548-GE-TX
2 48 SFM-capable 48 port 10/100/1000mb RJ45 WS-X6548-GE-45AF
4 8 Network Analysis Module WS-SVC-NAM-2
5 2 Supervisor Engine 720 (Active) WS-SUP720-BASE
6 24 CEF720 24 port 1000mb SFP WS-X6724-SFP

Mod Sub-Module Model Serial Hw Status
--- --------------------------- ------------------ ------------ ------- -------
1 IEEE Voice Daughter Card WS-F6K-GE48-AF SAL1011FVX6 1.2 Ok
2 IEEE Voice Daughter Card WS-F6K-48-AF SAL1007D9DV 2.0 PwrDown
5 Policy Feature Card 3 WS-F6K-PFC3B SAL1031WXTL 2.3 Ok
5 MSFC3 Daughterboard WS-SUP720 SAD08260D8M 2.12 Ok
6 Centralized Forwarding Card WS-F6700-CFC SAD120207L0 4.0 Ok

Vielen Dank für Eure Ideen!

Content-Key: 315609

Url: https://administrator.de/contentid/315609

Printed on: April 20, 2024 at 05:04 o'clock

Member: aqui
aqui Sep 18, 2016 updated at 11:44:57 (UTC)
Goto Top
Manchmal können das Probleme mit der Backplane Connection sein. Gerade wenn das System älter ist. Hier hilft es mal den Switch stromlos zu machen und die Module mal mehrfach aus und wieder einzustecken oder mal in anderen Slots zu testen.
Auch schrittweise vorzugehen hilft. Alle Module ziehen und nur Supervisor drinlassen und booten. Checken obs geht, stromlos machen, nächstes Modul und hochfahren.
So sukzessive alle Module einzeln zustecken und checken.
Die Fehlermeldung verheisst aber nix Gutes... Fabric Channel Error kann ein HW Defect der Fabric Module sein. Das muss nichtmal die Linecards selber sein.
Member: Hedwig5
Hedwig5 Sep 18, 2016 at 11:55:11 (UTC)
Goto Top
Hallo aqui!

Danke für deine Antwort. Der Switch wird jeden Abend ausgeschaltet und Morgens neu gebootet. Der "Ärger" fing ca. mit dem neuen NAM bzw. dem größeren Supervisor an. Kann es sein, daßß irgendetwas zu klein dimensioniert ist? Als Netzteile betreiben wir 2 x 2500 Watt.

Wie bereits geschrieben funktionieren die Switch-Module in verschiedenen Slots (wir haben bereits umgesteckt) nicht konsistent gleich. Manchmal hilft das mit dem Rausziehen und wieder Reinstecken, aber gestern hat sich das Switch-Modul 2 einfach nur noch geweigert.

Kann ich das Fabric Modul austauschen, falls es wirklich Hardware-mäßig defekt sein sollte?
Member: aqui
aqui Sep 18, 2016 at 16:41:41 (UTC)
Goto Top
Aktuellstes IOS hast du geflasht auf die Supervisors ?
Netzteile sind ja Vollausbau mit 2en. Das sollte es nicht sein.
Passiert das auch wenn du das NAM weglässt und nur die Line Cards drin hast ?
Member: Hedwig5
Hedwig5 Sep 18, 2016 at 16:52:02 (UTC)
Goto Top
Als Version läuft Version 12.2(18)SXE6a, ist das die Aktuelle?

NAM weglassen muß ich nochmal ausprobieren.
Member: aqui
aqui Sep 19, 2016 at 12:37:37 (UTC)
Goto Top
Member: shadynet
shadynet Sep 19, 2016 at 19:49:12 (UTC)
Goto Top
Hi,

hab grad mal geschaut, du hast zwischen 850 und 1060W Leistung nötig, sollte also entweder im combined oder redundant mode problemlos laufen. Hast du PoE-Geräte dran? Wenn ja, was und wie viele? Mach mal ein "show power" und poste es hier mal.
Show fabric status
show fabric active
show fabric utilization all
show fabric channel-counters
show fabric errors

Gibt viele Möglichkeiten, ich tippe aber irgendwie nicht, dass es ein Powerproblem ist...12.2(18)SXE6b ist deferred, also zurückgerufen und in der Liste taucht auch das SXE6a auf...schau mal, dass du zumindest das IOS 12.2(33)SXJ10 drauf bekommst. Gibts leider alles nicht ohne Servicevertrag.
Member: brammer
brammer Sep 20, 2016 at 13:48:22 (UTC)
Goto Top
Hallo,

das Problem kann durchaus das ständige aus- und einschalten sein...
Die Switche sind per se für den Dauerbetrieb ausgelegt. Dementsprechend ist auch die Elektrik darauf ausgelegt.
Nach dem Einschalten werden die Bauteile warm, abschalten führt zur Abkühlung....
Es Bauteile, insbesondere Elko's die das auf Dauer nicht wirklich mögen....

Insofern kann es sein dass das Fabric Modul nicht oder noch nicht korrekt versorgt wird und daher die Switch-Module nicht initialisiert werden.

Was sagt der POST beim Switch Start?

brammer
Member: Hedwig5
Hedwig5 Sep 20, 2016 at 19:40:24 (UTC)
Goto Top
Hi!

Hier die angeforderten Info, ja, ich betreibe zur Zeit 2 Acess Points 3502e und max. 4 Desktop-Telefone 7975 über PoE

show power
system power redundancy mode = combined
system power total = 3780.00 Watts (90.00 Amps @ 42V)
system power used = 806.40 Watts (19.20 Amps @ 42V)
system power available = 2973.60 Watts (70.80 Amps @ 42V)
Power-Capacity PS-Fan Output Oper
PS Type Watts A @42v Status Status State
------------------ ------- ------ ------ ------ -----
1 WS-CAC-2500W 2331.00 55.50 OK OK on
2 WS-CAC-2500W 2331.00 55.50 OK OK on
Pwr-Requested Pwr-Allocated Admin Oper
Slot Card-Type Watts A @42v Watts A @42v State State
------------------ ------- ------ ------- ------ ----- -----
1 WS-X6548-GE-TX 132.72 3.16 - - on off (Fabric channel errors)
2 WS-X6548-GE-45AF 132.72 3.16 132.72 3.16 on on
4 WS-SVC-NAM-2 145.74 3.47 - - off off (admin request)
5 WS-SUP720-BASE 282.24 6.72 282.24 6.72 on on
6 WS-X6724-SFP 282.24 6.72 282.24 6.72 on on
Inline Inline Inline Inline
Pwr-Requested Pwr-Allocated Local-Pwr-Pool Power
Slot Card-Type Watts A @42v Watts A @42v Watts A @42v Status
------------------ ------- ------ ------- ------ ------- ------ ----------
1 WS-F6K-GE48-AF - - - - 34.44 0.82 Unknown
2 WS-F6K-48-AF 66.78 1.59 75.18 1.79 34.44 0.82 On

Show fabric status
slot channel speed module fabric
status status
2 0 8G OK OK
5 0 20G OK OK
6 0 20G OK OK

show fabric active
Active fabric card in slot 5
No backup fabric card in the system


show fabric utilization all
slot channel speed Ingress % Egress %
2 0 8G 0 0
5 0 20G 0 0
6 0 20G 0 1


show fabric channel-counters

slot channel rxErrors txErrors txDrops lbusDrops
2 0 0 0 0 0
5 0 544 0 0 0
6 0 0 0 0 0

show fabric errors
Module errors:
slot channel crc hbeat sync DDR sync
2 0 0 0 0 0
5 0 0 0 6 0
6 0 0 0 0 0

Fabric errors:
slot channel sync buffer timeout
2 0 0 0 0
5 0 0 0 0
6 0 0 0 0

Habe grade größere RAM-Bausteine (SP und RP), sowie 1 GB CF bestellt um auf die Version 15.1 updaten zu können.
Member: Hedwig5
Hedwig5 Sep 20, 2016 at 19:41:44 (UTC)
Goto Top
@brammer:

Ist der POST nach dem Start das, was als Text über den Bildschirm läuft, wenn ich mir die Console anschaue?
Member: shadynet
shadynet Sep 20, 2016 at 19:44:15 (UTC)
Goto Top
Ist der POST nach dem Start das, was als Text über den Bildschirm läuft, wenn ich mir die Console anschaue?
genau das ist das face-smile

Irgendwie muckt die eine Karte ja doch gewaltig rum. Passiert das auch, wenn die in Slot 3 steckt? Hoffe, es ist kein Riesenaufwand, die mal eben umzustecken...
Member: Hedwig5
Hedwig5 Sep 20, 2016 at 20:27:36 (UTC)
Goto Top
Das Problem ist, daß die Karten eher abwechselnd rummucken, heute Morgen lief die im Slot 2 :/
Member: Hedwig5
Hedwig5 Sep 22, 2016 at 12:07:27 (UTC)
Goto Top
Meine POST-Ausgabe: http://pastebin.com/gwwZmc6C
Member: aqui
aqui Sep 22, 2016 updated at 17:24:10 (UTC)
Goto Top
Bitte lasse den Unsinn mit überflüssigen externen Bilderlinks !
Das es hier ein wunderbare Bilder Upload Funktion gibt kann man nicht übersehen es sei denn man hat Tomaten auf selbigen !
Einfach mal auf die kleine Kamera am linken Bildrand des Eingabefensters klicken.
So schwer kann das doch gar nicht sein ? Schon gar nicht für eine intelligente IT Fachfrau, oder ?!
(Auch wenn sich ein Mann dahinter verbirgt...)
Member: Hedwig5
Hedwig5 Sep 22, 2016 at 19:59:31 (UTC)
Goto Top
Hallo Aqui!

Klar, Bilder würde ich einfach hochladen, das POST ist jedoch eine Textdatei und wird daher mit dem Hinweis "Es werden nur die Bildformate JPEG (.jpg) und PNG (.png) unterstützt" nicht angenommen.

Gibt es eine bessere Variante diese Textdatei zur Verfügung zu stellen?
Member: brammer
brammer Sep 23, 2016 at 06:39:28 (UTC)
Goto Top
Hallo,

na klar gibt es gerade für Textdateien eine komfortable Möglichkeit....

die Option Codeblock hinzufügen... direkt über dem Kamerasymbol an der Linken Seite face-smile


System Bootstrap, Version 8.5(4)
Copyright (c) 1994-2009 by cisco Systems, Inc.
Cat6k-Sup720/SP processor with 524288 Kbytes of main memory                                                                                                            
                                                                                                                                                                       
Autoboot executing command: "boot disk0:s72033-ipservicesk9-mz.122-18.SXE6a.bin"                                                                                          
Loading image, please wait ...                                                                                                                                          
                                                                                                                                                                       
                                                                                                                                                                       
Initializing ATA monitor library...                                                                                                                                    
                                                                                                                                                                       
                                                                                                                                                                       
Self extracting the image... [OK]                                                                                                                                      
Self decompressing the image : ############################################################################################## [OK]                                      
                                                                                                                                                                       
              Restricted Rights Legend                                                                                                                                  
                                                                                                                                                                       
Use, duplication, or disclosure by the Government is                                                                                                                    
subject to restrictions as set forth in subparagraph                                                                                                                    
(c) of the Commercial Computer Software - Restricted                                                                                                                    
Rights clause at FAR sec. 52.227-19 and subparagraph                                                                                                                    
(c) (1) (ii) of the Rights in Technical Data and Computer                                                                                                              
Software clause at DFARS sec. 252.227-7013.                                                                                                                            
                                                                                                                                                                       
           cisco Systems, Inc.                                                                                                                                          
           170 West Tasman Drive                                                                                                                                        
           San Jose, California 95134-1706                                                                                                                              
                                                                                                                                                                       
                                                                                                                                                                       
                                                                                                                                                                       
Cisco Internetwork Operating System Software                                                                                                                            
IOS (tm) s72033_sp Software (s72033_sp-IPSERVICESK9-M), Version 12.2(18)SXE6a, RELEASE SOFTWARE (fc1)                                                                  
Technical Support: http://www.cisco.com/techsupport                                                                                                                    
Copyright (c) 1986-2006 by cisco Systems, Inc.                                                                                                                          
Compiled Thu 14-Sep-06 17:30 by kellythw                                                                                                                                
Image text-base: 0x40021040, data-base: 0x411C8000                                                                                                                      
                                                                                                                                                                       
                                                                                                                                                                       
00:00:04: %SYS-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.                                                                                    
                                                                                                                                                                       
00:00:04: %PFREDUN-6-ACTIVE: Initializing as ACTIVE processor                                                                                                          
                                                                                                                                                                       
00:00:05: %SYS-SP-3-LOGGER_FLUSHING: System pausing to ensure console debugging output.                                                                                
                                                                                                                                                                       
00:00:04: %SYS-3-LOGGER_FLUSHED: System was paused for 00:00:00 to ensure console debugging output.                                                                    
                                                                                                                                                                       
00:00:05: %OIR-SP-6-CONSOLE: Changing console ownership to route processor                                                                                              
                                                                                                                                                                       
                                                                                                                                                                       
                                                                                                                                                                       
System Bootstrap, Version 12.2(17r)SX7, RELEASE SOFTWARE (fc1)                                                                                                          
Technical Support: http://www.cisco.com/techsupport                                                                                                                    
Copyright (c) 2009 by cisco Systems, Inc.                                                                                                                              
Cat6k-Sup720/RP platform with 1048576 Kbytes of main memory                                                                                                            
                                                                                                                                                                       
Download Start                                                                                                                                                          
!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!                                                                        
Download Completed! Booting the image.                                                                                                                                  
Self decompressing the image : ###################################################################################################################################################################################################### [OK]                                                                                                      
                                                                                                                                                                       
              Restricted Rights Legend                                                                                                                                  
                                                                                                                                                                       
Use, duplication, or disclosure by the Government is                                                                                                                    
subject to restrictions as set forth in subparagraph                                                                                                                    
(c) of the Commercial Computer Software - Restricted                                                                                                                    
Rights clause at FAR sec. 52.227-19 and subparagraph                                                                                                                    
(c) (1) (ii) of the Rights in Technical Data and Computer                                                                                                              
Software clause at DFARS sec. 252.227-7013.                                                                                                                            
                                                                                                                                                                       
           cisco Systems, Inc.                                                                                                                                          
           170 West Tasman Drive                                                                                                                                        
           San Jose, California 95134-1706                                                                                                                              
                                                                                                                                                                       
                                                                                                                                                                       
                                                                                                                                                                       
Cisco Internetwork Operating System Software                                                                                                                            
IOS (tm) s72033_rp Software (s72033_rp-IPSERVICESK9-M), Version 12.2(18)SXE6a, RELEASE SOFTWARE (fc1)                                                                  
Technical Support: http://www.cisco.com/techsupport                                                                                                                    
Copyright (c) 1986-2006 by cisco Systems, Inc.                                                                                                                          
Compiled Thu 14-Sep-06 16:16 by kellythw                                                                                                                                
Image text-base: 0x40021040, data-base: 0x42B48000                                                                                                                      
                                                                                                                                                                       
                                                                                                                                                                       
This product contains cryptographic features and is subject to United                                                                                                  
States and local country laws governing import, export, transfer and                                                                                                    
use. Delivery of Cisco cryptographic products does not imply                                                                                                            
third-party authority to import, export, distribute or use encryption.                                                                                                  
Importers, exporters, distributors and users are responsible for                                                                                                        
compliance with U.S. and local country laws. By using this product you                                                                                                  
agree to comply with applicable laws and regulations. If you are unable                                                                                                
to comply with U.S. and local laws, return this product immediately.
 
A summary of U.S. laws governing Cisco cryptographic products may be found at:
http://www.cisco.com/wwl/export/crypto/tool/stqrg.html
 
If you require further assistance please contact us by sending email to
export@cisco.com.
 
cisco WS-C6506 (R7000) processor (revision 3.0) with 983008K/65536K bytes of memory.
Processor board ID SAL08175W28
SR71000 CPU at 600Mhz, Implementation 0x504, Rev 1.2, 512KB L2 Cache
Last reset from s/w reset
SuperLAT software (copyright 1990 by Meridian Technology Corp).
X.25 software, Version 3.0.0.
Bridging software.
TN3270 Emulation software.
1 Virtual Ethernet/IEEE 802.3 interface
130 Gigabit Ethernet/IEEE 802.3 interfaces
1917K bytes of non-volatile configuration memory.
8192K bytes of packet buffer memory.
 
65536K bytes of Flash internal SIMM (Sector size 512K).
File bootflash:c6msfc3-entservicesk9_wan-mz.122-18.SXF8.bin not found (File not found)
 
 
Press RETURN to get started!
 
 
00:01:06: curr is 0x0
 
00:01:06: RP: Currently running ROMMON from S (Gold) region
00:01:17: %SPANTREE-5-EXTENDED_SYSID: Extended SysId enabled for type vlan
00:01:18: %SYS-5-CONFIG_I: Configured from memory by console
00:01:21: %SYS-5-RESTART: System restarted --
Cisco Internetwork Operating System Software
IOS (tm) s72033_rp Software (s72033_rp-IPSERVICESK9-M), Version 12.2(18)SXE6a, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2006 by cisco Systems, Inc.
Compiled Thu 14-Sep-06 16:16 by kellythw
00:01:21: %SNMP-5-COLDSTART: SNMP agent on host scout is undergoing a cold start
00:01:21: %MFIB_CONST_RP-6-REPLICATION_MODE_CHANGE: Replication Mode Change Detected. Current system replication mode is Ingress
00:00:04: %SYS-3-LOGGER_FLUSHED: System was paused for 00:00:00 to ensure console debugging output.
 
00:00:05: %OIR-SP-6-CONSOLE: Changing console ownership to route processor
 
 
 
00:00:05: %SYS-SP-3-LOGGER_FLUSHED: System was paused for 00:00:00 to ensure console debugging output.
 
 
Firmware compiled 02-May-06 15:44 by integ Build [100]
 
 
00:01:13: %FILESYS-SP-5-MISMATCH: bootflash device programming algorithm mismatch detected, reformat is recommended
00:01:13: SP: SP: Currently running ROMMON from S (Gold) region
00:01:17: %SPANTREE-SP-5-EXTENDED_SYSID: Extended SysId enabled for type vlan
00:01:17: %C6KPWR-SP-4-PSCOMBINEDMODE: power supplies set to combined mode.
00:01:21: %SYS-SP-5-RESTART: System restarted --
Cisco Internetwork Operating System Software
IOS (tm) s72033_sp Software (s72033_sp-IPSERVICESK9-M), Version 12.2(18)SXE6a, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2006 by cisco Systems, Inc.
Compiled Thu 14-Sep-06 17:30 by kellythw
00:01:23: %OIR-SP-6-INSPS: Power supply inserted in slot 1
00:01:23: %C6KPWR-SP-4-PSOK: power supply 1 turned on.
00:01:23: %OIR-SP-6-INSPS: Power supply inserted in slot 2
00:01:23: %C6KPWR-SP-4-PSOK: power supply 2 turned on.
 
%  Flowmask for ip   protocol changed to full
00:01:24: %C6KENV-SP-4-FANHIOUTPUT: Version 2 high-output fan-tray is in effect
00:01:24: %C6KPWR-SP-4-DISABLED: power to module in slot 4 set off (admin request)
00:01:29: %FABRIC-SP-5-FABRIC_MODULE_ACTIVE: The Switch Fabric Module in slot 5 became active.
00:01:30: %DIAG-SP-6-RUN_COMPLETE: Module 5: Running Complete Diagnostics...
00:01:54: %SNMP-5-MODULETRAP: Module 5 [Up] Trap
00:01:53: %DIAG-SP-6-DIAG_OK: Module 5: Passed Online Diagnostics
00:01:55: %OIR-SP-6-INSCARD: Card inserted in slot 5, interfaces are now online
00:01:56: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)
00:01:58: %DIAG-SP-6-RUN_COMPLETE: Module 1: Running Complete Diagnostics...
00:00:01: BaseBoard Index:156
00:00:01: DaughterBoard Index:208 (Centralized Forwarding Card)
00:00:01: Gemini Rev#: 3
 
Firmware compiled 02-May-06 15:44 by integ Build [100]
 
 
00:00:04: %SYS-CFC6-5-RESTART: System restarted --
Cisco Internetwork Operating System Software
IOS (tm) c6lc2 Software (c6lc2-SP-M), Version 12.2(18)SXE6a, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2006 by cisco Systems, Inc.
Compiled Thu 14-Sep-06 16:15 by kellythw
*Nov 30 00:00:02.251: CFC6: Currently running ROMMON from S (Gold) region
- RELIABILITY DRIVER: wrong signature on NVFLASH
 
00:02:12: %DIAG-SP-6-RUN_COMPLETE: Module 6: Running Complete Diagnostics...
00:02:21: %SNMP-5-MODULETRAP: Module 1 [Up] Trap
00:02:20: %DIAG-SP-3-MINOR: Module 1: Online Diagnostics detected a Minor Error. Please use 'show diagnostic result <target>' to see test results.  
00:02:20: %CONST_DIAG-SP-3-BOOTUP_TEST_FAIL: Module 1: TestLoopback failed on port(s) 9,11,16,19,22
00:02:20: %CONST_DIAG-SP-3-BOOTUP_TEST_FAIL: Module 1: TestL3VlanMet failed
00:02:20: %CONST_DIAG-SP-3-BOOTUP_TEST_FAIL: Module 1: TestEgressSpan failed
00:02:22: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)
00:02:23: %PM-SP-4-ERR_DISABLE: diagnostics error detected on Gi1/9, putting Gi1/9 in err-disable state
00:02:23: %PM-SP-4-ERR_DISABLE: diagnostics error detected on Gi1/11, putting Gi1/11 in err-disable state
00:02:24: %PM-SP-4-ERR_DISABLE: diagnostics error detected on Gi1/16, putting Gi1/16 in err-disable state
00:02:25: %PM-SP-4-ERR_DISABLE: diagnostics error detected on Gi1/19, putting Gi1/19 in err-disable state
00:02:25: %PM-SP-4-ERR_DISABLE: diagnostics error detected on Gi1/22, putting Gi1/22 in err-disable state
00:02:28: %SNMP-5-MODULETRAP: Module 6 [Up] Trap
00:02:28: %DIAG-SP-6-DIAG_OK: Module 6: Passed Online Diagnostics
00:02:32: %OIR-SP-6-INSCARD: Card inserted in slot 1, interfaces are now online
00:02:36: %OIR-SP-6-INSCARD: Card inserted in slot 6, interfaces are now online
00:02:49: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)

    00:03:15: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)

brammer
Member: aqui
aqui Sep 23, 2016 at 07:20:12 (UTC)
Goto Top
Fabric Channel errors hören sich NICHT gut an. Das deutet auf einen defect der Fabric Backplane hin. Da wird dann auch Tauschen der Linecards etc. nichts nützen.
Du solltest die Fabric Channel Fehler ans TAC melden und auch mal einen Crashdump an die schicken. Da ist vermutlich irgendwas mit der Backplane im Argen.
Auch solltest du mal genau klären WARUM die obigen Ports in den Error Disable Mode gehen. Das wird ja immer von externen Events verursacht !
Ggf. hilft da nur ein RMA. Die Fabric Fehlermeldungen lassen nicht auf einen einfachen Fehler schliessen face-sad
Member: Hedwig5
Hedwig5 Sep 25, 2016 at 11:24:50 (UTC)
Goto Top
Liegt der Fehler dann eher im Supervisor oder ist es das Gehäuse an sich (also der Catalyst Kasten)?
Member: aqui
Solution aqui Sep 25, 2016 at 16:49:48 (UTC)
Goto Top
Supervisor hat damit nix zu tun es sei denn du hast noch einen alten Supervisor der die Fabric mit drauf hat. Gehäuse oder Switch Fabric Module.
Member: Hedwig5
Hedwig5 Sep 30, 2016 at 16:30:37 (UTC)
Goto Top
Ich habe einen Supervisor 720 3B (also mit Fabbric?). Mittlerweile habe ich übrigens den SP-DRAM und RP-DRAM auf jeweils 1GB erweitert, danach liefen die Switch-Module erstmal problemfrei, im Anschluss habe ich die Firmware auf s72033_rp-ADVIPSERVICESK9-M), Version 15.1(2)SY7 geupdated. Heute (nach 2 Tage) sind die Switch-Module leider wieder im laufenden Betrieb ausgefallen:

Syslog logging: enabled (0 messages dropped, 1 messages rate-limited, 0 flushes, 0 overruns, xml disabled, filtering disabled)

No Active Message Discriminator.



No Inactive Message Discriminator.


    Console logging: level debugging, 154 messages logged, xml disabled,
                     filtering disabled
    Monitor logging: level debugging, 0 messages logged, xml disabled,
                     filtering disabled
    Buffer logging:  level debugging, 154 messages logged, xml disabled,
                    filtering disabled
    Exception Logging: size (4096 bytes)
    Count and timestamp logging messages: disabled
    Persistent logging: disabled

No active filter modules.

ESM: 0 messages dropped

    Trap logging: level informational, 90 message lines logged
        Logging Source-Interface:       VRF Name:

Log Buffer (8192 bytes):
i1/3: Power Device detected: IEEE PD
00:08:53: %ILPOWER-7-DETECT: Interface Gi1/28: Power Device detected: IEEE PD
00:08:54: %SNMP-5-MODULETRAP: Module 1 [Up] Trap
00:08:54: %ILPOWER-7-DETECT: Interface Gi1/41: Power Device detected: IEEE PD
00:08:54: %OIR-SP-6-SP_INSCARD: Card inserted in slot 1, interfaces are now online
00:09:14: %ILPOWER-7-DETECT: Interface Gi1/41: Power Device detected: Cisco/IEEE PD
00:10:35: %ILPOWER-7-DETECT: Interface Gi1/28: Power Device detected: Cisco/IEEE PD
00:10:40: %ILPOWER-7-DETECT: Interface Gi1/3: Power Device detected: Cisco/IEEE PD
00:11:45: %CONST_DIAG-SP-3-HM_TEST_FAIL: Module 1 TestSynchedFabChannel detected 3 consecutive failures
00:11:53: %SNMP-5-MODULETRAP: Module 1 [Down] Trap
00:11:53: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Fabric channel errors)
00:13:29: %ILPOWER-7-DETECT: Interface Gi2/15: Power Device detected: IEEE PD
00:13:41: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (power_on_ok)-> wait_til_online (online)-> online (powered_off)-> shutdown_pc (pc_powered_off)-> powered_off (offline)-> powered_off (operator_power_on)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:13:41: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:13:46: %OIR-SP-6-SP_REMCARD: Card removed from slot 1, interfaces disabled
00:13:49: %ILPOWER-7-DETECT: Interface Gi2/15: Power Device detected: Cisco/IEEE PD
00:13:56: %C6KERRDETECT-SP-2-SWBUSSTALL: The switching bus is experiencing stall for 3 seconds
00:13:58: %C6KERRDETECT-SP-2-SWBUSSTALL_RECOVERED: The switching bus stall is recovered and data traffic switching continues
00:15:41: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (remove)-> empty (remove)-> empty_clr_persist (remove)-> empty (insert)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:15:41: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:17:34: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (disabled)-> disabled (disabled)-> disabled2 (restart)-> wait_til_disabled (timer)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:17:34: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:18:15: %DIAG-SP-6-RUN_COMPLETE: Module 1: Running Complete Diagnostics...
00:18:28: %DIAG-SP-6-DIAG_OK: Module 1: Passed Online Diagnostics
00:18:30: %ILPOWER-7-DETECT: Interface Gi1/3: Power Device detected: IEEE PD
00:18:32: %ILPOWER-7-DETECT: Interface Gi1/28: Power Device detected: IEEE PD
00:18:33: %ILPOWER-7-DETECT: Interface Gi1/41: Power Device detected: IEEE PD
00:18:33: %SNMP-5-MODULETRAP: Module 1 [Up] Trap
00:18:33: %OIR-SP-6-SP_INSCARD: Card inserted in slot 1, interfaces are now online
00:20:24: %SNMP-5-MODULETRAP: Module 1 [Down] Trap
00:20:24: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Fabric channel errors)
00:22:11: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (power_on_ok)-> wait_til_online (online)-> online (powered_off)-> shutdown_pc (pc_powered_off)-> powered_off (offline)-> powered_off (operator_power_on)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:22:11: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:24:03: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (disabled)-> disabled (disabled)-> disabled2 (restart)-> wait_til_disabled (timer)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:24:03: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:25:58: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (disabled)-> disabled (disabled)-> disabled2 (restart)-> wait_til_disabled (timer)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:25:58: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:27:51: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (disabled)-> disabled (disabled)-> disabled2 (restart)-> wait_til_disabled (timer)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:27:51: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:29:46: %ONLINE-SP-6-INITFAIL: Module 1: Failed to synchronize Port asic
sm(cygnus_oir_bay slot1), running yes, state wait_til_online
Last transition recorded: (disabled)-> disabled (disabled)-> disabled2 (restart)-> wait_til_disabled (timer)-> may_be_occupied (timer)-> occupied (known)-> can_power_on (yes_power)-> powered_on (real_power_on)-> check_power_on (timer)-> check_power_on (power_on_ok)-> wait_til_online 
00:29:46: %C6KPWR-SP-4-DISABLED: power to module in slot 1 set off (Module  Failed SCP dnld)
00:29:46: %OIR-SP-4-RESTART: The card in slot 1 has reached the maximum number of 5 restarts, this card will be disabled
00:33:17: %SNMP-5-MODULETRAP: Module 2 [Down] Trap
00:33:17: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)
00:33:50: %C6KPWR-SP-4-DISABLED: power to module in slot 2 set off (Fabric channel errors)
00:34:24: %DIAG-SP-6-RUN_COMPLETE: Module 2: Running Complete Diagnostics...
00:34:37: %DIAG-SP-6-DIAG_OK: Module 2: Passed Online Diagnostics
00:34:39: %ILPOWER-7-DETECT: Interface Gi2/5: Power Device detected: IEEE PD
00:34:39: %ILPOWER-7-DETECT: Interface Gi2/7: Power Device detected: IEEE PD
00:34:40: %ILPOWER-7-DETECT: Interface Gi2/14: Power Device detected: IEEE PD
00:34:40: %ILPOWER-7-DETECT: Interface Gi2/15: Power Device detected: IEEE PD
00:34:41: %SNMP-5-MODULETRAP: Module 2 [Up] Trap
00:34:41: %OIR-SP-6-SP_INSCARD: Card inserted in slot 2, interfaces are now online
00:34:58: %ILPOWER-7-DETECT: Interface Gi2/7: Power Device detected: Cisco/IEEE PD
00:35:00: %ILPOWER-7-DETECT: Interface Gi2/15: Power Device detected: Cisco/IEEE PD
00:36:27: %ILPOWER-7-DETECT: Interface Gi2/5: Power Device detected: Cisco/IEEE PD
00:36:30: %ILPOWER-7-DETECT: Interface Gi2/14: Power Device detected: Cisco/IEEE PD
06:20:11: %OIR-SP-6-SP_REMCARD: Card removed from slot 1, interfaces disabled
06:20:52: %DIAG-SP-6-RUN_COMPLETE: Module 1: Running Complete Diagnostics...
06:21:06: %DIAG-SP-6-DIAG_OK: Module 1: Passed Online Diagnostics
06:21:08: %ILPOWER-7-DETECT: Interface Gi1/3: Power Device detected: IEEE PD
06:21:10: %ILPOWER-7-DETECT: Interface Gi1/28: Power Device detected: IEEE PD
06:21:10: %ILPOWER-7-DETECT: Interface Gi1/41: Power Device detected: IEEE PD
06:21:11: %SNMP-5-MODULETRAP: Module 1 [Up] Trap
06:21:11: %OIR-SP-6-SP_INSCARD: Card inserted in slot 1, interfaces are now online
06:21:30: %ILPOWER-7-DETECT: Interface Gi1/41: Power Device detected: Cisco/IEEE PD
06:22:51: %ILPOWER-7-DETECT: Interface Gi1/28: Power Device detected: Cisco/IEEE PD
06:22:56: %ILPOWER-7-DETECT: Interface Gi1/3: Power Device detected: Cisco/IEEE PD
Member: aqui
aqui Sep 30, 2016 at 17:30:04 (UTC)
Goto Top
Die Port ASIC Fehler verheissen nix Gutes ! Das sieht nach einem Hardware Defekt aus.
Du solltest einen TAC Case eröffnen um erstmal sicher zu klären was da kaputt ist bzw. was die Error Meldungen genau bedeuten.
Danach dann entscheiden ob ein RMA oder nicht.
Member: Hedwig5
Hedwig5 Sep 30, 2016 at 17:47:06 (UTC)
Goto Top
Die Hardware ist schon lange End of Life, den Supervisor hab ich gebraucht gekauft, aber noch fast 1 Jahr Garantie.... Würde nächste Woche mal den alten Sup32 rauskramen, gegentesten und dann weiterschauen.
Member: aqui
Solution aqui Oct 01, 2016 at 08:59:23 (UTC)
Goto Top
Wenn du Garantie hast dann nutze sie !
Oder lass dir ein gutes Trade in Angebot machen und entsorge den alten, stromfressenden Moloch gegen moderne 1HE Fabric Switches mit DCB face-wink
Member: Hedwig5
Hedwig5 Oct 10, 2016 at 19:14:25 (UTC)
Goto Top
So, Austausch ist passiert, der neue Supervisor läuft Einwandfrei. Danke für Eure Hilfe!