2 Replies Latest reply: May 27, 2011 10:20 AM by dudu2030 RSS

    Urgent Help with %SYS-2-MALLOCFAIL on 6500

    dudu2030

      I have two CAT6513 running GLBP

      memory utilization is extremely high, infact i am not able to telnet to one of the 6513s any more

      plsease i need urgent help

      ERROR: Processor memory utilization is 97.9623%. This is considered to be very
        high.
      ------------------------------------------------------------------------------------------------------------

      Cisco IOS Software, s72033_rp Software (s72033_rp-IPSERVICESK9_WAN-M), Version 12.2(33)SXH3a, RELEASE SOFTWARE (fc1)
      Technical Support: http://www.cisco.com/techsupport
      Copyright (c) 1986-2008 by Cisco Systems, Inc.
      Compiled Wed 24-Sep-08 07:29 by prod_rel_team

      ROM: System Bootstrap, Version 12.2(17r)SX5, RELEASE SOFTWARE (fc1)

      Router2 uptime is 1 year, 12 weeks, 6 days, 3 hours, 2 minutes
      Uptime for this control processor is 1 year, 12 weeks, 6 days, 3 hours, 3 minutes
      Time since Router2 switched to active is 1 year, 12 weeks, 6 days, 3 hours, 7 minutes
      System returned to ROM by  power cycle at 04:12:47 PST Thu Nov 13 2008 (SP by power on)
      System restarted at 09:37:12 UTC Wed Feb 24 2010
      System image file is "sup-bootdisk:s72033-ipservicesk9_wan-mz.122-33.SXH3a.bin"


      .

      cisco WS-C6513 (R7000) processor (revision 2.0) with 458720K/65536K bytes of memory.
      Processor board ID SAL1246A5QY
      SR71000 CPU at 600Mhz, Implementation 0x504, Rev 1.2, 512KB L2 Cache
      Last reset from s/w reset
      13 Virtual Ethernet interfaces
      106 Gigabit Ethernet interfaces
      1917K bytes of non-volatile configuration memory.
      8192K bytes of packet buffer memory.

      65536K bytes of Flash internal SIMM (Sector size 512K).
      Configuration register is 0x2102

      -----------------------------------------------------------------------------------------------------------

      sh processes memory sorted allocated
      Processor Pool Total:  388779600 Used:  380880288 Free:    7899312
            I/O Pool Total:   67108864 Used:   16487640 Free:   50621224

      PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
      139   0 3781165180 3781069328      61120          0          0 CDP Protocol   
      344   0 3646415824 2606618628      13920          0          0 IP SNMP        
         0   0 2939418300 1495673392 1965767408   15967316      75552 *Dead*         
      256   0 2569251324 2569020876      10020          0          0 RPC online_diag_
        26   0 1990583380 1990572628      17772          0          0 EnvMon         
      190   0 1680539380 1463780148  285432044          0          0 HTTP CORE      
      186   0 1189663328 1180436572      55080          0          0 DHCPD Receive  
      146   0 1051702292  570229760      22736     182280      36456 IP Input       
      279   0 1040987492 1042927396      12252          0          0 crypto sw pk pro
      346   0  992550220 2105469624     104604          0          0 SNMP ENGINE    
      351   0  924461376  681368188    7965024          0          0 IP-EIGRP(0): PDM
      131   0  815634172  815634172       7020          0          0 esw_vlan_stat_pr
      303   0  503514916  503136024     304216          0          0 Port manager per
        20   0  502789052    1023680     248752          0          0 IPC Seat Manager
      182   0  467700532  588062088    1028020          0          0 IP RIB Update  
      189   0  405440628   59165120      13020          0          0 TCP Protocols  
        42   0  389486484  389486260       7176          0          0 Per-Second Jobs
      148   0  370445348          0      43948          0          0 ADJ resolve proc
      230   0  307013852  117413656      10680          0          0 TPLUS          
      195   0  129891856  129891856       7020          0          0 XDR RP backgroun
         0   0  104164548       2972  100054552          0          0 *Init*         
      301   0   86350824    3038828      10220          0          0 RPC pm-mp      
         8   0   76541068  370539564     266280          0          0 ARP Input      
      345   0   73248352       2476      30952          0          0 PDU DISPATCHER 
         3   0   68338720   68289508       7960      11704          0 NTP            
      347   0   50124948   50113476      13524          0          0 SNMP ConfCopyPro
         6   0   48004596   47822432     495156   39050532   39233624 Pool Manager   
      202   0   36581988   35941924     106720          0          0 L3 Manager     
      276   0   32919240   33149532       7176          0          0 Online Diag EEM
      247   0   28583176  184367848       7020          0          0 AAA SEND STOP EV
      188   0   22158116  293611300      14072          0          0 TCP Timer      
      167   0   13418396   11471444      17276          0          0 SSH Event handle
      169   0    3420140    2776844     711124          0          0 HWIF QoS Process
        38   0    1637204    1606824      18104          0          0 Net Background 
      226   0    1537212      15620       7020          0          0 LOCAL AAA      
      203   0     765748   79144336     711160          0          0 FM core        
      253   0     614512     614512      10020          0          0 RPC stp_sp2mp_ap
      199   0     454376        292     458968          0          0 CEF: IPv4 proces
        12   0     447788     191892     262208          0          0 Entity MIB API 
        29   0     411756     211292      88752          0          0 rf proxy rp agen
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
        54   1     407748     392124      28688          0          0 Virtual Exec   
      319   0     319836      18652     316660          0          0 EEM Server     
        13   0     264488          0     273792     120600          0 EEM ED Syslog  
        94   0     251208       7568     119708          0          0 PF_Init Process
      111   0     221760       4352      87024          0          0 Collection proce
        47   0     219936     241516      56392          0          0 Env action     
        41   0     171656      13484      10020          0          0 TTY Background 
      272   0     124812      55080      74856          0          0 Entity MIB C6k P
      192   0     114000  108100244      98860          0          0 XDR mcast      
        53   0     110172     162588       7448          0          0 draco-oir-proces
         1   0     102544      87072      22492          0          0 Chunk Manager  
      265   0      99588      66748      10020          0          0 RPC vtp_const_ap
        33   0      93380      22492      22728          0          0 Cat6k SNMP     
      160   0      89940      40972      56024          0          0 SW VLAN RP     
      352   0      84992          0       7020      13552          0 IP-EIGRP(0): HEL
      264   0      84104      27616      65064          0          0 RPC pagp_switch_
      334   0      76316       2888      73368          0          0 Call Home proces
      181   0      75508        616      84860          0          0 IP Background  
      284   0      71024      60588      10320          0          0 RPC c6k_rp_envir
      309   0      68340       3804      10020          0          0 RPC lcc_sp     
        16   0      64136      50420      20788          0          0 PF_Split Sync Pr
      193   0      63916       1932      11752          0          0 IPC LC Message H
        75   0      54228       1308       7128      12012          0 Heartbeat Proces
        19   0      42648          0       7020          0          0 IPC Deferred Por
      252   0      33160      33160      10020          0          0 RPC capi_rp    
      231   0      30900       1676      26892          0          0 crypto engine pr
      299   0      30684      30684      10020          0          0 RPC pikachu_rp 
        96   0      29876      16096      21772          0          0 RPC idprom-MP  
        39   0      20576      20336      13260          0          0 IDB Work       
      282   0      17936      17936      10020          0          0 RPC c6k_power_rp
         0   0      17504          0      17504          0          0 *Sched*        
        44   0      16272       5292      18000          0          0 IF-MGR control p
      270   0      15756      15756      10020          0          0 RPC idbman_sp2mp
      218   0      14664        180      11432          0          0 L2TRACE SERVER 
      316   0      14256      14256      25020          0          0 EC-Card-Cfg    
        80   0      12576     720184       7020          0          0 ICC Async mcast
      320   0      11988       1012      17996          0          0 EEM Policy Direc
      212   0      11068        140      10864          0          0 CWAN-RP SCP Inpu
      155   0      10808       3480      10020          0          0 EAPoUDP Process
      105   0      10576       2276      15652          0          0 OBFL Cfg Dispatc
      113   0      10200          0      17220          0          0 DIAG-RP-PROC   
      153   0      10016    6673480       7020          0          0 ARP HA         
        95   0       9548       9048      10124          0          0 RPC pf-split-rp
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
        68   0       9052       1892       7020          0          0 RF CWAN HA Proce
      298   0       8940       8940      10020          0          0 RPC pclc_g2_fw_r
      300   0       8760        600      18572          0          0 GLBP           
        99   0       8592       8592       7020          0          0  CHKPT rcv MSG p
      163   0       8456        792      14448          0          0 Const Rate Limit
      170   0       8248          0       7236          0          0 CEF RP IPC Backg
      250   0       8056       5548      10020          0          0 RPC sw_vlan_rp 
      233   0       7740       1584      15176          0          0 Crypto CA      
        69   0       7200          0       7020          0          0 CWAN HA VLAN SYN
      176   0       7160          0       7020          0          0 ATM HA         
        73   0       7160          0       7020          0          0 CWAN LTL Mgr HA
        71   0       7108          0       7020          0          0 CWAN APS HA Proc
        91   0       5728       5728      10020          0          0 IP Admission HA
        86   0       5224        180      12064          0          0 CWRP SPA TSM HA
      278   0       5224        180      12064          0          0 VTPMIB EDIT BUFF
      134   0       5224        180      12064          0          0 AAA Server     
      296   0       5044          0      12064          0          0 PAgP-MP Process
      340   0       5020       1592      16572          0          0 GLBP Input     
        76   0       4916       4736       7020          0          0 Const ICC reques
        43   0       4472  501610896      11492       2544          0 Per-minute Jobs
      177   0       4184       1168      13296          0          0 CEF background p
      305   0       3328       7356      61020          0          0 QM Process on RP
        56   0       3252       6068       7176          0          0 svclc          
      227   0       2952        180       7020          0          0 ENABLE AAA     
      197   0       2856       2856       7020          0          0 PPP HA         
      306   0       2600       1452       7020          0          0 QM Looper Proces
      310   0       2536       2536      10020          0          0 RPC fabman_sp  
      328   0       2116       1824      10348          0          0 EEM ED RF      
        87   0       1588       1588      10020          0          0 Switch IP Host T
      152   0       1448       1448       7020          0          0 HDLC HA        
      187   0       1448       1448       7020          0          0 FR HA          
      213   0       1408       1408       7020          0          0 DHCP Snooping HA
        72   0       1408       1408       7020          0          0 CWAN SRP HA Proc
      191   0       1408       1408       7020          0          0 HSRP HA        
      132   0       1004       1156       7304          0          0 Gemini L3 forwar
        60   0        772        772       7020          0          0 RPC Sync       
      321   0        604          0      10020          0          0 EEM ED CLI     
      322   0        604          0      10020          0          0 EEM ED Counter 
      323   0        604          0      10020          0          0 EM ED GOLD     
      326   0        604          0      10020          0          0 EEM ED None    
      327   0        604          0      10020          0          0 EEM ED OIR     
      324   0        604          0      10020          0          0 EEM ED Interface
      325   0        604          0      10020          0          0 EEM ED IOSWD   
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
      329   0        604          0      10020          0          0 EEM ED SNMP    
      331   0        604          0      10020          0          0 EEM ED Test    
      333   0        604          0      10020          0          0 EEM ED Env     
      332   0        604          0      10020          0          0 EEM ED Config  
      330   0        604          0      10020          0          0 EEM ED Timer   
      275   0        596        596       7020          0          0 Logger ICC Proce
        70   0        580        580       7020          0          0 CWAN IF EVENT HA
      318   0        540        180       7380          0          0 WiSM Process   
      217   0        484        180       7324          0          0 IPHC RP Process
        46   0        388        388      10020          0          0 RPC rf_rfmib_not
      171   0        384        384       7020          0          0 MLS FIB RP     
        90   0        360        360      10020          0          0 RPC vs_rp2sp_rpc
      266   0        360        360      10020          0          0 RPC udld_rp    
        64   0        360        484      10020          0          0 RPC rpc-slave-17
        63   0        360        360      10020          0          0 RPC vs_prov_lc-R
      240   0        360        180       7200          0          0 Lawful Intercept
      241   0        360        180       7200          0          0 LI messaging   
        88   0        360        360      10020          0          0 RPC virtual_mode
        89   0        360        360      10020          0          0 RPC vs_sp_print_
      162   0        336        180       7176          0          0 CFMPAL-RP Proces
      154   0        336        180       7176          0          0 Spanning Tree  
      236   0        328          0       7348          0          0 CCSWVOICE      
        51   0        268        268       7020          0          0 EOBC Monitor Pro
      209   0        252        252      13020          0          0 HIDDEN VLAN Proc
      174   0        232        232       7020          0          0 QOS Stats Gather
      308   0        232        232      61020          0          0 QM Timer ACL Pro
      216   0        212          0       7232          0          0 EM Action CNS  
      156   0        180        180      13020          0          0 KRB5 AAA       
      130   0        180        180       7020          0          0 MLS Stats Histor
      158   0        180        180      13020          0          0 Ethernet CFM   
      159   0        180        180      13020          0          0 Ethernet Timer C
        98   0        180        180       7072          0          0 Compute load avg
      150   0        180        180      13020          0          0 PASVC create VA
        48   0        180        180       7020          0          0 Flash ICC Server
      142   0        180        180      13020          0          0 CDP EXPORT PROCE
      164   0        180        180       7020          0          0 Dot1x Mgr Proces
      165   0        180        180      10020          0          0 802.1x Accountin
      143   0        180        180       7020          0          0 AAA Dictionary R
      128   0        180        180       7020          0          0 MIP Mailbox    
      228   0        180        180       7020          0          0 LINE AAA       
        40   0        180        180      13020          0          0 Logger         
        23   0        180        180      13020          0          0 Dialer event   
      259   0        180        180      10020          0          0 RPC psecure_rp 
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
      172   0        180        180       7020          0          0 mcast_rp_icc Pro
      173   0        180        180       7020          0          0 QOS Stats Export
      257   0        180        180      10020          0          0 RPC online_wan_d
      175   0        180        180      10020          0          0 Switch IP Host T
         7   0        180        180       7020          0          0 Timers         
      260   0        180        180      10020          0          0 RPC qnq_switch_s
      258   0        180        180      10020          0          0 RPC pt_switch_sp
      254   0        180        180      10020          0          0 RPC span_switch_
      317   0        180        180      10020          0          0 RPC vs_prov_lc_r
      315   0        180          0       7200          0          0 DHCPD Database 
      312   0        180        180       7020          0          0 rp to lc clock u
      307   0        180        180      61020          0          0 QM Reply Process
        10   0        180        180       7020          0          0 AAA high-capacit
        62   0        180        180       7020          0          0 SCP Generic Unso
      297   0        180        180      10020          0          0 RPC pclc_g2_agsm
      294   0        180        180      10020          0          0 RPC l2_macmove_s
      292   0        180        180      10020          0          0 RPC itasca_rp  
        34   0        180      33020       7020          0          0 Cat6k SNMP Trap
        32   0        180        180       7020          0          0 Snmp ICC Process
      290   0        180        180      10020          0          0 RPC error_detect
      289   0        180        180       7020          0          0 RP Error Detecti
      288   0        180        180       7020          0          0 Rommon upgrade p
      287   0        180        180      10020          0          0 RPC c6k_oversubs
        28   0        180        180       7020          0          0 GraphIt        
      281   0        180        180       7020          0          0 Module enable-di
      273   0        180        180      10020          0          0 RPC chapi_rp   
      271   0        180        180      10020          0          0 RPC aapi_rp    
      269   0        180        180      10020          0          0 RPC ether_oam_sp
      268   0        180        180      10020          0          0 RPC snmp_notify
      246   0        180        180       7020          0          0 RADIUS TEST CMD
      267   0        180        180      10020          0          0 RPC snmp_stackli
        24   0        180        180       7020          0          0 Serial Backgroun
      263   0        180        180      10020          0          0 RPC epld_sp2rp 
      262   0        180        180      10020          0          0 RPC dot1x_aaa_rp
      261   0        180        180      10020          0          0 RPC rf_cli_sp2rp
      207   0        180        180      13020          0          0 X.25 Background
      338   0        180        180       7020          0          0 CWAN Bridge task
      255   0        180        180      10020          0          0 RPC pm_switch_sp
      251   0        180        180      10020          0          0 RPC sw_backup_in
      239   0        180        180      13020          0          0 SLB Main CPU pro
      220   0        180        180       7020          0          0 MWAM_CONSOLE Tim
      238   0        180        180       7020          0          0 Laminar Config C
        22   0        180        180       7020          0          0 DDR Timers     
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
         2   0        180        180       4020          0          0 Load Meter     
      225   0        180        180       7020          0          0 AAA Cached Serve
      222   0        180        180       7020          0          0 Const TCAM Mgr R
      221   0        180        180       7020          0          0 CWPA QoS       
      200   0        156          0       7176          0          0 ADJ background 
      145   0        156          0      13176          0          0 CEF switching ba
      336   0        156          0       7176          0          0 Online Diag CNS
        50   0        156          0       7176          0          0 itasca         
        49   0        156          0       7176          0          0 foundation     
      274   0        156          0       7176          0          0 LC Registry Expo
      293   0        156          0       7176          0          0 RP L2 Applicatio
      337   0        156          0       7176          0          0 Online Diag CNS
      245   0        156          0       7176          0          0 DATA Collector 
      244   0        156          0       7176          0          0 DATA Transfer Pr
      161   0         88         72       7108          0          0 const ipfib per-
      219   0         76          0       7096          0          0 MLSM-CC Process
        85   0         72         72       7020          0          0 IfIndex Bulk Syn
        79   0          0          0       7020          0          0 ICC Local Reques
      234   0          0          0       9020          0          0 Crypto PKI-CRL 
      235   0          0          0       9020          0          0 Crypto SSL     
      136   0          0          0       7020          0          0 ACCT Periodic Pr
      237   0          0          0       7020          0          0  Laminar Icc Eve
      214   0          0          0       7020          0          0 MAB Framework  
      232   0          0          0       7020          0          0 encrypt proc   
      135   0          0          0       7020          0          0 AAA ACCT Proc  
      100   0          0          0       7020          0          0 cpf_process_msg_
      242   0          0          0       7020          0          0 LI C6K         
      243   0          0          0       7020          0          0 LI C6K PROV    
        81   0          0          0       7020          0          0 ICC_REQ Debug Pr
      215   0          0          0       7020          0          0 802.1x Critical
      147   0          0          0       7020          0          0 ICMP event handl
        83   0          0          0       7020          0          0 ICC FC Test Send
      248   0          0          0       7020          0          0 L3MM Process   
      249   0          0          0       7056          0          0 Syslog Traps   
        78   0          0          0       7020          0          0 Const ICC except
      211   0          0          0       7020          0          0 CWAN-RP SCP Proc
        77   0          0          0       7020          0          0 Const ICC event
        74   0          0          0       4020          0          0 Inode Table Dest
      210   0          0          0       7020          0          0 CWAN LTL manager
        45   0          0          0       7020          0          0 IF-MGR event pro
        18   0          0          0       7020          0          0 IPC Managed Time
        92   0          0          0       7020          0          0 Mistral Reset Pr
      144   0          0          0       7020          0          0 DHCP Snooping  
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
      137   0          0          0       7020          0          0 Auth-proxy AAA B
        21   0          0          0       7020          0          0 IPC Session Serv
      206   0          0          0       7020          0          0 PAD InCall     
      208   0          0          0       7020          0          0 X.25 Encaps Mana
        84   0          0          0       7020          0          0 ICC FC Test Low
      133   0          0          0       7020          0          0 CWRP SPA ATM OIR
        17   0          0          0       7020          0          0 IPC Periodic Tim
      138   0          0          0       7020          0          0 IP Admin SM Proc
        25   0          0          0      25020          0          0 Crash writer   
      201   0          0          0      25020          0          0 COPS           
        82   0          0          0       7020          0          0 ICC FC Process 
      129   0          0          0       7020          0          0 Earl NDE Task  
      198   0          0          0       7020          0          0 SLB CF process 
        67   0          0          0      13020          0          0 VSIBC process  
      149   0          0          0       7020          0          0 PPPATM Session d
      224   0          0          0       7020          0          0 Inspect Timer  
      223   0          0          0       7020          0          0 GLBP HA        
        15   0          0          0       7020          0          0 IPC Dynamic Cach
      277   0          0          0       7020          0          0 SONET Traps    
        66   0          0          0       4020          0          0 VS Redirect EOBC
        14   0          0          0       7020          0          0 IFS Agent Manage
      280   0          0          0       7072          0          0 DHCPD Timer    
      196   0          0          0       7020          0          0 XDR RP Test Back
        65   0          0          0       7020          0          0 VS ICC request p
      283   0          0          0       7020          0          0 vs_power_rp ICC
      126   0          0          0       7020          0          0 CT3 Mailbox    
      285   0          0          0       7020          0          0 vs_rp_environmen
      286   0          0          0       7020          0          0 CONST AFL      
      194   0          0          0       7020          0          0 XDR RP Ping Back
      205   0          0          0       7020          0          0 RARP Input     
        30   0          0          0       7020          0          0 SERIAL A'detect
        97   0          0          0       7020          0          0 BACK CHECK     
      291   0          0          0       7020          0          0 HW Capacity ICC
        35   0          0          0       7020          0          0 ARP Snoop      
        27   0          0          0       7020          0          0 Compute SRP rate
      157   0          0          0      13020          0          0 DMLP Counter   
      295   0          0          0       7020          0          0 LACP-MP Process
      125   0          0          0       7020          0          0 CWAN CHDSX PROCE
        36   0          0          0       7020          0          0 Dynamic ARP Insp
      185   0          0          0       7020          0          0 Socket Timers  
        61   0          0       1484       7020          0          0 SCP Multicast  
      124   0          0          0       7020          0          0 HAL Mailbox    
        11   0          0          0      13020          0          0 Policy Manager 
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
      302   0          0          0       7020          0          0 PM Callback    
      184   0          0          0       7020          0          0 IP Traceroute  
      304   0          0          0       7020          0          0 Max CPU utilizat
      123   0          0          0       7020          0          0 CWAN CHOCX PROCE
      122   0          0          0       7020          0          0 SCP async: LCP#7
      183   0          0          0       7020          0          0 CHKPT DevTest  
      121   0          0          0       7020          0          0 SEA_SCP_PRC    
        59   0          0          0       7020          0          0 PF Sync process
      120   0          0          0       7020          0          0 FPD Action Proce
      311   0          0          0       7020          0          0 vs_fabman_sp ICC
        37   0          0          0       7020          0          0 Critical Bkgnd 
      313   0          0          0       7020          0          0 SeaErrorLogProc
      314   0          0          0       7020          0          0 SPA ENTITY Proce
      127   0          0          0       7020          0          0 CE3 Mailbox    
        58   0          0          0       7020          0          0 Notify peer imag
      180   0          0          0       7020          0          0 PPP IP Add Route
      119   0          0          0       7020          0          0 FPD Management P
         9   0          0      25668       7020          0          0 AAA_SERVER_DEADT
        57   0          0          0       7020          0          0 pf_ipc_bs_mgr_se
      118   0          0          0       7020          0          0 DSX3MIB ll handl
      117   0          0          0      13020          0          0 CWAN OIR Handler
      116   0          0          0       7020          0          0 POS APS Event Pr
      115   0          0          0      10020          0          0 const_dump_info_
      114   0          0          0       7020          0          0 DiagErrorLogProc
      101   0          0          0       7020          0          0 cpf_process_ipcQ
      112   0          0          0       7020          0          0 Remote Console P
      179   0          0          0       7020          0          0 SNMP Timers    
      110   0          0          0       7020          0          0 HC Counter Timer
      109   0          0        104       7020          0          0 SFF8472        
      108   0          0       5920       7020          0          0 AggMgr Process 
      107   0          0          0       7072          0          0 PF Clock Process
      106   0          0   91023248       7020          0          0 Transport Port A
      102   0          0          0       7020          0          0 IPC Apps Task  
      335   0          0          0       7020          0          0 IP SLA Monitor M
      178   0          0          0      10020          0          0 IP IRDP        
      166   0          0          0       7020          0          0 EAP Framework  
        93   0          0          0       7020          0          0 ECC correctable
      339   0          0          0       7020          0          0 DHCP Snooping Sw
        55   0          0          0       7020          0          0 MWAM CONFIG ON S
      341   0          0          0       7020          0          0 VACL Logger    
      343   0          0          0       7020          0          0 CWAN OIR IPC Rea
      168   0          0          0       7080          0          0 Call Home Timer
         5   0          0       2544       7020          0          0 Check heaps    
      --More--                            PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
         4   0          0          0       7020          0          0 PF Redun ICC Req
      104   0          0          0       7020          0          0 RTTYS Process  
      348   0          0          0      13020          0          0 SNMP Traps     
      349   0          0          0      10072          0          0 Connection Mgr 
      350   0          0          0      18076          0          0 IP-EIGRP Router
        52   0          0          0       7020          0          0 Net Input      
      204   0          0          0       7020          0          0 Probe Input    
                                     2368568060 Total
      NGABV-CHG03RO2#