https://opennet.ru/openforum/vsluhforumID6/18929.html Ситуация: имеем Cisco 3550 12T, в последнее время начали происходить странные вещи, а именно: начинает подниматься загрузка процессора, (нормальная работа - 10-20% загрузки).<br>причем sh proc cpu sort 5m показывает, что ни один из процессов не ест больше 5%<br><br>CPU utilization for five seconds: 98%/82%; one minute: 99%; five minutes: 98%<br> PID Runtime(ms) Invoked uSecs 5Sec 1Min 5Min TTY Process<br> 7 192420 420849 457 4.39% 5.72% 5.92% 0 ARP Input<br> 73 65640 174602 375 1.03% 1.57% 1.62% 0 IP Input<br> 42 33380 19760 1689 1.27% 0.91% 0.92% 0 L3MD_STAT<br> 37 12264 6126 2001 0.39% 0.39% 0.39% 0 Vegas Statistics<br> 91 11248 4775 2355 0.39% 0.39% 0.39% 0 CEF: IPv4 proces<br> 108 3192 10990 290 0.07% 0.07% 0.08% 0 VFM Queue Proces<br> 4 2292 372 6161 0.00% 0.09% 0.06% 0 Check heaps<br> 70 880 165 5333 0.31% 0.02% 0.05% 2 Virtual Ex https://opennet.ru/openforum/vsluhforumID6/18929.html#11 Wed, 10 Jun 2009 07:41:50 GMT &gt;[оверквотинг удален]<br>&gt;&gt;память в норме, проц что то жрет, непонять что, скорее всего какой <br>&gt;&gt;то вирь в сети, раньше удавалось обнаружить проблему, сейчас уже tcp <br>&gt;&gt;dump перерыл весь за вечер - чисто пусто, ничего подозрительного. <br>&gt;&gt;хотя бывает и так - проц бах до сотни и киска в <br>&gt;&gt;ребут.. после чего загрузка в норме... <br>&gt;&gt;тот же самый иос стоит еще на двух железках - полет нормальный <br>&gt;&gt;<br>&gt;<br>&gt;в общем, понаставил аксесс листов, прикрыл все. что только можно, настроил <br>&gt;control-plane - 2 с лишним недели все гут.. <br><br>коммутаторы такого типа очень легко перегрузить - поэтому нужно применить как можно больше ограничений "паразитного\аномального" трафика на CPU, storm/stp loop,small packets/arp storm...<br> https://opennet.ru/openforum/vsluhforumID6/18929.html#10 Tue, 09 Jun 2009 15:59:13 GMT &gt;[оверквотинг удален]<br>&gt; number of multicast routes: <br>&gt;6K <br>&gt;<br>&gt;память в норме, проц что то жрет, непонять что, скорее всего какой <br>&gt;то вирь в сети, раньше удавалось обнаружить проблему, сейчас уже tcp <br>&gt;dump перерыл весь за вечер - чисто пусто, ничего подозрительного. <br>&gt;хотя бывает и так - проц бах до сотни и киска в <br>&gt;ребут.. после чего загрузка в норме... <br>&gt;тот же самый иос стоит еще на двух железках - полет нормальный <br>&gt;<br><br>в общем, понаставил аксесс листов, прикрыл все. что только можно, настроил<br>control-plane - 2 с лишним недели все гут..<br><br> https://opennet.ru/openforum/vsluhforumID6/18929.html#9 Thu, 28 May 2009 03:02:56 GMT &gt;&gt;<br>&gt;&gt;Вот с чем валится: <br>&gt;&gt;System returned to ROM by error - Unassigned Exception (0xCCC0043)!, PC 0x2A99F0 <br>&gt;&gt;<br>&gt;<br>&gt;Это может быть и аппаратные сбои и баг софта... <br>&gt;<br>&gt;А может и переполняется что. <br>&gt;Вписываетесь в текущие ограничения железки? <br>&gt;show sdm prefer <br><br>coreSwitch#show sdm prefer<br> The current template is the default template.<br> The selected template optimizes the resources in<br> the switch to support this level of features for<br> 16 routed interfaces and 1K VLANs.<br><br> number of unicast mac addresses: 6K<br> number of igmp groups: 6K<br> number of qos aces: 2K<br> number of security aces: 2K<br> number of unicast routes: 12K<br> number of multicast routes: 6K<br><br>память в норме, проц что то жрет, непонять что, скорее всего какой то вирь в сети, раньше удавалось обнаружить проблему, сейчас уже tcp dump перерыл весь за вечер - чисто пусто, ничего подозрительного.<br>хотя бывает и так - проц бах до сотни и киска в ребут.. после чего загрузка в норме...<br>т https://opennet.ru/openforum/vsluhforumID6/18929.html#8 Wed, 27 May 2009 16:00:33 GMT &gt;<br>&gt;Вот с чем валится: <br>&gt;System returned to ROM by error - Unassigned Exception (0xCCC0043)!, PC 0x2A99F0 <br>&gt;<br><br>Это может быть и аппаратные сбои и баг софта...<br><br>А может и переполняется что.<br>Вписываетесь в текущие ограничения железки?<br>show sdm prefer<br><br> https://opennet.ru/openforum/vsluhforumID6/18929.html#7 Mon, 25 May 2009 12:39:36 GMT &gt;[оверквотинг удален]<br>&gt;&gt;&gt;PS вот в данный момент 40 тыс пакетов и загрузка 450 мегабит\с <br>&gt;&gt;&gt;<br>&gt;&gt;<br>&gt;&gt;дело не в количестве а в размере <br>&gt;<br>&gt;я понимаю, но: <br>&gt;нормальная загрузка до 40 тыс пакетов и до 600 мегабит <br>&gt;а) если бы был флуд маленькими пакетами, то увеличился бы pps и <br>&gt;намного - этого нет! <br>&gt;б) большими пакетами - увеличился бы трафик - этого тоже нет! <br><br>Вот с чем валится: <br>System returned to ROM by error - Unassigned Exception (0xCCC0043)!, PC 0x2A99F0<br><br>crashinfo<br>Vector = 0x0CCC0043 PC = 0x002A99F0 MSR = 0x4008B030 CR = 0x42000008<br>LR = 0x002AB284 CTR = 0x00C05C30 XER = 0x00000000<br>R0 = 0xFFE00A78 R1 = 0x01C2DE50 R2 = 0x00000000 R3 = 0x00001100<br>R4 = 0xFFFFFFFF R5 = 0x00000672 R6 = 0xFEE00000 R7 = 0x00003030<br>R8 = 0x0000B030 R9 = 0x0124F304 R10 = 0x00000048 R11 = 0x00E844F4<br>R12 = 0x04C55534 R13 = 0xFFFFFFFE R14 = 0x004FD1CC R15 = 0x00000000<br>R16 = 0x00000000 R17 = 0x00000000 R18 = 0x00000000 R19 = 0x00000000<br>R20 = 0x00000000 R21 = 0x00000000 R22 = 0x00000000 R23 https://opennet.ru/openforum/vsluhforumID6/18929.html#6 Mon, 25 May 2009 02:02:54 GMT &gt;[оверквотинг удален]<br>&gt;&gt;&gt;inter на первом коммутаторе на ошибки и тд. <br>&gt;&gt;<br>&gt;&gt;сегодня утром она опять ребутнулась, полет нормальный пока что, как впает в <br>&gt;&gt;транс - посмотрю.. <br>&gt;&gt;правда сомневаюсь, что дело в этом, смотрел, pps на интерфейсах нормальный... 14-25 <br>&gt;&gt;тес пакетов в секунду при нагрузке фейса 100-300 мегабит <br>&gt;&gt;PS вот в данный момент 40 тыс пакетов и загрузка 450 мегабит\с <br>&gt;&gt;<br>&gt;<br>&gt;дело не в количестве а в размере <br><br>я понимаю, но:<br>нормальная загрузка до 40 тыс пакетов и до 600 мегабит<br>а) если бы был флуд маленькими пакетами, то увеличился бы pps и намного - этого нет!<br>б) большими пакетами - увеличился бы трафик - этого тоже нет!<br><br> https://opennet.ru/openforum/vsluhforumID6/18929.html#5 Sun, 24 May 2009 15:03:38 GMT &gt;[оверквотинг удален]<br>&gt;&gt;есть предположение что пакеты валят либо фрагментированые, либо очень маленькие и <br>&gt;&gt;ваша 3550 на L3 пытается их обработать и загибается. посмотрите sh <br>&gt;&gt;inter на первом коммутаторе на ошибки и тд. <br>&gt;<br>&gt;сегодня утром она опять ребутнулась, полет нормальный пока что, как впает в <br>&gt;транс - посмотрю.. <br>&gt;правда сомневаюсь, что дело в этом, смотрел, pps на интерфейсах нормальный... 14-25 <br>&gt;тес пакетов в секунду при нагрузке фейса 100-300 мегабит <br>&gt;PS вот в данный момент 40 тыс пакетов и загрузка 450 мегабит\с <br>&gt;<br><br>дело не в количестве а в размере<br><br> https://opennet.ru/openforum/vsluhforumID6/18929.html#4 Sun, 24 May 2009 06:12:11 GMT &gt;[оверквотинг удален]<br>&gt;&gt;ntp server ........... <br>&gt;&gt;end <br>&gt;&gt;<br>&gt;&gt;вылетает вот в такой ошибкой <br>&gt;&gt;System returned to ROM by error - Unassigned Exception (0xCCC0043)!, PC 0x2A99F0 <br>&gt;&gt;<br>&gt;<br>&gt;есть предположение что пакеты валят либо фрагментированые, либо очень маленькие и <br>&gt;ваша 3550 на L3 пытается их обработать и загибается. посмотрите sh <br>&gt;inter на первом коммутаторе на ошибки и тд. <br><br>сегодня утром она опять ребутнулась, полет нормальный пока что, как впает в транс - посмотрю..<br>правда сомневаюсь, что дело в этом, смотрел, pps на интерфейсах нормальный... 14-25 тес пакетов в секунду при нагрузке фейса 100-300 мегабит<br>PS вот в данный момент 40 тыс пакетов и загрузка 450 мегабит\с<br><br><br> https://opennet.ru/openforum/vsluhforumID6/18929.html#3 Sun, 24 May 2009 05:23:16 GMT &gt;[оверквотинг удален]<br>&gt; access-class 50 in <br>&gt; login local <br>&gt;! <br>&gt;ntp clock-period 17180150 <br>&gt;ntp server ........... <br>&gt;end <br>&gt;<br>&gt;вылетает вот в такой ошибкой <br>&gt;System returned to ROM by error - Unassigned Exception (0xCCC0043)!, PC 0x2A99F0 <br>&gt;<br><br>есть предположение что пакеты валят либо фрагментированые, либо очень маленькие и ваша 3550 на L3 пытается их обработать и загибается. посмотрите sh inter на первом коммутаторе на ошибки и тд.<br><br>