Спонтанно перезагружаются BRAS сервера

[veca16]

Здравствуйте форумчане. Обращаюсь к вам с таким вопросом есть 5 BRAS серверов ОС Freebsd 11.1 Release периодически примерно раз в неделю перезагружается сам по себе один из серверов. Сначала когда проблема обнаружилась стояла Freebsd 9.2 решили что из за старой системы глючит поэтому поменяли системы на версию 11.1 но глюк остался. Пробовали менять железо 3 сервера полностью с новым железом поставили. Но проблема нигде не девается. По логам ничего странного не происходит, такое впечатление что сервер ктото дергает по питанию, хотя бесперебойник там нормальный стоит и аккумуляторы в нормальном состоянии проверили. Что самое странное перезагрузка происходит не тогда когда час пик а часто утром или после обеда. На каждой машине примерно по 1к юзеров онлайн. На серверах включены mpd5, ospfd, pf(nat), noserver, dummynet есть небольшой тюнинг:
loader.conf
net.isr.bindthreads=1
net.isr.maxthreads=4
net.isr.dispatch=direct
net.isr.defaultqlimit=4096
net.link.ifqmaxlen=10240

net.graph.maxdata=65536
net.graph.maxalloc=65536

hw.em.rxd=4096
hw.em.txd=4096
hw.em.max_interrupt_rate=32000

Долгое время все работало под freebsd 9.2 и таких проблем не было а потом что то произошло и мы не можем понять в чем дело.
Подскажите, может у кого такое уже было а то мучаемся уже с пол года.

[Efendy]

Раз перегружаются все сервера - проблема софтовая. Но. Если у вас на разных серверах одинаковая конфигурация в настройках, как вы поймете какая из настроек проблемная? Наверняка есть же наименее нагруженный сегмент, на который можно поставить фрю с дефолтными настройками без перекомпиляции ядра. Если она не ребутится, то от этого можно плясать

[ser970]

упс какой ?

перегружается один и тоже ?

все сервера подключены к одному упсу ?

[Mix3308]

а роутеры, внутри сети, не могут влиять на перезагрузку?

[Cell]

Такое бывает когда высыхают электролиты в блоке питания. Точно-приточно меняли ВСЕ железо?

[Mix3308]

3 сервера с полностью новые походу...

[Mix3308]

Re: Помогите побороть kernel panic
« Ответ #14 : 26 Июня 2011, 18:51:01 »
ПроцитироватьЦитировать
Цитата: Maks от 26 Июня 2011, 17:52:15
Цитата: goletsa от 26 Июня 2011, 15:00:14
На сервере крутится mpd?


Да.version 5.3
Было нечто подобное. Проверьте по логам радиуса не было ли авторизаций клиентов с IP находящихся на внешнем сервере относительно текущего.
Т.е. в таблице роутинга например есть запись что 192.168.100.0/24 находится за шлюзом с IP например 10.0.0.1
И в это же время клиент через mpd пытается выйти с адресом из сети 192.168.100.0/24
Там возникает какое-то переполнение (чтото типа закольцовки маршрута) -> как результат паника ядра с похожими ошибками.
По крайней мере у меня было именно так года полтора назад, тоже невнятные кернел паники изза того что клиент попадал не на тот сервер.

может что-то такое?

[elite]

Попробуй подключить один сервер без ИБП, если они все питаются от одного и того же ибп

[veca16]

Да 3 сервера полностью новые. Все подключены к одному UPS Luxeon UPS-3000ZX. Перезагружаются все кроме одного, просто перезагружаются по-разному может один раз в неделю а может 2 раза подряд в течении часа и потом на неделю затишье. elite  а это можно попробовать без упса подключить.

[veca16]

Раз перегружаются все сервера - проблема софтовая. Но. Если у вас на разных серверах одинаковая конфигурация в настройках, как вы поймете какая из настроек проблемная? Наверняка есть же наименее нагруженный сегмент, на который можно поставить фрю с дефолтными настройками без перекомпиляции ядра. Если она не ребутится, то от этого можно плясать

Тоже попробуем спасибо, хотя проблемы с питанием тоже не исключаем.

[veca16]

Еще вспомнил. Сразу как начались перезагрузки было 2 старых бесперебойника luxeon UPS1000 то с ними тоже перезагружались правда только 2 сервера.

[ser970]

luxeon UPS1000 Линейно-интерактивный
тут фишка в том , что если импульсная помеха из сети или упса попадает в такт шима блока питания , то возможен ребут.

[Mix3308]

а этот UPS Luxeon UPS-3000ZX?

[ser970]

так в описание есть
Тип архитектуры: Линейно-интерактивный
тоже самое...

онлайн упсы дороже намного...

в офлайн есть с фильром помех = но это как рулетка...

вообще можно поискать фильтр сетевых помех (не китайскую переноску).
или блок питания по мощнее с фильтром ....

[Mix3308]

а сам китайский удлинитель с кнопкой может такое давать?