Биллинговая система Nodeny

Главная категория => Общий раздел => Тема начата: veca16 от 23 Апреля 2018, 20:48:47



Название: Спонтанно перезагружаются BRAS сервера
Отправлено: veca16 от 23 Апреля 2018, 20:48:47
Здравствуйте форумчане. Обращаюсь к вам с таким вопросом есть 5 BRAS серверов ОС Freebsd 11.1 Release периодически примерно раз в неделю перезагружается сам по себе один из серверов. Сначала когда проблема обнаружилась стояла Freebsd 9.2 решили что из за старой системы глючит поэтому поменяли системы на версию 11.1 но глюк остался. Пробовали менять железо 3 сервера полностью с новым железом поставили. Но проблема нигде не девается. По логам ничего странного не происходит, такое впечатление что сервер ктото дергает по питанию, хотя бесперебойник там нормальный стоит и аккумуляторы в нормальном состоянии проверили. Что самое странное перезагрузка происходит не тогда когда час пик а часто утром или после обеда. На каждой машине примерно по 1к юзеров онлайн. На серверах включены mpd5, ospfd, pf(nat), noserver, dummynet есть небольшой тюнинг:
loader.conf
net.isr.bindthreads=1
net.isr.maxthreads=4
net.isr.dispatch=direct
net.isr.defaultqlimit=4096
net.link.ifqmaxlen=10240

net.graph.maxdata=65536
net.graph.maxalloc=65536

hw.em.rxd=4096
hw.em.txd=4096
hw.em.max_interrupt_rate=32000

Долгое время все работало под freebsd 9.2 и таких проблем не было а потом что то произошло и мы не можем понять в чем дело.
Подскажите, может у кого такое уже было а то мучаемся уже с пол года.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Efendy от 23 Апреля 2018, 21:39:22
Раз перегружаются все сервера - проблема софтовая. Но. Если у вас на разных серверах одинаковая конфигурация в настройках, как вы поймете какая из настроек проблемная? Наверняка есть же наименее нагруженный сегмент, на который можно поставить фрю с дефолтными настройками без перекомпиляции ядра. Если она не ребутится, то от этого можно плясать


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: ser970 от 23 Апреля 2018, 21:54:44
упс какой ?

перегружается один и тоже ?

все сервера подключены к одному упсу ?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 23 Апреля 2018, 22:17:42
а роутеры, внутри сети, не могут влиять на перезагрузку?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Cell от 24 Апреля 2018, 00:06:44
Такое бывает когда высыхают электролиты в блоке питания. Точно-приточно меняли ВСЕ железо?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 08:15:17
3 сервера с полностью новые походу...


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 08:20:31
Цитировать
Re: Помогите побороть kernel panic
« Ответ #14 : 26 Июня 2011, 18:51:01 »
ПроцитироватьЦитировать
Цитата: Maks от 26 Июня 2011, 17:52:15
Цитата: goletsa от 26 Июня 2011, 15:00:14
На сервере крутится mpd?


Да.version 5.3
Было нечто подобное. Проверьте по логам радиуса не было ли авторизаций клиентов с IP находящихся на внешнем сервере относительно текущего.
Т.е. в таблице роутинга например есть запись что 192.168.100.0/24 находится за шлюзом с IP например 10.0.0.1
И в это же время клиент через mpd пытается выйти с адресом из сети 192.168.100.0/24
Там возникает какое-то переполнение (чтото типа закольцовки маршрута) -> как результат паника ядра с похожими ошибками.
По крайней мере у меня было именно так года полтора назад, тоже невнятные кернел паники изза того что клиент попадал не на тот сервер.

может что-то такое?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: elite от 24 Апреля 2018, 08:29:42
Попробуй подключить один сервер без ИБП, если они все питаются от одного и того же ибп


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: veca16 от 24 Апреля 2018, 10:45:48
Да 3 сервера полностью новые. Все подключены к одному UPS Luxeon UPS-3000ZX. Перезагружаются все кроме одного, просто перезагружаются по-разному может один раз в неделю а может 2 раза подряд в течении часа и потом на неделю затишье. elite  а это можно попробовать без упса подключить.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: veca16 от 24 Апреля 2018, 11:00:41
Раз перегружаются все сервера - проблема софтовая. Но. Если у вас на разных серверах одинаковая конфигурация в настройках, как вы поймете какая из настроек проблемная? Наверняка есть же наименее нагруженный сегмент, на который можно поставить фрю с дефолтными настройками без перекомпиляции ядра. Если она не ребутится, то от этого можно плясать
Тоже попробуем спасибо, хотя проблемы с питанием тоже не исключаем.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: veca16 от 24 Апреля 2018, 11:43:58
Еще вспомнил. Сразу как начались перезагрузки было 2 старых бесперебойника luxeon UPS1000 то с ними тоже перезагружались правда только 2 сервера.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: ser970 от 24 Апреля 2018, 12:52:17
luxeon UPS1000 Линейно-интерактивный
тут фишка в том , что если импульсная помеха из сети или упса попадает в такт шима блока питания , то возможен ребут.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 13:15:02
а этот UPS Luxeon UPS-3000ZX?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: ser970 от 24 Апреля 2018, 13:20:58
так в описание есть
Тип архитектуры: Линейно-интерактивный
тоже самое...

онлайн упсы дороже намного...

в офлайн есть с фильром помех = но это как рулетка...

вообще можно поискать фильтр сетевых помех (не китайскую переноску).
или блок питания по мощнее с фильтром ....


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 13:30:04
а сам китайский удлинитель с кнопкой может такое давать?


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: ser970 от 24 Апреля 2018, 13:34:24
а сам китайский удлинитель с кнопкой может такое давать?
да но чуть не так.
было дело как то...  переодично отключлся аквариум -   выключился через пару минут сам включился... оказалось что  нагреваетются контаткы в удлинителе...

на сервер было как то шнурок питания.... таже история....


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 13:41:19
получается, нужно переставить 1 или 2 сервера в другое место и посмотреть как оно будет себя вести...., чтобы исключить питание


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: veca16 от 24 Апреля 2018, 13:59:42
ну или убрать все китайские фильтры. И включить без бесперебойника.


Название: Re: Спонтанно перезагружаются BRAS сервера
Отправлено: Mix3308 от 24 Апреля 2018, 14:09:06
либо поставить хороший упс с двойным преобразованием, и заменить удленители :) чтобы закрыть вопрос с питанием