Netflow спалил мне моск.

[skreep]

У меня нас Mikrotik + radius+ dhcp
Аккаунтинг, пишут, на заработает так forum.nodeny.com.ua/index.php?topic=2749.msg28145#msg28145


В последнее время ipcad напрягает сервер, хотел дабы уменьшить нагрузку - перейти на netflow.

трафіка багато?

[sedo26]

Пока до 5г, с февраля еще 1,5 добавится, переносим абонов с 49 ноденая

[skreep]

Пока до 5г, с февраля еще 1,5 добавится, переносим абонов с 49 ноденая

суттєво...
але впевнені, що саме іркад грузить чи може сам модуль який обраховує трафік?
бо в мене вже при 2Г трафіку модуль обраховував зріз трафіку коло 1хв  і одне ядро Х5675 було в 100%

[sedo26]

Проц на биллинге AMD X8 FX-8350 8 ядер по 4,0ГГц (только биллинг + подсчет)
С утра и до вечера средняя загрузка проца до 15-20%, но в час пик (ещё нету подсчёта ~1Гига микрота, так как не работает нетфлоу) ipcad грузит до 50-70% и уже не успевает считать.

А load average с 0,6 поднимается до 2.

До 19-00 считает нормально по 2мин. Потом подглючивает подсчёт у уже не правильно показывает. Иногда вылетает модуль коллекторс.
Как-то так.

[Cell]

И че? ты думаешь переход на нетфлоу спасет ситуацию? - А вот нифига. Нетфлоу тоже откушивает вполне себе реально ресурсы. Разницы нет никакой, что парсить результаты работы ipcad что netflow. Последний, мне кажется, еще и больше наваливает всякой фигни.
Тут выхода аж три:
-либо ставить еще более мощный сервак (начальный левел)
-либо разделять учет трафика с разных брасов на разных тазах (средний левел)
-либо вообще отказаться от учета трафика (пох на левел)

[skreep]

Проц на биллинге AMD X8 FX-8350 8 ядер по 4,0ГГц (только биллинг + подсчет)
С утра и до вечера средняя загрузка проца до 15-20%, но в час пик (ещё нету подсчёта ~1Гига микрота, так как не работает нетфлоу) ipcad грузит до 50-70% и уже не успевает считать.

А load average с 0,6 поднимается до 2.

До 19-00 считает нормально по 2мин. Потом подглючивает подсчёт у уже не правильно показывает. Иногда вылетает модуль коллекторс.
Как-то так.

можете намалювати схему, як ходить трафік, де він обраховується, де розміщена база даних, де працює модуль коллекторс?

[sedo26]

Написал в личку, что бы не делать чат из переписки.

[WideAreaNetwork]

Написал в личку, что бы не делать чат из переписки.

думаете остальным не интересно?

[sedo26]

Ok

У меня сервер (БД + колекторс) фрибсд 11,2.

Абоны подключены к насам на фрибсд (много насов, отправка статы через ipcad).

В одном насел.пункте есть нас на микроте1036 (остался от ноденай 49),
там нет возможности поставить нас на фряхе.

Сейчас стоит задача переключить с н49 на н+ абонов, авторизация - DHCP opt.82 (они к стати также за насами на микротах1036 находятся).
Для успешного переключения (а именно с мониторингом трафика) вижу как выход поднять 1 машину(на дебиане или фрибсд 10), и перенести на неё подсчёт.
Так как netflow заставить работать на 11.2 пока не получается...

[skreep]

Написал в личку, что бы не делать чат из переписки.

думаете остальным не интересно?

Відповім тут:

Систему грузить не IPCAD а модуль який рахує трафік.
Відповідно модулю фіолетово хто в нього наливає данні для обрахунку, тут як казав Cell або нарощувати потужність сервера, або розділяти по різним серверам обрахунок трафіку.
Я робив так:
Модуль обрахунку трафіку працює тільки на одному ядрі процесора, тому щоб загрузити потужний сервер
який має досить потужний процесор, дискова підсистема має запас по швидкодії і надійності
використовував віртуалізацію на esxi, одночасно працювало три сервера на яких був запущений модуль коллекторс.
Коли перестало вистачати потужності сервера, перейшов на радіус аккаунтінг.
netflow у мене працював на debian 8 разом з accel-ppp, проблем з ним не було

to sedo26, я б на окремій тестовій машині запустив netflow, щоб провірити чи нічого ні з чим не конфліктує, і вияснити що саме і від чого падає, можливо впливає навантаження


 

[sedo26]

У меня была идея, чтобы каждый нас(фрибсд) считал  свой трафик, Стасу это написал, он пообещал подумать.
Это было бы замечательно. Просил Стаса давно правда.

Если же сейчас поднять коллекторс на каждом насе, общая статистика - полная жуть, пишется в разное время и непонятно что (иногда скорость пказывает по абону и до Гигов).

Так как насы на разных версиях фрибсд, есть и 10.
Там (на 10) перед НГ запустил сбор трафика по нетфлоу (но нас сервер старенький и географически далеко, с не сильно хорошим входящим каналом).
Тестирование прошло успешно. С нагрузкой пыхтел, но справился.

Получается собрать опять нас для подсчёта на фре10, установить возле сервера и не мучаться,
но опять же может не хватить ресурсов НАСа (подозреваю в скором будущем).

Желательно, что бы нас сам себе и считал, а если микрот то отправляет на сервер,
или на НАС, который умеет работать с нетфлоу. 
Надо продумать алгоритм записи и отображения срезов НАСов...

[Warlock]

Зачем вам это всё? Собирайте траффик с радиуса.

[sedo26]

Зачем вам это всё? Собирайте траффик с радиуса.

Подскажите как, все абоны по дхцп с опцией 82. Через радиус получают адреса только абоненты после микрота, через таг +опция82 также.

[Cell]

IPoE на микротике не получится через радиус аккаунтинг заюзать. Единственный способ - это приспособить для этого встроенный в микротик hotspot. Я как-то делал, но там то еще кино, не для слабонервных. Проще действительно netflow юзать на отдельном тазике (или виртуалочках) с учетом того что там всегда только одно ядро юзается на полную катушку.