вопросы по статьям o trafd
Правила форума
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
Убедительная просьба юзать теги [code] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
-
- ефрейтор
- Сообщения: 57
- Зарегистрирован: 2008-03-31 16:13:02
вопросы по статьям o trafd
Делал по статье http://www.lissyara.su/?id=1010 и http://www.lissyara.su/?id=1017. Вроде победил, заработало. Но показывает почему то далеко не весь трафик. Считает только с трех ип, причем один из них не понятный вообще. Трафик сквида туда не попадает. Покажите где копать.
Последний раз редактировалось matrich 2008-04-25 7:53:16, всего редактировалось 1 раз.
Услуги хостинговой компании Host-Food.ru
Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/
-
- ефрейтор
- Сообщения: 57
- Зарегистрирован: 2008-03-31 16:13:02
Re: вопросы по статьям o trafd
причем эти два ип нормальных которые попадают таки в статистику прописаны в правилах ipfw явно.
-
- ефрейтор
- Сообщения: 57
- Зарегистрирован: 2008-03-31 16:13:02
Re: вопросы по статьям o trafd
немного поменял вопрос
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
однако, интерфейс по себя надо править.
в БД всё кдладётся?
В текстовых файлах всё есть?
в БД всё кдладётся?
В текстовых файлах всё есть?
Убей их всех! Бог потом рассортирует...
-
- ефрейтор
- Сообщения: 57
- Зарегистрирован: 2008-03-31 16:13:02
Re: вопросы по статьям o trafd
да в бд, и в файлах все есть
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
lissyara писал(а):однако, интерфейс по себя надо править.
Убей их всех! Бог потом рассортирует...
-
- ефрейтор
- Сообщения: 57
- Зарегистрирован: 2008-03-31 16:13:02
Re: вопросы по статьям o trafd
вот блин
- GreenDay
- мл. сержант
- Сообщения: 100
- Зарегистрирован: 2008-02-21 20:25:39
- Откуда: Новосибирск
- Контактная информация:
Re: вопросы по статьям o trafd
Лис, ну а как кстати правильно тогда запрос составить, чтобы
1. не учитывался трафик к серверу и от(например на нем еще файлопомойка)
2. учитывался трафик со сквида
3. учитывался остальной трафик типа почты, фтп, аська(ну короче все что проходит до юзера через серв)
а то в запросах sql чета никак не допру как сделать...
1. не учитывался трафик к серверу и от(например на нем еще файлопомойка)
2. учитывался трафик со сквида
3. учитывался остальной трафик типа почты, фтп, аська(ну короче все что проходит до юзера через серв)
а то в запросах sql чета никак не допру как сделать...
Бесполезно рассказывать о высоком моральном облике коллектива человеку, имеющему доступ к логам прокси-сервера этого коллектива.
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
а ты какнибудь ппробуй...
там совсем несложно - да и вообще sql штука не сложная...
там совсем несложно - да и вообще sql штука не сложная...
Убей их всех! Бог потом рассортирует...
- GreenDay
- мл. сержант
- Сообщения: 100
- Зарегистрирован: 2008-02-21 20:25:39
- Откуда: Новосибирск
- Контактная информация:
Re: вопросы по статьям o trafd
да уже сделал
линь моя - порой большой враг мой...
а нифига подобного.. реализация моя ваще не катит
я сделал так:
и ессно статистика с внешним ифейсом не сошлась.. ИБО!! сквид то кэширует, и я посчитал - за полдня накешировал примерно 40% трафа
так что подробно я так понимаю по юзерам вообще не увидишь в такой связке
хоть всех блин не переводи на транспарент...
еще добавлено хотя в транспаренте то тоже так
короче не пойдет вообще правильный подсчет на основе трафд + сквид
писец, а бухгалтерия то требует статистику - они из зп перерасход вычитают.
че придумать терь даже не знаю
линь моя - порой большой враг мой...
а нифига подобного.. реализация моя ваще не катит
я сделал так:
Код: Выделить всё
$sql = mysql_query("SELECT to_IP, SUM(bytes) AS `bytes` FROM
`" . $IF_internal_servera . "_" . date(Y,time()) . "` WHERE `date`
LIKE '" . $curr_month . "-%' AND (from_IP != '" . $ip_out_servera . "'
AND to_IP != '" . $ip_out_servera . "' AND port_from_IP LIKE '" . $squid_port . "'
OR (`to_IP` != '" . $ip_internal_servera . "'
AND `from_IP` != '" . $ip_internal_servera . "') AND `to_IP`
LIKE '" . $lan_mask . "%') GROUP BY `to_IP` ORDER BY `bytes` DESC");
так что подробно я так понимаю по юзерам вообще не увидишь в такой связке
хоть всех блин не переводи на транспарент...
еще добавлено хотя в транспаренте то тоже так
короче не пойдет вообще правильный подсчет на основе трафд + сквид
писец, а бухгалтерия то требует статистику - они из зп перерасход вычитают.
че придумать терь даже не знаю
Бесполезно рассказывать о высоком моральном облике коллектива человеку, имеющему доступ к логам прокси-сервера этого коллектива.
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
любую выкатывай...
всё ранво не поймут )
всё ранво не поймут )
Убей их всех! Бог потом рассортирует...
-
- сержант
- Сообщения: 188
- Зарегистрирован: 2007-12-13 1:06:44
- Откуда: г. Ровно
- Контактная информация:
Re: вопросы по статьям o trafd
Чуть не в тему, у меня вопросик в чем разница между столбцом bytes и all_bytes в смысле откуда такая разница:
и какой ближе должен быть по значению, к величине что посчитал билинг провайдера, столбцы из таблицы интерфейса внешнего tun0 т.е. считаю весь трафик (не сходится ни первый ни второй )
Код: Выделить всё
+----------------+
| SUM(all_bytes) |
+----------------+
| 62274503000 |
+----------------+
+-------------+
| SUM(bytes) |
+-------------+
| 58171524731 |
+-------------+
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
все байты - это с технической инфой.
сходиться должны просто байты.
========
а как провы считают... хрен их знает...
сходиться должны просто байты.
========
а как провы считают... хрен их знает...
Убей их всех! Бог потом рассортирует...
-
- проходил мимо
- Сообщения: 1
- Зарегистрирован: 2008-05-13 9:24:21
Re: вопросы по статьям o trafd
Парни, подскажите плиз с версиями trafd??
1) Вобщем Фря 6.3
2) pkg_info | grep trafd светит
trafd-3.0.1_2 The BPF Traffic Collector
Ставил с портов, предварительно сделав CVSup (портов)
Вроде все считает верно, НО где-то среди комментов к статьям промелькнуло, что мол какие-то версии не считали пакеты менее 2К. Так вот вопрос - у меня стоит нормальная версия или надо свежее ставить? или может патч какой надо??
1) Вобщем Фря 6.3
2) pkg_info | grep trafd светит
trafd-3.0.1_2 The BPF Traffic Collector
Ставил с портов, предварительно сделав CVSup (портов)
Вроде все считает верно, НО где-то среди комментов к статьям промелькнуло, что мол какие-то версии не считали пакеты менее 2К. Так вот вопрос - у меня стоит нормальная версия или надо свежее ставить? или может патч какой надо??
-
- лейтенант
- Сообщения: 831
- Зарегистрирован: 2007-06-01 19:27:51
Re: вопросы по статьям o trafd
Mysql - надругом хосте. Скрипт сбора данных из trafd нормально отрабатывает. создает таблицы и складывает туда дату. а вот WEB-морда не до конца отрабаывает. Подскажите куда рыть?lissyara писал(а):lissyara писал(а):однако, интерфейс по себя надо править.
Последний раз редактировалось risk94 2008-11-10 19:58:32, всего редактировалось 1 раз.
-
- полковник
- Сообщения: 5845
- Зарегистрирован: 2007-12-07 13:51:33
- Откуда: Верх-Нейвинск
Re: вопросы по статьям o trafd
в доступ на мускульrisk94 писал(а):Подскажите куда рыть?
-
- лейтенант
- Сообщения: 831
- Зарегистрирован: 2007-06-01 19:27:51
Re: вопросы по статьям o trafd
Пароль и логин сменил естественно, (часть данных все же извлекается из базы - видно на скриншоте)
-
- лейтенант
- Сообщения: 831
- Зарегистрирован: 2007-06-01 19:27:51
Re: вопросы по статьям o trafd
не пойму. уже все посмотрел. что может быть? подскажите, плиз!
- Alex Keda
- стреляли...
- Сообщения: 35465
- Зарегистрирован: 2004-10-18 14:25:19
- Откуда: Made in USSR
- Контактная информация:
Re: вопросы по статьям o trafd
ну, 1 - нет файла с юзерами.
2. копи-паст - надо делать тока код, а не весь текст статьи
2. копи-паст - надо делать тока код, а не весь текст статьи
Убей их всех! Бог потом рассортирует...
-
- лейтенант
- Сообщения: 831
- Зарегистрирован: 2007-06-01 19:27:51
Re: вопросы по статьям o trafd
чето я нефкурил че там допиливать кроме юзеров?
Из-за чего неконектитсо-то? Хелп
Из-за чего неконектитсо-то? Хелп
-
- проходил мимо
- Сообщения: 3
- Зарегистрирован: 2008-11-10 16:59:46
Re: вопросы по статьям o trafd
Заметил косяк с обработкой цикла.
после вот этого:
for iface in ${trafd_ifaces}
do
/usr/local/bin/trafsave ${iface}
/usr/local/bin/traflog -i ${iface} -a -n -s > /usr/local/tmp/summary.${iface}
cat /dev/null > /usr/local/var/trafd/trafd.${iface}
cat /usr/local/tmp/summary.${iface} >> ${NewDir}/summary.${iface}
---
файлы /usr/local/var/trafd/trafd.${iface} не пустые, или через раз очищается только последний в цикле. боюсь это может повлечь наложение данных и как следствие не точность в финале..
пробовал по отдельности каждую из перечисленных команд в цикле прогонять - проходит без проблем, а все вместе косячит.
есть подозрение что он фигачит все эти команды не дожидаясь отработки каждой, тогда вообще о точности попадания данных в бд говорить не приходится. также с амперсантами (&&) в конце каждой команды эфекта не добился.
это только у меня такой косяк, или это известный баг? ответа на форуме не нашел.
выручайте!!
после вот этого:
for iface in ${trafd_ifaces}
do
/usr/local/bin/trafsave ${iface}
/usr/local/bin/traflog -i ${iface} -a -n -s > /usr/local/tmp/summary.${iface}
cat /dev/null > /usr/local/var/trafd/trafd.${iface}
cat /usr/local/tmp/summary.${iface} >> ${NewDir}/summary.${iface}
---
файлы /usr/local/var/trafd/trafd.${iface} не пустые, или через раз очищается только последний в цикле. боюсь это может повлечь наложение данных и как следствие не точность в финале..
пробовал по отдельности каждую из перечисленных команд в цикле прогонять - проходит без проблем, а все вместе косячит.
есть подозрение что он фигачит все эти команды не дожидаясь отработки каждой, тогда вообще о точности попадания данных в бд говорить не приходится. также с амперсантами (&&) в конце каждой команды эфекта не добился.
это только у меня такой косяк, или это известный баг? ответа на форуме не нашел.
выручайте!!
-
- проходил мимо
- Сообщения: 11620
- Зарегистрирован: 2008-02-21 18:15:41
Re: вопросы по статьям o trafd
trafd помоему на libcap ?если я неошибаюсь
значит будет пакеты терять>.
а значит криво посчитает....
но это так к размышлению
значит будет пакеты терять>.
а значит криво посчитает....
но это так к размышлению
-
- проходил мимо
- Сообщения: 3
- Зарегистрирован: 2008-11-10 16:59:46
Re: вопросы по статьям o trafd
---paradox писал(а):trafd помоему на libcap ?если я неошибаюсь
значит будет пакеты терять>.
а значит криво посчитает....
но это так к размышлению
Незнаю что такое libcap, но trafd на bpft. пакеты терять будет по любому, нет идеального биллинга, но тут вопрос в том что терять будет из за кривизны скрипта, а не правильности сбора статистики, и это уже проблема...
-
- проходил мимо
- Сообщения: 11620
- Зарегистрирован: 2008-02-21 18:15:41
Re: вопросы по статьям o trafd
ну да libcap это библиотека которая работает через bpf
и терять как раз оно будет...
bpf не дает гарантию на то что он все поймает
и при очень большом потоке(скоросте) он и теряет...
ng_netflow не теряет ничего
но у него есть ньюансы
его используют токо на работающий роутерах)))) линки я кидал в форуме....
и терять как раз оно будет...
bpf не дает гарантию на то что он все поймает
и при очень большом потоке(скоросте) он и теряет...
ng_netflow не теряет ничего
но у него есть ньюансы
его используют токо на работающий роутерах)))) линки я кидал в форуме....
-
- лейтенант
- Сообщения: 831
- Зарегистрирован: 2007-06-01 19:27:51
Re: вопросы по статьям o trafd
лана, Гуру, тыкните ньюба носом. какого ладана я не вижу всех на странице?