Обновление портов через squid33

Простые/общие вопросы по UNIX системам. Спросите здесь, если вы новичок

Модераторы: vadim64, terminus

Правила форума
Убедительная просьба юзать теги [cоde] при оформлении листингов.
Сообщения не оформленные должным образом имеют все шансы быть незамеченными.
Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-13 18:53:32

День добрый.

Есть freebsd8.2, на ней обновлен Squid до Squid33 + AD.
Через прокси все чудесно работает с авторизацией AD.

В локалке есть еще один Freebsd8.2
В csh.cshrc прописано:

Код: Выделить всё

setenv HTTP_PROXY "http://proxy.local:3128"
setenv HTTP_PROXY_AUTH "basic:*:user:passw"
setenv FTP_PROXY "http://proxy.local:3128"
setenv FTP_PROXY_AUTH "basic:*:user:passw"
Делаю portupgrade, получаю при скачке архивов:

Код: Выделить всё

fetch: http://dk1.php.net/distributions/php-5.4.15.tar.bz2: Proxy Authentication Required
Но если делаю ту же скачку из консоли - все работает.

Как полечить fetch ?
Последний раз редактировалось f_andrey 2013-05-13 21:15:35, всего редактировалось 1 раз.
Причина: Автору. пожалуйста, выбирайте соответствующий раздел форума.

Хостинговая компания Host-Food.ru
Хостинг HostFood.ru
 

Услуги хостинговой компании Host-Food.ru

Хостинг HostFood.ru

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

Аватара пользователя
Electronik
капитан
Сообщения: 1593
Зарегистрирован: 2008-11-15 17:32:56
Откуда: Минск
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Electronik » 2013-05-14 1:09:37

а если так?

Код: Выделить всё

setenv HTTP_PROXY http://user:pass@ip:port
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-14 10:03:29

Electronik писал(а):а если так?

Код: Выделить всё

setenv HTTP_PROXY http://user:pass@ip:port
Тоже пробовал - не работает.

Аватара пользователя
Electronik
капитан
Сообщения: 1593
Зарегистрирован: 2008-11-15 17:32:56
Откуда: Минск
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Electronik » 2013-05-14 14:16:24

что в логах сквида?
Предскажем будущее hw по логам и дампу, снимем сглаз и порчу с рута, поможем придумать пароль(С)
Блог

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-14 15:05:20

Electronik писал(а):что в логах сквида?
Proxy Authentication Required

Сквид не пускает т.к. клиент идет без ваторизации.

snorlov
подполковник
Сообщения: 3846
Зарегистрирован: 2008-09-04 11:51:25
Откуда: Санкт-Петербург

Re: Обновление портов через squid33

Непрочитанное сообщение snorlov » 2013-05-14 17:43:25

Наверное у сквида ntlm_auth стоит без basic вот и не пускает...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-14 17:57:55

snorlov писал(а):Наверное у сквида ntlm_auth стоит без basic вот и не пускает...
У Squid есть basic авторизация, мало того она работает.

Прочитайте мой первый пост, я там писал, что из консоли fetch работает через прокси.
А вот при portupgrade нет !!!

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-15 12:49:49

какой шелл используете?
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-16 14:56:16

Alvares писал(а):какой шелл используете?
У root csh.
Собственно из консоли под root все работает, не работает именно portupgrade.

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-16 15:17:38

Проблема скорее всего в pkg_fetch ...
По какой то причине не хочет идти через прокси.

Щас попал на форум, народ обсуждает именно такой момент, когда с консоли работает, а portupgrade дает свои настройки fetch и не работает.
Вообщем если есть варианты пишите плиз, если сам решу так же отпишу.

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-19 20:29:56

всегда прописывал и в .cshrc и в .profile, все работало
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-19 21:03:44

Alvares писал(а):всегда прописывал и в .cshrc и в .profile, все работало
Да вот и я так же делал и работало, а теперь нет.
env показывает что параметры прокси указаны верно...

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-20 7:40:27

может, portupgrade запускается от другого пользователя? И профиль не берет?
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-20 8:39:04

Да нет, portupgrade от рута запускается ...
Где то косяк однозначно, вот где ? ...

snorlov
подполковник
Сообщения: 3846
Зарегистрирован: 2008-09-04 11:51:25
Откуда: Санкт-Петербург

Re: Обновление портов через squid33

Непрочитанное сообщение snorlov » 2013-05-20 9:32:00

kharkov_max писал(а):Да нет, portupgrade от рута запускается ...
Где то косяк однозначно, вот где ? ...
Может в pkgtools.conf?

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-20 10:10:47

snorlov писал(а):
kharkov_max писал(а):Да нет, portupgrade от рута запускается ...
Где то косяк однозначно, вот где ? ...
Может в pkgtools.conf?
Как вариант, но брал дефолтный конфиг - та же петрушка.
Разве что в конфиг как то внести параметры прокси с авторизацией.
Но ранее ни где такого не делал ...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-20 18:12:19

Хм...
В логах squid видно что при попытке скачать portupgrade подставляется как минимум верный пользователь из env ...
Странно чего не качает ...

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-21 7:36:44

Так все-таки на сквид он стучится? Значит, настройки видит. Тогда нужно рыть сквида, чего там не так, мож где чего обрезано...
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-21 8:07:56

Alvares писал(а):Так все-таки на сквид он стучится? Значит, настройки видит. Тогда нужно рыть сквида, чего там не так, мож где чего обрезано...
Ну как вариант.
Но почему тогда из консоли качает нормально, если запускать fetch url.
Если бы и в консоли не качало, тогда однозначно Squid, а так в консоли работает а portupgrade нет ...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-21 10:11:27

Если сквиду разрешаю пускать без авторизации, то все работает, т.е. проблема именно в авторизации.
При чем судя из лога логин передается верно.

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-21 17:19:15

Вообщем как только хост и юзер попадают под правило прокси
acl auth_user proxy_auth REQUIRED
через прокси не пускает.

Ради интереса развернул новый хост на 8.3, сделал аналогичные настройки прокси - все рабоатет и новый хост squid нормально пускает.
Т.е. прокси отпадает 100%

Видимо или fetch под portupgrade как то не передает пароль, или передает его в искаженом, или каком то другом виде который не понимает squid или samba или AD...
Соственно у меня вариантов уже нет ...

Хелп !!!

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-22 7:30:11

Ну тады давай с нуля :) Конфиг в студию.
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-28 21:20:27

Alvares писал(а):Ну тады давай с нуля :) Конфиг в студию.
Ну раз с нуля тогда вот конфиг сквида:

Код: Выделить всё

auth_param ntlm program /usr/local/bin/ntlm_auth --require-membership-of=S-1-5-21-163083392-1867935466-2816259149-1116 --helper-protocol=squid-2.5-ntlmssp --domain=MMM
auth_param ntlm children 30
auth_param ntlm keep_alive on

auth_param basic program /usr/local/bin/ntlm_auth --require-membership-of=S-1-5-21-163083392-1867935466-2816259149-1116 --helper-protocol=squid-2.5-basic --domain=MMM
auth_param basic children 30
auth_param basic realm Proxy server
auth_param basic credentialsttl 2 minutes
auth_param basic casesensitive on

authenticate_ip_ttl 0
authenticate_ttl 5 minutes

external_acl_type win_group %LOGIN /usr/local/libexec/squid/ext_wbinfo_group_acl

acl windowsupdate dstdomain -i "/usr/local/etc/squid/lan_conf/windowsupdate"
acl allow_domain_none_auth dstdomain -i "/usr/local/etc/squid/lan_conf/domain_none_auth"
acl none_auth_host src "/usr/local/etc/squid/lan_conf/host_none_auth"
acl localdomain dstdomain -i .mmm.local
acl no_avir urlpath_regex -i \.avi$ \.jpg$ \.gif$ \.mp3$ \.mpg4$

acl inet_all   external win_group proxy_access_full

acl inet_small  external win_group proxy_speed_small
acl inet_normal external win_group proxy_speed_normal
acl inet_fast   external win_group proxy_speed_fast
acl inet_unlim  external win_group proxy_speed_unlim

# acl manager proto cache_object
# acl localhost src 127.0.0.1/32 192.168.20.250/32
# acl localhost src 192.168.10.250/32
# acl to_localhost dst 127.0.0.0/8
acl localnet src 192.168.20.0/24 192.168.21.0/24

acl SSL_ports port 443
acl Safe_ports port 21 20 80 443 8080 8180
# acl Safe_ports port 70
# acl Safe_ports port 210
# acl Safe_ports port 280
# acl Safe_ports port 488
# acl Safe_ports port 591
# acl Safe_ports port 777
# acl Safe_ports port 1025-65535
acl FTP_ports port 21 20
acl CONNECT method CONNECT

acl squidusers proxy_auth REQUIRED

ftp_user anonymous@
# ftp_list_width 50
ftp_passive on
# ftp_epsv_all off
# ftp_epsv on
ftp_sanitycheck on
ftp_telnet_protocol off

no_cache deny windowsupdate
no_cache deny localdomain
no_cache deny FTP_ports

# http_access allow all
http_access allow manager localhost
http_access allow localhost
http_access allow manager
http_access deny manager
http_access deny !Safe_ports
http_access deny CONNECT !SSL_ports
icp_access allow localnet squidusers inet_all
icp_access deny all

http_access allow localnet allow_domain_none_auth
http_access deny  allow_domain_none_auth
http_access allow none_auth_host windowsupdate
http_access deny  none_auth_host windowsupdate
http_access allow localdomain
http_access deny  localdomain

http_access allow localnet squidusers inet_all inet_small
http_access deny localnet squidusers inet_all inet_small
http_access allow localnet squidusers inet_all inet_normal
http_access deny localnet squidusers inet_all inet_normal
http_access allow localnet squidusers inet_all inet_fast
http_access deny localnet squidusers inet_all inet_fast
http_access allow localnet squidusers inet_all inet_unlim

http_access deny all

http_port 192.168.20.250:3128

hierarchy_stoplist cgi-bin ?
cache_mem 128 MB
maximum_object_size_in_memory 10 KB
cache_dir ufs /usr/local/squid/cache 5012 64 256
minimum_object_size 600 KB
maximum_object_size 1240 KB

buffered_logs on
cache_swap_low 92
cache_swap_high 96

## cache_peer 127.0.0.1 parent 3127 0 default no-query
# cache_peer 127.0.0.1 parent 3127 0 default no-query no-digest no-netdb-exchange default
# always_direct allow SSL_ports
# always_direct allow FTP_ports
# always_direct allow no_avir
# never_direct allow all

logformat squid %ts.%03tu %6tr %dt %>a %>A %>p %<A %Ss %>Hs %<st %>st %st %ru %un %mt %rv %rm

logfile_rotate 3

access_log /usr/local/squid/logs/access.log squid
cache_log /usr/local/squid/logs/cache.log
cache_store_log /usr/local/squid/logs/store.log
coredump_dir /usr/local/squid/logs
pid_filename /var/run/squid/squid.pid

refresh_pattern ^ftp:		1440	20%	10080
refresh_pattern ^gopher:	1440	0%	1440
refresh_pattern (cgi-bin|\?)	0	0%	0
refresh_pattern .		0	80%	10080

cache_effective_user squid
cache_effective_group squid
# cachemgr_passwd pass123

visible_hostname ProxyServer
email_err_data on
cache_mgr root@mkh.pp.ua
httpd_suppress_version_string on
# nonhierarchical_direct on

delay_pool_uses_indirect_client On
delay_pools 5
delay_class 1 4
delay_access 1 allow squidusers inet_small
delay_access 1 deny all
delay_class 2 4
delay_access 2 allow squidusers inet_normal
delay_access 2 deny all
delay_class 3 4
delay_access 3 allow squidusers inet_fast
delay_access 3 deny all
delay_class 4 4
delay_access 4 allow squidusers inet_unlim
delay_access 4 deny all
delay_class 5 4
delay_access 5 allow windowsupdate none_auth_host
delay_access 5 deny all

# 40Mbit/sec -> ((40*1024)/8)*1000=5120000
# Small sped for user 1Bbit/sec
delay_parameters 1 -1/-1 -1/-1 -1/-1 128000/600000
# Normal speed for User 10Mbit/sec
delay_parameters 2 -1/-1 -1/-1 -1/-1 1280000/600000
# Fast speed for Users 40Mbit/sec
delay_parameters 3 -1/-1 -1/-1 -1/-1 5120000/600000
# Unlim speed for Users
delay_parameters 4 -1/-1 -1/-1 -1/-1 10240000/600000
# For Wsus
delay_parameters 5 -1/-1 -1/-1 -1/-1 10240000/600000

delay_initial_bucket_level 50

forwarded_for off

# check_hostnames on
dns_nameservers 192.168.20.250
hosts_file /etc/hosts
positive_dns_ttl 1 hours
negative_dns_ttl 5 minutes

icon_directory /usr/local/etc/squid/icons/
error_directory /usr/local/etc/squid/errors/ru-ru/
Внимание !!!
Не работает только из portupgrade из консоли из локалки все работает.
Сам сервер тоже пускаю обновляться через Squid, на сервере несколько jail - тоже через squid. Почему - мне так удобнее резать скорость.
Можно конечно и ipfw подкрутить, но хочется именно так.

Если пускаю portupgrade через прокси без авторизации - все работает.
Если с авторизацией и это portupgrade в лог попадает логин пользователя но squid футболит обращение и не пускает.
Squid33 последний из портов, downgrade не пробовал ибо пока не понятно почему так происходит именно с portupgrade.

Ну и спасибо забудущие советы...

Аватара пользователя
Alvares
прапорщик
Сообщения: 485
Зарегистрирован: 2008-07-10 12:48:08
Откуда: Воронеж
Контактная информация:

Re: Обновление портов через squid33

Непрочитанное сообщение Alvares » 2013-05-29 8:57:21

Код: Выделить всё

#acl localhost src 127.0.0.1/32 192.168.20.250/32
http_access allow localhost
вот это не влияет? Сам себе режет ИМХО. Коммент убрать не помогает?
Бог создал людей сильными и слабыми. Сэмюэл Кольт сделал их равными...

Аватара пользователя
kharkov_max
капитан
Сообщения: 1811
Зарегистрирован: 2008-10-03 14:56:40

Re: Обновление портов через squid33

Непрочитанное сообщение kharkov_max » 2013-05-29 9:38:45

Alvares писал(а):

Код: Выделить всё

#acl localhost src 127.0.0.1/32 192.168.20.250/32
http_access allow localhost
вот это не влияет? Сам себе режет ИМХО. Коммент убрать не помогает?
Дело в том что закоменченое правило для Squid33 уже не актуально т.к. он его формирует по умолчанию и если его включить, то при запуске squid ругается на повторение правила. Это 100% в предыдущей версии squid31 это правило работало.