Проблема со squid

[flash709]

Люди добрые поможите.
Поставил мозги в очень заманчивую позу, но не я а меня, вчестности мой мозг.
Что имеем

Код: Выделить всё

# uname -a
FreeBSD gw02.elpaco.ru 10.0-RELEASE FreeBSD 10.0-RELEASE #0: Tue Jan 28 13:19:03 UTC 2014     adm@gw02.elpaco.ru:/usr/obj/usr/src/sys/gw02  amd64

Код: Выделить всё

# pkg info -a | grep squid
squid33-3.3.11                 HTTP Caching Proxy

Конфиг, пусть на данный момент кривоват. но дальше подправлю.

Код: Выделить всё

#
# Recommended minimum configuration:
#
#acl manager proto cache_object
acl localhost src 127.0.0.1/32
acl to_localhost dst 127.0.0.0/8

# Example rule allowing access from your local networks.
# Adapt to list your (internal) IP networks from where browsing
# should be allowed
#acl localnet src 10.0.0.0/8	# RFC1918 possible internal network
#acl localnet src 172.16.0.0/12	# RFC1918 possible internal network
#acl localnet src 192.168.0.0/16	# RFC1918 possible internal network
#acl localnet src fc00::/7       # RFC 4193 local private network range
#acl localnet src fe80::/10      # RFC 4291 link-local (directly plugged) machines
acl localnet src 192.168.0.0/16

acl SSL_ports port 443
acl Safe_ports port 80		# http
acl Safe_ports port 21		# ftp
acl Safe_ports port 443		# https
acl Safe_ports port 70		# gopher
acl Safe_ports port 210		# wais
acl Safe_ports port 1025-65535	# unregistered ports
acl Safe_ports port 280		# http-mgmt
acl Safe_ports port 488		# gss-http
acl Safe_ports port 591		# filemaker
acl Safe_ports port 777		# multiling http
acl CONNECT method CONNECT

acl nobanners src all
acl worktime time 9:30-14:00
acl worktime2 time 15:00-18:30
acl whitelist url_regex "/usr/local/etc/squid/whitelist.acl"
acl banners url_regex "/usr/local/etc/squid/banners.acl"
acl social url_regex "/usr/local/etc/squid/social.acl"
acl ads url_regex "/usr/local/etc/squid/ads.acl"
acl black url_regex "/usr/local/etc/squid/black.acl"
acl kadry src 192.168.0.78
acl odmin src 192.168.0.47
acl design src 192.168.0.54
acl admin src 192.168.0.48
acl admin-2 src 192.168.0.46
acl temp src 192.168.0.91
acl lemesh src 192.168.0.81
acl dmitry src 192.168.0.9
acl denis src 192.168.0.97
http_access allow nobanners whitelist
http_access allow kadry
http_access allow odmin
http_access allow lemesh
http_access allow design
http_access allow admin
http_access allow admin-2
http_access allow dmitry
http_access allow denis
http_access allow temp
http_access deny worktime social
http_access deny worktime2 social
http_access deny black
#http_access deny nobanners banners
#http_access deny nobanners ads
deny_info http://192.168.0.1/empty.jpg banners

#
# Recommended minimum Access Permission configuration:
#
# Only allow cachemgr access from localhost
http_access allow manager localhost
http_access deny manager

# Deny requests to certain unsafe ports
http_access deny !Safe_ports

# Deny CONNECT to other than secure SSL ports
http_access deny CONNECT !SSL_ports

# We strongly recommend the following be uncommented to protect innocent
# web applications running on the proxy server who think the only
# one who can access services on "localhost" is a local user
#http_access deny to_localhost

#
# INSERT YOUR OWN RULE(S) HERE TO ALLOW ACCESS FROM YOUR CLIENTS
#

#url_rewrite_program /usr/local/rejik/redirector /usr/local/rejik/redirector.conf

# Example rule allowing access from your local networks.
# Adapt localnet in the ACL section to list your (internal) IP networks
# from where browsing should be allowed
http_access allow localnet
http_access allow localhost

# And finally deny all other access to this proxy
http_access deny all

# Squid normally listens to port 3128
http_port 3128 transparent

# We recommend you to use at least the following line.
hierarchy_stoplist cgi-bin ?

# Uncomment and adjust the following to add a disk cache directory.
cache_dir ufs /usr/local/etc/squid/ca 50000 64 512

cache_mem 1024 MB
maximum_object_size 51200 KB
# Leave coredumps in the first cache dir
coredump_dir /usr/local/etc/squid/cache

# Add any of your own refresh_pattern entries above these.
refresh_pattern ^ftp:		1440	20%	10080
refresh_pattern ^gopher:	1440	0%	1440
refresh_pattern -i (/cgi-bin/|\?) 0	0%	0
refresh_pattern .		0	20%	4320

logfile_rotate 10

В общем всё ставиться без проблем. Правим конфиг, начинаем создавать папки кеша получаем

Код: Выделить всё

root@gw02:/usr/local/etc/squid # squid -z
2014/01/31 12:47:15| WARNING: (B) '127.0.0.1' is a subnetwork of (A) '127.0.0.1'
2014/01/31 12:47:15| WARNING: because of this '127.0.0.1' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15| WARNING: You should probably remove '127.0.0.1' from the ACL named 'localhost'
2014/01/31 12:47:15| WARNING: (B) '127.0.0.1' is a subnetwork of (A) '127.0.0.1'
2014/01/31 12:47:15| WARNING: because of this '127.0.0.1' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15| WARNING: You should probably remove '127.0.0.1' from the ACL named 'localhost'
2014/01/31 12:47:15| WARNING: (B) '127.0.0.0/8' is a subnetwork of (A) '127.0.0.0/8'
2014/01/31 12:47:15| WARNING: because of this '127.0.0.0/8' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15| WARNING: You should probably remove '127.0.0.0/8' from the ACL named 'to_localhost'
2014/01/31 12:47:15| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
2014/01/31 12:47:15| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
2014/01/31 12:47:15| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
root@gw02:/usr/local/etc/squid # 2014/01/31 12:47:15 kid1| WARNING: (B) '127.0.0.1' is a subnetwork of (A) '127.0.0.1'
2014/01/31 12:47:15 kid1| WARNING: because of this '127.0.0.1' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15 kid1| WARNING: You should probably remove '127.0.0.1' from the ACL named 'localhost'
2014/01/31 12:47:15 kid1| WARNING: (B) '127.0.0.1' is a subnetwork of (A) '127.0.0.1'
2014/01/31 12:47:15 kid1| WARNING: because of this '127.0.0.1' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15 kid1| WARNING: You should probably remove '127.0.0.1' from the ACL named 'localhost'
2014/01/31 12:47:15 kid1| WARNING: (B) '127.0.0.0/8' is a subnetwork of (A) '127.0.0.0/8'
2014/01/31 12:47:15 kid1| WARNING: because of this '127.0.0.0/8' is ignored to keep splay tree searching predictable
2014/01/31 12:47:15 kid1| WARNING: You should probably remove '127.0.0.0/8' from the ACL named 'to_localhost'
2014/01/31 12:47:15 kid1| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
2014/01/31 12:47:15 kid1| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
2014/01/31 12:47:15 kid1| WARNING: Could not determine this machines public hostname. Please configure one or set 'visible_hostname'.
2014/01/31 12:47:15 kid1| Creating missing swap directories
2014/01/31 12:47:15 kid1| /usr/local/etc/squid/ca exists
2014/01/31 12:47:15 kid1| Making directories in /usr/local/etc/squid/ca/00
2014/01/31 12:47:15 kid1| Making directories in /usr/local/etc/squid/ca/01
2014/01/31 12:47:15 kid1| Making directories in /usr/local/etc/squid/ca/02
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/03
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/04
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/05
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/06
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/07
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/08
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/09
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0A
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0B
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0C
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0D
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0E
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/0F
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/10
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/11
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/12
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/13
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/14
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/15
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/16
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/17
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/18
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/19
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/1A
2014/01/31 12:47:16 kid1| Making directories in /usr/local/etc/squid/ca/1B
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/1C
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/1D
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/1E
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/1F
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/20
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/21
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/22
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/23
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/24
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/25
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/26
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/27
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/28
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/29
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2A
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2B
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2C
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2D
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2E
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/2F
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/30
2014/01/31 12:47:17 kid1| Making directories in /usr/local/etc/squid/ca/31
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/32
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/33
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/34
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/35
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/36
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/37
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/38
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/39
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3A
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3B
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3C
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3D
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3E
2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3F

И всё, после 2014/01/31 12:47:18 kid1| Making directories in /usr/local/etc/squid/ca/3F зависает и трындец.
Предыстория такова, умер сервак на 7.2, был под рукой диск 9.0, поставили всё красиво настроил кучу всего, дошло до squid, запускаю squid -z > зависание. До ковырял до такой степени что добил 9.0
Думал может траблы может какие, тут глянул что вышла 10 да ещё с поддержкой hyper-v, стало сразу ясно что вот оно! Но не долго я радовался. на 10 та же ХРЕНЬ! Куда копать коллеги ? В логах нет нечего, только события запуска и создания папок.

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[Alvares]

А что за ФС?

[Alex Keda]

поменьше чтоли директорий сделайте

[flash709]

Всё собрано на zfs

Колличесво папок уже уменьшал, игрался разными настройками и тд и тп. вот хоть пристрелите неработает и всё тут. Причём на двух разных системах.

[Merlin68]

Коллеги, у меня абсолютно такая же беда.
uname -a
FreeBSD 10.0-RELEASE FreeBSD 10.0-RELEASE #1 r261895: Fri Feb 14 19:18:10 EET 2014
ФС - ufs
Задан небольшой размер cache.
Создание кэша - не заканчивается. В логах - никакиз ошибок.
Только на экране:

Код: Выделить всё

2014/02/18 15:45:44 kid1| Creating missing swap directories
2014/02/18 15:45:44 kid1| /var/squid/cache exists
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/00
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/01
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/02
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/03
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/04
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/05
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/06
2014/02/18 15:45:44 kid1| Making directories in /var/squid/cache/07
2014/02/18 15:45:45 kid1| Making directories in /var/squid/cache/08
2014/02/18 15:45:45 kid1| Making directories in /var/squid/cache/09
2014/02/18 15:45:45 kid1| Making directories in /var/squid/cache/0A
2014/02/18 15:45:45 kid1| Making directories in /var/squid/cache/0B
2014/02/18 15:45:46 kid1| Making directories in /var/squid/cache/0C
2014/02/18 15:45:46 kid1| Making directories in /var/squid/cache/0D
2014/02/18 15:45:46 kid1| Making directories in /var/squid/cache/0E
2014/02/18 15:45:46 kid1| Making directories in /var/squid/cache/0F

[Alvares]

А если диск разместить в памяти, кеш разместить на нем?
То же самое или нет? Просто определиться, где затык - на ФС или в сквиде.

[Merlin68]

А если диск разместить в памяти, кеш разместить на нем?
То же самое или нет? Просто определиться, где затык - на ФС или в сквиде.

Если чесно - не знаю, как это делать.
Сейчас попробую переустановить SQUID и откатиться на версию 3.2.
О результатах - отпишусь.

[Merlin68]

SQUID 3.2 - результат тот же, виснет при создании кэша.
Помогите, коллеги, плиз....

[flash709]

КОроче не выходит каменный цветок.
ФС менял, на разных дисках|разделах размещал (zfs, ufs) . глубиной кеша игрался. Оси разные побывал 9.2 10, пробовал разные версии 3,3 3,2. Не работает хоть убейте. что за "непереводимая игра слов"
з.ы. Порты свежайшие

[ivan__]

У меня подобное было когда при пересборке ядра и мира че-то "лишнее" выкинул.

[Merlin68]

Очень похоже, что в ядре чего-то нужно включить или выключить.
Готов пересобирать ядро, если великие Гуру подскажут, что изменить.

[flash709]

в стандартное едро добавлены лишь эти функции

Код: Выделить всё

options         IPFIREWALL
options         IPFIREWALL_VERBOSE
options         IPFIREWALL_VERBOSE_LIMIT=100
options         IPFIREWALL_NAT
options			IPDIVERT
options         DUMMYNET
options         HZ="1000"
options         LIBALIAS

options         NETGRAPH
options         NETGRAPH_ETHER
options         NETGRAPH_IFACE
options         NETGRAPH_KSOCKET
options         NETGRAPH_SOCKET
options         NETGRAPH_TEE

nooptions 	INET6			# IPv6 communications protocols

[Alvares]

"Великие гуру" подскажут загрузиться с GENERIC

[flash709]

угу.
Я то пересоберу. только как мне кажецца толку будет 0 так как на 7.2 работать сквид перестал после обновления. И настройки ядра были похожи. но попытка не пытка. пробую.

[flash709]

Таже хрень.

[Merlin68]

Поскольку у меня та же беда со сквидом, дополню, что у меня ядро пересобрано с поддержкой PF (не пользую я ipfw), у меня тот же результат, при построении кэша - стопорится.
Следуя совету великих Гуру - пользовать ядро GENERIC - положительной динамики не наблюдаю.
Какие ещё советы будут от уважаемых коллег ?

[snorlov]

Сам squid, точнее его версия... Попробуйте другую, в портах наверняка есть...

[Merlin68]

3.2 и 3.3 из портов - результат одинаковый

[Jedi88Knight]

была точно такая же проблема при установке 3-го squid'а в FreeBSD 9.2 amd64. Долго пробовал разные варианты, а потом просто забил и поставил squid толи 2.9, толи 2.7.9 его функционала и стабильности за глаза хватает для отличного прокси сервера с ntlm авторизацией в AD при работе с 200 пользователей. плюс clamav + rejik + sams 1.0.5... работает месяца три изъянов не было найдено. поговаривают, что 3й squid еще пока сыроват и нестабилен... тратить время на устранения этого бага неинтересно, раз все потребности удовлетворяет второй

[Kotjara]

ТОже как отвечавшие здесь зависал, но после того как squid "зависал" на создании директорий я просто нажимал кнопАчку Enter, процесс завершался и squid стартовал без проблем

[dekloper]

фегню какуюто говорите
похоже у вас конфиги какието кревые у всех поголовно
у мня на 10-ке сквида-3.3.11 - никаких проблем эротического характера

[golibshoh]

Если тема всё ещё актуально то вот:
Циатат: "Начиная с версии 3.2 списки контроля доступа: manager, localhost и to_localhost являются предопределенными и создаются сквидом автоматически. При попытке их переопределения в файле конфигурации возникает ошибка. Данные параметры необходимо удалить из конфига."
У меня на серваке 10.1 squid 3.3 заработала после комментирование этих двух параметров.

[Бомж]

Товарисч golibshoh дело говорит, есть такое западло.

[levitan]

Проверьте владельца и права доступа к каталогу где у вас кэш, т.е. /usr/local/etc/squid/ca
Для теста можно временно сделать:
chown -R squid:squid /usr/local/etc/squid/ca
chmod -R 777 /usr/local/etc/squid/ca
Ес-но squid:squid это юзер:группа от которого запущен сквид