Тормозит интернет через Squid

[ltd1]

В общем, два месяца на сервере стоял Ubuntu Desktop 32bit 11.04. Было настроено: iptables, NAT, Squid(3.1.11)+Havp (ClamAV), Samba. Был один винт на 2Тб SATA3, Linux стоял на разделе 50Gb, 2Gb swap и остальное Data. Инет у всех работал быстро (раздаётся на 20 компьютеров).

Потом форматнул винт, добавил ещё один на 250Gb SATA2, на 240Gb поставил Ubuntu Server 64bit 11.10, 2Gb swap. Весь 2Tb под Data. Настроил всё точно также, только Squid стал 3.1.14.. Теперь проблема - на всех компах инет через сквид тормозит, как-будто пинг где-то так 300-400. Если всех пускать в нет без сквида - у всех всё летает. Если всех завернуть на HAVP без свкида - тоже летает. Как только заворачиваешь на сквид - тормоза.

В выводе команды top - если хоть кто-то пользуется интернетом, процесс Squid загружает проц на 100%, только выключишь браузер - сразу 0%.

Процессор стоит Xeon 3GHz, 2 ядра, 2 потока на ядро. Squid грузит только один поток на 100%, остальные 3 стоят по нулям.
Оперативки - 2 планки по 1Gb. Squid сразу же после запуска съедает 1,7Gb. С Desktop'ной версией сравнить не могу, т.к. проблем с тормозами вообще не было, не смотрел.
Материнка поддерживает только SATA2.

memory_pools в Squid'е уже оключил - разницы нет.

Что делать? Какие конфиги показать?

[fisher74]

Давайте посмотрим что там в

Код: [Выделить]

grep -v '^#\|^$' /etc/nsswitch.conf
cat /etc/resolv.conf
Тормоза на качалке тоже проявляются?

[ltd1]

Завтра только смогу посмотреть в 6 утра по Москве.
В resolv.conf написаны два ДНС сервера.
namerserver 83.136.112.246
namerserver 80.71.208.209
DHCP сервер так же их сразу же раздаёт клиентам, так что в состоянии подключения на каждой машине они уже прописываются автоматически.

А вот по второй команде только завтра. А что она должна показать?

Тормоза на качалке тоже проявляются?

В смысле, на торрентах? Не проверял.

[fisher74]

Именно так?

В resolv.conf написаны два ДНС сервера.
namerserver 83.136.112.246
namerserver 80.71.208.209

DHCP сервер так же их сразу же раздаёт клиентам, так что в состоянии подключения на каждой машине они уже прописываются автоматически.

Уточнить хочется: кальмар в прозрачном режиме работает? (судя по всему - да)

А вот по второй команде только завтра. А что она должна показать?

Работу сервера с именами. В случае прозрачности кальмар с доменными именами не работает. потому если на предыдущий вопрос был ответ да, то листинг файлов отменяется.

Тормоза на качалке тоже проявляются?

В смысле, на торрентах? Не проверял.

Не совсем правильно выразился. Замедления в работе только на момент соединения проявляется? Или при приёме траффика тоже. Например, если качать образ убунты по http?
Торренты в squid не попадают (не должны).

Как вариант откатить кальмара на версию 3.1.11 для теста.

P.S. Я уж про логи не напоминаю, что в них нужно было в первую очередь посмотреть. Положа руку на сердце - копали логи?

[ltd1]

1)resolv - Конечно же с ошибкой вчера написал. На самом деле написано без ошибки.

2) Кальмар прозрачен.

3) Ну на вский случай вывод второй команды:
passwd:    compat
group:     compat
shadow:    compat
hosts:     files dns
networks:  files
protocols: db files
services:  db files
ethers:    db files
rpc:       db files
netgroup:  nis

4)Ubuntu по http - разгонялись также замедленно, но потом плавающе качаем на макимальной скорости соединения.

5) Сейчас например - написал в браузере ubuntu.com, Закладка сразу же приняла название страница (Homepage | Ubuntu) и потом секунд 10-13 сидел смотрел на белую страницу браузера, и потом резко всё появилось (секунды за 2).

6) В логах всё одинаково - GET "страница" PARENT ...

7) А как откатиться на старый кальмар? Удалить этот и скачать принудительно с сайта старый? Или это как-то можно сделать через apt-get?

[fisher74]

3) Ну на вский случай вывод второй команды:

всё нормально тут

6) В логах всё одинаково - GET "страница" PARENT ...

Не в тот лог смотрите. Смотрите здесь

Код: [Выделить]

sudo less /var/log/squid3/cache.log

7) А как откатиться на старый кальмар? Удалить этот и скачать принудительно с сайта старый? Или это как-то можно сделать через apt-get?

Признаться не силён в apt, потому сделал бы так

Код: [Выделить]

mkdir ~/backup_squid
sudo cp /etc/squid3/squid.conf ~/backup_squid/
sudo apt-get remove squid3
cp ~/backup_squid
wget ftp://.........deb
dpkg -i .......deb


[ltd1]

fisher74, посмотрите, пожалуйста, мой лог.

dpkg -i .......deb  -  не получится. На офф сайте лежат одни tar.gz (http://www.squid-cache.org/Versions/v3/3.1/)

[fisher74]

Ая разве предлагал взять пакет с офф.сайта кальмара? Возьмите с репы ubuntu
Лог без конфига - время на ветер.

[ltd1]

fisher74, вот конф - почти все по дефолту
В файлах *.acl - просто перепись сайтов.

(Нажмите, чтобы показать/скрыть)

acl ru url_regex "/etc/squid3/ru.acl"
acl com url_regex "/etc/squid3/com.acl"
acl org url_regex "/etc/squid3/org.acl"
acl net url_regex "/etc/squid3/net.acl"
acl trackers url_regex "/etc/squid3/trackers.acl"
http_access deny ru
http_access deny com
http_access deny org
http_access deny net
http_access deny trackers
acl manager proto cache_object
acl localhost src 127.0.0.1/32 ::1
acl to_localhost dst 127.0.0.0/8 0.0.0.0/32 ::1
acl localnet src 192.168.1.0/24   # RFC1918 possible internal network
acl localnet src 192.168.2.0/24   # RFC1918 possible internal network
acl SSL_ports port 443
acl Safe_ports port 80      # http
acl Safe_ports port 21      # ftp
acl Safe_ports port 443      # https
acl Safe_ports port 70      # gopher
acl Safe_ports port 210      # wais
acl Safe_ports port 1025-65535   # unregistered ports
acl Safe_ports port 280      # http-mgmt
acl Safe_ports port 488      # gss-http
acl Safe_ports port 591      # filemaker
acl Safe_ports port 777      # multiling http
acl CONNECT method CONNECT
http_access allow manager localhost
http_access deny manager
http_access deny !Safe_ports
http_access deny CONNECT !SSL_ports
http_access allow localnet
http_access allow localhost
http_access deny all
http_port 3128 transparent
hierarchy_stoplist cgi-bin ?
cache_dir ufs /var/spool/squid3 100 16 256
coredump_dir /var/spool/squid3
refresh_pattern ^ftp:      1440   20%   10080
refresh_pattern ^gopher:   1440   0%   1440
refresh_pattern -i (/cgi-bin/|\?) 0   0%   0
refresh_pattern .      0   20%   4320
error_directory /usr/share/squid3/errors/ru
cache_peer 127.0.0.1 parent 8080 0 no-query no-digest no-netdb-exchange default
cache_peer_access 127.0.0.1 allow all
acl Scan_HTTP proto HTTP
never_direct allow Scan_HTTP

Пользователь решил продолжить мысль 03 Ноября 2011, 06:13:52:fisher74, что скажете?

[fisher74]

Попробуйте url_regex отключить для теста.

[ltd1]

Закоментировал url_regex - интернет залетал.  Сквид теперь грузит проц только на 1%.

ПОЧЕМУ ТАК?

На Desktope всё точно также было и всё работало.?

[fisher74]

не могу сказать. Где-то читал, что может из-за этого тупить.
Пробуйте вводить по одному и смотреть как себя вести будет. Может на каком-нить списке или его строчке затыкается.
Ну или пробуйте обойти с помощью dstdomain

[ltd1]

fisher74, спасибо. Буду пробовать.

[P0WER_man]

Помогите пожалуйста разобраться в чём может быть проблема, при загрузке файлов до 1 мг через SQUID не возникает ни каких проблем со скоростью, а при загрузке файлов около 10 мг. и более скорость падает до 2 кб.сек. где можно подкрутить в настройках, что-бы этот вопрос решить?

[artem.ultra]

Havp
вся проблема в нем.
я когда то сталкивался с таким. очень долго проверяет страницы.
отключите хавп и попробуйте поработать без него!