Настроить Squid как прямой прокси HTTPS?

9

Вот некоторые сведения о моей проблеме:

У меня есть веб-сервис, работающий на Heroku, с динамическим IP-адресом. Статические IP-адреса на Heroku не вариант.
Мне нужно подключиться к внешнему веб-сервису, который находится за брандмауэром. Люди, которые управляют внешним веб-сервисом, будут открывать свой брандмауэр только для определенного статического IP-адреса.

Моя попытка решить проблему - использовать Squid на отдельном сервере со статическим IP-адресом для перенаправления запросов прокси-сервера от Heroku к внешней службе. Таким образом, внешняя служба всегда видит статический IP-адрес прокси-сервера, а не динамический IP-адрес службы Heroku.

Поскольку мой прокси-сервер не может полагаться на IP-адрес для проверки подлинности (это проблема для начала!), Он должен полагаться на имя пользователя и пароль. Кроме того, имя пользователя и пароль не могут быть переданы в виде открытого текста, поскольку, если злоумышленник перехватит этот открытый текст, он сможет подключиться к моему прокси-серверу, притворившись мной, сделать исходящие запросы, используя статический IP-адрес моего прокси-сервера, и, таким образом, обойти внешний брандмауэр веб-службы.

Поэтому прокси-сервер Squid должен принимать соединения только по протоколу HTTPS, а не по HTTP. (Соединение с внешней веб-службой может быть HTTP или HTTPS.)

Я запускаю Squid 3.1.10 на CentOS 6.5.x, и вот мой squid.confпока. Только для устранения неполадок, я временно включил HTTP и HTTPS-прокси, но я хочу использовать только HTTPS.

#
# Recommended minimum configuration:
#
acl manager proto cache_object
acl localhost src 127.0.0.1/32 ::1
acl to_localhost dst 127.0.0.0/8 0.0.0.0/32 ::1

# Example rule allowing access from your local networks.
# Adapt to list your (internal) IP networks from where browsing
# should be allowed
acl localnet src 10.0.0.0/8 # RFC1918 possible internal network
acl localnet src 172.16.0.0/12  # RFC1918 possible internal network
acl localnet src 192.168.0.0/16 # RFC1918 possible internal network
acl localnet src fc00::/7       # RFC 4193 local private network range
acl localnet src fe80::/10      # RFC 4291 link-local (directly plugged) machines

acl SSL_ports port 443
acl Safe_ports port 80      # http
acl Safe_ports port 21      # ftp
acl Safe_ports port 443     # https
acl Safe_ports port 70      # gopher
acl Safe_ports port 210     # wais
acl Safe_ports port 1025-65535  # unregistered ports
acl Safe_ports port 280     # http-mgmt
acl Safe_ports port 488     # gss-http
acl Safe_ports port 591     # filemaker
acl Safe_ports port 777     # multiling http
acl CONNECT method CONNECT

# Authorization

auth_param digest program /usr/lib64/squid/digest_pw_auth -c /etc/squid/squid_passwd
auth_param digest children 20 startup=0 idle=1
auth_param digest realm squid
auth_param digest nonce_garbage_interval 5 minutes
auth_param digest nonce_max_duration 30 minutes
auth_param digest nonce_max_count 50

acl authenticated proxy_auth REQUIRED

#
# Recommended minimum Access Permission configuration:
#
# Only allow cachemgr access from localhost
http_access allow manager localhost
http_access deny manager

# Deny requests to certain unsafe ports
http_access deny !Safe_ports

# Deny CONNECT to other than secure SSL ports
http_access deny CONNECT !SSL_ports

# We strongly recommend the following be uncommented to protect innocent
# web applications running on the proxy server who think the only
# one who can access services on "localhost" is a local user
#http_access deny to_localhost

#
# INSERT YOUR OWN RULE(S) HERE TO ALLOW ACCESS FROM YOUR CLIENTS
#

# Example rule allowing access from your local networks.
# Adapt localnet in the ACL section to list your (internal) IP networks
# from where browsing should be allowed
#http_access allow localnet
#http_access allow localhost
http_access allow authenticated

# And finally deny all other access to this proxy
http_access deny all

# Squid normally listens to port 3128
http_port 3128

https_port 3129 cert=/etc/squid/ssl/cert.pem key=/etc/squid/ssl/key.pem

# We recommend you to use at least the following line.
hierarchy_stoplist cgi-bin ?

# Disable all caching
cache deny all

# Uncomment and adjust the following to add a disk cache directory.
#cache_dir ufs /var/spool/squid 100 16 256

# Leave coredumps in the first cache dir
coredump_dir /var/spool/squid

# Add any of your own refresh_pattern entries above these.
refresh_pattern ^ftp:       1440    20% 10080
refresh_pattern ^gopher:    1440    0%  1440
refresh_pattern -i (/cgi-bin/|\?) 0 0%  0
refresh_pattern .       0   20% 4320

При использовании этой настройки HTTP-прокси работает нормально, а HTTPS-прокси - нет.

Вот HTTP-запрос прокси из локальной коробки:

$ curl --proxy http://my-proxy-server.example:3128 \
  --proxy-anyauth --proxy-user redacted:redacted -w '\n' \
  http://urlecho.appspot.com/echo?body=OK
OK

Хорошо, это то, что я ожидал. Это приводит к строке в /var/log/squid/access.log:

1390250715.137     41 my.IP.address.redacted TCP_MISS/200 383 GET http://urlecho.appspot.com/echo? redacted DIRECT/74.125.142.141 text/html

Вот еще один запрос, на этот раз с HTTPS:

$ curl --proxy https://my-proxy-server.example:3129 \
  --proxy-anyauth --proxy-user redacted:redacted -w '\n' \
  http://urlecho.appspot.com/echo?body=OK

curl: (56) Recv failure: Connection reset by peer

Ничего access.logпосле этого, но в cache.log:

2014/01/20 20:46:15| clientNegotiateSSL: Error negotiating SSL connection on FD 10: error:1407609C:SSL routines:SSL23_GET_CLIENT_HELLO:http request (1/-1)

Вот снова выше, более многословно:

$ curl -v --proxy https://my-proxy-server.example:3129 \
  --proxy-anyauth --proxy-user redacted:redacted -w '\n' \
  http://urlecho.appspot.com/echo?body=OK
* Adding handle: conn: 0x7f9a30804000
* Adding handle: send: 0
* Adding handle: recv: 0
* Curl_addHandleToPipeline: length: 1
* - Conn 0 (0x7f9a30804000) send_pipe: 1, recv_pipe: 0
* About to connect() to proxy my-proxy-server.example port 3129 (#0)
*   Trying proxy.server.IP.redacted...
* Connected to my-proxy-server.example (proxy.server.IP.redacted) port 3129 (#0)
> GET http://urlecho.appspot.com/echo?body=OK HTTP/1.1
> User-Agent: curl/7.30.0
> Host: urlecho.appspot.com
> Accept: */*
> Proxy-Connection: Keep-Alive
> 
* Recv failure: Connection reset by peer
* Closing connection 0

curl: (56) Recv failure: Connection reset by peer

Похоже, ошибка SSL. Тем не менее, я повторно использую SSL-сертификат поддомена с подстановочными знаками, показанный в приведенном выше конфигурационном файле как cert.pemи key.pem, который я успешно развернул на других веб-серверах. Более того, прямой доступ к прокси-серверу с помощью curl или, по крайней мере, установление соединения после этапа SSL:

$ curl https://my-proxy-server.example:3129
<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01//EN" "http://www.w3.org/TR/html4/strict.dtd">
<html><head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<title>ERROR: The requested URL could not be retrieved</title>

[--SNIP--]

<div id="content">
<p>The following error was encountered while trying to retrieve the URL: <a href="https://serverfault.com/">/</a></p>

<blockquote id="error">
<p><b>Invalid URL</b></p>
</blockquote>

<p>Some aspect of the requested URL is incorrect.</p>

<p>Some possible problems are:</p>
<ul>
<li><p>Missing or incorrect access protocol (should be <q>http://</q> or similar)</p></li>
<li><p>Missing hostname</p></li>
<li><p>Illegal double-escape in the URL-Path</p></li>
<li><p>Illegal character in hostname; underscores are not allowed.</p></li>
</ul>

[--SNIP--]

Есть идеи, что я делаю не так? Что я пытаюсь сделать возможным? Заранее спасибо.

— Дэвид
источник

2

Я не думаю, что именно так Squid должен работать. Я должен иметь возможность сделать HTTP или HTTPS-запрос через прокси HTTPS-соединение. Я не вижу ничего в документации, чтобы предложить иначе. Несмотря на это, я все равно попробовал то, что вы предлагаете, и это не сработало (тот же результат, что и выше)

— Дэвид

Мой предыдущий комментарий был в ответ на комментарии другого пользователя, которые, по-видимому, были удалены. Просто хотел отметить, что я отправил этот вопрос в список рассылки Squid: mail-archive.com/squid-users@squid-cache.org/msg93592.html

— Дэвид

Как человек, у которого был похожий сценарий, мы попробовали прокси-подход, преуспели, а затем предпочли перенести приложение из Heroku на провайдера, такого как виртуальная / выделенная машина со статическим IP. Существует дополнительная нагрузка на обслуживание прямого прокси-сервера только для этой цели.

— Шьям Сундар, КС

1

@ Дэвид, согласно вашей теме в Squid ML - я бы предложил использовать решение Stunnel. Ваша аутентификация будет представлять собой SSL-сертификаты на обоих концах туннеля, остальное будет "открытым текстом" в этом туннеле, или вы можете сделать дайджест по своему желанию.

Я использовал подобное решение для «аутентификации» конечных точек NFS с большим успехом.

Пример использования такой аутентификации можно увидеть в Безопасной связи LinuxGazette с stunnel.

— Droopy4096
источник

1

Вы можете увидеть, как это делается на этом небольшом образе Docker: yegor256 / squid-proxy . Проблема с вашим кодом в том, что конфигурация идет после aclинструкции. Просто поменяйте их местами, и все начнет работать.

— yegor256
источник