使用容器名称从主机访问 docker 容器
Access docker container from host using containers name
我正在开发一项服务并在那里使用 docker compose 来旋转 postgres、redis、elasticsearch 等服务。我有一个基于 RubyOnRails 的 Web 应用程序,它可以写入和读取所有这些服务。
这是我的 docker-compose.yml
version: '2'
services:
redis:
image: redis:2.8
networks:
- frontapp
elasticsearch:
image: elasticsearch:2.2
networks:
- frontapp
postgres:
image: postgres:9.5
environment:
POSTGRES_USER: elephant
POSTGRES_PASSWORD: smarty_pants
POSTGRES_DB: elephant
volumes:
- /var/lib/postgresql/data
networks:
- frontapp
networks:
frontapp:
driver: bridge
我可以 ping 通这个网络中的容器
$ docker-compose run redis /bin/bash
root@777501e06c03:/data# ping postgres
PING postgres (172.20.0.2): 56 data bytes
64 bytes from 172.20.0.2: icmp_seq=0 ttl=64 time=0.346 ms
64 bytes from 172.20.0.2: icmp_seq=1 ttl=64 time=0.047 ms
...
到目前为止一切顺利。现在我想 运行 ruby 在我主机上的 rails 应用程序上,但是能够像 postgresql://username:password@postgres/database
一样访问带有 url 的 postgres 实例,目前这是不可能的
$ ping postgres
ping: unknown host postgres
我可以在 docker
中看到我的网络
$ docker network ls
NETWORK ID NAME DRIVER
ac394b85ce09 bridge bridge
0189d7e86b33 elephant_default bridge
7e00c70bde3b elephant_frontapp bridge
a648554a72fa host host
4ad9f0f41b36 none null
我可以看到它的接口
$ ifconfig
br-0189d7e86b33 Link encap:Ethernet HWaddr 02:42:76:72:bb:c2
inet addr:172.18.0.1 Bcast:0.0.0.0 Mask:255.255.0.0
inet6 addr: fe80::42:76ff:fe72:bbc2/64 Scope:Link
UP BROADCAST MULTICAST MTU:1500 Metric:1
RX packets:36 errors:0 dropped:0 overruns:0 frame:0
TX packets:60 errors:0 dropped:0 overruns:0 carrier:0
collisions:0 txqueuelen:0
RX bytes:2000 (2.0 KB) TX bytes:8792 (8.7 KB)
br-7e00c70bde3b Link encap:Ethernet HWaddr 02:42:e7:d1:fe:29
inet addr:172.20.0.1 Bcast:0.0.0.0 Mask:255.255.0.0
inet6 addr: fe80::42:e7ff:fed1:fe29/64 Scope:Link
UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
RX packets:1584 errors:0 dropped:0 overruns:0 frame:0
TX packets:1597 errors:0 dropped:0 overruns:0 carrier:0
collisions:0 txqueuelen:0
RX bytes:407137 (407.1 KB) TX bytes:292299 (292.2 KB)
...
但我不确定下一步该做什么。我尝试使用 /etc/resolv.conf
,主要是使用 nameserver
指令,但没有效果。
如果能提供有关如何正确配置此设置的建议,我将不胜感激。
更新
浏览互联网资源后,我设法为盒子分配了静态 IP 地址。现在足以让我继续开发。这是我目前的 docker-compose.yml
version: '2'
services:
redis:
image: redis:2.8
networks:
frontapp:
ipv4_address: 172.25.0.11
elasticsearch:
image: elasticsearch:2.2
networks:
frontapp:
ipv4_address: 172.25.0.12
postgres:
image: postgres:9.5
environment:
POSTGRES_USER: elephant
POSTGRES_PASSWORD: smarty_pants
POSTGRES_DB: elephant
volumes:
- /var/lib/postgresql/data
networks:
frontapp:
ipv4_address: 172.25.0.10
networks:
frontapp:
driver: bridge
ipam:
driver: default
config:
- subnet: 172.25.0.0/16
gateway: 172.25.0.1
docker 容器的主机名无法从外部看到。您可以做的是为容器分配一个名称并通过名称访问容器。如果您 link 2 个容器说 container1 和 container2,那么 docker 负责在 container1 中写入 container2 的 IP 和主机名。但是,在您的情况下,您的应用程序在主机中是 运行 。
或
你知道容器的IP。所以在你主机的 /etc/hosts 你可以添加 $IP $hostanameof container
Aditya 是正确的。在您的情况下,最简单的方法是在 /etc/hosts
中硬编码您的主机名/IP 映射
然而,这种方法的问题是您无法控制 postgres 机器将拥有的私有 IP 地址。每次启动新容器时 IP 地址都会更改,因此您需要更新 /etc/hosts 文件。
如果这是一个问题,我建议您阅读此博客 post,其中解释了如何强制容器获取特定 IP 地址:
如果您只在本地使用 docker-compose 设置,您可以使用
将端口从您的容器映射到您的主机
elasticsearch:
image: elasticsearch:2.2
ports:
- 9300:9300
- 9200:9200
然后从您的 Web 应用程序使用 localhost:9300(或 9200,具体取决于协议)访问 Elasticsearch。
一个更复杂的解决方案是 运行 您自己的解析容器名称的 dns。我认为此解决方案更接近您的要求。 运行在本地使用 kubernetes 时,我曾使用过 skydns。
有几个选项。看看 https://github.com/gliderlabs/registrator and https://github.com/jderusse/docker-dns-gen。我没有尝试过,但是您可以使用与前面示例中的弹性端口相同的方式将 dns 端口映射到您的主机,然后将 localhost 添加到您的 resolv.conf 以便能够解析您的容器名称来自您的主机。
有一个开源应用程序可以解决这个问题,它在官方存储库
中称为 DNS Proxy Server, here some examples
它是一个解析容器主机名的 DNS 服务器,如果找不到匹配的主机名,那么也从互联网上解决它
启动 DNS 服务器
$ docker run --hostname dns.mageddo --restart=unless-stopped -p 5380:5380 \
-v /var/run/docker.sock:/var/run/docker.sock \
-v /etc/resolv.conf:/etc/resolv.conf \
defreitas/dns-proxy-server
它将自动设置为您的默认 DNS(并在停止时恢复到原来的状态)
正在为测试创建一些容器
检查docker-撰写文件
$ cat docker-compose.yml
version: '3'
services:
nginx-1:
image: nginx
hostname: nginx-1.docker
network_mode: bridge
linux-1:
image: alpine
hostname: linux-1.docker
command: sh -c 'apk add --update bind-tools && tail -f /dev/null'
network_mode: bridge # that way he can solve others containers names even inside, solve nginx-2, for example
启动容器
$ docker-compose up
解决容器问题
来自主机
nslookup nginx-1.docker
Server: 13.0.0.5
Address: 13.0.0.5#53
Non-authoritative answer:
Name: nginx-1.docker
Address: 13.0.0.6
来自另一个容器
$ docker-compose exec linux-1 ping nginx-1.docker
PING nginx-1.docker (13.0.0.6): 56 data bytes
64 bytes from 13.0.0.6: seq=0 ttl=64 time=0.034 ms
它还解决了互联网主机名
$ nslookup google.com
Server: 13.0.0.5
Address: 13.0.0.5#53
Non-authoritative answer:
Name: google.com
Address: 216.58.202.78
描述了两个解决方案(/etc/hosts
除外)here and
我在 Python 中编写了自己的解决方案并将其实现为服务以提供从容器主机名到其 IP 的映射。这是:https://github.com/nicolai-budico/dockerhosts
每次更改 运行 容器列表时,它都会使用参数 --hostsdir=/var/run/docker-hosts
启动 dnsmasq 并更新文件 /var/run/docker-hosts/hosts
。
更改文件 /var/run/docker-hosts/hosts
后,dnsmasq 会自动更新其映射,并且容器会在一秒钟内通过主机名变得可用。
$ docker run -d --hostname=myapp.local.com --rm -it ubuntu:17.10
9af0b6a89feee747151007214b4e24b8ec7c9b2858badff6d584110bed45b740
$ nslookup myapp.local.com
Server: 127.0.0.53
Address: 127.0.0.53#53
Non-authoritative answer:
Name: myapp.local.com
Address: 172.17.0.2
有安装和卸载脚本。您只需要允许您的系统与此 dnsmasq 实例进行交互。我在 systemd-resolved 中注册:
$ cat /etc/systemd/resolved.conf
[Resolve]
DNS=127.0.0.54
#FallbackDNS=
#Domains=
#LLMNR=yes
#MulticastDNS=yes
#DNSSEC=no
#Cache=yes
#DNSStubListener=udp
您可以 Dockerize RoR 应用程序/或任何其他需要访问容器的应用程序。
我知道,这是一个微不足道的解决方案,但让我解释一下:
我想要类似的东西,但出于不同的原因。我正在通过 SAML 实施 SSO,并希望创建一个开发环境,我可以在其中测试解决方案。最初我想 运行 主机上的浏览器,但由于我在客户端上从主机访问任意端口时遇到问题,而且 deFreitas 基于 DNS 的解决方案在 Mac 上不起作用,我意识到,我可以 docker 化浏览器:
docker 运行 --rm -p 8085:8085 chadmoon/gtk3-docker
有关详细信息,请参阅:https://github.com/moondev/gtk3-docker。
我正在使用 bash 脚本来更新 /etc/hosts
。为什么采用此解决方案?
- 简短的脚本,易于查看(不想让一些 un-reviewed 具有大量依赖项的应用程序访问 Docker 套接字(这意味着 root 访问权限))
- 每次启动或停止容器时,它使用
docker events
到 运行(其他解决方案在这里 运行 每秒循环一次,效率较低)
- 更新
/etc/hosts
,不需要单独的 DNS 服务器。
- 只有
bash
、mktemp
、grep
、xargs
、sed
、jq
和 docker
,所有这些我都已经安装了。
只需将脚本放在某个地方,例如/usr/local/bin/docker-update-hosts
:
#!/usr/bin/env bash
set -e -u -o pipefail
hosts_file=/etc/hosts
begin_block="# BEGIN DOCKER CONTAINERS"
end_block="# END DOCKER CONTAINERS"
if ! grep -Fxq "$begin_block" "$hosts_file"; then
echo -e "\n${begin_block}\n${end_block}\n" >> "$hosts_file"
fi
(echo "| container start |" && docker events) | \
while read event; do
if [[ "$event" == *" container start "* ]] || [[ "$event" == *" network disconnect "* ]]; then
hosts_file_tmp="$(mktemp)"
docker container ls -q | xargs -r docker container inspect | \
jq -r '.[]|"\(.NetworkSettings.Networks[].IPAddress|select(length > 0) // "# no ip address:") \(.Name|sub("^/"; "")|sub("_1$"; ""))"' | \
sed -ne "/^${begin_block}$/ {p; r /dev/stdin" -e ":a; n; /^${end_block}$/ {p; b}; ba}; p" "$hosts_file" \
> "$hosts_file_tmp"
chmod 644 "$hosts_file_tmp"
mv "$hosts_file_tmp" "$hosts_file"
fi
done
注意:该脚本从容器名称中删除 docker-compose 添加的 _1
后缀。如果您不想这样做,只需从脚本中删除 |sub("_1$"; "")
。
您可以使用 systemd 服务 运行 与 Docker 同步:/etc/systemd/system/docker-update-hosts.service
:
[Unit]
Description=Update Docker containers in /etc/hosts
Requires=docker.service
After=docker.service
PartOf=docker.service
[Service]
ExecStart=/usr/local/bin/docker-update-hosts
[Install]
WantedBy=docker.service
要激活,运行:
systemctl daemon-reload
systemctl enable docker-update-hosts.service
systemctl start docker-update-hosts.service
我正在开发一项服务并在那里使用 docker compose 来旋转 postgres、redis、elasticsearch 等服务。我有一个基于 RubyOnRails 的 Web 应用程序,它可以写入和读取所有这些服务。
这是我的 docker-compose.yml
version: '2'
services:
redis:
image: redis:2.8
networks:
- frontapp
elasticsearch:
image: elasticsearch:2.2
networks:
- frontapp
postgres:
image: postgres:9.5
environment:
POSTGRES_USER: elephant
POSTGRES_PASSWORD: smarty_pants
POSTGRES_DB: elephant
volumes:
- /var/lib/postgresql/data
networks:
- frontapp
networks:
frontapp:
driver: bridge
我可以 ping 通这个网络中的容器
$ docker-compose run redis /bin/bash
root@777501e06c03:/data# ping postgres
PING postgres (172.20.0.2): 56 data bytes
64 bytes from 172.20.0.2: icmp_seq=0 ttl=64 time=0.346 ms
64 bytes from 172.20.0.2: icmp_seq=1 ttl=64 time=0.047 ms
...
到目前为止一切顺利。现在我想 运行 ruby 在我主机上的 rails 应用程序上,但是能够像 postgresql://username:password@postgres/database
一样访问带有 url 的 postgres 实例,目前这是不可能的
$ ping postgres
ping: unknown host postgres
我可以在 docker
中看到我的网络$ docker network ls
NETWORK ID NAME DRIVER
ac394b85ce09 bridge bridge
0189d7e86b33 elephant_default bridge
7e00c70bde3b elephant_frontapp bridge
a648554a72fa host host
4ad9f0f41b36 none null
我可以看到它的接口
$ ifconfig
br-0189d7e86b33 Link encap:Ethernet HWaddr 02:42:76:72:bb:c2
inet addr:172.18.0.1 Bcast:0.0.0.0 Mask:255.255.0.0
inet6 addr: fe80::42:76ff:fe72:bbc2/64 Scope:Link
UP BROADCAST MULTICAST MTU:1500 Metric:1
RX packets:36 errors:0 dropped:0 overruns:0 frame:0
TX packets:60 errors:0 dropped:0 overruns:0 carrier:0
collisions:0 txqueuelen:0
RX bytes:2000 (2.0 KB) TX bytes:8792 (8.7 KB)
br-7e00c70bde3b Link encap:Ethernet HWaddr 02:42:e7:d1:fe:29
inet addr:172.20.0.1 Bcast:0.0.0.0 Mask:255.255.0.0
inet6 addr: fe80::42:e7ff:fed1:fe29/64 Scope:Link
UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
RX packets:1584 errors:0 dropped:0 overruns:0 frame:0
TX packets:1597 errors:0 dropped:0 overruns:0 carrier:0
collisions:0 txqueuelen:0
RX bytes:407137 (407.1 KB) TX bytes:292299 (292.2 KB)
...
但我不确定下一步该做什么。我尝试使用 /etc/resolv.conf
,主要是使用 nameserver
指令,但没有效果。
如果能提供有关如何正确配置此设置的建议,我将不胜感激。
更新
浏览互联网资源后,我设法为盒子分配了静态 IP 地址。现在足以让我继续开发。这是我目前的 docker-compose.yml
version: '2'
services:
redis:
image: redis:2.8
networks:
frontapp:
ipv4_address: 172.25.0.11
elasticsearch:
image: elasticsearch:2.2
networks:
frontapp:
ipv4_address: 172.25.0.12
postgres:
image: postgres:9.5
environment:
POSTGRES_USER: elephant
POSTGRES_PASSWORD: smarty_pants
POSTGRES_DB: elephant
volumes:
- /var/lib/postgresql/data
networks:
frontapp:
ipv4_address: 172.25.0.10
networks:
frontapp:
driver: bridge
ipam:
driver: default
config:
- subnet: 172.25.0.0/16
gateway: 172.25.0.1
docker 容器的主机名无法从外部看到。您可以做的是为容器分配一个名称并通过名称访问容器。如果您 link 2 个容器说 container1 和 container2,那么 docker 负责在 container1 中写入 container2 的 IP 和主机名。但是,在您的情况下,您的应用程序在主机中是 运行 。
或
你知道容器的IP。所以在你主机的 /etc/hosts 你可以添加 $IP $hostanameof container
Aditya 是正确的。在您的情况下,最简单的方法是在 /etc/hosts
然而,这种方法的问题是您无法控制 postgres 机器将拥有的私有 IP 地址。每次启动新容器时 IP 地址都会更改,因此您需要更新 /etc/hosts 文件。
如果这是一个问题,我建议您阅读此博客 post,其中解释了如何强制容器获取特定 IP 地址:
如果您只在本地使用 docker-compose 设置,您可以使用
将端口从您的容器映射到您的主机elasticsearch:
image: elasticsearch:2.2
ports:
- 9300:9300
- 9200:9200
然后从您的 Web 应用程序使用 localhost:9300(或 9200,具体取决于协议)访问 Elasticsearch。
一个更复杂的解决方案是 运行 您自己的解析容器名称的 dns。我认为此解决方案更接近您的要求。 运行在本地使用 kubernetes 时,我曾使用过 skydns。
有几个选项。看看 https://github.com/gliderlabs/registrator and https://github.com/jderusse/docker-dns-gen。我没有尝试过,但是您可以使用与前面示例中的弹性端口相同的方式将 dns 端口映射到您的主机,然后将 localhost 添加到您的 resolv.conf 以便能够解析您的容器名称来自您的主机。
有一个开源应用程序可以解决这个问题,它在官方存储库
中称为 DNS Proxy Server, here some examples它是一个解析容器主机名的 DNS 服务器,如果找不到匹配的主机名,那么也从互联网上解决它
启动 DNS 服务器
$ docker run --hostname dns.mageddo --restart=unless-stopped -p 5380:5380 \
-v /var/run/docker.sock:/var/run/docker.sock \
-v /etc/resolv.conf:/etc/resolv.conf \
defreitas/dns-proxy-server
它将自动设置为您的默认 DNS(并在停止时恢复到原来的状态)
正在为测试创建一些容器
检查docker-撰写文件
$ cat docker-compose.yml
version: '3'
services:
nginx-1:
image: nginx
hostname: nginx-1.docker
network_mode: bridge
linux-1:
image: alpine
hostname: linux-1.docker
command: sh -c 'apk add --update bind-tools && tail -f /dev/null'
network_mode: bridge # that way he can solve others containers names even inside, solve nginx-2, for example
启动容器
$ docker-compose up
解决容器问题
来自主机
nslookup nginx-1.docker
Server: 13.0.0.5
Address: 13.0.0.5#53
Non-authoritative answer:
Name: nginx-1.docker
Address: 13.0.0.6
来自另一个容器
$ docker-compose exec linux-1 ping nginx-1.docker
PING nginx-1.docker (13.0.0.6): 56 data bytes
64 bytes from 13.0.0.6: seq=0 ttl=64 time=0.034 ms
它还解决了互联网主机名
$ nslookup google.com
Server: 13.0.0.5
Address: 13.0.0.5#53
Non-authoritative answer:
Name: google.com
Address: 216.58.202.78
描述了两个解决方案(/etc/hosts
除外)here and
我在 Python 中编写了自己的解决方案并将其实现为服务以提供从容器主机名到其 IP 的映射。这是:https://github.com/nicolai-budico/dockerhosts
每次更改 运行 容器列表时,它都会使用参数 --hostsdir=/var/run/docker-hosts
启动 dnsmasq 并更新文件 /var/run/docker-hosts/hosts
。
更改文件 /var/run/docker-hosts/hosts
后,dnsmasq 会自动更新其映射,并且容器会在一秒钟内通过主机名变得可用。
$ docker run -d --hostname=myapp.local.com --rm -it ubuntu:17.10
9af0b6a89feee747151007214b4e24b8ec7c9b2858badff6d584110bed45b740
$ nslookup myapp.local.com
Server: 127.0.0.53
Address: 127.0.0.53#53
Non-authoritative answer:
Name: myapp.local.com
Address: 172.17.0.2
有安装和卸载脚本。您只需要允许您的系统与此 dnsmasq 实例进行交互。我在 systemd-resolved 中注册:
$ cat /etc/systemd/resolved.conf
[Resolve]
DNS=127.0.0.54
#FallbackDNS=
#Domains=
#LLMNR=yes
#MulticastDNS=yes
#DNSSEC=no
#Cache=yes
#DNSStubListener=udp
您可以 Dockerize RoR 应用程序/或任何其他需要访问容器的应用程序。
我知道,这是一个微不足道的解决方案,但让我解释一下:
我想要类似的东西,但出于不同的原因。我正在通过 SAML 实施 SSO,并希望创建一个开发环境,我可以在其中测试解决方案。最初我想 运行 主机上的浏览器,但由于我在客户端上从主机访问任意端口时遇到问题,而且 deFreitas 基于 DNS 的解决方案在 Mac 上不起作用,我意识到,我可以 docker 化浏览器:
docker 运行 --rm -p 8085:8085 chadmoon/gtk3-docker
有关详细信息,请参阅:https://github.com/moondev/gtk3-docker。
我正在使用 bash 脚本来更新 /etc/hosts
。为什么采用此解决方案?
- 简短的脚本,易于查看(不想让一些 un-reviewed 具有大量依赖项的应用程序访问 Docker 套接字(这意味着 root 访问权限))
- 每次启动或停止容器时,它使用
docker events
到 运行(其他解决方案在这里 运行 每秒循环一次,效率较低) - 更新
/etc/hosts
,不需要单独的 DNS 服务器。 - 只有
bash
、mktemp
、grep
、xargs
、sed
、jq
和docker
,所有这些我都已经安装了。
只需将脚本放在某个地方,例如/usr/local/bin/docker-update-hosts
:
#!/usr/bin/env bash
set -e -u -o pipefail
hosts_file=/etc/hosts
begin_block="# BEGIN DOCKER CONTAINERS"
end_block="# END DOCKER CONTAINERS"
if ! grep -Fxq "$begin_block" "$hosts_file"; then
echo -e "\n${begin_block}\n${end_block}\n" >> "$hosts_file"
fi
(echo "| container start |" && docker events) | \
while read event; do
if [[ "$event" == *" container start "* ]] || [[ "$event" == *" network disconnect "* ]]; then
hosts_file_tmp="$(mktemp)"
docker container ls -q | xargs -r docker container inspect | \
jq -r '.[]|"\(.NetworkSettings.Networks[].IPAddress|select(length > 0) // "# no ip address:") \(.Name|sub("^/"; "")|sub("_1$"; ""))"' | \
sed -ne "/^${begin_block}$/ {p; r /dev/stdin" -e ":a; n; /^${end_block}$/ {p; b}; ba}; p" "$hosts_file" \
> "$hosts_file_tmp"
chmod 644 "$hosts_file_tmp"
mv "$hosts_file_tmp" "$hosts_file"
fi
done
注意:该脚本从容器名称中删除 docker-compose 添加的 _1
后缀。如果您不想这样做,只需从脚本中删除 |sub("_1$"; "")
。
您可以使用 systemd 服务 运行 与 Docker 同步:/etc/systemd/system/docker-update-hosts.service
:
[Unit]
Description=Update Docker containers in /etc/hosts
Requires=docker.service
After=docker.service
PartOf=docker.service
[Service]
ExecStart=/usr/local/bin/docker-update-hosts
[Install]
WantedBy=docker.service
要激活,运行:
systemctl daemon-reload
systemctl enable docker-update-hosts.service
systemctl start docker-update-hosts.service