Opublikowano · Zaktualizowano
Opublikowane porty Dockera omijają UFW
Podczas incydentu DDoS okazało się, że opublikowany port kontenera odpowiadał z internetu, chociaż UFW na hoście był włączony. Docker dopisał dla tego portu własne reguły iptables i żadna z moich reguł UFW tego ruchu nie obejmowała.
- Docker
- UFW
- iptables
- DOCKER-USER
- firewall
- Linux
Dlaczego UFW nie filtruje opublikowanego portu
Reguły dodawane przez ufw allow i ufw deny dotyczą ruchu adresowanego do samego hosta. Opublikowany port działa inaczej. Przy -p 8080:80 Docker dodaje regułę DNAT, która podmienia adres docelowy na adres kontenera, więc pakiet jest przekazywany do kontenera, a nie dostarczany do hosta.
Ruch przekazywany przechodzi przez łańcuchy Dockera, które przepuszczają go, zanim dojdzie do reguł UFW. ufw status nadal pokazuje domyślne blokowanie ruchu przychodzącego, a kontener i tak odpowiada.
W czasie incydentu aplikacja działała w kontenerze z opublikowanym portem i bez reverse proxy przed nim. Kto znał IP originu, łączył się z aplikacją bezpośrednio, z pominięciem Cloudflare i firewalla na hoście.
Jak sprawdzić serwer z zewnątrz
Test uruchomiony na samym serwerze niczego tu nie dowodzi, bo połączenia lokalne idą przez firewall inną ścieżką. Sprawdzenie musi przyjść z innej sieci.
Na hoście docker ps pokazuje, które porty są przypięte do 0.0.0.0 albo [::], czyli do wszystkich interfejsów. Każdy z nich, który UFW ma blokować, sprawdź z zewnątrz.
- Z innej sieci: nmap -Pn -p 8080 <IP originu> albo curl -v http://<IP originu>:8080/.
- Na hoście: docker ps --format "{{.Names}} {{.Ports}}", żeby zobaczyć opublikowane porty.
- Na hoście: iptables -L DOCKER-USER -n -v, żeby sprawdzić, czy coś je filtruje.
Trzy sposoby na zamknięcie portu
Wybór zależy od tego, czy cokolwiek spoza hosta w ogóle potrzebuje tego portu.
Ustawienie "iptables": false w /etc/docker/daemon.json powstrzymuje Dockera przed dopisywaniem reguł, ale wtedy kontenery tracą NAT potrzebny do ruchu wychodzącego, dopóki ktoś nie napisze tych reguł ręcznie.
Filtrowania w DOCKER-USER nie trzeba konfigurować ręcznie. Sam użyłem ufw-docker, skryptu open source, który dopisuje reguły do /etc/ufw/after.rules i sprawia, że DOCKER-USER sprawdza reguły dodane przez ufw route. Docker dalej sam zarządza iptables, nowe połączenia z publicznych adresów do kontenerów są blokowane, a port otwiera się poleceniem ufw route allow albo ufw-docker allow <kontener> <port>. Reguła dotyczy portu kontenera, a nie hosta, więc przy -p 8080:80 otwierasz port 80. Domyślnie skrypt przepuszcza też bez filtrowania cały ruch z prywatnych zakresów 10.0.0.0/8, 172.16.0.0/12 i 192.168.0.0/16, co ma znaczenie, gdy serwer stoi w prywatnej sieci dostawcy; zawęża to opcja --docker-subnets.
- Przypnij port do localhosta, np. "127.0.0.1:8080:80" w Docker Compose, i postaw przed nim reverse proxy na hoście. Na publicznym interfejsie nasłuchuje wtedy tylko proxy. To najprostsza poprawka, gdy publiczne ma być tylko proxy; kosztem jest jedna usługa więcej do skonfigurowania.
- Filtruj w łańcuchu DOCKER-USER. Docker kieruje przez niego ruch przekazywany przed własnymi regułami, więc DROP w tym miejscu działa, a reguły ACCEPT nad nim przepuszczają zaufane źródła. Port docelowy jest już wtedy podmieniony na port kontenera, więc trzeba dopasować ten port albo użyć -m conntrack --ctorigdstport dla opublikowanego, a reguły zapisać na stałe, np. w /etc/ufw/after.rules.
- Za Cloudflare przyjmuj ruch na portach 80 i 443 tylko z opublikowanych zakresów IP Cloudflare. Przy Dockerze ta lista też musi siedzieć w DOCKER-USER albo na proxy przypiętym do hosta, z powodu opisanego wyżej, a zakresy trzeba aktualizować, gdy Cloudflare je zmienia.
Kompletny zestaw reguł DOCKER-USER
Jeśli wolisz trzymać reguły we własnym pliku zamiast używać ufw-docker, ten blok to pełna wersja opcji z DOCKER-USER. Porty 80 i 443 zostają publiczne, a każdy inny opublikowany port jest zamknięty dla ruchu przychodzącego na publiczny interfejs.
Dodaj go na końcu /etc/ufw/after.rules, po istniejącym COMMIT, i zamień eth0 na swój publiczny interfejs, który pokazuje ip route show default.
# BEGIN DOCKER-USER
*filter
:DOCKER-USER - [0:0]
-A DOCKER-USER -m conntrack --ctstate ESTABLISHED,RELATED -j RETURN
-A DOCKER-USER -i eth0 -p tcp -m conntrack --ctorigdstport 80 -j RETURN
-A DOCKER-USER -i eth0 -p tcp -m conntrack --ctorigdstport 443 -j RETURN
-A DOCKER-USER -i eth0 -j DROP
COMMIT
# END DOCKER-USER- Pierwsza reguła przepuszcza odpowiedzi na już otwarte połączenia, także te rozpoczęte przez kontenery, więc ruch wychodzący dalej działa.
- --ctorigdstport dopasowuje port, z którym połączył się klient. Przy -p 443:80 wpisujesz 443, a nie 80, czyli odwrotnie niż w opisanych wyżej regułach ufw route.
- RETURN oddaje pakiet łańcuchom Dockera, które nadal sprawdzają, czy port jest opublikowany. Te reguły same niczego nie otwierają.
- DROP obejmuje tylko ruch przychodzący na eth0. SSH i inne usługi na hoście nie przechodzą przez ten łańcuch, bo ten ruch nie jest przekazywany. Ruch z VPN albo z drugiego, prywatnego interfejsu też nie jest tu filtrowany, więc sprawdź, czy o to Ci chodzi.
- Żeby otworzyć zamknięty port dla jednego adresu, dodaj regułę nad DROP: -A DOCKER-USER -i eth0 -s 203.0.113.10 -p tcp -m conntrack --ctorigdstport 8080 -j RETURN. Za Cloudflare oznacza to jedną regułę na każdy opublikowany zakres.
- UDP też jest zamknięte, więc HTTP/3 na porcie 443 wymaga osobnej reguły z -p udp.
Jak wdrożyć, sprawdzić i cofnąć reguły
Testowałem ten zestaw na Ubuntu 24.04 z Dockerem 29.1.3 i UFW 0.36.2, w jednorazowych kontenerach, z drugim kontenerem jako klientem z zewnątrz. Porty 80 i 443 odpowiadały, pozostałe opublikowane nie, a kontenery dalej łączyły się z internetem i między sobą. Reguły przetrwały też ufw reload, restart Dockera i start firewalla przed Dockerem. Nie uruchamiałem dokładnie tego zestawu na serwerze produkcyjnym, więc najpierw sprawdź go tam, gdzie możesz bezpiecznie wrócić.
Zestaw obejmuje tylko IPv4, a IPv6 nie testowałem. Działa też tylko z domyślnym backendem iptables w Dockerze: w eksperymentalnym backendzie nftables z Dockera 29 nie ma łańcucha DOCKER-USER.
sudo ufw reload
sudo iptables -L DOCKER-USER -n -v --line-numbers- Z innej sieci: nmap -Pn -p 80,443,8080 <IP originu>, z portami, które publikujesz. Odpowiadać powinny tylko 80 i 443.
- Z kontenera: żądanie wychodzące, np. docker exec <kontener> wget -qO- http://example.com/, potwierdza, że odpowiedzi dalej wracają.
- Żeby to cofnąć, usuń blok, uruchom ufw reload, a potem iptables -F DOCKER-USER. Sam reload zostawia reguły na miejscu.
Co zrobiłem w czasie incydentu
Zmieniłem i odizolowałem adres IP originu, ograniczyłem drogi, którymi można było dotrzeć do serwera, i dopiero potem stroiłem WAF i rate limiting w Cloudflare. Resztę incydentu opisują case study i notatka o Cloudflare i odsłoniętym originie.
Zobacz też: Cloudflare nie chroni originu dostępnego bezpośrednio, CI/CD i wdrożenia na Dockerze.
Jeśli chcesz porozmawiać o podobnej konfiguracji albo problemie, napisz przez stronę kontaktową.