线上把 api.internal 从 10.0.0.8 迁到 10.0.0.9。你在 /etc/hosts 里改完,ping 已经通了,curl 也拿到了新地址,但 Java 服务重启后仍然连着旧 IP。于是开始怀疑 DNS、怀疑网络,最后发现 hosts 只是整条解析链上的一环。
这类问题有个固定的排查顺序:先确认谁在解析,再确认有没有缓存,最后确认进程看到的是不是你改的那个文件。
dig 和 nslookup 根本不看 /etc/hosts这是第一个坑。dig api.internal 直接向 DNS 服务器发查询,完全不读本机 hosts 文件。用它验证 hosts 修改,只会得到 NXDOMAIN 或旧的 DNS 记录。
验证 hosts 应该用 getent,它走的是 glibc 的 NSS 解析链:
getent hosts api.internal
getent ahosts api.internalgetent ahosts 会把所有地址和顺序列出来:
10.0.0.9 STREAM api.internal
10.0.0.9 DGRAM
10.0.0.9 RAW如果这里已经是新地址,说明 hosts 文件和 NSS 配置没问题,问题在应用缓存或应用自己的解析器;如果这里还是旧地址,继续往下看。
nsswitch.conf 决定glibc 先读 /etc/nsswitch.conf,再决定去哪找主机名:
grep '^hosts' /etc/nsswitch.conf常见配置是:
hosts: files mdns4_minimal [NOTFOUND=return] dnsfiles 就代表 /etc/hosts。如果有人把它改成 hosts: dns files,或者删掉了 files,你改 hosts 当然没用。还有 resolve、myhostname、mymachines 等模块,顺序不同,结果也不同。
改完后可以用 getent hosts 验证,但要注意:getent 只能代表 glibc 的解析结果。Go 的纯 Go 解析器、Java、musl libc 都可能有自己的实现和缓存。
这是“curl 通了、服务没通”的最常见原因。
缓存层 | 检查/清理方式 |
|---|---|
nscd |
|
systemd-resolved |
|
dnsmasq |
|
Java | 默认缓存约 30 秒; |
浏览器 |
|
Java 服务尤其容易中招:进程启动时解析一次,之后一直用缓存。/etc/hosts 改了、curl 通了,但 JVM 里的 InetAddress 还是旧值。要么重启进程,要么把 TTL 调小:
java -Dsun.net.inetaddr.ttl=30 -jar app.jar如果 TTL 被设成 -1,那就是永久缓存,只能重启。
容器、mount namespace、systemd 的沙箱选项,都会让进程看到另一份 /etc/hosts。
先找到进程,再对比它眼里的文件:
pid=$(pgrep -f 'java.*my-service' | head -1)
sudo md5sum /etc/hosts /proc/$pid/root/etc/hosts
sudo nsenter -t $pid -m -- cat /etc/hosts如果两个 md5 不一样,说明进程在另一个 mount namespace 里。Docker 的 /etc/hosts 由运行时管理,直接进容器改,重启后会被覆盖;正确做法是启动时加参数:
docker run --add-host api.internal:10.0.0.9 ...Kubernetes 则在 Pod spec 里写 hostAliases。另外,docker inspect -f '{{.HostsPath}}' <container> 可以直接看到容器实际挂载的 hosts 文件路径。
先看格式。/etc/hosts 是“IP 在前,主机名在后”:
10.0.0.9 api.internal常见问题:
api.internal.(末尾的点在 DNS 里表示绝对域名,在 hosts 里不会自动去掉)。getent ahosts 看全貌,别只看第一条。curl -4 / curl -6 分别验证。cat -A /etc/hosts 看一眼,行尾出现 ^M$ 就值得怀疑。还有两个容易忽略的变量:代理和应用配置。如果 http_proxy 指向代理,curl 根本不解析目标域名,而是把域名交给代理;Java 也可能通过 -Dhttp.proxyHost 走代理。先 env | grep -i proxy 排除掉。
getent ahosts api.internal:确认 NSS 层结果。grep '^hosts' /etc/nsswitch.conf:确认 files 在前面。resolvectl query api.internal,必要时 resolvectl flush-caches。sudo nsenter -t $pid -m -- cat /etc/hosts:确认进程看到的文件。strace 看它到底连了哪个 IP:sudo strace -f -e trace=openat,connect -s 200 \
curl -sS http://api.internal:8080/health输出里会同时出现:
openat(AT_FDCWD, "/etc/hosts", O_RDONLY|O_CLOEXEC) = 3
connect(5, {sa_family=AF_INET, sin_port=htons(8080),
sin_addr=inet_addr("10.0.0.8")}, 16) = 0文件读的是新的,连的却是旧 IP,基本就是缓存;如果连 openat("/etc/hosts") 都没有,说明这个程序用的是别的解析器或代理。
ss -tnp state established '( dport = :8080 )':看真实连接落在哪台机器。/etc/hosts 不是“改完就生效”的开关,它只是解析链的起点之一。排查时按这个顺序走:getent 看 NSS → nsswitch.conf 看顺序 → resolvectl/nscd 看缓存 → /proc/PID/root 看 namespace → strace 看真实连接。大多数“改了没生效”,最后都落在缓存和 namespace 这两层。
本文由 AI 辅助生成并经人工校验,如有疏漏欢迎指正。
本文系转载,前往查看
如有侵权,请联系 cloudcommunity@tencent.com 删除。