公网 DNS 讲调度、讲排障,但企业内网和云原生环境里,DNS 还有一层更值钱的身份:
它是整个系统里“第一个被查询、却最晚被治理”的信任边界。
K8s 服务发现、内部 API 寻址、跨集群调用、运维跳板、私有后台——这些名字不该裸奔在公网,也不该“内网默认全通”。
把 DNS 做成内部解析治理层:
- 公开/内部域名物理分区(不靠同一个 zone 凑合)
- Split-Horizon 按身份返回不同答案
- 内部解析接零信任(先认证设备/身份,再给 IP)
- CoreDNS 做服务发现,私有 zone 做边界
- 解析日志进 SIEM,谁查了什么名字可追溯
本文给一套生产可落地的“内部 DNS 治理”架构,覆盖多集群、混合云、零信任、可观测。
一、先切边界:公网 DNS ≠ 内部 DNS
很多事故根源不是“记录配错”,是“边界没切”:
api.internal.xxx和api.xxx放同一个 zone- 内部主机名被公网递归器意外答出来
- 运维工具和业务 Pod 用同一套解析器
正确分层:
text
公网权威区(example.com) ├─ www / api / cdn → 边缘、公网可解析 └─ 只放必须暴露的名字 内部权威区(*.internal.example.com / .cluster.local) ├─ 服务发现:svc.ns.svc.cluster.local ├─ 私有后端:pg-0.db.internal ├─ 平台组件:vault / consul / grafana-internal └─ 只对内网解析器/身份可信者可见
原则(参考 NIST SP 800-81r3 / CSA 零信任 DNS):
内部名字不是“隐藏记录”,是独立 zone + 独立解析路径 + 独立权限。
二、整体架构:控制面与数据面分离
text
[客户端/工作负载] │ 解析请求 ▼ 身份感知 Resolver(内部转发层) ├─ 设备/身份/网络位置判断 ├─ 策略:允许解析 / 拒绝 / 匿名化 ├─ Split-Horizon:同名字不同视图 ▼ ┌──────────────┬────────────────────┐ │ 集群内 CoreDNS│ 私有权威 DNS │ │ - svc 发现 │ - internal zone │ │ - 头无服务 │ - 跨集群 stub 转发 │ │ - NodeLocal 缓存 │ - 分片 zone RBAC │ └──────────────┴────────────────────┘ ▼ 上游公网递归(仅公开名)
控制面管:zone、记录、视图、策略、审计
数据面管:查、缓存、答、记日志
不把策略逻辑写进每个 Pod 的 resolv.conf。
三、K8s 服务发现:CoreDNS 是底座不是配件
1. 基础链路
text
Pod → NodeLocal DNSCache(169.254.20.10) → CoreDNS(10.96.0.10) → 集群内 svc / 外部转发
Corefile 最小生产向:
corefile
.:53 { errors health ready kubernetes cluster.local in-addr.arpa ip6.arpa { pods insecure ttl 30 fallthrough in-addr.arpa ip6.arpa } # 内部私有区转发 internal.example.com:53 { forward . 10.0.0.2:53 errors cache 30 } # 公网兜底 forward . /etc/resolv.conf { max_concurrent 200 } cache 30 loop reload prometheus :9153 }
关键点:
- 集群内 TTL 5–30s(Pod 飘得快)
- NodeLocal DNSCache 降 conntrack 压力
- autopath 减少 search domain 无效查询
- prometheus 指标必须接(别等故障才看)
2. 有状态服务用 Headless
apiVersion: v1 kind: Service metadata: { name: pg } spec: clusterIP: None selector: { app: pg }
解析:
bash
dig pg-0.pg.default.svc.cluster.local # 直接返回 Pod IP,不绕 ClusterIP
适合:Postgres/ES/Redis 主从、StatefulSet 稳定身份。
四、Split-Horizon:同名字,不同世界
例:grafana.example.com
- 公网用户:解析到边缘网关(带 SSO)
- 内网运维:解析到内网实例(带 MFA+审计)
- 未授权设备:直接 REFUSED
CoreDNS 视图思路:
corefile
grafana.example.com:53 { forward . 10.0.0.5:53 { policy admin-net } } example.com:53 { forward . 边缘网关IP }
配合零信任 Resolver:
- 看来源 IP / 设备证书 / 用户 token
- 内部视图只答“已认证设备”
- 外部视图答公开边缘,不暴露内部 IP
边界纪律:
- 内部 zone 不挂公网 NS
- 私有名不进公开 CNAME 链
- 内部/外部记录漂移要告警(避免同名歧义)
五、零信任解析:先认证,再给 IP
传统 DNS:谁问都答。
零信任 DNS(CSA SDP/DoH 思路):
text
1. 设备先拿身份(mTLS / 设备证书 / EDR 健康) 2. Resolver 校验:谁、什么设备、什么上下文 3. 策略允许 → 返回内部 IP 4. 策略拒绝 → REFUSED / 空答(不暴露名字存在)
Secure Multi-Step DoH 简化模型:
text
App → DoH 解析器(带 Authorization 头/设备断言) → 策略引擎(IAM+MDM+威胁情报) → 允许才查内部 zone
收益:
- 攻击者扫内部域名先卡在“解析被拒”
- 服务名本身不泄露(隐藏侦察面)
- 离职设备证书撤了,内部名自动不可见
不替代应用鉴权,只把“发现权”收归身份层。
六、多集群 / 混合云:解析不硬写 IP
1. 稳定内部名
别在代码里写 10.2.3.4:5432,写:
text
pg.db.internal.example.com
DNS 背后指向当前主库(可漂移、可切区)。
2. 跨集群 stub 转发
corefile
us-west.svc.internal:53 { forward . 10.10.0.2:53 } eu.svc.internal:53 { forward . 10.20.0.2:53 }
集群 A 查 payments.eu.svc.internal → 转发到欧区解析器。
3. ExternalDNS 自动化(可选)
- Ingress/Service 变更自动同步公网记录
- 内部 zone 用独立 controller,不混权限
- 记录变更走 GitOps,不手敲
4. 分片 Private Zone(多团队)
text
orders.prod.internal search.prod.internal iam.prod.internal
每 zone 独立 RBAC、独立 VPC 链接、独立记录数阈值告警。
避免“一个巨大 internal zone,改错一条全公司抖”。
七、安全:内部 DNS 也是攻击面
1. 防泄露
- 禁止 zone transfer(AXFR)对公网
- 内部 zone 不配公共 NS
- 解析器只收内网/零信任隧道,不收公网 53
- 泛解析
*.internal不开,避免子域接管
2. 防投毒 / 隧道
- 公网递归开 DNSSEC 验证
- 内部解析器禁 TXT 外发过大包(防 DNS 隧道)
- 异常查询告警:随机子域爆破、高频 TXT、DGA 特征
3. 审计
每次解析记:
json
{"ts":"...","client":"10.0.0.9","device":"mac-xxx", "user":"alice","q":"vault.internal","policy":"allow", "answer":"10.0.0.20","resolver":"core-dns-03"}
进 SIEM:
- 谁查了内部名
- 哪台设备突然查大量后台名(可能被入侵)
- 解析失败率突增(可能解析器被绕)
八、可观测:解析层自己先被监控
CoreDNS 指标(9153):
coredns_dns_request_count_totalcoredns_dns_response_rcode_count_totalcoredns_cache_hits_total/missescoredns_forward_request_duration_secondscoredns_kubernetes_dns_programming_duration
看板关注:
- 内部名解析 p99
- NXDOMAIN 异常比(可能配置漂移)
- 缓存命中率(低了说明 TTL 太短或查询放大)
- 各 zone 记录数增长(防爆炸半径)
告警:
- 内部 zone 记录数周环比 +30% → 自动化脏数据
- 某 Pod 每秒 200 次同解析 → 缺缓存/缺 FQDN
- 零信任解析拒绝率突增 → 策略误伤或设备掉证
九、最小落地清单
- [ ] 公网/内部 zone 物理分离,不混同一库
- [ ] 内部域名统一后缀(
.internal/.svc.cluster.local) - [ ] CoreDNS 高可用 + NodeLocal DNSCache
- [ ] 有状态服务用 Headless,业务用 svc 名
- [ ] Split-Horizon 按来源/身份返回不同视图
- [ ] 零信任 Resolver:先认证设备再解析内部名
- [ ] 私有 zone 分片 + RBAC + 记录数阈值
- [ ] DNSSEC 公网开,内部解析器禁公网转移
- [ ] 解析日志进 SIEM,谁查了什么可追溯
- [ ] 变更走 GitOps,zone 文件进版本库
十、什么别用内部 DNS 干
- 把内部名挂公网 CNAME(泄露拓扑)
- 解析器对公网开放 53(被反射放大)
- 内部 zone 和公网 zone 手动“同步”(必漂移)
- Pod 里硬写 IP 不写服务名(重调度就断)
- 零信任只做 DoH 不接身份(加密但不鉴权)
十一、总结
DNS 域名解析在平台工程里最被低估的一层,不是“公网能打开”,而是:
让内部世界先有名字,再谈发现;先有身份,再谈解析。
公网 DNS 管“用户怎么来”,
内部 DNS 管“系统怎么认得彼此”,
零信任 DNS 管“谁有资格知道彼此存在”。
K8s 服务发现是底座,
Split-Horizon 是边界,
私有 zone 是治理,
解析日志是审计,
身份感知是安全。
出海、混合云、多集群规模上来后,
系统稳不稳,
不看单条 A 记录对不对,
看你能不能回答:
“这个内部名,谁在什么时候、用什么设备、为什么能解析出来。”
DNS 不是电话簿,
是系统里的第一道门禁。