解决K8s中的Pod无法解析访问外网域名问题

系统：CentOS Linux release 7.7.1908
K8s版本：1.18.*+

故障现象：安装KubeDNS后，Pod内无法ping通外网域名，访问外网IP、K8s内部域名或者IP均正常。

原因分析，查看Pod中的resolv.conf：

kubectl exec busybox -- cat /etc/resolv.conf   
nameserver 10.96.0.10
search default.svc.cluster.local svc.cluster.local cluster.local
options ndots:5

10.96.0.10为KubeDNS的集群IP，对于内部域名，KubeDNS会直接解析，对于外部域名，KubeDNS会丢给上一级DNS服务器解析，这个上一级DNS服务器就依赖于resolv.conf。
查看KubeDNS Pod中的resolv.conf：

kubectl -n kube-system exec kube-dns-5715474cb-s854k7 -- cat /etc/resolv.conf
Defaulting container name to kubedns.
Use 'kubectl describe pod/kube-dns-5715474cb-s854k7 -n kube-system' to see all of the containers in this pod.
nameserver 192%Scacsasgfava11
options edns0

查看宿主机（Node或Master）该文件，cat /etc/resolv.conf：

nameserver 192%Scacsasgfava11
options edns0

原因很明显了，KubeDNS创建时会把宿主机/etc/resolv.conf里的内容拷贝到Pod同文件中，如果/etc/resolv.conf里写的配置不正确，则Pod无法解析外网域名。

Ubuntu解决办法：

Ubuntu18.04已经抛弃/etc/resolv.conf用做域名解析，DNS可以配置在/etc/netplan/xx.yaml中，保留/etc/resolv.conf只是用做兼容，根据注释，我们知道，/etc/resolv.conf由systemd-resolved服务管理，不建议手工修改，因为会被自动覆盖，同时ls该文件，发现/etc/resolv.conf只不过是一个软链接。

网上方法：修改/etc/systemd/resolved.conf中的DNS项，之后重启systemd-resolved服务，经验证无效。

最终解决办法，删除该软链接，然后自己手工创建该文件：

rm /etc/resolv.conf -f
cat /etc/resolv.conf<<EOF
nameserver 114.114.114.114
nameserver 8.8.8.8
EOF

Centos解决办法：直接将节点/etc/resolv.conf文件修改正确即可

然后删除KubeDNS，重新创建KubeDNS，删除原有Pod，重新创建Pod，经测试，问题解决。

该办法带来的问题：unable to resolve host xxx，解决办法：编辑/etc/hosts，把主机名加到127.0.0.1即可。

如果没有上述问题，可以不解决