目标:使用 kops 在 AWS 上安装 kubernetes 集群,无需任何 Internet 访问。
方法:该kops
工具通常有很多来自互联网的依赖项。第一个也是最重要的一个是nodeup
从 s3 下载的。此nodeup
二进制文件需要在 file 中传递一些参数kube_env.yaml
。
Assets:
- 125993c220d1a9b5b60ad20a867a0e7cda63e64c@https://storage.googleapis.com/kubernetes-release/release/v1.8.4/bin/linux/amd64/kubelet
- 8e2314db816b9b4465c5f713c1152cb0603db15e@https://storage.googleapis.com/kubernetes-release/release/v1.8.4/bin/linux/amd64/kubectl
- 1d9788b0f5420e1a219aad2cb8681823fc515e7c@https://storage.googleapis.com/kubernetes-release/network-plugins/cni-0799f5732f2a11b329d9e3d51b9c8f2e3759f2ff.tar.gz
- f62360d3351bed837ae3ffcdee65e9d57511695a@https://kubeupv2.s3.amazonaws.com/kops/1.8.0/linux/amd64/utils.tar.gz
ClusterName: ${cluster_fqdn}
ConfigBase: s3://${config_base}
InstanceGroupName: ${instance_group}
Tags:
- _automatic_upgrades
- _aws
- _kubernetes_master
- _networking_cni
channels:
- s3://${config_base}/addons/bootstrap-channel.yaml
protokubeImage:
hash: 1b972e92520b3cafd576893ae3daeafdd1bc9ffd
name: protokube:1.8.0
source: https://kubeupv2.s3.amazonaws.com/kops/1.8.0/images/protokube.tar.gz
从上面的文件中可以看出,包和图像是从指定的源下载的。自定义源并将其指向文件中提到的所有包的内部存储是相当容易的。但是,nodeup
并且protokube
似乎从gcr.io
需要互联网出口的谷歌 docker 存储库中调用 docker 图像。
我们尝试将清单配置为指向托管在网络中的私有 docker 存储库,其中存储了所有必需的图像。但是不要从私有存储库中提取图像并且集群不会出现。这是我们实现无互联网集群的唯一障碍。我假设图像在二进制文件中是硬编码的。如果是这种情况,我能看到的唯一解决方案是构建自定义nodeup
可执行文件。
我们正在寻找有关所采取方法的其他解决方案或建议。图像是硬编码在nodeup
二进制文件中还是发生了某种哈希验证?nodeup
源代码没有很好的文档记录。因此,很难确定调用图像的确切位置。