背景:
紧接AWS简单搭建使用EKS一,eks集群简单搭建完成。需要搭建有状态服务必然就用到了storageclass 存储类,这里用ebs记录以下
AWS简单搭建使用EKS二
存储类选型:
参照官方文档:https://kubernetes.io/zh-cn/docs/concepts/storage/storage-classes/#the-storageclass-resource
关于eks的存储类:
参照:存储类
(资料图片仅供参考)
个人这里习惯用EBS块存储!
使用 AWS CLI 创建 Amazon EBS CSI 插件 IAM 角色
参照:https://docs.aws.amazon.com/zh_cn/eks/latest/userguide/csi-iam-role.html
查看集群的 OIDC 提供商 URL
查看集群的 OIDC 提供商 URL,将 my-cluster 替换为您的集群名称。如果命令的输出为 None,请查看先决条件:
这里采用了AWS CLI方式添加:
aws eks describe-cluster \ --name my-cluster \ --query "cluster.identity.oidc.issuer" \ --output text
输出内容如下:
https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx
注意: url中的 加粗黑体的关键词 https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx
创建 IAM 角色
生成aws-ebs-csi-driver-trust-policy.json
将以下内容复制到名为** _aws-ebs-csi-driver-trust-policy_.json 的文件中。请将 _111122223333_ 替换为您的账户 ID,将_region-code_替换为您的 AWS 区域,并将 _EXAMPLED539D4633E53DE1B71EXAMPLE**_ 替换为上一步骤中返回的值。如果您的集群位于 AWS GovCloud(美国东部)或 AWS GovCloud(美国西部)AWS 区域,则将 arn:aws: 替换为 arn:aws-us-gov:
{ "Version": "2012-10-17", "Statement": [ { "Effect": "Allow", "Principal": { "Federated": "arn:aws:iam::111122223333:oidc-provider/oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE" }, "Action": "sts:AssumeRoleWithWebIdentity", "Condition": { "StringEquals": { "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:aud": "sts.amazonaws.com", "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:sub": "system:serviceaccount:kube-system:ebs-csi-controller-sa" } } } ]}
由于实例在中国区我的json内容如下:
注意箭头指向的关键词的替换!
创建角色
aws iam create-role \ --role-name AmazonEKS_EBS_CSI_DriverRole \ --assume-role-policy-document file://"aws-ebs-csi-driver-trust-policy.json"
AWS 托管策略附加到角色
注意arn:aws地域区分 arn:aws-cn
aws iam attach-role-policy \ --policy-arn arn:aws-cn:iam::aws:policy/service-role/AmazonEBSCSIDriverPolicy \ --role-name AmazonEKS_EBS_CSI_DriverRole
官方有使用自定义 KMS 密钥进行加密的步骤,不需要忽略:
kubectl annotate serviceaccount ebs-csi-controller-sa \ -n kube-system \ eks.amazonaws.com/role-arn=arn:aws-cn:iam::xxxxxxxx:role/AmazonEKS_EBS_CSI_DriverRole
注:这个不用执行的其实有问题了在说
管理 Amazon EKS 附加组件
参照:添加 Amazon EBS CSI 附加组件
aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver \ --service-account-role-arn arn:aws:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole
aws cli版本有问题貌似?参照https://docs.aws.amazon.com/cli/latest/userguide/getting-started-install.html更新aws cli到V2
curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"unzip awscliv2.zipsudo ./aws/install
/usr/local/bin/aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver --service-account-role-arn arn:aws-cn:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole
注意arn:aws-cn地域
kubectl get pods -n kube-system
eks控制台点开对应集群-插件标签,可以看到多了aws-ebs-csi-driver的插件(插件名称可以自定义)
这个时候获取storageclass依然是没有的:
[root@ip-10-0-28-172 ~]# kubectl get scNo resources found
部署示例应用程序并验证 CSI 驱动程序是否正常运行
参照:部署示例应用程序并验证 CSI 驱动程序是否正常运行
将 Amazon EBS 容器存储接口 (CSI) 驱动程序 GitHub 存储库克隆到您的本地系统。git clone https://github.com/kubernetes-sigs/aws-ebs-csi-driver.git切换到dynamic-provisioning 示例目录cd aws-ebs-csi-driver/examples/kubernetes/dynamic-provisioning/从 manifests 目录部署 ebs-sc 存储类、ebs-claim 持久性卷声明和 app 示例应用程序kubectl apply -f manifests/kubectl get sckubectl get pods简单验证查看与验证kubectl exec -it app -- cat /data/out.txt
删除实例cd manifestskubectl delete -f pod.yamlkubectl delete -f claim.yaml关于storageclass紧接上文manifests目录下,cat storageclass.yaml,其他配置默认就好,name可以修改成自己新要的名字,这里就默认ebs-sc了。后续有状态服务sc默认名为ebs-sckubectl get sc
注意:sc =storageclass