背景:

紧接AWS简单搭建使用EKS一,eks集群简单搭建完成。需要搭建有状态服务必然就用到了storageclass 存储类,这里用ebs记录以下

AWS简单搭建使用EKS二

存储类选型:

参照官方文档:https://kubernetes.io/zh-cn/docs/concepts/storage/storage-classes/#the-storageclass-resource

image.png

关于eks的存储类:

参照:存储类


(资料图片仅供参考)

image.png

个人这里习惯用EBS块存储!

使用 AWS CLI 创建 Amazon EBS CSI 插件 IAM 角色

参照:https://docs.aws.amazon.com/zh_cn/eks/latest/userguide/csi-iam-role.html

查看集群的 OIDC 提供商 URL

查看集群的 OIDC 提供商 URL,将 my-cluster 替换为您的集群名称。如果命令的输出为 None,请查看先决条件:

image.png
image.png

这里采用了AWS CLI方式添加:

aws eks describe-cluster \  --name my-cluster \  --query "cluster.identity.oidc.issuer" \  --output text
image.png

输出内容如下:

https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx

注意: url中的 加粗黑体的关键词 https://oidc.eks.cn-north-1.amazonaws.com.cn/id/xxxxxxxxx

创建 IAM 角色

生成aws-ebs-csi-driver-trust-policy.json

将以下内容复制到名为** _aws-ebs-csi-driver-trust-policy_.json 的文件中。请将 _111122223333_ 替换为您的账户 ID,将_region-code_替换为您的 AWS 区域,并将 _EXAMPLED539D4633E53DE1B71EXAMPLE**_ 替换为上一步骤中返回的值。如果您的集群位于 AWS GovCloud(美国东部)或 AWS GovCloud(美国西部)AWS 区域,则将 arn:aws: 替换为 arn:aws-us-gov:

{  "Version": "2012-10-17",  "Statement": [    {      "Effect": "Allow",      "Principal": {        "Federated": "arn:aws:iam::111122223333:oidc-provider/oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE"      },      "Action": "sts:AssumeRoleWithWebIdentity",      "Condition": {        "StringEquals": {          "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:aud": "sts.amazonaws.com",          "oidc.eks.region-code.amazonaws.com/id/EXAMPLED539D4633E53DE1B71EXAMPLE:sub": "system:serviceaccount:kube-system:ebs-csi-controller-sa"        }      }    }  ]}

由于实例在中国区我的json内容如下:

image.png

注意箭头指向的关键词的替换!

创建角色

aws iam create-role \  --role-name AmazonEKS_EBS_CSI_DriverRole \  --assume-role-policy-document file://"aws-ebs-csi-driver-trust-policy.json"
image.png

AWS 托管策略附加到角色

注意arn:aws地域区分 arn:aws-cn

aws iam attach-role-policy \  --policy-arn arn:aws-cn:iam::aws:policy/service-role/AmazonEBSCSIDriverPolicy \  --role-name AmazonEKS_EBS_CSI_DriverRole
image.png

官方有使用自定义 KMS 密钥进行加密的步骤,不需要忽略:

image.png
kubectl annotate serviceaccount ebs-csi-controller-sa \    -n kube-system \    eks.amazonaws.com/role-arn=arn:aws-cn:iam::xxxxxxxx:role/AmazonEKS_EBS_CSI_DriverRole

注:这个不用执行的其实有问题了在说

管理 Amazon EKS 附加组件

参照:添加 Amazon EBS CSI 附加组件

aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver \  --service-account-role-arn arn:aws:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole
image.png

aws cli版本有问题貌似?参照https://docs.aws.amazon.com/cli/latest/userguide/getting-started-install.html更新aws cliV2

curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"unzip awscliv2.zipsudo ./aws/install
image.png
image.png
/usr/local/bin/aws eks create-addon --cluster-name xxxx --addon-name aws-ebs-csi-driver   --service-account-role-arn arn:aws-cn:iam::xxxx:role/AmazonEKS_EBS_CSI_DriverRole

注意arn:aws-cn地域

image.png
kubectl get pods -n kube-system
image.png

eks控制台点开对应集群-插件标签,可以看到多了aws-ebs-csi-driver的插件(插件名称可以自定义)

image.png

这个时候获取storageclass依然是没有的:

[root@ip-10-0-28-172 ~]# kubectl get scNo resources found

部署示例应用程序并验证 CSI 驱动程序是否正常运行

参照:部署示例应用程序并验证 CSI 驱动程序是否正常运行

将 Amazon EBS 容器存储接口 (CSI) 驱动程序 GitHub 存储库克隆到您的本地系统。git clone https://github.com/kubernetes-sigs/aws-ebs-csi-driver.git切换到dynamic-provisioning 示例目录cd aws-ebs-csi-driver/examples/kubernetes/dynamic-provisioning/从 manifests 目录部署 ebs-sc 存储类、ebs-claim 持久性卷声明和 app 示例应用程序kubectl apply -f manifests/kubectl get sckubectl get pods
image.png
简单验证查看与验证
image.png
kubectl exec -it app -- cat /data/out.txt
image.png
删除实例cd manifestskubectl delete -f pod.yamlkubectl delete -f claim.yaml关于storageclass紧接上文manifests目录下,cat storageclass.yaml,其他配置默认就好,name可以修改成自己新要的名字,这里就默认ebs-sc了。后续有状态服务sc默认名为ebs-sc
image.png
kubectl get sc
image.png

注意:sc =storageclass

推荐内容