Yelp ย้าย Cassandra จากระบบเก่าสู่ Amazon EKS โดยใช้ EBS Volumes

Yelp ได้ย้ายกลุ่มเซิร์ฟเวอร์ Cassandra จาก Kubernetes ที่จัดการเองแบบเดิมไปยัง Amazon EKS โดยใช้วิธีการชี้ไปยัง EBS volumes เดิม แทนการสตรีมข้อมูลระหว่างโหนด แม้ว่าส่วนของ Stateless workloads จะถูกย้ายไป EKS แล้วก็ตาม

การย้ายนี้ใช้เทคนิค “Rolling PV Transplant” ซึ่งตั้งอยู่บนข้อเท็จจริงที่ว่า EBS volume ผูกติดกับ Availability Zone ไม่ใช่ Kubernetes cluster และ PersistentVolume คือตัวชี้ไปยัง Volume ID ทำให้สามารถสร้าง PVs และ PVCs ใน EKS เพื่ออ้างอิงถึง volume ID เดิมได้

ทีมงานได้ทำการทดสอบด้วยตนเองหลายครั้งก่อนการใช้งานจริง และการ Rollout ใน Production ใช้เวลาประมาณ 3 สัปดาห์ โดยใช้ Claude ช่วยสร้างสคริปต์ Bash ประมาณ 800 บรรทัดจากคู่มือการทำงานด้วยตนเอง

ข้อผิดพลาดที่พบคือการมี VolumeAttachment object ที่เก่าค้างอยู่หลังการลบ Pods และปัญหาเรื่อง IAM AccessDenied ในการสำรองข้อมูล ซึ่งทีมงานควรตรวจสอบสถานะการซ่อมแซมและบทบาท IAM ก่อนดำเนินการย้ายครั้งใหญ่

ศัพท์ที่ควรรู้

  • Amazon EKS – เป็นบริการ Kubernetes ที่จัดการโดย Amazon ซึ่ง Yelp เลือกใช้เป็นปลายทางในการย้ายระบบไป
  • Cassandra – เป็นระบบฐานข้อมูลแบบกระจายที่ Yelp เลือกใช้และทำการย้ายไปยัง EKS
  • EBS volume – คือพื้นที่จัดเก็บข้อมูลคงที่ที่ผูกติดกับ Availability Zone และถูกนำมาใช้ในการย้ายข้อมูล
  • PersistentVolume (PV) – คือตัวแทนของพื้นที่จัดเก็บข้อมูลที่ถูกผูกไว้ใน Kubernetes Cluster
  • Rolling PV Transplant – คือเทคนิคที่ Yelp ใช้ในการย้ายข้อมูลโดยการชี้ไปยัง volume เดิม แทนการย้ายข้อมูลทั้งหมด

ที่มา: infoq.com

Leave a Comment