Amazon MSK Connect ขณะนี้รองรับการอัปเดต custom plugin และ worker configuration ของ connector ที่มีอยู่ ซึ่งมีประโยชน์อย่างยิ่งเมื่อต้องการอัปเดต custom plugin เพื่อรันโค้ดเวอร์ชันใหม่ หรือปรับปรุง dependencies
นอกจากนี้ยังสามารถอัปเดต worker configuration เพื่อเปลี่ยนการตั้งค่าระดับ worker เช่น การสลับ key และ value converters หรือการปรับแต่ง producer และ consumer properties เพื่อเพิ่ม throughput และลด latency
ก่อนหน้านี้ การอัปเดต plugin หรือ worker configuration ของ connector ต้องใช้วิธีลบแล้วสร้างใหม่ ซึ่งเป็นการดำเนินการที่ก่อให้เกิดการหยุดชะงักและเพิ่มภาระในการปฏิบัติงาน แต่ด้วยฟีเจอร์ใหม่นี้ สามารถอัปเดตได้ในที่เดิม
เมื่ออัปเดตเสร็จสิ้น connector จะยังคงรักษา committed offsets ไว้ ทำให้งานยังคงประมวลผลต่อจากจุดเดิม โดยฟีเจอร์นี้ใช้งานได้ในทุก Region ที่รองรับ Amazon MSK Connect โดยไม่มีค่าใช้จ่ายเพิ่มเติม
สำหรับข้อมูลเพิ่มเติม สามารถดูได้จาก Amazon MSK Connect developer guide
ศัพท์ที่ควรรู้
- Amazon MSK Connect – บริการจัดการแบบครบวงจรสำหรับ Apache Kafka Connect ที่ทำงานร่วมกับ Amazon MSK
- Custom plugin – ส่วนประกอบที่ผู้ใช้กำหนดขึ้นเพื่อขยายการทำงานของ connector
- Worker configuration – การตั้งค่าระดับ worker ที่ใช้ปรับแต่งพฤติกรรมของ connector
- Committed offsets – ตัวชี้วัดที่บันทึกว่า connector ได้ประมวลผลถึงจุดใดไปแล้ว
ที่มา: AWS