Amazon Managed Workflows for Apache Airflow (Amazon MWAA) ขณะนี้รองรับ DuckDB operators แล้ว ซึ่งเป็นฐานข้อมูลเชิงวิเคราะห์แบบฝังตัวที่ช่วยให้ลูกค้าสามารถตรวจสอบคุณภาพข้อมูล สรุป และแปลงข้อมูลจากแหล่งข้อมูลที่ DuckDB รองรับ รวมถึง Amazon S3
การรองรับแบบเนทีฟนี้มีให้สำหรับ DuckDB บนสภาพแวดล้อม Amazon MWAA Provisioned ที่รัน Apache Airflow 3.3.1 โดย DuckDB จะติดตั้งและตั้งค่าไว้ล่วงหน้าสำหรับการเชื่อมต่อ AWS ในการอัปเดต MWAA Airflow 3.3.1 ล่าสุด
หลังจากอัปเดตสภาพแวดล้อม MWAA เป็น Airflow 3.3.1 และเพิ่มสิทธิ์การเข้าถึง Execution Role ไปยังที่เก็บข้อมูล ลูกค้าสามารถเริ่มเขียนงานด้วย DuckDBExecuteQueryOperator ได้โดยไม่ต้องตั้งค่าเพิ่มเติม ฟีเจอร์นี้ใช้ได้ในทุกภูมิภาคของ AWS ที่มี Amazon MWAA
สำหรับข้อมูลเพิ่มเติม สามารถดูได้ในตารางภูมิภาคของ AWS และคู่มือผู้ใช้ Amazon MWAA
ศัพท์ที่ควรรู้
- Amazon Managed Workflows for Apache Airflow (Amazon MWAA) – บริการจัดการเวิร์กโฟลว์ของ Apache Airflow บน AWS
- DuckDB – ฐานข้อมูลเชิงวิเคราะห์แบบฝังตัวที่ใช้ในการตรวจสอบและแปลงข้อมูล
- Amazon S3 – บริการจัดเก็บข้อมูลบนคลาวด์ของ Amazon ที่ DuckDB สามารถเชื่อมต่อได้
- Apache Airflow 3.3.1 – เวอร์ชันของ Apache Airflow ที่รองรับการทำงานร่วมกับ DuckDB
ที่มา: AWS