Amazon MWAA
#90 · Level 3 · আধুনিক architecture · Application Integrationধারণা
“ধারণা” অংশAmazon MWAA (Managed Workflows for Apache Airflow) হলো open source Apache Airflow-এর AWS-চালানো সংস্করণ। Airflow-এ কাজের ধারা Python-এ DAG হিসেবে লেখা হয়, যেখানে কোন task কোনটার পরে চলবে তা ঠিক করা থাকে। MWAA-তে একটা environment বানানো হয়, আর DAG file সাধারণত S3-এ রাখা হয়। Airflow-এর scheduler, worker আর web interface চালানোর দায়িত্ব AWS নেয়। এটা S3, Glue, Redshift-এর মতো data service-এর কাজ সময় ধরে সাজাতে বেশি ব্যবহৃত হয়।
সহজ উদাহরণ
“সহজ উদাহরণ” অংশকারখানার উৎপাদন সূচি — কোন মেশিন কখন চলবে, কোনটার পর কোনটা, প্রতিদিন নিয়ম করে।
কেন দরকার
“কেন দরকার” অংশপ্রতিদিন data আনা, পরিষ্কার করা, report বানানো — এমন অনেক ধাপ সময়মতো চালাতে হয়। Airflow নিজে চালানো কঠিন।
কোথায় ব্যবহার হয়
“কোথায় ব্যবহার হয়” অংশরাতের data pipeline, ধাপে ধাপে চলা ETL কাজ।
Azure-এ এর মতো
“Azure-এ এর মতো” অংশAzure Data Factory (Workflow Orchestration Manager)
আরও জানুন
“আরও জানুন” অংশবিস্তারিত আর সর্বশেষ তথ্যের জন্য official documentation দেখুন: