AWS Data Pipeline
#184 · Level 3 · আধুনিক architecture · Data ও Analyticsধারণা
“ধারণা” অংশAWS Data Pipeline ছিল নিয়ম করে এক জায়গা থেকে আরেক জায়গায় data সরানো আর process করার পুরনো service। এতে একটা pipeline-এ লেখা থাকতো data কোথা থেকে আসবে, কী কাজ হবে আর কখন চলবে। কাজগুলো চালানোর জন্য এটা EC2 বা EMR-এর মতো resource ব্যবহার করতো। কোনো ধাপ ব্যর্থ হলে আবার চেষ্টা করার ব্যবস্থাও ছিল। AWS এটা নতুন গ্রাহকদের জন্য বন্ধ করেছে; বিকল্প হলো AWS Glue, Step Functions বা Amazon MWAA।
সহজ উদাহরণ
“সহজ উদাহরণ” অংশপুরনো ভ্যান সার্ভিস — রুটিন মাফিক মাল পৌঁছাতো, কিন্তু এখন দ্রুত আর আধুনিক বিকল্প আছে।
কেন দরকার
“কেন দরকার” অংশনিয়মিত data সরানো আর process করার কাজ স্বয়ংক্রিয় করতে।
কোথায় ব্যবহার হয়
“কোথায় ব্যবহার হয়” অংশAWS এটা নতুন গ্রাহকদের জন্য বন্ধ করেছে; বিকল্প: AWS Glue, Step Functions, MWAA।
Azure-এ এর মতো
“Azure-এ এর মতো” অংশAzure Data Factory
আরও জানুন
“আরও জানুন” অংশবিস্তারিত আর সর্বশেষ তথ্যের জন্য official documentation দেখুন: