Amazon Data Firehose

ধারণা

Amazon Data Firehose চলমান data নিজে থেকে গ্রহণ করে S3, Redshift বা অন্য গন্তব্যে পৌঁছে দেয় — কোনো code ছাড়াই। এটা serverless, তাই server বা ক্ষমতা নিজে সামলাতে হয় না। Data সরাসরি পাঠানো যায়, অথবা Kinesis Data Streams বা Amazon MSK থেকে আনা যায়। Firehose data কিছুক্ষণ জমিয়ে একসাথে গন্তব্যে লেখে। পথে Lambda দিয়ে data বদলানো বা Parquet-এর মতো ফরম্যাটে রূপান্তরও করা যায়।

সহজ উদাহরণ

পাইপলাইন — এক মাথায় পানি দিলে আরেক মাথায় ট্যাঙ্কে নিজে নিজে পৌঁছে যায়।

কেন দরকার

Streaming data সংরক্ষণের জায়গায় পৌঁছানোর জন্য নিজে code লেখা আর চালানো ঝামেলার।

কোথায় ব্যবহার হয়

App-এর log আর click data সরাসরি S3 data lake-এ জমা করা।

Azure-এ এর মতো

Azure Event Hubs Capture / Stream Analytics

মনে রাখুন

Firehose = streaming data-র স্বয়ংক্রিয় পাইপলাইন।

আরও জানুন

বিস্তারিত আর সর্বশেষ তথ্যের জন্য official documentation দেখুন:

• Amazon Data Firehose — AWS official documentation ↗