Amazon MSK (Managed Kafka)

ধারণা

Amazon MSK (Managed Streaming for Apache Kafka) হলো Apache Kafka-র managed সংস্করণ — বিপুল পরিমাণ চলমান data বা event নির্ভরযোগ্যভাবে আদান-প্রদানের ব্যবস্থা। Kafka-তে producer data পাঠায় topic নামের ভাগে, আর consumer সেখান থেকে পড়ে। Data রাখা আর বিতরণের কাজ করে broker নামের server। MSK এই broker-গুলো বসানো, patch দেওয়া আর নজরে রাখার কাজ করে। Provisioned আর Serverless — দুই রূপে চালানো যায়, আর সাধারণ Kafka tool আগের মতোই কাজ করে।

সহজ উদাহরণ

দেশের প্রধান সংবাদ সংস্থা — লাখো খবর আসে, আর অনেক পত্রিকা যার যেটা দরকার নিয়ে নেয়।

কেন দরকার

Kafka খুব জনপ্রিয় কিন্তু নিজে চালানো কঠিন। MSK সেই কঠিন অংশ সামলায়।

কোথায় ব্যবহার হয়

বড় কোম্পানির event streaming, microservice-এর মধ্যে data আদান-প্রদান।

Azure-এ এর মতো

Azure Event Hubs (Kafka endpoint) / HDInsight Kafka

মনে রাখুন

MSK = AWS-চালানো Kafka।

আরও জানুন

বিস্তারিত আর সর্বশেষ তথ্যের জন্য official documentation দেখুন:

• Amazon MSK (Managed Kafka) — AWS official documentation ↗