Presto এর আর্কিটেকচার

Database Tutorials - অ্যাপাচি প্রেস্টো (Apache Presto) Apache Presto পরিচিতি |
195
195

Presto একটি ডিস্ট্রিবিউটেড SQL কোয়েরি ইঞ্জিন, যা বড় ডেটাসেট দ্রুত এবং কার্যকরভাবে বিশ্লেষণের জন্য তৈরি। এর আর্কিটেকচার দুটি মূল উপাদানের উপর ভিত্তি করে কাজ করে: Coordinator এবং Workers। এই আর্কিটেকচার Presto-কে স্কেলেবল এবং উচ্চ গতিসম্পন্ন বিশ্লেষণ করতে সক্ষম করে।


Presto আর্কিটেকচারের মূল উপাদান

Coordinator

  • কাজ:
    • Coordinator হল Presto ক্লাস্টারের কেন্দ্রীয় উপাদান, যা কোয়েরি পরিচালনা করে।
    • এটি SQL কোয়েরি গ্রহণ করে এবং তা কোয়েরি এক্সিকিউশন প্ল্যান এ রূপান্তর করে।
    • Coordinator বিভিন্ন কাজ Workers-এ ভাগ করে দেয় এবং তাদের কাছ থেকে ফলাফল সংগ্রহ করে।
  • দায়িত্ব:
    • কোয়েরি পরিকল্পনা (Query Planning)
    • কাজ বরাদ্দ (Task Assignment)
    • ফলাফল ম্যানেজমেন্ট

Workers

  • কাজ:
    • Workers হল ডিস্ট্রিবিউটেড প্রোসেসর, যা Coordinator-এর কাছ থেকে কাজ পায় এবং ডেটা প্রক্রিয়া করে।
    • একাধিক Worker একসাথে কাজ করে বড় ডেটাসেট প্রক্রিয়া করে।
  • দায়িত্ব:
    • ডেটা প্রসেসিং
    • সাব-কোয়েরি এক্সিকিউশন
    • ফলাফল Coordinator-এ পাঠানো

Clients

  • কাজ:
    • Clients হল ব্যবহারকারীর অ্যাপ্লিকেশন বা টুল, যা Presto-কে SQL কোয়েরি পাঠায়।
    • উদাহরণস্বরূপ: Command Line Interface (CLI), Web UI, বা API।

Presto এর কাজের প্রক্রিয়া

১. SQL কোয়েরি গ্রহণ:
ব্যবহারকারী বা অ্যাপ্লিকেশন একটি SQL কোয়েরি পাঠায়।

২. কোয়েরি প্ল্যানিং:
Coordinator কোয়েরি গ্রহণ করে এবং একটি লজিক্যাল এক্সিকিউশন প্ল্যান তৈরি করে।

৩. কাজ ভাগ করে দেওয়া:
Coordinator কাজগুলো ছোট ছোট অংশে ভাগ করে Workers-এ পাঠায়।

৪. ডেটা প্রক্রিয়াকরণ:
Workers তাদের নির্ধারিত কাজ সম্পন্ন করে এবং ডেটা প্রক্রিয়া করে।

৫. ফলাফল সংগ্রহ:
Workers-এর কাছ থেকে প্রক্রিয়াকৃত ডেটা Coordinator সংগ্রহ করে এবং ব্যবহারকারীকে ফলাফল প্রদান করে।


Presto আর্কিটেকচারের বৈশিষ্ট্য

  • ডিস্ট্রিবিউটেড প্রসেসিং:
    Presto ডেটা প্রক্রিয়াকরণের জন্য একাধিক Worker ব্যবহার করে, যা বড় ডেটাসেটের উপর দ্রুত বিশ্লেষণ নিশ্চিত করে।
  • ইন-মেমরি প্রসেসিং:
    সমস্ত কাজ মেমরিতে সম্পন্ন হয়, যা দ্রুত এবং কার্যকরী প্রসেসিং নিশ্চিত করে।
  • স্কেলযোগ্য:
    Presto সহজেই নতুন Workers যোগ করে ক্লাস্টার স্কেল করতে পারে।
  • ফল্ট টলারেন্স:
    Workers ব্যর্থ হলে Coordinator ব্যাকআপ পরিকল্পনা ব্যবহার করে কাজ চালিয়ে যায়।

Presto আর্কিটেকচারের চিত্র

  1. Clients: কোয়েরি পাঠায় এবং ফলাফল গ্রহণ করে।
  2. Coordinator: কোয়েরি গ্রহণ, পরিকল্পনা এবং Workers-এ কাজ বিতরণ করে।
  3. Workers: কাজ প্রক্রিয়া করে এবং ফলাফল Coordinator-এ পাঠায়।

Presto এর এই ডিস্ট্রিবিউটেড এবং ইন-মেমরি ভিত্তিক আর্কিটেকচার এটিকে বড় ডেটাসেট বিশ্লেষণের জন্য একটি শক্তিশালী এবং কার্যকর টুল করে তুলেছে।

common.content_added_by
টপ রেটেড অ্যাপ

স্যাট অ্যাকাডেমী অ্যাপ

আমাদের অল-ইন-ওয়ান মোবাইল অ্যাপের মাধ্যমে সীমাহীন শেখার সুযোগ উপভোগ করুন।

ভিডিও
লাইভ ক্লাস
এক্সাম
ডাউনলোড করুন
Promotion