Apache Iceberg
বিশাল বিশ্লেষণাত্মক টেবিলের জন্য অ্যাপাচি আইসবার্গ একটি মুক্ত উৎস উচ্চ-কার্যকারিতা বিন্যাস। আইসবার্গ বড় ডেটার জন্য এসকিউএল টেবিল ব্যবহার করতে সক্ষম করে, যখন স্পার্ক, ট্রিনো, ফ্লিঙ্ক, প্রেস্টো, হাইভ, ইম্পালা, স্টাররকস, ডরিস এবং পিগের মতো ইঞ্জিনগুলির জন্য একই সময়ে একই টেবিলের সাথে নিরাপদে কাজ করা সম্ভব করে তোলে। আইসবার্গ অ্যাপাচি লাইসেন্সের অধীনে মুক্তি পায়। আইসবার্গ বড় এবং চাহিদাপূর্ণ ডেটা লেক পরিবেশে অ্যাপাচি হাইভ টেবিল ব্যবহারের কার্যকারিতা এবং ব্যবহারযোগ্যতার চ্যালেঞ্জগুলিকে সম্বোধন করে। বর্তমানে তাদের পণ্যগুলিতে অ্যাপাচি আইসবার্গ টেবিলগুলিকে সমর্থনকারী বিক্রেতাদের মধ্যে রয়েছে সেলারডাটা, ক্লৌডেরা, ড্রেমিও, আইওএমইটিই, স্নোফ্লেক, স্টারবার্স্ট, ট্যাবুলার এবং এডাব্লুএস। ইতিহাস আইসবার্গ নেটফ্লিক্সে রায়ান ব্লু এবং ড্যান উইকস দ্বারা শুরু হয়েছিল। হাইভ নেটফ্লিক্স পরিকাঠামোতে বিভিন্ন পরিষেবা এবং ইঞ্জিন দ্বারা ব্যবহৃত হয়েছিল। হাইভ কখনই সঠিকতার নিশ্চয়তা দিতে সক্ষম ছিল না এবং স্থিতিশীল পারমাণবিক লেনদেন সরবরাহ করত না। নেটফ্লিক্সের অনেকেই এই পরিষেবাগুলি ব্যবহার করা এবং হাইভ ফরম্যাট থেকে অনিচ্ছাকৃত পরিণতি এড়াতে ডেটাতে পরিবর্তন করা এড়িয়ে চলেন। রায়ান ব্লু আইসবার্গ তৈরি করে হাইভ টেবিলের মুখোমুখি হওয়া তিনটি সমস্যা সমাধানের জন্য যাত্রা শুরু করেছিলেনঃ তথ্যের সঠিকতা নিশ্চিত করুন এবং এসিআইডি লেনদেনকে সমর্থন করুন। সর্বোত্তম লেখার জন্য ফাইল গ্রানুলারিটিতে সূক্ষ্ম-দানাদার ক্রিয়াকলাপগুলি সক্ষম করে কর্মক্ষমতা উন্নত করুন। টেবিলের সাধারণ ক্রিয়াকলাপ এবং রক্ষণাবেক্ষণকে সহজ ও অস্পষ্ট করুন। 2017 সালে আইসবার্গের বিকাশ শুরু হয়। প্রকল্পটি ওপেন সোর্স করা হয়েছিল এবং 2018 সালের নভেম্বরে অ্যাপাচি সফ্টওয়্যার ফাউন্ডেশনকে দান করা হয়েছিল। 2020 সালের মে মাসে আইসবার্গ প্রকল্পটি একটি শীর্ষ স্তরের অ্যাপাচি প্রকল্পে পরিণত হয়। এয়ারবিএনবি, অ্যাপল, এক্সপিডিয়া, লিঙ্কডইন, অ্যাডোব, লিফ্ট এবং আরও অনেক সংস্থা আইসবার্গ ব্যবহার করে। আরও দেখুন অ্যাপাচি সফ্টওয়্যার ফাউন্ডেশন প্রকল্পের তালিকা রেফারেন্স এসকিউএল ফ্রি সিস্টেম সফ্টওয়্যার হ্যাডুপ ক্লাউড প্ল্যাটফর্ম জাভা প্ল্যাটফর্ম