Apache Iceberg
अपाचे आइसबर्ग विशाल विश्लेषणात्मक तालिकाओं के लिए एक खुला स्रोत उच्च-प्रदर्शन प्रारूप है। आइसबर्ग बड़े डेटा के लिए एसक्यूएल टेबल के उपयोग को सक्षम बनाता है, जबकि स्पार्क, ट्रिनो, फ्लिंक, प्रेस्टो, हाइव, इम्पाला, स्टाररॉक्स, डोरिस और पिग जैसे इंजनों के लिए एक ही समय में एक ही टेबल के साथ सुरक्षित रूप से काम करना संभव बनाता है। आइसबर्ग को अपाचे लाइसेंस के तहत जारी किया गया है। आइसबर्ग बड़े और मांग वाले डेटा झील वातावरण में अपाचे हाइव टेबल का उपयोग करने के प्रदर्शन और उपयोगिता चुनौतियों को संबोधित करता है। वर्तमान में अपने उत्पादों में अपाचे आइसबर्ग टेबल का समर्थन करने वाले विक्रेताओं में सेलरडेटा, क्लौडेरा, ड्रेमिओ, आईओएमईटीई, स्नोफ्लेक, स्टारबर्स्ट, टैबुलर और एडब्ल्यूएस शामिल हैं। हिस्ट्री आइसबर्ग की शुरुआत नेटफ्लिक्स पर रयान ब्लू और डैन वीक्स द्वारा की गई थी। हाइव का उपयोग नेटफ्लिक्स बुनियादी ढांचे में कई अलग-अलग सेवाओं और इंजनों द्वारा किया गया था। हाइव कभी भी शुद्धता की गारंटी देने में सक्षम नहीं था और स्थिर परमाणु लेनदेन प्रदान नहीं करता था। नेटफ्लिक्स में कई लोगों ने हाइव प्रारूप से अनपेक्षित परिणामों को रोकने के लिए इन सेवाओं का उपयोग करने और डेटा में बदलाव करने से परहेज किया। रयान ब्लू आइसबर्ग बनाकर हाइव टेबल का सामना करने वाले तीन मुद्दों को संबोधित करने के लिए निकल पड़ेः डेटा की शुद्धता सुनिश्चित करें और एसीआईडी लेनदेन का समर्थन करें। इष्टतम लेखन के लिए फाइल ग्रैनुलरिटी पर किए जाने वाले बारीक-दाने वाले संचालन को सक्षम करके प्रदर्शन में सुधार करें। मेज के सामान्य संचालन और रखरखाव को सरल और अस्पष्ट करें। हिमशैल का विकास 2017 में शुरू हुआ। इस परियोजना को ओपन-सोर्स किया गया था और नवंबर 2018 में अपाचे सॉफ्टवेयर फाउंडेशन को दान किया गया था। मई 2020 में, आइसबर्ग परियोजना एक शीर्ष स्तर की अपाचे परियोजना बन गई। आइसबर्ग का उपयोग एयरबीएनबी, एप्पल, एक्सपीडिया, लिंक्डइन, एडोब, लिफ्ट और कई अन्य कंपनियों द्वारा किया जाता है। यह भी देखें अपाचे सॉफ्टवेयर फाउंडेशन परियोजनाओं की सूची संदर्भ एस. क्यू. एल. मुक्त प्रणाली सॉफ्टवेयर Hadoop क्लाउड प्लेटफॉर्म जावा प्लेटफॉर्म