General Index (academia)
جنرل انڈیکس ایک مفت استعمال ہونے والا ڈیٹا بیس ہے، جسے کمپریس کرنے پر 8.5 ٹیرابائٹس لگتے ہیں۔ اسے ماہر تکنیکی کارل مالامڈ اور ان کی غیر منافع بخش فاؤنڈیشن پبلک ریسورس نے بنایا تھا۔ اس میں 107 ملین سے زیادہ تعلیمی مقالے کے الفاظ اور فقرے شامل ہیں۔ یہ متعلقہ مطلوبہ الفاظ اور میٹا ڈیٹا کی میزیں کے ساتھ مضامین کے مکمل متن سے اخذ کردہ این-گرام (این آئٹمز کی ایک متصل ترتیب) کی میز پر مشتمل ہے۔ اس کا مقصد سائنسی ادب کے کمپیوٹرائزڈ تجزیے کو آسان بنانا ہے، جس میں کاپی رائٹ کی وسیع پابندیوں کی وجہ سے محققین کی مکمل متن تک رسائی محدود ہے۔ ابتدائی ورژن، جس میں بغیر کسی سرچ انجن فرنٹ اینڈ کے خام ڈیٹا بیس ٹیبلز شامل ہیں، انٹرنیٹ آرکائیو نے 7 اکتوبر 2021 کو جاری کیا تھا۔ مشین لرننگ اوپن رسائی حوالہ جات بیرونی لنکس انٹرنیٹ آرکائیو پروجیکٹس بھی دیکھیں۔