General Index (academia)
જનરલ ઇન્ડેક્સ એ ફ્રી-ટુ-યુઝ ડેટાબેઝ છે, જે જ્યારે સંકુચિત થાય છે ત્યારે 8.8 ટેરાબાઇટ્સ લે છે. તે ટેકનોલોજિસ્ટ કાર્લ માલામુદ અને તેમના બિનનફાકારક ફાઉન્ડેશન પબ્લિક રિસોર્સ દ્વારા બનાવવામાં આવ્યું હતું. તેમાં 107 મિલિયનથી વધુ શૈક્ષણિક કાગળોમાંથી શબ્દો અને શબ્દસમૂહો છે. તેમાં સંબંધિત કીવર્ડ્સ અને મેટાડેટાના કોષ્ટકો સાથે લેખોના સંપૂર્ણ લખાણમાંથી મેળવેલ એન-ગ્રામ (એન વસ્તુઓનો સંલગ્ન ક્રમ) નું કોષ્ટક હોય છે. તેનો હેતુ વૈજ્ઞાનિક સાહિત્યના કોમ્પ્યુટરાઈઝ્ડ વિશ્લેષણને સરળ બનાવવાનો છે, જે સંશોધકો દ્વારા સંપૂર્ણ લખાણની પહોંચ મર્યાદિત કરવાના વ્યાપક કૉપિરાઇટ પ્રતિબંધો દ્વારા અવરોધિત કરવામાં આવ્યું છે. પ્રારંભિક સંસ્કરણ, જેમાં કોઈપણ સર્ચ એન્જિન ફ્રન્ટ-એન્ડ વિના કાચા ડેટાબેઝ કોષ્ટકોનો સમાવેશ થાય છે, તે 7 ઓક્ટોબર, 2021ના રોજ ઈન્ટરનેટ આર્કાઇવ દ્વારા બહાર પાડવામાં આવ્યું હતું. આ પણ જુઓ મશીન લર્નિંગ ઓપન એક્સેસ સંદર્ભો બાહ્ય કડીઓ ઇન્ટરનેટ આર્કાઇવ પ્રોજેક્ટ્સ