Riffusion
રીફ્યુઝન એક ન્યુરલ નેટવર્ક છે, જે શેઠ ફોર્સગ્રેન અને હેક માર્ટિરોસ દ્વારા ડિઝાઇન કરવામાં આવ્યું છે, જે ઑડિઓને બદલે ધ્વનિની છબીઓનો ઉપયોગ કરીને સંગીત ઉત્પન્ન કરે છે. તે સ્ટેબલ ડિફ્યુઝનના ફાઇન-ટ્યુનિંગ તરીકે બનાવવામાં આવ્યું હતું, જે સ્પેક્ટ્રોગ્રામ પર ટેક્સ્ટ પ્રોમ્પ્ટ્સમાંથી છબીઓ બનાવવા માટે હાલનું ઓપન-સોર્સ મોડેલ છે. આ એક મોડેલમાં પરિણમે છે જે ઇમેજ ફાઇલો બનાવવા માટે ટેક્સ્ટ પ્રોમ્પ્ટનો ઉપયોગ કરે છે, જેને ઇન્વર્સ ફોરિયર ટ્રાન્સફોર્મ દ્વારા મૂકી શકાય છે અને ઓડિયો ફાઇલોમાં રૂપાંતરિત કરી શકાય છે. જ્યારે આ ફાઇલો માત્ર થોડી સેકંડ લાંબી હોય છે, ત્યારે મોડેલ વિવિધ ફાઇલોને એકસાથે ઇન્ટરપોલેટ કરવા માટે આઉટપુટ વચ્ચે સુપ્ત જગ્યાનો પણ ઉપયોગ કરી શકે છે. આ આઈ. એમ. જી. 2આઈ. એમ. જી. તરીકે ઓળખાતા સ્થિર પ્રસરણ મોડેલની કાર્યક્ષમતાનો ઉપયોગ કરીને પરિપૂર્ણ થાય છે. પરિણામી સંગીતને "દ ઓટ્રો મુંડો" (અલૌકિક) તરીકે વર્ણવવામાં આવ્યું છે, જો કે તે માનવસર્જિત સંગીતને બદલવાની શક્યતા નથી. આ મોડેલ 15 ડિસેમ્બર, 2022 ના રોજ ઉપલબ્ધ કરાવવામાં આવ્યું હતું, જેમાં કોડ પણ GitHub પર મફતમાં ઉપલબ્ધ છે. તે સ્થિર પ્રસરણમાંથી મેળવેલા ઘણા નમૂનાઓમાંથી એક છે. રિફ્યુઝનને AI ટેક્સ્ટ-ટુ-મ્યુઝિક જનરેટર્સના સબસેટમાં વર્ગીકૃત કરવામાં આવે છે. ડિસેમ્બર 2022માં, મુબર્ટે એ જ રીતે વર્ણનાત્મક લખાણને સંગીત લૂપમાં ફેરવવા માટે સ્થિર પ્રસરણનો ઉપયોગ કર્યો હતો. જાન્યુઆરી 2023 માં, ગૂગલે મ્યુઝિક એલ. એમ. નામના તેમના પોતાના ટેક્સ્ટ-ટુ-મ્યુઝિક જનરેટર પર એક પેપર પ્રકાશિત કર્યું. સંદર્ભો ડીપ લર્નિંગ સોફ્ટવેર એપ્લિકેશન્સ કમ્પ્યુટર સંગીત