Riffusion
রিফিউশন একটি নিউরাল নেটওয়ার্ক, যা শেঠ ফোর্সগ্রেন এবং হেক মার্টিরোস দ্বারা ডিজাইন করা হয়েছে, যা অডিওর পরিবর্তে শব্দের চিত্র ব্যবহার করে সঙ্গীত তৈরি করে। এটি স্থিতিশীল বিচ্ছুরণের একটি সূক্ষ্ম সুর হিসাবে তৈরি করা হয়েছিল, যা স্পেকট্রোগ্রামগুলিতে টেক্সট প্রম্পট থেকে চিত্র তৈরির জন্য একটি বিদ্যমান ওপেন-সোর্স মডেল। এর ফলে এমন একটি মডেল তৈরি হয় যা ইমেজ ফাইল তৈরি করতে টেক্সট প্রম্পট ব্যবহার করে, যা একটি বিপরীত ফুরিয়ার রূপান্তরের মাধ্যমে রাখা যেতে পারে এবং অডিও ফাইলে রূপান্তরিত হতে পারে। যদিও এই ফাইলগুলি মাত্র কয়েক সেকেন্ড দীর্ঘ, মডেলটি বিভিন্ন ফাইলকে একসাথে ইন্টারপোলেট করতে আউটপুটগুলির মধ্যে সুপ্ত স্থানও ব্যবহার করতে পারে। এটি আইএমজি2আইএমজি নামে পরিচিত স্থিতিশীল বিস্তার মডেলের একটি কার্যকারিতা ব্যবহার করে সম্পন্ন করা হয়। ফলস্বরূপ সঙ্গীতটিকে "দে ওত্রো মুন্ডো" (অন্য জগতের) হিসাবে বর্ণনা করা হয়েছে, যদিও মানবসৃষ্ট সঙ্গীতকে প্রতিস্থাপন করার সম্ভাবনা কম। মডেলটি 15ই ডিসেম্বর, 2022-এ উপলব্ধ করা হয়েছিল, কোডটি গিটহাব-এও বিনামূল্যে পাওয়া যায়। এটি স্থিতিশীল বিস্তার থেকে উদ্ভূত অনেক মডেলের মধ্যে একটি। রিফিউশনকে এআই টেক্সট-টু-মিউজিক জেনারেটরের একটি উপসেটের মধ্যে শ্রেণীবদ্ধ করা হয়। 2022 সালের ডিসেম্বরে, মুবার্ট একইভাবে বর্ণনামূলক পাঠ্যকে সঙ্গীত লুপে পরিণত করতে স্থিতিশীল বিচ্ছুরণ ব্যবহার করেছিলেন। 2023 সালের জানুয়ারিতে, গুগল মিউজিক এলএম নামে তাদের নিজস্ব টেক্সট-টু-মিউজিক জেনারেটরের উপর একটি গবেষণাপত্র প্রকাশ করে। তথ্যসূত্র গভীর শিক্ষণ সফ্টওয়্যার অ্যাপ্লিকেশন কম্পিউটার সঙ্গীত