LAION
লায়ন (লার্জ-স্কেল আর্টিফিশিয়াল ইন্টেলিজেন্স ওপেন নেটওয়ার্কের সংক্ষিপ্ত রূপ) একটি জার্মান অলাভজনক সংস্থা যা ওপেন-সোর্স কৃত্রিম বুদ্ধিমত্তার মডেল এবং ডেটাসেট তৈরি করে। এটি ওয়েব থেকে স্ক্র্যাপ করা ছবি এবং ক্যাপশনের বেশ কয়েকটি বড় ডেটাসেট প্রকাশের জন্য সবচেয়ে বেশি পরিচিত যা স্থিতিশীল বিচ্ছুরণ এবং ইমেজেন সহ বেশ কয়েকটি হাই-প্রোফাইল টেক্সট-টু-ইমেজ মডেলকে প্রশিক্ষণ দিতে ব্যবহৃত হয়েছে। 2023 সালের ফেব্রুয়ারিতে, স্থিতিশীল বিস্তারের বিরুদ্ধে গেটি ইমেজেস মামলায় লায়নকে একটি অ-পক্ষ হিসাবে নাম দেওয়া হয়েছিল। 2023 সালের এপ্রিলে, একজন জার্মান ফটোগ্রাফার সরাসরি লায়নের বিরুদ্ধে মামলা করেছিলেন, যিনি প্রশিক্ষণ সেট থেকে তার ছবি সরিয়ে ফেলতে চেয়েছিলেন। 2023 সালের 15ই এপ্রিল, লায়ন এবং অবদানকারীরা জনসাধারণের জন্য একটি ওপেন সোর্স এআই সহকারী চ্যাটবট ওপেন অ্যাসিস্ট্যান্ট প্রকাশ করে। ইমেজ ডেটাসেট এল. এ. আই. ও. এন প্রকাশ্যে ইমেজ-ক্যাপশন জুটির বেশ কয়েকটি বড় ডেটাসেট প্রকাশ করেছে যা এআই গবেষকদের দ্বারা ব্যাপকভাবে ব্যবহৃত হয়েছে। তথ্যটি কমন ক্রল থেকে নেওয়া হয়েছে, যা স্ক্র্যাপ করা ওয়েব পৃষ্ঠাগুলির একটি ডেটাসেট। ডেভেলপাররা ট্যাগের জন্য ক্রল করা এইচটিএমএল অনুসন্ধান করে এবং তাদের অল্ট বৈশিষ্ট্যগুলিকে ক্যাপশন হিসাবে ব্যবহার করে। তারা সি. এল. আই. পি ব্যবহার করে এমন ছবিগুলি সনাক্ত এবং ফেলে দেয় যার বিষয়বস্তু তাদের ক্যাপশনের সাথে মেলে না। এল. এ. আই. ও. এন নিজেরাই স্ক্র্যাপ করা চিত্রগুলির বিষয়বস্তু হোস্ট করে না; বরং, ডেটাসেটটিতে চিত্রগুলির দিকে নির্দেশ করে ইউ. আর. এল রয়েছে, যা গবেষকদের অবশ্যই ডাউনলোড করতে হবে। এই ধরনের প্রথম ডেটাসেট, লায়ন-400এম, 2021 সালের আগস্টে প্রকাশিত হয়েছিল এবং এতে 40 কোটি ছবি-ক্যাপশন জোড়া ছিল। 2014 থেকে 2021 সালের মধ্যে কমন ক্রল দ্বারা স্ক্র্যাপ করা ওয়েবপৃষ্ঠাগুলির একটি এলোমেলো উপসেট থেকে জোড়া বের করা হয়েছিল। এটি ওপেনএআই দ্বারা ব্যবহৃত প্রক্রিয়াটি পুনরায় তৈরি করার একটি প্রচেষ্টা ছিল যাতে তারা সিএলআইপি মডেলকে প্রশিক্ষণ দেওয়ার জন্য ব্যবহৃত 400 মিলিয়ন ইমেজ-ক্যাপশন জোড়া সংগ্রহ করতে পারে-সংস্থাটি মডেলের কোড এবং ওজন ওপেন-সোর্স করতে বেছে নিয়েছিল, তবে এর প্রশিক্ষণ ডেটাসেট নয়। 2022 সালে গুগল ব্রেইন দ্বারা ঘোষিত টেক্সট-টু-ইমেজ মডেল ইমেজেনকে ব্যক্তিগত অভ্যন্তরীণ ডেটাসেটের সংমিশ্রণে লায়ন-400এম-এ প্রশিক্ষণ দেওয়া হয়েছিল। 5 বিলিয়নেরও বেশি জুটির উত্তরসূরি, লায়ন-5বি, 2022 সালের মার্চ মাসে মুক্তি পায়। এর প্রকাশের সময়, এটি বিদ্যমান চিত্র-ক্যাপশন জুটির বৃহত্তম বিনামূল্যে উপলব্ধ ডেটাসেট ছিল। এর সৃষ্টির অর্থায়ন করেছিল ডুডলবট, হাগিং ফেস এবং স্ট্যাবিলিটি এআই, স্ট্যাবল ডিফিউশন টেক্সট-টু-ইমেজ মডেলের অর্থায়নের পিছনে এআই সংস্থা, যা এটির উপর প্রশিক্ষিত হয়েছিল। ওপেন অ্যাসিস্ট্যান্ট একটি কৃত্রিম বুদ্ধিমত্তা (এআই) ওপেন সোর্স চ্যাট-ভিত্তিক সহকারী যা কাজগুলি বোঝে, তৃতীয় পক্ষের সিস্টেমগুলির সাথে যোগাযোগ করতে পারে এবং গতিশীলভাবে তথ্য পুনরুদ্ধার করতে পারে। এল. এ. আই. ও. এন-এর সহযোগিতায় স্বেচ্ছাসেবকদের একটি দল এই প্রকল্পটি তৈরি করেছে। উন্নয়নের লক্ষ্যগুলির মধ্যে একটি হল বড় ভাষার মডেলগুলিতে বিনামূল্যে প্রবেশাধিকার যা ভোক্তা হার্ডওয়্যারে স্থানীয়ভাবে চালানো যেতে পারে। এই প্রকল্পটি 13,500-এরও বেশি স্বেচ্ছাসেবীর সমন্বয়ে বিশ্বব্যাপী ক্রাউডসোর্সিং প্রচেষ্টা দ্বারা সমর্থিত যারা 600k মানব-উত্পাদিত ডেটা পয়েন্ট তৈরি করেছে। রেফারেন্স কৃত্রিম বুদ্ধিমত্তার প্রয়োগ উন্মুক্ত উৎস কৃত্রিম বুদ্ধিমত্তা কৃত্রিম বুদ্ধিমত্তা পরীক্ষাগার জার্মানি ভিত্তিক অলাভজনক সংস্থা