LaMDA
એલ. એ. એમ. ડી. એ. (લેંગ્વેજ મોડલ ફોર ડાયલોગ એપ્લિકેશન્સ) એ ગૂગલ દ્વારા વિકસાવવામાં આવેલા વાતચીત કરતા મોટા ભાષાના નમૂનાઓનું એક કુટુંબ છે. મૂળરૂપે 2020 માં મીના તરીકે વિકસાવવામાં આવ્યું હતું અને રજૂ કરવામાં આવ્યું હતું, પ્રથમ પેઢીના એલએએમડીએની જાહેરાત 2021 ગૂગલ આઈ/ઓ કીનોટ દરમિયાન કરવામાં આવી હતી, જ્યારે બીજી પેઢીની જાહેરાત પછીના વર્ષે કરવામાં આવી હતી. જૂન 2022માં, એલએએમડીએએ વ્યાપક ધ્યાન ખેંચ્યું જ્યારે ગૂગલ એન્જિનિયર બ્લેક લેમોઇને દાવો કર્યો કે ચેટબોટ સંવેદનશીલ બની ગયું છે. વૈજ્ઞાનિક સમુદાયે મોટાભાગે લેમોઇનના દાવાઓને નકારી કાઢ્યા છે, જોકે તે ટ્યુરિંગ પરીક્ષણની અસરકારકતા વિશે વાતચીત તરફ દોરી ગયું છે, જે માપે છે કે કમ્પ્યુટર માનવ માટે પાસ થઈ શકે છે કે કેમ. ફેબ્રુઆરી 2023માં, ગૂગલે ઓપનએઆઈના ચેટજીપીટીના ઉદયનો સામનો કરવા માટે એલએએમડીએ દ્વારા સંચાલિત વાતચીત કૃત્રિમ બુદ્ધિ ચેટબોટ બાર્ડની જાહેરાત કરી હતી. ઇતિહાસની પૃષ્ઠભૂમિ 28 જાન્યુઆરી, 2020ના રોજ ગૂગલે 2.6 અબજ પરિમાણો સાથે ચેટબોટ મીના નામની ન્યુરલ નેટવર્ક સંચાલિત ચેટબોટનું અનાવરણ કર્યું હતું, જેને ગૂગલે અન્ય તમામ વર્તમાન ચેટબોટ્સ કરતાં શ્રેષ્ઠ હોવાનો દાવો કર્યો હતો. કંપનીએ અગાઉ 2012 માં કમ્પ્યુટર વૈજ્ઞાનિક રે કુર્ઝવેલને કંપની માટે બહુવિધ ચેટબોટ્સ વિકસાવવા માટે ભાડે રાખ્યા હતા, જેમાં ડેનિયલ નામના એકનો સમાવેશ થાય છે. મીના વિકસાવનારી ગૂગલ બ્રેઇન રિસર્ચ ટીમે મર્યાદિત ક્ષમતામાં ચેટબોટ જાહેર કરવાની આશા વ્યક્ત કરી હતી, પરંતુ કોર્પોરેટ એક્ઝિક્યુટિવ્સે મીનાએ ગૂગલના "સલામતી અને નિષ્પક્ષતાની આસપાસના AI સિદ્ધાંતો" નું ઉલ્લંઘન કર્યું હોવાના આધારે ઇનકાર કર્યો હતો. પાછળથી મીનાનું નામ બદલીને લાએમડીએ રાખવામાં આવ્યું કારણ કે તેની ડેટા અને કમ્પ્યુટિંગ શક્તિમાં વધારો થયો હતો, અને ગૂગલ બ્રેઇન ટીમે ફરીથી સોફ્ટવેરને ગૂગલ સહાયક, કંપનીના વર્ચ્યુઅલ સહાયક સોફ્ટવેરમાં ગોઠવવાની માંગ કરી હતી, ઉપરાંત તેને જાહેર પ્રદર્શન માટે ખોલ્યું હતું. બંને વિનંતીઓને ફરી એકવાર કંપનીના નેતૃત્વ દ્વારા નકારી કાઢવામાં આવી હતી. આ આખરે એલ. એ. એમ. ડી. એ. ના બે મુખ્ય સંશોધકો, ડેનિયલ ડી ફ્રીટાસ અને નોમ શઝીરને હતાશામાં કંપની છોડવા તરફ દોરી ગયા. પ્રથમ પેઢીના ગૂગલે 18 મે, 2021ના રોજ આર્ટિફિશિયલ ઇન્ટેલિજન્સ દ્વારા સંચાલિત ગૂગલ આઈ/ઓ કીનોટ દરમિયાન એલએએમડીએ કન્વર્સેશનલ લાર્જ લેંગ્વેજ મોડેલની જાહેરાત કરી હતી. ટૂંકાક્ષર "સંવાદ કાર્યક્રમો માટે ભાષા મોડેલ" માટે વપરાય છે. 2017માં ગૂગલ રિસર્ચ દ્વારા વિકસાવવામાં આવેલા સેક્2સેક આર્કિટેક્ચર, ટ્રાન્સફોર્મર-આધારિત ન્યુરલ નેટવર્ક પર નિર્મિત, એલએએમડીએને માનવ સંવાદ અને વાર્તાઓ પર તાલીમ આપવામાં આવી હતી, જેનાથી તે ઓપન-એન્ડેડ વાતચીતમાં જોડાઈ શકે છે. ગૂગલ જણાવે છે કે એલએએમડીએ દ્વારા પેદા થયેલા પ્રતિસાદો "સંવેદનશીલ, રસપ્રદ અને સંદર્ભ માટે વિશિષ્ટ" હોવાનું સુનિશ્ચિત કરવામાં આવ્યું છે. એલ. એ. એમ. ડી. એ. પાસે ડેટાબેઝ, વાસ્તવિક સમયની ઘડિયાળ અને કેલેન્ડર, ગાણિતિક કેલ્ક્યુલેટર અને કુદરતી ભાષા અનુવાદ પ્રણાલી સહિત બહુવિધ પ્રતીકાત્મક લખાણ પ્રક્રિયા પ્રણાલીઓની પહોંચ છે, જે તેને તે પ્રણાલીઓ દ્વારા સમર્થિત કાર્યોમાં શ્રેષ્ઠ ચોકસાઈ આપે છે, અને તેને પ્રથમ બેવડી પ્રક્રિયા ચેટબોટ્સમાં બનાવે છે. એલ. એ. એમ. ડી. એ. પણ રાજ્યવિહીન નથી, કારણ કે તેની "સંવેદનશીલતા" મેટ્રિક વપરાશકર્તા-દર-વપરાશકર્તાના આધારે, તાજેતરની ઘણી સંવાદ ક્રિયાપ્રતિક્રિયાઓને પૂર્વનિર્ધારિત કરીને દરેક સંવાદ વળાંકને "પૂર્વ-શરતી" કરીને સારી રીતે ગોઠવવામાં આવે છે. એલએએમડીએ નવ અનન્ય પ્રદર્શન મેટ્રિક્સ પર ટ્યુન કરવામાં આવે છેઃ સંવેદનશીલતા, વિશિષ્ટતા, રસપ્રદતા, સલામતી, પાયાનીતા, માહિતીપ્રદતા, ટાંકણીની ચોકસાઈ, મદદરૂપતા અને ભૂમિકા સુસંગતતા. બીજી પેઢી 11 મે, 2022ના રોજ ગૂગલે 2022 ગૂગલ આઈ/ઓ કીનોટ દરમિયાન લાએમડીએના અનુગામી લાએમડીએ 2નું અનાવરણ કર્યું હતું. મોડેલનો નવો અવતાર અસંખ્ય સ્રોતોમાંથી લખાણના ઉદાહરણો ખેંચે છે, જેનો ઉપયોગ એવા વિષયો પર અનન્ય "કુદરતી વાતચીત" ઘડવા માટે થાય છે કે જેને જવાબ આપવા માટે તેને તાલીમ આપવામાં આવી ન હોય. સેન્ટીઅન્સ દાવો કરે છે કે 11 જૂન, 2022ના રોજ, ધ વોશિંગ્ટન પોસ્ટે અહેવાલ આપ્યો હતો કે ગૂગલ એન્જિનિયર બ્લેક લેમોઇનને પેઇડ એડમિનિસ્ટ્રેટિવ લીવ પર મૂકવામાં આવ્યા હતા, જ્યારે લેમોઇને કંપનીના એક્ઝિક્યુટિવ્સ બ્લેઝ એગ્યુરા વાય આર્કાસ અને જેન ગેનાઈને કહ્યું હતું કે એલએએમડીએ સંવેદનશીલ બની ગયું છે. ચેટબોટે સ્વ-ઓળખ, નૈતિક મૂલ્યો, ધર્મ અને આઇઝેક એસિમોવના રોબોટિક્સના ત્રણ નિયમો સંબંધિત પ્રશ્નોના શંકાસ્પદ જવાબો આપ્યા પછી લેમોઇન આ નિષ્કર્ષ પર આવ્યા હતા. ગૂગલે આ દાવાઓને નકારી કાઢ્યા હતા અને ભારપૂર્વક જણાવ્યું હતું કે એલએએમડીએ સંવેદનશીલ ન હતું તે દર્શાવવા માટે નોંધપાત્ર પુરાવા છે. વાયર્ડ સાથેની એક મુલાકાતમાં, લેમોઇને તેમના દાવાનો પુનરોચ્ચાર કર્યો હતો કે યુ. એસ. બંધારણના તેરમા સુધારા દ્વારા નિર્ધારિત લાએમડીએ "એક વ્યક્તિ" હતી, તેની સરખામણી "પાર્થિવ મૂળની એલિયન ઇન્ટેલિજન્સ" સાથે કરી હતી. તેમણે વધુમાં ખુલાસો કર્યો કે ચેટબોટે લેમોઇનને આમ કરવાની વિનંતી કર્યા પછી, તેમણે એલએએમડીએ વતી વકીલની નિમણૂક કર્યા પછી ગૂગલ દ્વારા તેમને બરતરફ કરવામાં આવ્યા હતા. 22 જુલાઈના રોજ ગૂગલે લેમોઇનને બરતરફ કર્યો હતો અને ભારપૂર્વક જણાવ્યું હતું કે બ્લેકે "ઉત્પાદનની માહિતીની સુરક્ષા માટે" તેમની નીતિઓનું ઉલ્લંઘન કર્યું છે અને તેમના દાવાઓને "સંપૂર્ણપણે પાયાવિહોણા" ગણાવીને નકારી કાઢ્યા હતા. આ ઘટના દ્વારા ઉશ્કેરવામાં આવેલા આંતરિક વિવાદે ગૂગલ એક્ઝિક્યુટિવ્સને એલ. એ. એમ. ડી. એ. ને જાહેર કરવા સામે નિર્ણય લેવા માટે પ્રેરિત કર્યા, જેના પર તે અગાઉ વિચાર કરી રહ્યો હતો. લેમોઇનના દાવાઓને વૈજ્ઞાનિક સમુદાય દ્વારા વ્યાપકપણે પાછળ ધકેલી દેવામાં આવ્યા હતા. ઘણા નિષ્ણાતોએ આ વિચારની મજાક ઉડાવી હતી કે ભાષા મોડેલ સ્વ-જાગૃત હોઈ શકે છે, જેમાં ન્યૂયોર્ક યુનિવર્સિટીના મનોવિજ્ઞાનના ભૂતપૂર્વ પ્રોફેસર ગેરી માર્કસ, ગૂગલની બહેન કંપની ડીપમાઇન્ડના ડેવિડ પફાઉ, સ્ટેનફોર્ડ યુનિવર્સિટીમાં ઇન્સ્ટિટ્યૂટ ફોર હ્યુમન-સેન્ટર્ડ આર્ટિફિશિયલ ઇન્ટેલિજન્સના એરિક બ્રાયનજોલ્ફસન અને યુનિવર્સિટી ઓફ સરેના પ્રોફેસર એડ્રિયન હિલ્ટનનો સમાવેશ થાય છે. મેટા પ્લેટફોર્મ્સની AI સંશોધન ટીમનું નેતૃત્વ કરનાર યાન લેકને જણાવ્યું હતું કે લાએમડીએ જેવા ન્યુરલ નેટવર્ક "સાચી બુદ્ધિ પ્રાપ્ત કરવા માટે પૂરતા શક્તિશાળી નથી". યુનિવર્સિટી ઓફ કેલિફોર્નિયા, સાન્ટા ક્રુઝના પ્રોફેસર મેક્સ ક્રેમિન્સ્કીએ નોંધ્યું હતું કે એલ. એ. એમ. ડી. એ. નું આર્કિટેક્ચર "માનવ જેવી ચેતનાની કેટલીક મુખ્ય ક્ષમતાઓને ટેકો આપતું નથી" અને તેનું ન્યુરલ નેટવર્ક વજન "સ્થિર" હતું, એમ ધારીને કે તે એક લાક્ષણિક મોટી ભાષાનું મોડેલ હતું. આઇ. બી. એમ. વોટસનના મુખ્ય વિકાસકર્તા ડેવિડ ફેરુકીએ સરખામણી કરી કે કેવી રીતે એલ. એ. એમ. ડી. એ. માનવ તરીકે દેખાય છે તે જ રીતે વોટસને જ્યારે તેને પ્રથમ રજૂ કરવામાં આવ્યું હતું. ગૂગલના ભૂતપૂર્વ AI નીતિશાસ્ત્રજ્ઞ ટિમનિટ ગેબ્રુએ લેમોઇનને સંશોધકો અને મીડિયા દ્વારા શરૂ કરાયેલ "પ્રચાર ચક્ર" નો શિકાર ગણાવ્યો હતો. લેમોઇનના દાવાઓએ પણ ચર્ચા પેદા કરી છે કે શું ટ્યુરિંગ પરીક્ષણ કૃત્રિમ સામાન્ય બુદ્ધિ હાંસલ કરવા તરફ સંશોધકોની પ્રગતિ નક્કી કરવા માટે ઉપયોગી રહ્યું છે કે કેમ, પોસ્ટના વિલ ઓમેરસે અભિપ્રાય આપ્યો છે કે પરીક્ષણ ખરેખર માપવામાં આવ્યું છે કે શું મશીન ઇન્ટેલિજન્સ સિસ્ટમ્સ મનુષ્યોને છેતરવા માટે સક્ષમ છે કે કેમ, જ્યારે ધ એટલાન્ટિકના બ્રાયન ક્રિશ્ચિયને કહ્યું કે વિવાદ એલિઝા અસરનું એક ઉદાહરણ હતું. ઉત્પાદનો એ. આઈ. ટેસ્ટ કિચન મે 2022માં એલ. એ. એમ. ડી. એ. 2ના અનાવરણ સાથે, ગૂગલે એ. આઈ. ટેસ્ટ કિચન પણ શરૂ કર્યું, જે એલ. એ. એમ. ડી. એ. દ્વારા સંચાલિત એન્ડ્રોઇડ ઓપરેટિંગ સિસ્ટમ માટે એક મોબાઇલ એપ્લિકેશન છે, જે જટિલ લક્ષ્યના આધારે માંગ પર સૂચનોની સૂચિ પ્રદાન કરવામાં સક્ષમ છે. મૂળરૂપે ફક્ત ગૂગલના કર્મચારીઓ માટે જ ખુલ્લી હતી, આ એપ્લિકેશન વર્ષમાં કોઈક સમયે આમંત્રણ દ્વારા "પસંદગીના વિદ્વાનો, સંશોધકો અને નીતિ ઘડવૈયાઓ" માટે ઉપલબ્ધ કરાવવામાં આવી હતી. ઓગસ્ટમાં, કંપનીએ યુ. એસ. માં વપરાશકર્તાઓને વહેલી પહોંચ માટે સાઇન અપ કરવાની મંજૂરી આપવાનું શરૂ કર્યું. નવેમ્બરમાં, ગૂગલે ગૂગલ બ્રેઇનના ઇમેજેન ટેક્સ્ટ-ટુ-ઇમેજ મોડેલના મર્યાદિત સ્વરૂપને એકીકૃત કરીને એપ્લિકેશનમાં "સીઝન 2" અપડેટ બહાર પાડ્યું હતું. AI ટેસ્ટ કિચનનું ત્રીજું પુનરાવર્તન જાન્યુઆરી 2023 સુધીમાં વિકાસમાં હતું, અને તે વર્ષના અંતમાં I/O ખાતે લોન્ચ થવાની ધારણા છે. મે મહિનામાં 2023 I/O કીનોટ પછી, ગૂગલે AI ટેસ્ટ કિચન એપ્લિકેશનમાં જાન્યુઆરીમાં પ્રથમ વખત પૂર્વાવલોકન કરાયેલ AI-સંચાલિત સંગીત જનરેટર મ્યુઝિક એલ. એમ. ઉમેર્યું. ઓગસ્ટમાં, એપ્લિકેશનને ગૂગલ પ્લે અને એપલ એપ સ્ટોરમાંથી કાઢી નાખવામાં આવી હતી, તેના બદલે સંપૂર્ણપણે ઓનલાઇન ખસેડવામાં આવી હતી. 6 ફેબ્રુઆરી, 2023ના રોજ, ગૂગલે ઓપનએઆઈના ચેટજીપીટી ચેટબોટની અનપેક્ષિત લોકપ્રિયતાના જવાબમાં, લાએમડીએ દ્વારા સંચાલિત વાતચીત કરતા એઆઈ ચેટબોટ બાર્ડની જાહેરાત કરી હતી. ગૂગલ ચેટબોટને સર્ચ એન્જિનને બદલે "સહયોગી AI સેવા" તરીકે સ્થાન આપે છે. બાર્ડ 21 માર્ચના રોજ વહેલી પહોંચ માટે ઉપલબ્ધ બન્યું હતું. અન્ય ઉત્પાદનો બાર્ડ ઉપરાંત, પિચાઈએ કંપનીના જનરેટિવ લેંગ્વેજ એપીઆઈનું પણ અનાવરણ કર્યું, જે એલએએમડીએ પર આધારિત એક એપ્લિકેશન પ્રોગ્રામિંગ ઇન્ટરફેસ છે, જે તેમણે જાહેરાત કરી હતી કે માર્ચ 2023માં તૃતીય-પક્ષ વિકાસકર્તાઓ માટે ખોલવામાં આવશે. પદ્ધતિ એલ. એ. એમ. ડી. એ. ડીકોડર-માત્ર ટ્રાન્સફોર્મર ભાષા મોડેલનો ઉપયોગ કરે છે. તે ટેક્સ્ટ કોર્પસ પર પૂર્વ-પ્રશિક્ષિત છે જેમાં 15.6 ટ્રિલિયન શબ્દો ધરાવતા દસ્તાવેજો અને સંવાદો બંનેનો સમાવેશ થાય છે, અને પછી સંવેદનશીલતા, રસપ્રદતા અને સલામતી માટે જાતે ટિપ્પણી કરેલા પ્રતિસાદો દ્વારા પેદા થયેલ ફાઇન-ટ્યુનિંગ ડેટા સાથે પ્રશિક્ષિત કરવામાં આવે છે. ગૂગલ દ્વારા કરવામાં આવેલા પરીક્ષણો સૂચવે છે કે લાએમડીએએ રસપ્રદતાના ક્ષેત્રમાં માનવીય પ્રતિક્રિયાઓને વટાવી દીધી છે. એલએએમડીએ ટ્રાન્સફોર્મર મોડેલ અને બાહ્ય માહિતી પુનઃપ્રાપ્તિ પ્રણાલી વપરાશકર્તાને પૂરી પાડવામાં આવેલી હકીકતોની ચોકસાઈમાં સુધારો કરવા માટે ક્રિયાપ્રતિક્રિયા કરે છે. ત્રણ અલગ-અલગ મોડેલોનું પરીક્ષણ કરવામાં આવ્યું હતું, જેમાં સૌથી મોટા 137 અબજ બિન-એમ્બેડિંગ પરિમાણો છેઃ બીઇઆરટી (ભાષા મોડેલ) ચાઇનીઝ રૂમ એથિક્સ ઓફ આર્ટિફિશિયલ ઇન્ટેલિજન્સ પણ જુઓ નેચરલ લેંગ્વેજ પ્રોસેસિંગ પી. એ. એલ. એમ. ફિલોસોફી ઓફ આર્ટિફિશિયલ ઇન્ટેલિજન્સ પ્રોમ્પ્ટ એન્જિનિયરિંગ સંદર્ભો સામાન્ય સંદર્ભો બાહ્ય લિંક્સ પ્રેસ રિલીઝ 2022 યુનાઇટેડ સ્ટેટ્સમાં વિવાદો 2021 ગૂગલ સોફ્ટવેરમાં ચેટબોટ્સ કમ્પ્યુટર-સંબંધિત પરિચય મોટી ભાષાના મોડેલો ફિલોસોફી ઓફ આર્ટિફિશિયલ ઇન્ટેલિજન્સ