Learning automaton
கற்றல் தானியங்கி இயந்திரம் என்பது 1970 களில் இருந்து ஆய்வு செய்யப்பட்ட ஒரு வகை இயந்திர கற்றல் வழிமுறையாகும். கற்றல் தானியங்கி சூழலிலிருந்து கடந்த கால அனுபவங்களின் அடிப்படையில் அவர்களின் தற்போதைய செயலைத் தேர்ந்தெடுக்கிறது. சூழல் சீரற்றதாக இருந்தால் அது வலுவூட்டல் கற்றல் வரம்பிற்குள் வரும் மற்றும் ஒரு மார்கோவ் முடிவு செயல்முறை (எம். டி. பி) பயன்படுத்தப்படுகிறது. தானியங்கி கற்றலில் வரலாற்று ஆராய்ச்சியை 1960 களின் முற்பகுதியில் சோவியத் யூனியனில் மைக்கேல் ல்வோவிட்ச் செட்லின் மேற்கொண்ட பணிகளில் காணலாம். சில சக ஊழியர்களுடன் சேர்ந்து, தானியங்கி செயல்பாடுகளை விவரிக்க மெட்ரிக்குகளை எவ்வாறு பயன்படுத்துவது என்பது குறித்த ஆவணங்களின் தொகுப்பை வெளியிட்டார். கூடுதலாக, செட்லின் நியாயமான மற்றும் கூட்டு தானியங்கி நடத்தை மற்றும் தானியங்கி விளையாட்டுகளில் பணியாற்றினார். கற்றல் தானியங்கிகளும் 1960 களில் அமெரிக்காவில் ஆராய்ச்சிகளால் ஆராயப்பட்டன. இருப்பினும், 1974 ஆம் ஆண்டில் நரேந்திர மற்றும் தத்தாச்சார் ஒரு ஆய்வுக் கட்டுரையில் அறிமுகப்படுத்தப்படும் வரை கற்றல் தானியங்கி என்ற சொல் பயன்படுத்தப்படவில்லை. வரையறை ஒரு கற்றல் தானியங்கி என்பது சீரற்ற சூழலில் அமைந்துள்ள ஒரு தகவமைப்பு முடிவெடுக்கும் அலகு ஆகும், இது அதன் சூழலுடன் மீண்டும் மீண்டும் தொடர்புகொள்வதன் மூலம் உகந்த செயலைக் கற்றுக்கொள்கிறது. ஒரு குறிப்பிட்ட நிகழ்தகவு விநியோகத்தின் படி செயல்கள் தேர்ந்தெடுக்கப்படுகின்றன, இது ஒரு குறிப்பிட்ட செயலைச் செய்வதன் மூலம் தானியங்கி இயந்திரம் பெறும் சுற்றுச்சூழல் பதிலின் அடிப்படையில் புதுப்பிக்கப்படுகிறது. வலுவூட்டல் கற்றல் துறையைப் பொறுத்தவரை, கற்றல் தானியங்கி கொள்கை மறு செய்கைகளாக வகைப்படுத்தப்படுகின்றன. மற்ற வலுவூட்டல் கற்றவர்களுக்கு மாறாக, கொள்கை மறு செய்கையாளர்கள் கொள்கையை நேரடியாக கையாளுகிறார்கள். கொள்கை மறு செய்கைகளுக்கு மற்றொரு எடுத்துக்காட்டு பரிணாம வழிமுறைகள் ஆகும். முறைப்படி, நரேந்திர மற்றும் தத்தாச்சார் ஒரு சீரற்ற தானியங்கி இயந்திரத்தை பின்வருமாறு வரையறுக்கிறார்கள்ஃ சாத்தியமான உள்ளீடுகளின் தொகுப்பு X, சாத்தியமான உள் நிலைகளின் தொகுப்பு φ = {φ1,., φs, சாத்தியமான வெளியீடுகளின் தொகுப்பு α = {α1,., αr} அல்லது செயல்பாடுகள், r ≤ s உடன், ஒரு ஆரம்ப நிலை நிகழ்தகவு திசையன் p (0) = φp1 (0), ps (0), ஒரு கணக்கிடக்கூடிய செயல்பாடு A, இது ஒவ்வொரு நேர நடவடிக்கைக்குப் பிறகும் t, p (t + 1) ஐ உருவாக்குகிறது, தற்போதைய உள்ளீடு மற்றும் தற்போதைய நிலை, மற்றும் ஒரு செயல்பாடு G: φ → α இது ஒவ்வொரு நேர படியிலும் வெளியீட்டை உருவாக்குகிறது. தங்கள் ஆய்வறிக்கையில், r = s மற்றும் G புறநிலை கொண்ட சீரற்ற தானியங்கிகளை மட்டுமே அவர்கள் ஆராய்ந்து, செயல்களையும் நிலைகளையும் குழப்ப அனுமதிக்கின்றனர். அத்தகைய தானியங்கி இயந்திரத்தின் நிலைகள் "தனித்த-நிலை தனித்த-அளவுரு மார்கோவ் செயல்முறையின்" நிலைகளுடன் ஒத்திருக்கின்றன. ஒவ்வொரு கட்டத்திலும் t = 0,1,2,3,., தானியங்கி இயந்திரம் அதன் சூழலில் இருந்து ஒரு உள்ளீட்டைப் படிக்கிறது, p (t) ஐ p (t + 1) க்கு A ஆல் புதுப்பிக்கிறது, தோராயமாக p (t + 1) நிகழ்தகவுகளின்படி ஒரு வாரிசு நிலையைத் தேர்ந்தெடுத்து அதனுடன் தொடர்புடைய செயலை வெளியிடுகிறது. தானியங்கி இயந்திரத்தின் சூழல், செயலைப் படித்து, அடுத்த உள்ளீட்டை தானியங்கி இயந்திரத்திற்கு அனுப்புகிறது. அடிக்கடி, உள்ளீட்டு தொகுப்பு X = {0,1} பயன்படுத்தப்படுகிறது, 0 மற்றும் 1 முறையே அபராதம் அல்லாத மற்றும் சூழலின் அபராத பதிலுடன் தொடர்புடையது; இந்த விஷயத்தில், தானியங்கி இயந்திரம் அபராத பதில்களின் எண்ணிக்கையைக் குறைக்க கற்றுக்கொள்ள வேண்டும், மேலும் தானியங்கி இயந்திரம் மற்றும் சூழலின் பின்னூட்ட வளையம் "பி-மாடல்" என்று அழைக்கப்படுகிறது. மேலும் பொதுவாக, ஒரு "க்யூ-மாடல்" ஒரு தன்னிச்சையான வரையறுக்கப்பட்ட உள்ளீட்டு தொகுப்பு எக்ஸ் ஐ அனுமதிக்கிறது, மேலும் ஒரு "எஸ்-மாடல்" உண்மையான எண்களின் இடைவெளியை [0,1] எக்ஸ் ஆக பயன்படுத்துகிறது. ஒற்றை கற்றல் தானியங்கியின் காட்சிப்படுத்தப்பட்ட டெமோ/கலைப் படைப்பு நியூகேஸில் பல்கலைக்கழகத்தில் உள்ள மைக்ரோசிஸ்டம்ஸ் (மைக்ரோசிஸ்டம்ஸ்) ஆராய்ச்சிக் குழுவால் உருவாக்கப்பட்டது. ஃபைனைட் ஆக்ஷன்-செட் லர்னிங் ஆட்டோமேட்டா (ஃபைனைட் ஆக்ஷன்-செட் லர்னிங் ஆட்டோமேட்டா) என்பது கற்றல் ஆட்டோமேட்டாவின் ஒரு வகுப்பாகும், இதற்காக சாத்தியமான செயல்களின் எண்ணிக்கை வரையறுக்கப்பட்டுள்ளது அல்லது மேலும் கணித அடிப்படையில், செயல்-தொகுப்பின் அளவு வரையறுக்கப்பட்டுள்ளது. மேலும் காண்க வலுவூட்டல் கற்றல் விளையாட்டு கோட்பாடு தானியங்கி கோட்பாடு இலக்கியம் பிலிப் அரன்சுல்லா மற்றும் ஜான் மெல்லர் (முகப்பு பக்கம்): மெல்லர் ஜே மற்றும் அரன்சுல்லா பி (2000): "ஐபி நெட்வொர்க்குகளுக்கான தானியங்கி அடிப்படையிலான ரூட்டிங் திட்டங்களைக் கற்றுக்கொள்வதன் மூலம் எஸ்-மாடல் மறுமொழி சூழலைப் பயன்படுத்துதல்", புரோக். ஏடிஎம் மற்றும் ஐபி நெட்வொர்க்குகளின் செயல்திறன் மாடலிங் மற்றும் மதிப்பீடு குறித்த எட்டாவது ஐ. எஃப். ஐ. பி பட்டறை, pp 56/1-56 12, இல்க்லி, இங்கிலாந்து. அரன்சுல்லா பி மற்றும் மெல்லர் ஜே (1997): "ஏடிஎம் நெட்வொர்க்குகளில் பயன்படுத்தும்போது குறைந்த சமிக்ஞை தேவைப்படும் இரண்டு ரூட்டிங் வழிமுறைகளை ஒப்பிடுவது", புரோக். தகவல் அமைப்புகளில் செயல்திறன் பொறியியல் குறித்த பதினான்காவது இங்கிலாந்து டெலிட்ராஃபிக் சிம்போசியம், pp 20/1-20 4, UMIST, மான்செஸ்டர், இங்கிலாந்து. செட்லின் எம். எல். உயிரியல் அமைப்புகளின் தானியங்கி கோட்பாடு மற்றும் மாதிரியாக்கம். அகாடமிக் பிரஸ்; 1973. குறிப்புகள் இயந்திர கற்றல் கட்டுப்பாட்டுக் கோட்பாடு