Content determination
உள்ளடக்கத்தை தீர்மானிப்பது என்பது இயற்கையான மொழி உற்பத்தியின் (என். எல். ஜி) துணைப்பணியாகும், இது உருவாக்கப்பட்ட உரையில் தொடர்பு கொள்ள வேண்டிய தகவல்களைத் தீர்மானிப்பதை உள்ளடக்கியது. இது ஆவண கட்டமைப்பின் பணியுடன் நெருக்கமாக தொடர்புடையது. எடுத்துக்காட்டு நோய்வாய்ப்பட்ட குழந்தைகளைப் பற்றிய தகவல்களை சுருக்கமாகக் கூறும் ஒரு என். எல். ஜி அமைப்பைக் கவனியுங்கள். இந்த அமைப்பில் நான்கு தகவல் துண்டுகள் உள்ளன என்று வைத்துக்கொள்வோம், அது தொடர்பு கொள்ள முடியும் குழந்தைக்கு IV துளி வழியாக மார்ஃபின் வழங்கப்படுகிறது குழந்தையின் இதய துடிப்பு பிராடிகார்டியாவின் (தற்காலிக துளி) குழந்தையின் வெப்பநிலை சாதாரணமாக இருப்பதைக் காட்டுகிறது குழந்தை அழுகிறது இந்த தகவல்களில் எந்தத் துண்டுகள் உருவாக்கப்பட்ட உரைகளில் சேர்க்கப்பட வேண்டும்? சிக்கல்கள் உள்ளடக்க தீர்மானிக்கும் பணியை எப்போதும் பாதிக்கும் மூன்று பொதுவான சிக்கல்கள் உள்ளன, மேலும் மேலே உள்ள எடுத்துக்காட்டுடன் விளக்கப்படலாம். ஒருவேளை மிகவும் அடிப்படை பிரச்சினை உரையின் தகவல்தொடர்பு குறிக்கோள், அதாவது. அதன் நோக்கம் மற்றும் வாசகர். மேற்கண்ட எடுத்துக்காட்டில், உதாரணமாக, மருத்துவ சிகிச்சையைப் பற்றி ஒரு முடிவை எடுக்க விரும்பும் ஒரு மருத்துவர் அநேகமாக இதய துடிப்பு பிராடிகார்டியாக்களில் அதிக ஆர்வம் காட்டுவார், அதே நேரத்தில் தனது குழந்தை எப்படி இருக்கிறது என்பதை அறிய விரும்பிய ஒரு பெற்றோர் அநேகமாக குழந்தைக்கு மார்ஃபின் கொடுக்கப்பட்டு அழுதுகொண்டிருந்தது என்ற உண்மையில் அதிக ஆர்வம் காட்டுவார்கள். இரண்டாவது பிரச்சினை உருவாக்கப்பட்ட உரையின் விவரங்களின் அளவு மற்றும் நிலை. உதாரணமாக, ஒரு மருத்துவருக்கு 160 எழுத்துக்கள் கொண்ட எஸ்எம்எஸ் உரைச் செய்தியாக அனுப்பப்பட்ட ஒரு குறுகிய சுருக்கம் இதய துடிப்பு பிராடிகார்டியாக்களை மட்டுமே குறிப்பிடலாம், அதே நேரத்தில் பல பக்க ஆவணமாக அச்சிடப்பட்ட ஒரு நீண்ட சுருக்கம் குழந்தை ஒரு மார்ஃபின் IV இல் உள்ளது என்ற உண்மையையும் குறிப்பிடலாம். தகவல் எவ்வளவு அசாதாரணமானது மற்றும் எதிர்பாராதது என்பது இறுதிப் பிரச்சினை. உதாரணமாக, இது அவ்வாறு இருக்கும் என்று அவர்கள் எதிர்பார்த்தால், குழந்தையின் வெப்பநிலை இயல்பானது என்று கூறப்படுவதற்கு மருத்துவர்களோ பெற்றோர்களோ அதிக முன்னுரிமை அளிக்க மாட்டார்கள். பொருட்படுத்தாமல், உள்ளடக்க நிர்ணயம் பயனர்களுக்கு மிகவும் முக்கியமானது, உண்மையில் பல சந்தர்ப்பங்களில் உள்ளடக்க தீர்மானத்தின் தரம் என்பது உருவாக்கப்பட்ட உரையின் ஒட்டுமொத்த தரத்தை தீர்மானிப்பதில் மிக முக்கியமான காரணியாகும் (பயனரின் கண்ணோட்டத்தில்). நுட்பங்கள் ஆவண கட்டமைப்பிற்கு மூன்று அடிப்படை அணுகுமுறைகள் உள்ளனஃ திட்டங்கள் (உள்ளடக்க வார்ப்புருக்கள்), புள்ளிவிவர அணுகுமுறைகள் மற்றும் வெளிப்படையான பகுத்தறிவு. ஸ்கிமாக்கள் என்பது உருவாக்கப்பட்ட உரையின் உள்ளடக்கத்தை (அதே போல் ஆவண கட்டமைப்புத் தகவலையும்) வெளிப்படையாகக் குறிப்பிடும் வார்ப்புருக்கள் ஆகும். பொதுவாக, அவை இலக்கு வகைகளில் மனிதனால் எழுதப்பட்ட நூல்களின் தொகுப்பை கைமுறையாக பகுப்பாய்வு செய்வதன் மூலமும், இந்த நூல்களிலிருந்து ஒரு உள்ளடக்க வார்ப்புருவைப் பிரித்தெடுப்பதன் மூலமும் கட்டமைக்கப்படுகின்றன. உள்ளடக்கம் ஓரளவு தரப்படுத்தப்பட்ட களங்களில் ஸ்கிமாக்கள் நடைமுறையில் நன்றாக வேலை செய்கின்றன, ஆனால் உள்ளடக்கம் அதிக திரவமாக இருக்கும் களங்களில் குறைவாகவே வேலை செய்கின்றன (மேலே உள்ள மருத்துவ உதாரணம் போன்றவை). உருவாக்கப்பட்ட நூல்களின் உள்ளடக்கத்தை தானாகவே தீர்மானிக்க புள்ளியியல் நுட்பங்கள் புள்ளியியல் கார்பஸ் பகுப்பாய்வு நுட்பங்களைப் பயன்படுத்துகின்றன. இத்தகைய படைப்பு அதன் ஆரம்ப கட்டத்தில் உள்ளது, மேலும் பெரும்பாலும் தகவல்தொடர்பு இலக்கு, வாசகர், அளவு மற்றும் விவரங்களின் நிலை ஆகியவை நிர்ணயிக்கப்பட்ட சூழல்களுக்கு பயன்படுத்தப்படுகிறது. எடுத்துக்காட்டாக, செய்தி கம்பியின் தலைமுறை விளையாட்டு நிகழ்வுகளின் சுருக்கங்கள். வெளிப்படையான பகுத்தறிவு அணுகுமுறைகள் அநேகமாக ஆராய்ச்சியாளர்களிடமிருந்து அதிக கவனத்தை ஈர்த்துள்ளன. அடிப்படை யோசனை AI பகுத்தறிவு நுட்பங்களைப் பயன்படுத்துவதாகும் (அறிவு அடிப்படையிலான விதிகள், திட்டமிடல், முறை கண்டறிதல், வழக்கு அடிப்படையிலான பகுத்தறிவு போன்றவை). தொடர்பு கொள்ள கிடைக்கக்கூடிய தகவல்கள் (அது எவ்வளவு அசாதாரணமானது/எதிர்பாராதது உட்பட), தொடர்பு இலக்கு மற்றும் வாசகர் மற்றும் உருவாக்கப்பட்ட உரையின் பண்புகள் (இலக்கு அளவு உட்பட) ஆகியவற்றை ஆராய்ந்து, உருவாக்கப்பட்ட உரைக்கான உகந்த உள்ளடக்கத்தை தீர்மானிக்கவும். மிகவும் பரந்த அளவிலான நுட்பங்கள் ஆராயப்பட்டுள்ளன, ஆனால் எது மிகவும் பயனுள்ளதாக இருக்கும் என்பதில் ஒருமித்த கருத்து இல்லை. குறிப்புகள் கணக்கீட்டு மொழியியல் இயற்கை மொழி செயலாக்கம் இயற்கை மொழி உருவாக்கம்