Content determination
বিষয়বস্তু নির্ধারণ হ 'ল ন্যাচারাল ল্যাঙ্গুয়েজ জেনারেশন (এনএলজি)-এর উপ-কাজ যা একটি উত্পন্ন পাঠ্যে যোগাযোগ করার জন্য তথ্যের বিষয়ে সিদ্ধান্ত নেওয়ার সাথে জড়িত। এটি নথি গঠনের কাজের সঙ্গে ঘনিষ্ঠভাবে সম্পর্কিত। উদাহরণ একটি এন. এল. জি ব্যবস্থার কথা বিবেচনা করুন যা অসুস্থ শিশুদের সম্পর্কে তথ্যের সংক্ষিপ্তসার দেয়। ধরুন এই সিস্টেমে চারটি তথ্য রয়েছে যা এটি যোগাযোগ করতে পারে একটি IV ড্রপের মাধ্যমে শিশুকে মরফিন দেওয়া হচ্ছে শিশুর হৃদস্পন্দন ব্র্যাডিকার্ডিয়ার (অস্থায়ী ড্রপ) দেখায় শিশুর তাপমাত্রা স্বাভাবিক শিশুটি কাঁদছে এই তথ্যগুলির মধ্যে কোনটি উৎপন্ন পাঠ্যগুলিতে অন্তর্ভুক্ত করা উচিত? তিনটি সাধারণ সমস্যা রয়েছে যা প্রায় সবসময় বিষয়বস্তু নির্ধারণের কাজকে প্রভাবিত করে এবং উপরের উদাহরণ দিয়ে চিত্রিত করা যেতে পারে। সম্ভবত সবচেয়ে মৌলিক বিষয় হল পাঠ্যের যোগাযোগমূলক লক্ষ্য, অর্থাৎ। এর উদ্দেশ্য এবং পাঠক। উপরের উদাহরণে, উদাহরণস্বরূপ, একজন ডাক্তার যিনি চিকিৎসা সম্পর্কে সিদ্ধান্ত নিতে চান তিনি সম্ভবত হার্ট রেট ব্র্যাডিকার্ডিয়াসের বিষয়ে সবচেয়ে বেশি আগ্রহী হবেন, অন্যদিকে একজন বাবা-মা যিনি জানতে চেয়েছিলেন যে তার সন্তানের অবস্থা কেমন ছিল তিনি সম্ভবত এই বিষয়ে বেশি আগ্রহী হবেন যে শিশুটিকে মরফিন দেওয়া হচ্ছে এবং সে কাঁদছে। দ্বিতীয় বিষয়টি হল উৎপাদিত পাঠ্যের বিশদ বিবরণের আকার এবং স্তর। উদাহরণস্বরূপ, 160 অক্ষরের এস. এম. এস পাঠ্য বার্তা হিসাবে একজন ডাক্তারের কাছে পাঠানো একটি সংক্ষিপ্ত সারসংক্ষেপ শুধুমাত্র হার্ট রেট ব্র্যাডিকার্ডিয়াসের উল্লেখ করতে পারে, অন্যদিকে একটি দীর্ঘ সারসংক্ষেপ যা মাল্টিপেজ নথি হিসাবে মুদ্রিত হয়েছিল সেটিও উল্লেখ করতে পারে যে শিশুটি মরফিন IV-এ রয়েছে। চূড়ান্ত প্রশ্নটি হল তথ্যটি কতটা অস্বাভাবিক এবং অপ্রত্যাশিত। উদাহরণস্বরূপ, ডাক্তার বা বাবা-মা কেউই শিশুর তাপমাত্রা স্বাভাবিক বলে বলার উপর উচ্চ অগ্রাধিকার দেবেন না, যদি তারা আশা করেন যে এটি ঘটবে। যাই হোক না কেন, বিষয়বস্তু নির্ধারণ ব্যবহারকারীদের কাছে অত্যন্ত গুরুত্বপূর্ণ, প্রকৃতপক্ষে অনেক ক্ষেত্রে বিষয়বস্তু নির্ধারণের গুণমানটি উৎপন্ন পাঠ্যের সামগ্রিক গুণমান নির্ধারণে সবচেয়ে গুরুত্বপূর্ণ বিষয় (ব্যবহারকারীর দৃষ্টিকোণ থেকে)। কৌশল নথি গঠনের তিনটি মৌলিক পদ্ধতি রয়েছেঃ স্কিমা (বিষয়বস্তু টেমপ্লেট), পরিসংখ্যানগত পদ্ধতি এবং স্পষ্ট যুক্তি। স্কিমা হল এমন টেমপ্লেট যা স্পষ্টভাবে একটি উত্পন্ন পাঠ্যের বিষয়বস্তু (পাশাপাশি নথি কাঠামোর তথ্য) নির্দিষ্ট করে। সাধারণত, এগুলি লক্ষ্য ধারার মানব-লিখিত গ্রন্থগুলির একটি সংগ্রহ ম্যানুয়ালি বিশ্লেষণ করে এবং এই গ্রন্থগুলি থেকে একটি বিষয়বস্তু টেমপ্লেট বের করে তৈরি করা হয়। স্কিমা এমন ক্ষেত্রগুলিতে অনুশীলনে ভাল কাজ করে যেখানে বিষয়বস্তু কিছুটা মানসম্মত, তবে সেই ক্ষেত্রগুলিতে কম ভাল কাজ করে যেখানে বিষয়বস্তু বেশি তরল (যেমন উপরের চিকিৎসা উদাহরণ)। পরিসংখ্যানগত কৌশলগুলি পরিসংখ্যানগত কর্পাস বিশ্লেষণ কৌশলগুলি স্বয়ংক্রিয়ভাবে উত্পন্ন পাঠ্যের বিষয়বস্তু নির্ধারণ করতে ব্যবহার করে। এই ধরনের কাজ তার শৈশবে রয়েছে এবং বেশিরভাগ ক্ষেত্রেই প্রয়োগ করা হয়েছে যেখানে যোগাযোগমূলক লক্ষ্য, পাঠক, আকার এবং বিস্তারিত স্তর স্থির করা হয়। উদাহরণস্বরূপ, নিউজওয়্যার প্রজন্মের ক্রীড়া ইভেন্টগুলির সংক্ষিপ্তসার। সুস্পষ্ট যুক্তিসঙ্গত পন্থা সম্ভবত গবেষকদের সবচেয়ে বেশি মনোযোগ আকর্ষণ করেছে। মূল ধারণাটি হল এআই যুক্তি কৌশল (যেমন জ্ঞান-ভিত্তিক নিয়ম, পরিকল্পনা, প্যাটার্ন সনাক্তকরণ, কেস-ভিত্তিক যুক্তি ইত্যাদি) ব্যবহার করা। যোগাযোগের জন্য উপলব্ধ তথ্য (এটি কতটা অস্বাভাবিক/অপ্রত্যাশিত), যোগাযোগমূলক লক্ষ্য এবং পাঠক এবং উত্পন্ন পাঠ্যের বৈশিষ্ট্যগুলি (লক্ষ্য আকার সহ) পরীক্ষা করা এবং উত্পন্ন পাঠ্যের জন্য সর্বোত্তম বিষয়বস্তু সম্পর্কে সিদ্ধান্ত নেওয়া। কৌশলগুলির একটি খুব বিস্তৃত পরিসর অন্বেষণ করা হয়েছে, তবে কোনটি সবচেয়ে কার্যকর সে সম্পর্কে কোনও ঐক্যমত্য নেই। তথ্যসূত্র গণনামূলক ভাষাবিজ্ঞান প্রাকৃতিক ভাষা প্রক্রিয়াকরণ প্রাকৃতিক ভাষা প্রজন্ম