বড় ভাষা মডেলগুলির মধ্যে অক্ষর ও শব্দাংশ স্বীকৃতির সীমাবদ্ধতা বোঝা
Brief news summary
বড় ভাষা মডেলগুলি (LLMs) মানুষের মতো চিন্তার সক্ষমতা অভাব, কারণ তারা অক্ষর এবং শব্দাংশের মত ধারণাগুলির সাথে সংগ্রাম করে। মানুষের চেয়ে আলাদা, LLMs পাঠ্যকে সংখ্যায় রূপান্তরিত ক'রে প্রক্রিয়া করে, যা অক্ষর গণনার মতো কাজগুলিতে অসুবিধা সৃষ্টি করে। টোকেনাইজেশন, যা একটি 'শব্দ' কি হিসাবে সংজ্ঞায়িত করে, আরও একটি চ্যালেঞ্জ উপস্থাপন করে, বিশেষকরে যখন একাধিক ভাষার সাথে কাজ করা হয়। ডিফিউশন মডেল ব্যবহারকারী চিত্র নির্ধারকরা বড় বড় বস্তুতে দক্ষ কিন্তু আঙ্গুল এবং হস্তলিপির মত সূক্ষ্ম বিবরণগুলির সাথে সংগ্রাম করে। এই সমস্যাগুলির সত্ত্বেও, অগ্রগতি করা হচ্ছে, হস্তের উপস্থাপনা উন্নতির মধ্যে চিত্র নির্ধারক এবং যুক্তি সক্ষমতা বাড়ানোর জন্য LLMs-এর উন্নতি সহ। Google DeepMind জটিল গাণিতিক সমস্যা সমাধানের জন্য AI সিস্টেমগুলিও প্রদর্শন করেছে।শক্তিশালী এআই মডেলগুলি যেমন GPT-4o এবং Claude অনুসারে, 'strawberry' শব্দটিতে 'r' অক্ষরটি দুইবার উপস্থিত থাকে। তবে, এই মডেলগুলি, যেগুলি বড় ভাষা মডেল (LLMs) হিসেবে পরিচিত, অক্ষর এবং শব্দাংশের মতো ধারণাগুলি বোঝার ক্ষেত্রে সীমাবদ্ধতা রয়েছে কারণ এগুলির প্রকৃত মস্তিষ্ক নেই এবং পাঠ্যের সংখ্যাগত উপস্থাপনের উপর নির্ভর করে। LLMs ট্রান্সফরমারগুলির উপর ভিত্তি করে তৈরি, যা পাঠ্যকে টোকেনগুলিতে ভেঙে দেয়, কিন্তু তারা পৃথক অক্ষরগুলি দক্ষতার সাথে বুঝতে পারে না। এই বিষয়টি LLMs-এর স্থাপত্যের গভীরে স্থাপিত হয়েছে, ফলে এটি মেরামত করা চ্যালেঞ্জিং হয়ে পড়েছে। টোকেনাইজেশন পদ্ধতি এবং ভাষার জটিলতা বিষয়টিকে আরও জটিল করে তোলে। অন্যদিকে, চিত্র তৈরিকারকরা ডিফিউশন মডেল ব্যবহার করে এবং ছোট বিবরণগুলি উপস্থাপনের সাথে সম্পর্কিত বিভিন্ন চ্যালেঞ্জের মুখোমুখি হয়। OpenAI একটি নতুন AI পণ্য নামে Strawberry উন্নয়ন করছে যার লক্ষ্য যুক্তি সক্ষমতা বাড়ানো, এবং Google DeepMind AlphaProof এবং AlphaGeometry 2 ফরমাল গণনা যুক্তির জন্য পরিচয় করিয়েছে। এই সিস্টেমগুলি সমস্যার সমাধান কাজে শক্তিশালী পারফরম্যান্স প্রদর্শন করেছে।
Watch video about
বড় ভাষা মডেলগুলির মধ্যে অক্ষর ও শব্দাংশ স্বীকৃতির সীমাবদ্ধতা বোঝা
Try our premium solution and start getting clients — at no cost to you
