এলএলএম কি?
📖 7 মিনিট পড়া
Quick Answer
ChatGPT-এর মতো এআই সহকারীরা জাদুর মতো অনুভব করতে পারে, কিন্তু নীচে তারা বড় ভাষা মডেল (LLM) একটি আশ্চর্যজনকভাবে সহজ জিনিস অত্যন্ত ভালভাবে করছে: পরবর্তী শব্দের ভবিষ্যদ্বাণী করা। তারা কীভাবে কাজ করে তা বোঝা হাইপকে অদৃশ্য করে — এবং তাদের শক্তি এবং তাদের সীমা উভয়ই প্রকাশ করে।
💡 এটি হিসাবে চিন্তা করুন…
একটি LLM হল বিশ্বের সবচেয়ে উন্নত স্বয়ংসম্পূর্ণের মতো। আপনার ফোন একটি পাঠ্যের পরবর্তী শব্দ অনুমান করে; একজন এলএলএম একই কাজ করে, কিন্তু মানুষের লেখার অনেক বিষয়ে প্রশিক্ষিত - তাই এর "অনুমান" প্রবন্ধ, কোড এবং কবিতা লিখতে পারে। শক্তিশালী ভবিষ্যদ্বাণী, বোঝার নয়।
এলএলএম কি
একটি বড় ভাষার মডেল হল একটি AI যা পরবর্তীতে কী হবে তা অনুমান করার জন্য প্রচুর পরিমাণে পাঠ্যের উপর প্রশিক্ষিত। কিছু শব্দ দেওয়া হলে, এটি সম্ভাব্য পরবর্তী শব্দ, তারপর পরবর্তী, বাক্য গঠন করে গণনা করে। ChatGPT, Claude, Gemini এবং Llama এর মত ওপেন মডেল সকল LLM।
এটা কিভাবে প্রশিক্ষিত হয়
মডেলটি প্রচুর পরিমাণে টেক্সট পড়ে এবং পরবর্তী শব্দের ভবিষ্যদ্বাণীতে আরও ভাল করার জন্য কোটি কোটি অভ্যন্তরীণ সংখ্যা ("প্যারামিটার") সামঞ্জস্য করে। এই প্রশিক্ষণটি অত্যন্ত ব্যয়বহুল এবং যেখানে AI এর বেশিরভাগ খরচ এবং শক্তি যায়৷ ফলাফল হল একটি মডেল যা ভাষা, তথ্য এবং যুক্তির নিদর্শনগুলিকে শোষিত করেছে।
টোকেন: এটি কীভাবে পড়ে
এলএলএমগুলি ঠিক শব্দগুলি দেখতে পায় না - তারা পাঠ্যকে "টোকেন" (শব্দের টুকরো) এ বিভক্ত করে এবং সেগুলির সাথে কাজ করে। এই কারণেই AI ব্যবহার প্রায়ই টোকেন প্রতি মূল্য নির্ধারণ করা হয়, এবং কেন মডেলগুলির একটি "প্রসঙ্গ উইন্ডো" সীমা থাকে - তারা একবারে সর্বাধিক পরিমাণ পাঠ্য বিবেচনা করতে পারে।
কেন এটা সত্যিই "চিন্তা" নয়
একটি এলএলএম-এর কোনো বোঝাপড়া, বিশ্বাস বা সচেতনতা নেই - এটি প্যাটার্নের উপর ভিত্তি করে যুক্তিসঙ্গত পাঠ্যের ভবিষ্যদ্বাণী করছে। এই কারণেই এটি ভুল হওয়ার সময় আত্মবিশ্বাসী শোনাতে পারে ("হ্যালুসিনেটিং"), এবং কেন এটি না দেওয়া পর্যন্ত চ্যাটের মধ্যে কোনও সত্য স্মৃতি নেই। উজ্জ্বল প্যাটার্ন-ম্যাচিং, একটি মন না.
🔑 মূল গ্রহণ
একটি বৃহৎ ভাষা মডেল (LLM) হল একটি AI যা পরের শব্দের ভবিষ্যদ্বাণী করার জন্য বিপুল পরিমাণ পাঠ্যের উপর প্রশিক্ষিত, টোকেন দ্বারা টোকেন বাক্য গঠন করে। এটি অসাধারণভাবে সক্ষম প্যাটার্ন-ম্যাচিং - বোঝা যায় না - যার কারণে এটি আত্মবিশ্বাসের সাথে ভুল (হ্যালুসিনেট) হতে পারে। ChatGPT, Claude এবং Llama এর মত ওপেন মডেল সব LLM।
কেন এটা আপনার জন্য গুরুত্বপূর্ণ
যেহেতু AI সমগ্র এশিয়া জুড়ে কাজ করে, LLM আসলে কী তা বোঝা — শক্তিশালী কিন্তু ভুল ভবিষ্যদ্বাণী ইঞ্জিন — আপনাকে সেগুলিকে বুদ্ধিমানের সাথে ব্যবহার করতে, তাদের ত্রুটিগুলি চিহ্নিত করতে এবং কর্পোরেশনে ডেটা পাঠানোর পরিবর্তে কখন আপনার নিজের ব্যক্তিগত মডেল চালাতে হবে তা সিদ্ধান্ত নিতে সাহায্য করে৷
প্রায়শই জিজ্ঞাসিত প্রশ্ন
একজন এলএলএম কি আসলেই বুদ্ধিমান?▼
মানবিক অর্থে নয়। একটি এলএলএম এটি শিখে নেওয়া নিদর্শনগুলি থেকে প্রশংসনীয় পাঠ্যের ভবিষ্যদ্বাণী করে — এটির কোনও বোঝাপড়া, বিশ্বাস বা সচেতনতা নেই। এটি উল্লেখযোগ্যভাবে কার্যকর হতে পারে এবং আত্মবিশ্বাসের সাথে ভুলও হতে পারে, কারণ এটি মিলিত নিদর্শন, চিন্তা নয়।
কেন এআই মাঝে মাঝে জিনিস তৈরি করে?▼
কারণ এটি প্রশংসনীয়-শব্দযুক্ত পাঠ্যের ভবিষ্যদ্বাণী করে, যাচাইকৃত সত্য নয়। যখন এটির সঠিক প্যাটার্নের অভাব থাকে, এটি একটি আত্মবিশ্বাসী কিন্তু মিথ্যা উত্তর তৈরি করে - যাকে "হ্যালুসিনেশন" বলা হয়। সর্বদা গুরুত্বপূর্ণ AI আউটপুট যাচাই করুন।
একটি টোকেন কি?▼
পাঠ্যের একটি অংশ (প্রায়শই একটি শব্দ বা একটি শব্দের অংশ) যা এলএলএম প্রক্রিয়া করে। মডেলগুলি টোকেন পড়ে এবং জেনারেট করে, ব্যবহার প্রায়ই প্রতি টোকেন মূল্যের হয়, এবং "প্রসঙ্গ উইন্ডো" হল সর্বাধিক টোকেন যা একটি মডেল একবারে বিবেচনা করতে পারে৷