AI පදනම් ගණිත පාඨමාලාව: LLM කාර්යය පටිපාටිය සම්පූර්ණ විස්තර

ඔබ AI යන්ත්‍රයක සිතුවිලි, ඉගෙනුම් සහ ප්‍රතිචාර කෙරෙහි ඇත්තේ කුමක්ද කියා හොඳින් තේරුම් ගැනීමට, එය පදනම් කරගත් ගණිතය හඳුනා ගැනීම අත්‍යවශ්‍යයි. මේ ලිපිය AI සහ ලාර්ජ් ලැංග්වෙජ් මොඩල (LLM) වල පදනම් ගණිත සංකල්පයන් පිළිබඳ සරල, පියවරෙන් පියවර මාර්ගෝපදේශයක් සපයයි.

LLM එකක් ඔබේ ප්‍රශ්නයක් (උදා: “ගුරුත්වය කියන්නේ මොනවා?”) ලබා ගන්නා පළමු පියවරෙන් පසු, එය ටෝකනයිසර් මගින් කුඩා කොටස් (ටෝකන) වලට බෙදී, ඒ ටෝකන සෑම එකක්ම අංකයක් (Token ID) ලෙස පරිවර්තනය වේ. එම අංකය ඊළඟට ධාරිතාවය (Embedding) මොඩලය මගින් ගැඹුරු සංඛ්‍යාත්මක වෙක්ටරයක් බවට පත් කරයි. වෙක්ටරය තත්‍ය ස්ථාන තොරතුරු සමඟ එක්ක, ට්‍රාන්ස්ෆෝමර් ස්ථර (Multi‑Head Attention + Feed‑Forward) ගොඩනැගී, අවසන් වශයෙන් සොෆ්ට්මැක්ස් (Softmax) මගින් සම්පූර්ණ ශබ්දකෝෂයේ සම්භාවිතා ව්‍යාප්තියක් ලබා දේ. එම ව්‍යාප්තියේ අති උචිත ටෝකනය තෝරා, එය ආපසු ඉන්පුට් පදනමට එක් කර, ඊළඟ ටෝකනය ජනනය වන තුරු මෙය නැවත නැවත සිදුවේ. මේ ආකාරයයි “autoregressive” ජනනය කියන්නේ.

ගණිත පදනම තුළ ප්‍රධාන වශයෙන් අංක පද්ධති, කේතනය, වෙක්ටර්, රේඛීය බීජගණිතය, සම්භාවිතා තත්ත්වය වැනි කොටස් අඩංගු වේ. ASCII, Unicode, UTF‑8 වැනි කේතන පද්ධති මගින් පළමු වරට අක්ෂරයන් සංඛ්‍යාත්මක කරයි. BPE (Byte Pair Encoding) යනු GPT වැනි මොඩලයන් භාවිතා කරන ප්‍රධාන ටෝකනයිසර් අල්ගොරිතමයයි; එය අක්ෂර මට්ටමෙන් ආරම්භ කර, අඩුම පාරිභෝගික යුගලවලින් පෝෂ්‍ය පදයක් තෙක් එකතු කරයි. විශාල ශබ්දකෝෂයක් (උදා: GPT‑4 හි 100,000 ටෝකන) තිබීමෙන් වාක්‍යයක් කෙටි ටෝකන ගණනින් නියම වේ, නමුත් එය වැඩි මතක අවශ්‍යතාවයක් ද ඇති කරයි.

ශ්‍රී ලංකාවට ඇති වැදගත්කම

• ශ්‍රී ලංකාවේ තරුණ සංවර්ධකයින්ට AI පදනම් ගණිතය ඉගෙන ගැනීම, LLM මොඩල නිර්මාණය හා අභිප්‍රේරණය කිරීමේ පදනමක් වේ.
• දේශීය ව්‍යාපාරිකයන්ට AI විසින් ලබා දෙන දත්ත විශ්ලේෂණය, පූර්ව අනාවැකි සහ ස්වයංක්‍රීය පාරිභෝගික සේවාවන් සඳහා අවශ්‍ය තාක්ෂණික හැකියාවන් වර්ධනය කරයි.
• ශ්‍රී ලංකා විශ්වවිද්‍යාලයන් සහ පුහුණු මධ්‍යස්ථාන සඳහා නව පාඨමාලා නිර්මාණය කිරීමේ මූලික පදනමක් සපයයි.

ගණිතය AI හි “කළු පෙට්ටිය” නොව, එය විවෘත, පැහැදිලි මාර්ගයක් ලෙස පෙනේ. ඔබට මෙම පදනම් තේරුම් ගත හැකි නම්, AI ක්‍රමලේඛන, මොඩල පුහුණුව, හෝ ව්‍යාපාරික අයදුම්පත් නිර්මාණය කිරීමේදී තීරණාත්මක පියවරක් ඉදිරියට ගෙන යා හැක.

අදම AI ගණිත පාඨමාලාව අරඹා, තාක්ෂණික ගමනේ අලුත් මංපොළක් සොයා ගන්න. ඔබේ අනාගතය ඔබේ අත්අඩගෙන්ම තීරණය වේ.