LectuLibre නමින් නව තාක්ෂණ සමාගම, ලොකු භාෂා මොඩල (LLM) භාවිතයෙන් සම්පූර්ණ පොත් පරිවර්තනයේ අභියෝග ජයගන්නා ක්රමයක් හඳුන්වා දී ඇත. EPUB හෝ PDF එකක් උඩුගත කර, ඉලක්ක භාෂාව තෝරා ගත්මට, ඉක්මනින් ඉහළ තත්ත්වයේ පරිවර්තනයක් ලබා ගත හැකිය.
LLM මොඩල වල ප්රධාන සීමාව වන්නේ ‘කොන්ටෙක්ස්ට් වින්ඩෝ’ ප්රමාණයයි. Claude 3 Opus වැනි මොඩල 200,000 ටොකන පමණක් සැකසිය හැකි අතර, 150,000 වචන ඇතුළත් කතා පුවතක් එහි පවා අඩු වේ. එම නිසා පොතක් එකම ප්රොම්ප්ට් එකක යැවීම අධික වියදමක්, කාලය ගත කිරීමක්, සහ පරිවර්තන ගුණාත්මකභාවය අඩු වීමක් කරා ගෙන යයි.
අපේ විසඳුම ‘ස්ලයිඩින් වින්ඩෝ + එම්බෙඩින් පදනම් වූ පසුබැසීම’ යන දෙකේ සංග්රහයකි. පෙළ පළමු වරට වාක්ය‑වලට බෙදා, තෝරාගත් ටොකන් ගණන (උදා: 3000) පමණක් අඩංගු chunk එකක් සකස් කරයි. එම chunk එකට පෙර chunk වලින් සම්බන්ධිත වාක්ය 500 ටොකන පමණ අතිරේකව ඇතුළත් කර, පසුබැසීමේ සම්බන්ධතාවය තබයි. ඉන්පසු එම chunk එකට, එම්බෙඩින් සමානතාව අනුව, අතීත chunk අතරින් අතිශය සම්බන්ධිත එකක් හෝ දෙකක් තෝරා, මුලින්ම එක් කරයි. මෙය LLM එකට පසුදායක කතා රේඛාව, නාම පරිච්ඡේද, සහ අරුතක පරිවර්තනයේ අඩවි රැක ගැනීමට උදව් කරයි.
ශ්රී ලංකාවට ඇති වැදගත්කම
මෙම තාක්ෂණය ශ්රී ලාංකීය සිසුන්, සංවර්ධකයන්, සහ ව්යාපාරිකයන් සඳහා විශාල අවස්ථා සපයයි:
- සිසුන් – ඉංග්රීසි පළමු පරිච්ඡේද වලින් පසු, සිංහල, තමිල්, මැලේය භාෂාවලට පොත් පරිවර්තනය කරගෙන, අධ්යාපන ගුණාත්මකභාවය වැඩි දියුණු කරයි.
- සංවර්ධකයන් – LLM chunking ක්රමය ඔවුන්ගේ AI‑පදනම් ඇප්ලිකේෂන් වලට දිගු ලේඛන සැකසීමේ හැකියාවක් එක් කරයි, API පිරිවැය අඩු කරයි.
- ව්යාපාර – පාරිභෝගික මාර්ගෝපදේශ, නීති ලේඛන, සහ වෙබ් අන්තර්ගතය බහුභාෂා වලට වේගයෙන් පරිවර්තනය කර, ගෝලීය වෙළඳපොලේ තරඟකාරිත්වය වැඩි කරයි.
ඉදිරියේදී, මෙම සේවාව AI‑වලට සීමා නොව, සිංහල NLP පර්යේෂණයද තවත් ඉදිරියට ගෙන යාමට මඟ පෙන්වයි.
අවසන් වශයෙන්, LLM‑අධාරිත පොත් පරිවර්තනයේ නව පියවර, තාක්ෂණික සීමා ජයගත් අයුරින්, ශ්රී ලංකාවේ ඉගෙනුම, සංවර්ධනය, සහ ව්යාපාරයට නව දොරටු විවෘත කරයි.