RAG (Retrieval‑Augmented Generation) පද්ධතිය මොනවද අපේ ව්යාපාරික AI වැඩ වලට හොඳම ප්රතිඵල දෙන්නේ කියලා හොයලා බලන කාලේ, මට එකම කරුණක් පේනවා – බොහෝ වෙලාවට අපි වැරදි ගැලපීමකින් පසුබැසෙන්නෙමු.
මට පෙරත්, ව්යාපාරික ලිපි කියවලා “ඇත්තේ කෙලින්ම වියදම කොහෙද යනකොට බලන්න” කියන නීතිය අනුගමනය කරලා. ඒක RAG පයිප්ලයින් එකටත් අදාළ කරලා, එක් එක් අදියරේ කුමන ගාස්තුවක් වැටෙන්නේ කියලා තක්සේරු කරලා බලන්න තීරණය කළා.
බොහෝ අය “එම්බෙඩ්ඩින් වියදම් වැඩියි, නැවත එම්බෙඩ්ඩ් කරන්න එපා” කියලා කියනවා. ඒ නිසා මම Redis‑ආධාරිත සෙමාන්ටික් කැෂ් එකක් වඩාත් ආරක්ෂිතයි කියලා හිතලා, සාමාන්ය key‑value කැෂ් එකක් තෝරා ගත්තේය. නමුත් පරීක්ෂා කරලා බැලුවේ, එම්බෙඩ්ඩින් ගාස්තුව වඩාත් අඩුයි, මුළු පයිප්ලයින් එකේ බොත්තම වන්නේ වෙනත් අදියරයි.
OpenAI නවතම එම්බෙඩ්ඩින් මිල අනුව, 1,000 පිටු PDF එකක් එම්බෙඩ් කිරීමට පමණක් $0.18 වැටේ – එකවර ගාස්තුවක්. මේක අඩුම කොටසක්. ඒ වෙනුවට වෙක්ටර් දත්ත ගබඩාව (vector DB) 24/7 ක්රියාත්මකව, මිලියන ගණනක චංක් ගබඩා කර, ඉන්ඩෙක්සින්/රීට්රීව් කිරීමේ ගාස්තුව ඉහලින් යනවා. එම ගාස්තුව, එම්බෙඩ්ඩින් ගාස්තුවට වඩා බොහොම වැඩියි.
ශ්රී ලංකාවට ඇති වැදගත්කම
ශ්රී ලංකාවේ AI පර්යේෂකයින්, ආරම්භක සංවර්ධකයින්, ව්යාපාරිකයින්ට මේ තොරතුරු වඩාත් වැදගත්. පළමු වශයෙන්, දත්ත ගබඩා කිරීමේ පරික්ෂණයක් කරගෙන, 80% ද්රව්යය එකම තැන රඳා ඇතැයි හඳුනා ගැනීමෙන්, අලුත් දත්ත පමණක් ප්රොසෙස් කරන “ඩිඩුප්” පරීක්ෂණය හොඳම ආකාරයයි. මෙය සම්පූර්ණ පයිප්ලයින් එක නැවත ක්රියාත්මක කිරීමෙන් වඩා ඉතාම අඩු පිරිවැයක් ගනී.
- සිසුන් – AI මොඩලයක් ඉගෙන ගන්නා විට, වියදම් කොහේ වැටෙනවා කියලා හොඳින් තේරුම් ගන්නා අවස්ථාව.
- ඩෙවලොපර්ස් – කුමන අදියරේ සම්පත් වැය වෙනවා කියලා දැනගනිමින්, කේෂ්, එම්බෙඩ්ඩින්, වෙක්ටර් DB සැකසීමේ නිවැරදි තීරණ ගත හැක.
- ව්යාපාර – අඩුම වියදමෙන් වැඩි ප්රතිලාභ ලබා ගැනීමට, දත්ත ඉන්ජෙෂන් පද්ධතියේ “ඉතිහාසය පරීක්ෂා” (diff) ක්රමය භාවිතා කරගත හැක.
සාරාංශයෙන්, RAG පද්ධතියේ සැබෑ “බලපෑම” වෙන්නේ එම්බෙඩ්ඩින් නොව, වෙක්ටර් දත්ත ගබඩාවේ අඛණ්ඩ ඉන්ඩෙක්සින් හා රීට්රීව් කිරීමේ පිරිවැයයි. ඒ නිසා, පයිප්ලයින් එකේ සෑම අදියරකම ගාස්තුව මැනීම, සම්පත් බෙදාහරිනු, පද්ධතියේ කාර්යක්ෂමතාව වැඩි කිරීමේ මුල් පියවරයි.
ඉදිරියට, ඔබේ AI ප්රොජෙක්ට් එකේ පිරිවැය අඩු කරගන්න, “කොහේ වැය වෙයි” කියලා හොඳින් විශ්ලේෂණය කරගන්න. එමඟින්, කාලය, මුදල්, සම්පත් සියල්ලම හොඳින් උපයෝගී කරගත හැක.
