සංයුක්ත ඇම්බෙඩින් එකක් භාවිතා කිරීමේදී අපිට අත්විඳින්නා වූ ගැටළුව සරල නෙවෙයි. එක් වෙක්ටර් එකක් සම්පූර්ණ අපේක්ෂිත රෙකෝඩ් එක සංක්ෂේප කරන විට, විශේෂිත සුදුසුකම් හෝ කාර්ය අත්දැකීම් සම්බන්ධයෙන් පරීක්ෂා කරන විට වැරදි ප්රතිඵල ලැබෙයි. මෙය “representational collapse” ලෙස හඳුන්වනු ලබන, මොඩලය ප්රධාන තොරතුරකටම අවධානය යොමු කර අනෙකුත් විස්තර අතහැර දැමීමේ ප්රතිඵලයයි.
මෙම ගැටළුවට විසඳුමක් ලෙස, app/agents/embedding_agent.py හි එක් රෙකෝඩ් එක සඳහා හතරක් වෙනම ඇම්බෙඩින් වෙක්ටර් සකස් කරයි: profile_vector, experience_vector, skills_vector, general_vector. මෙය “late fusion” තත්ත්වයක් වන අතර, ප්රශ්නයේදී සෙවුම් යන්ත්රය අදාළ වෙක්ටර් එක තෝරා ගනී. එම පසු, app/jobs/embedding_generator.py වගකීම් ගනී – ඇතුළත් තොරතුරු තහවුරු කිරීම, නැවත උත්සාහ කිරීම, අසාර්ථකතා DLQ (dead‑letter queue) වෙත යැවීම වැනි දේ.
ඇම්බෙඩින් පයිප්ලයින් එකේ සංකල්පය පහත පරිදි වේ:
- මුල් රෙකෝඩ් එක 4 ක්රියාකාරී ක්ෂේත්රයට (profile, experience, skills, general) බෙදීම.
- එක් එක් ක්ෂේත්රය සඳහා වෙනම වෙක්ටර් නිර්මාණය කිරීම.
- Redis කෑෂ් එකේ 24h TTL සමඟ තාවකාලිකව සුරකිමින් API ඇමතුම් අඩු කිරීම.
- ඇම්බෙඩින් ජොබ් එකෙන් තත්ත්ව පරීක්ෂාව, retry, DLQ යොදා අසාර්ථකතා කළමනාකරණය.
මෙම දෙ-ස්තර වෙන් කිරීම “bulkhead pattern” ලෙස හැඳින්වේ. එකම පද්ධතියේ අසාර්ථකතා අනෙක් කොටසට පැතිර යාම වැළැක්වීමට, නාවික යානයේ වතුර-නිදහස් කොට්ඨාස මෙන්ම, සෙවුම් ගුණාත්මකත්වය, නිවැරදිත්වය ඉහළ යයි. දැන් සෙවුම් යන්ත්රය ප්රශ්නයේ අර්ථය අනුව වඩාත් සුදුසු වෙක්ටර් එක තෝරා, වැරදි අපේක්ෂා ඉවත් කරයි.
ශ්රී ලංකාවට ඇති වැදගත්කම
ශ්රී ලංකාවේ තාක්ෂණික සමාජය සඳහා මෙම නවීන ඇම්බෙඩින් ක්රමය විශාල වාසියක් ලබා දෙයි. පළමුව, දේශීය රැකියා වෙළෙඳපොළේ නිර්දේශකයින්ට සුදුසුකම් හා අත්දැකීම් අනුව නිරවද්ය තෝරා ගැනීමේ හැකියාව ලැබේ. දෙවනුව, පළපුරුදු සංවර්ධකයන්ට හොඳම AI මොඩලය හා vector search index එකක් භාවිතා කරමින් තමන්ගේ යෙදුම් පවත්වා ගැනීමට අවශ්ය තාක්ෂණික මූලධර්ම ඉගෙන ගැනීමට අවස්ථාව ලැබේ. තෙවනුව, විශ්ව විද්යාල සිසුන්ට data pipeline, caching, bulkhead pattern වැනි ප්රායෝගික ඉංජිනේරු සංකල්ප අධ්යයනයට හොඳ ආධාරයක් වේ. ඒ නිසා, ශ්රී ලංකාවේ AI, ML, සෙවුම් තාක්ෂණය පිළිබඳව ඉදිරියට ගමන් කරමින්, ගෝලීය තරඟකාරීත්වය වැඩිදියුණු කර ගත හැක.
අවසන් වශයෙන්, එක් වෙක්ටර් එකේ සීමා ඉක්මවා, බහු වෙක්ටර් විධිමත් කිරීමෙන් සෙවුම් ගුණාත්මකත්වය ඉහළ යාම, දේශීය තාක්ෂණික ආර්ථිකයට නව පියවරක් බවට පත්වේ.
