JSONL (JSON Lines) ආකෘතිය එක පේළියකට එක් වස්තුවක් ලෙස සලකුණු කරන නිසා සරල බවක් පෙනේ. නමුත් සජීවී කේතන‑ඇජන්ට් පටිපාටියකදී අසම්පූර්ණ අගය, විශාල පේළි, පිටපත් සිදුවීම්, සැපයුම්කරු‑විශේෂ ආවරණ සහ පරණ සම්පූර්ණ කිරීමේ සලකුණු වැනි ගැටළු එහි ආරක්ෂාව බිඳ දමයි.
ඒ නිසා Agent Island v1.7.1 ගොනු කියවීමේදී I/O සීමා කරයි. macOS සඳහා 64 MiB පසුබැසීමක්, Windows සඳහා 1,000,000 අක්ෂර ඉක්මවන පේළි අතහැරීම වැනි වේදිකා‑විශේෂ නීති භාවිතා කරයි. මෙයින් එක් එක් වැරදි ලයින් එකම සමයේ සම්පූර්ණ පරිශ්රමය නවතා නොදැමීමට උපකාරී වේ.
දත්ත විග්රහ කිරීමේදී "බොහෝ පේළි" එකතු කිරීමේ බදවා ගැනීමක් නොකළ යුතුය. සැපයුම්කරු‑අනුව අවශ්ය ක්ෂේත්ර පමණක් තෝරා ගැනීමෙන් පසු, ඒවාට අනන්යතා සහ කාලය (semantic time) එක් කර, අවශ්ය තත්වයට පත් කරයි. Claude සඳහා type, uuid, timestamp, message.stop_reason, isSidechain, isApiErrorMessage, toolEndsTurn වැනි ක්ෂේත්ර, Codex සඳහා type, payload.type, payload.turn_id, role, timestamp, completed_at, started_at වැනි ක්ෂේත්ර වැදගත් වේ.
සම්පූර්ණ කිරීම (completion) සිදුවීමක් තTurn එකකට අයත් වේ. පසුගිය පරිශීලක පණිවිඩයක් හෝ නව ආරම්භයක් එය අභ්යන්තරයෙන් ඉදිරියට ගෙන යයි. එබැවින් රිඩියුසර් (reducer) එක semantic order පරීක්ෂා කර, නව සිදුවීම් පරණ සම්පූර්ණ කිරීම මත පාලනය කරයි. ගොනු වෙනස් වීමෙන් නව රිඩියුසර් ක්රියාත්මක කරමින්, පූර්ව cache (ගොනු මාර්ග, ප්රමාණය, වෙනස්කම් කාලය) නවීකරණය කරයි.
ශ්රී ලංකාවට ඇති වැදගත්කම
- සිසුන් – JSONL වැනි streaming data ආකෘති ආරක්ෂිතව හසුරවීමේ නව පදනම් ඉගෙන ගැනීමට අවස්ථාව ලැබේ.
- ඩෙවලපර් – ප්රොවයිඩර්‑විශේෂ guard සහ bounded I/O යොදා ගනිමින් තම යෙදුම් බිඳ නොවැටෙන ලෙස සැලසුම් කරගත හැක.
- ව්යාපාර – දෝෂාත්මක ලයින් එකක් හේතුවෙන් පද්ධතිය නතර වීම වැළැක්වීම, සේවා විශ්වාසය වැඩි කිරීම.
අවසන් වශයෙන්, JSONL ගොනු ආරක්ෂිතව පරිශ්රම කිරීම සඳහා I/O සීමා, ප්රොවයිඩර්‑අනුව ක්ෂේත්ර තෝරා ගැනීම, semantic ordering, duplicate ඉවත් කිරීම, සහ cache නවීකරණය යන පියවර අත්යවශ්ය වේ. මෙම සැලසුම් අනුගමනය කිරීමෙන් AI කේතන පද්ධතිවල නිරවද්යතාවය සහ විශ්වාසය ඉහළ යයි.
