වෙබ් ස්ක්රැපර් එකක් ධාවනය කරන විට බ්රවුසරය හංගෙන්න, ලොග්-ඉන් කාලය ඉවරවෙන්න, හෝ කැප්චා පෙන්වෙන්න වගේ බොහෝ අඩුපාඩු සිදුවෙයි. ඒත් බොහෝ සේවාදායකයින් මේ අසාර්ථකතාවයන්ට පසුත් ඔබට ගාස්තු අයකරයි. මෙය ඔබේ ඉන්වොයිස් එකටම බලපාන අතර, ආරක්ෂක කේතය (defensive code) වැඩි කරවීමට හේතු වෙයි.
Apify වගේ පළාත් ගණනකාරී සේවාදායකයින් ‘compute units’ (මතකය × කාලය) මත ගාස්තු ගණනය කරයි. 2 GB RAM සහිත බ්රවුසරයක් මිනිත්තු 10ක් ධාවනය කළහොත්, ප්රතිඵල ගාස්තු එකතු කිරීමකට පෙර තත්පරයක් පමණ compute unit එකක් පමණක් භාවිතා වේ. මේ ආකාරය සේවාදායකයාට සාධාරණයි, නමුත් ඔබට වැදගත් වන්නේ ඔබට අවශ්ය පේළි ලැබුණාද යන්නයි.
කාලය මත ගාස්තු ගණනය කිරීමේ ගැටලුව එනම්, වැඩක් 30 තත්පරයකින් අවසන් විය හැකි අතර, අඩවිය මන්දගාමී වීම හේතුවෙන් 8 මිනිත්තු ගත විය හැක. අසාර්ථක දත්ත ලබා ගත්තාමත්, පද්ධතිය ඒක “සාර්ථක” ලෙස සලකයි. එම නිසා, ඔබේ පයිප්ලයින් එක දිනයකට එක් වරක් ධාවනය කරනවා නම් ගැටළුවක් නොවන්නට පුළුවන්, නමුත් දිගුවේ නිතර ධාවනය කරනවා නම්, පේළි ගණන මත පදනම්ව ගාස්තු පාලනය කරගත යුතුයි.
ශ්රී ලංකාවට ඇති වැදගත්කම
ශ්රී ලංකාවේ සංවර්ධනකරුවන්, ව්යාපාරිකයින්, හා විශ්වවිද්යාල සිසුන්ට මේ තොරතුරු ඉතා වැදගත්. පළාත් ගාස්තු මනාව පාලනය කළහොත්:
- ඩෙවලපර්ලා – අධික ගාස්තු නොවී, වැඩි පේළි ලබා ගනිමින් ව්යාපාරික තීරණ ගැනීමට දත්ත භාවිතා කළ හැක.
- ව්යාපාරිකයින් – වෙළඳපොල විශ්ලේෂණය, මිල ගණන් මැනීම, සහ තරඟකාරී තොරතුරු ලබා ගැනීමේදී කුඩා පිරිවැයෙන් වැඩි ROI (Return on Investment) ලබා ගත හැක.
- සිසුන් – ව්යාපාරික ව්යාපෘති, AI/ML පර්යේෂණ, සහ API ඉගෙනීමේදී සත්ය ලැබුනු දත්ත මත පදනම්ව අභ්යාස කළ හැක.
ඒ සඳහා, සාර්ථක පේළි ගණන, පේළි ගුණාත්මකභාවය, සහ ගාස්තු මත පදනම්ව මැනුම් මාර්ගයක් (metrics) පිහිටුවා ගත යුතුය. කේතයේ අසාර්ථක දත්ත පරීක්ෂා කිරීම, Zod වැනි schema validation library භාවිතා කිරීම, සහ අධික දෝෂ පේළි ප්රතිශතයක් (උදා: 5% ඉක්මවා) ඇත්නම් ක්රියාත්මක නොකිරීම, මේ ක්රියාවලිය සරල කරයි.
අවසානයේ, “සාර්ථක රන්” කියන්නේ ඔබට අවශ්ය තොරතුරු ලැබීමයි, බ්රවුසරයේ මිනිත්තු ගණන නොවේ. ඒ නිසා පළාත් සේවාදායකයන්ගේ ගාස්තු සැලැස්වීමේදී, ඔබේ ව්යාපාරික හෝ අධ්යාපනික ඉලක්කයන් සමඟ සම්බන්ධිත මැනුම් පද්ධතියක් ගොඩනඟා ගැනීම අත්යවශ්යයි.
