ඔබේ වෙබ්අඩවියේ robots.txt ගොනුවේ එකම වැරදි ලයින් එකක් Google ඇතුළු සියලු සර්ච් එන්ජිමන්ට ඔබේ අඩවිය පූර්ණයෙන්ම නොපැමිණීමට හේතු වේ. "Disallow: /" කියන ලියවිල්ලක් ඇතුළත් කරලා තියනවා නම්, කෘත්රීම බොට්වලට ඔබේ සයිට් එකේ කිසිදු පිටුවක් පිරික්සන්න ඉඩ නොදෙයි.
මෙම වැරදි බොහොමයක් වෙබ්ඩිවෙලොපර්ලා ස්ටේජ් (staging) පරිසරයක් සකස් කරලා පසු ඒකේ සැකසුම නිෂ්පාදන (production) පරිසරයට පිටපත් කරන විට සිදුවේ. ඉන්පසු, අඩවිය ලයිව් වෙලා Google ඉන්ඩෙක්ස් කිරීම නවතනවා, නමුත් එය සරල වචන වලින් හෝ Google Search Console එකෙන් පේනවා නොහැක. එම නිසා රැංකින් අඩු වීම හෝ අඩු පේජ් ධාරිතාවක් පෙනෙන්නේ නැතිව පමණයි.
අදාල ගැටලුවට අමතරව, robots.txt ගොනුවේ තවත් පොදු වැරදි කිහිපයක් තියෙනවා:
- ගොනුව නැති වීම – බොට්වලට සියල්ලම ඇතුළත් කිරීමට ඉඩ දෙන නිසා ඔබ නොබලා සිටි පිටු හෝ ගොනු සෙවීමේදී ඉදිරිපත් විය හැක.
- Sitemap: ලයින් අඩු වීම – සර්ච් එන්ජිමන්ට ඔබේ sitemap.xml ලිපිනය නොදැනීමෙන් ඉන්ඩෙක්ස් කිරීමේ කාර්යක්ෂමතාව අඩු වේ.
- CSS/JS අවහිර කිරීම – Google පේජ් රෙන්ඩරින් කිරීමේදී අත්යවශ්ය ශෛලීකරණය හෝ ස්ක්රිප්ට් ගොනු අවහිර කරන්නේ නම්, පිටුවේ සැලැස්වීම හෝ අන්තර්ගතය වැරදි ලෙස පෙන්වෙයි.
මෙම සියලු ගැටලු තක්සේරු කර ගැනීමට OGCheck නමැති මෛත්රිමය මෙවලමක් තිබේ. ඔබේ අඩවියේ robots.txt ගොනුව පරීක්ෂා කිරීමට පහත URL එකට එකම CURL අයදුම්පතක් යවන්න:
curl "https://ogcheck-app.azurewebsites.net/robots?url=https://your-site.com"
එම සේවාව ගොනුවේ පිවිසුම් හැකියාව, පාර්ස් කිරීමේ වැරදි, සයිට්-පුරා අවහිර කිරීම, sitemap ලිපිනය ඇතුළත්ද යන්න පෙන්වයි. ඒ සමඟ sitemap.xml ගොනුවේ තත්ත්වය පරීක්ෂා කිරීමටද curl "https://ogcheck-app.azurewebsites.net/sitemap?url=https://your-site.com" භාවිතා කළ හැක.
ශ්රී ලංකාවට ඇති වැදගත්කම
ශ්රී ලංකාවේ තරුණ සංවර්ධකයින්, ඩිජිටල් ආරම්භකයින්, සහ කුඩා ව්යාපාරිකයින් සියලුම වෙබ්අඩවි SEO අධික්ෂණය කරගැනීමට මේ තොරතුරු ඉතා වැදගත්. නිවැරදි robots.txt සැකසීමෙන් Google ඉන්ඩෙක්ස් කිරීම වේගවත් වෙයි, එමඟින් වෙබ් අඩවි තරඟකාරී වෙළඳපලේ ඉහල රැංකු ලබා ගත හැක. තවද, සයිට්මැප් එක නිවැරදිව සපයන්නේ නම් සර්ච් එන්ජිමන්ට අඩවියේ සියලුම වැදගත් පිටු හඳුනා ගැනීමට ඉඩ සලසයි, ඒත් ඒක නොමැතිවීමෙන් ඔබේ අන්තර්ගතය අඩු පෙනුමක් ලබා ගනී. මේ සියල්ලම ශ්රී ලංකාවේ ඩිජිටල් ආර්ථිකය වර්ධනයට, නව ගනුදෙනුකරුවන්ට ඔබේ සේවාවන් හඳුන්වා දීමට සහ තාක්ෂණික නිපුණතා වැඩිදියුණු කිරීමට දායක වේ.
අවසන් වශයෙන්, ඔබේ වෙබ්අඩවියේ robots.txt ගොනුව නිවැරදිව පරීක්ෂා කර, OGCheck වැනි නිදහස් මෙවලම් භාවිතා කිරීමෙන් SEO ගැටලු ඉක්මනින් හඳුනා ගත හැක. මෙය ඔබේ අන්තර්ජාල නාමාවලිය වඩාත් පාලනය කර, Google සෙවීම් වලින් අඩවිය පෙනෙන්න වග බලා ගන්න අත්යවශ්ය පියවරයි.
