පසුගිය දශකයක් පුරා, "Databricks එකක් හෝ Microsoft Data Platform එකක් යොදාගන්නද?" යන ප්රශ්නයට සැබැවින්ම සරල පිළිතුරක් තිබුණා – එකක් තෝරා, එහි ඇති සීමා සමඟ ජීවිතය ගත කරගන්න. Azure Databricks අංශය ඉංජිනේරු කාර්යයන් සඳහා, Microsoft Fabric (පූර්ව Synapse) BI සඳහා භාවිතා කළහොත්, ඒකක දෙකම එකම වගුවේ දෙකේ පිටපතක්, දෙකේ ගවර්නන්ස් නීති, රාත්රි පරිවර්තන කාර්යයක් – මේ සියල්ලක් නඩත්තු කළ යුතු වුණා.
2026 මැද සිට, Microsoft සහ Databricks එකිනෙකා සමඟ ගොඩනැගුණු නව පදනමක් – OneLake – සහ Unity Catalog මත ගොඩනැගුණු ගවර්නන්ස් ගිවිසුම – සමඟ මෙම ගැටලුව ඉවත් කර ඇත. දැන්, නිවැරදිව සැලසුම් කරන්නේ නම්, Delta වගුවක් එකම පිටපතක් පමණක් තබා, Databricks හි ලියමින්, Fabric Warehouse හෝ Power BI මගින් විමසුම් කර, රෝ හා කොළම් මට්ටමේ ප්රතිපත්ති දෙකම එකම වේලාවේ ක්රියාත්මක කළ හැකිය.
Fabric‑Databricks සමඟීකරණය එකම ලක්ෂණයක් නොව, තුනක් වෙනස් මාර්ගයක් සමඟ සිදු වේ. මෙම “තුන් දොර” ගැන හොඳින් අවබෝධ කර ගත යුතුය.
ඇතුළත් වීමේ තුන් මාර්ග
- Mirrored Azure Databricks Catalog – Fabric, Unity Catalog‑යේ ADLS Gen2‑යේ පවතින Delta ගොනු වෙත OneLake shortcut (වර්චුවල් ලින්ක්) භාවිතා කරයි. දත්ත ගමන් නොවේ, පිටපතක් නොවේ; Fabric, Databricks‑යේ DDL වෙනස්කම් පරීක්ෂා කර, මාරු කිරීමේ අවස්ථාවේ අළුත් කරයි. මෙහි වගු Fabric තුළ පෙරහන්-පෙරහන් ලෙස පවතින අතර, ලිවීමේ අයිතිය Databricks‑ටයි.
- OneLake external locations for Unity Catalog (Beta) – මෙහිදී Unity Catalog‑ය OneLake මාර්ගයක් වෙත සම්බන්ධ කරයි. Databricks, ADLS Gen2‑ට ලියනුවේ පළමුව OneLake‑යටම ලියයි. එවිට වගුව, දෘශ්ය, streaming වගුව යන සියලු Unity Catalog අස්ථානයන් OneLake‑හි එකම පිටපතේ පවතී. මෙය Fabric‑හි නේටිව් ලේක් ලෙස කටයුතු කරයි.
- Publish to Fabric (Preview) – Databricks Catalog Explorer තුළින්, Fabric වැඩමුළු කිහිපයකට එකම කටයුතු පෙන්වීමට හැකි වේ. එය OneLake හෝ ADLS Gen2‑යෙහි පදනම් වූ වගුවක් වුවත්, Databricks පරිශීලකයන්ට Fabric‑ට වගු පෙන්වීමේ වැඩසටහනක්.
මෙම තුනේ එකතුවෙන්, Databricks‑හි දත්ත Fabric වෙත කියවීම, Fabric‑හි දත්ත Databricks වෙත කියවීම, සහ Fabric Lake‑යටම ලිවීම – සියල්ලම දත්ත පිටපතක් තැනීමේ අවශ්යතාවයක් නොමැතිව සිදු වේ.
ශ්රී ලංකාවට ඇති වැදගත්කම
ශ්රී ලංකාවේ තොරතුරු විද්යා ශිෂ්යයෝ, මෘදුකාංග සංවර්ධකයින්, ව්යාපාරිකයින්ට මෙම නවීන පදනමෙන් ලැබෙන ප්රතිලාභ කිහිපයක් ඇත.
- ඉගෙනුම් වියදම අඩු වේ – දෙකේ පිටපතක් නඩත්තු කිරීමේ පරිපාලන කාර්යයන් අවශ්ය නොවීමෙන්, ශිෂ්යයන්ට පළපුරුදු ව්යාපෘති වලට කෙළින්ම මූලික දත්ත මත වැඩ කළ හැකිය.
- දත්ත ගවර්නන්ස් එකම වේ – Unity Catalog මගින් පේළි‑කොළම් මට්ටමේ ප්රවේශ නියාමනයක් සකස් කර, ආරක්ෂාව සහ රහස්යතාවය තහවුරු කරයි.
- ව්යාපාරික වේගය වැඩිවේ – එකම තලයේ (OneLake) ලියන සහ කියවන හැකියාව නිසා, ETL කාලය කෙටි කර, වාර්තා සහ analytics වේගයෙන් ලබා ගත හැකිය.
ඉදිරියේදී, ශ්රී ලංකාවේ තාක්ෂණික ආයතන, රජයේ සංවිධාන, හා විද්යාලවලට මෙම ඒකාබද්ධ පදනම භාවිතා කිරීමෙන්, දත්ත‑මූලික තීරණ ගැනීමේ හැකියාව වැඩි වනු ඇත.
අවසානයේ, ඔබේ ව්යාපාරය හෝ ව්යාපෘතියේ ලිවීමේ අයිතිය කාටද යන්න තීරණය කරගැනීම, OneLake සමඟ සාර්ථක ගොඩනැගීමේ මූලික තීරණයකි. නිවැරදි මාර්ගය තෝරා, දෙකේ එන්ජින් එකට ගෙන, තනි පිටපතක් සමඟ අනාගතය ගොඩනඟමු.
