ശ്രദ്ധിച്ചുകൊണ്ടിരുന്ന നിശ്ശബ്ദമാക്കപ്പെട്ട ചാനൽ: ഒരു AI ഡാഷ്‌ബോർഡ് ഏറ്റെടുത്തപ്പോൾ എന്താണ് സംഭവിച്ചത്

നെറ്റ്‌വർക്ക് ഓപ്പറേഷൻസ് സെന്ററിന്റെ ചുവരിൽ മിനുസമാർന്ന വർണ്ണ ഗ്രേഡിയന്റുകളിൽ തത്സമയ മെട്രിക്കുകൾ പ്രദർശിപ്പിച്ചുകൊണ്ട് തിളങ്ങുന്ന പുതിയൊരു AI മോണിറ്ററിംഗ് ഡാഷ്‌ബോർഡ് തൂക്കിയിട്ടുണ്ടായിരുന്നു. ഇത് വിലയേറിയതും മിനുക്കിയതും നിയന്ത്രണമുള്ളതുമായി തോന്നി. എന്നാൽ അതിനടിയിൽ, ആരും കേൾക്കാത്ത അലർട്ടുകൾ ഒരു Slack ചാനൽ മന്ത്രിച്ചുകൊണ്ടിരുന്നു-കൂടാതെ ഡാഷ്‌ബോർഡിന് പൂർണ്ണമായും നഷ്ടപ്പെട്ട ഒരു കാര്യത്തെക്കുറിച്ച് അത് ശരിയുമായിരുന്നു.

ജൂലൈ 12-ന് പ്രസിദ്ധീകരിച്ച ഈ സ്റ്റോറി അപകടകരമാംവിധം സാധാരണമായിക്കൊണ്ടിരിക്കുന്ന ഒരു പാറ്റേൺ വെളിപ്പെടുത്തുന്നു: ഓർഗനൈസേഷനുകൾ മനുഷ്യർ രൂപകൽപ്പന ചെയ്ത സിസ്റ്റങ്ങൾക്ക് പകരം അവർ യഥാർത്ഥത്തിൽ എന്താണ് ഓഫാക്കുന്നത് എന്ന് മനസ്സിലാക്കാതെ AI ഡാഷ്‌ബോർഡുകൾ നൽകുന്നു. നിർണ്ണായക അടിസ്ഥാന സൗകര്യങ്ങൾ നിരീക്ഷിക്കാൻ വർദ്ധിച്ചുവരുന്ന AI ടൂളുകളെ ആശ്രയിക്കുന്ന ഒരു ലോകത്ത്, ആ ടൂളുകൾ എപ്പോഴാണ് അന്ധമായ പാടുകൾ സൃഷ്ടിക്കുന്നതെന്ന് തിരിച്ചറിയാനുള്ള കഴിവ് അത്യാവശ്യമായി മാറിയിരിക്കുന്നു.

മറന്നുപോയ വാച്ച്ഡോഗ്

ഒരു സാധാരണ ഇൻഫ്രാസ്ട്രക്ചർ ഓഡിറ്റിനായി മാർക്ക് ജോൺസൺ നെറ്റ്‌വർക്ക് ഓപ്പറേഷൻസ് സെന്ററിലേക്ക് നടന്നു. പന്ത്രണ്ട് വർഷമായി ടീമുകളെ നയിക്കാൻ ആത്മവിശ്വാസമുണ്ടായിരുന്ന ഒരു മുൻ എഞ്ചിനീയറിംഗ് ലീഡായിരുന്നു അദ്ദേഹം, അദ്ദേഹത്തിന്റെ വൈദഗ്ദ്ധ്യം ഒരു AI സ്കില്ലിലേക്ക് പാക്കേജ് ചെയ്യപ്പെടുകയും യഥാർത്ഥത്തിൽ ഏറ്റെടുക്കാൻ കഴിയുന്ന കോൺട്രാക്ട് ജോലികൾക്കായി അദ്ദേഹം അന്വേഷിക്കുകയും ചെയ്തു. ഒരു ഇടത്തരം ക്ലയന്റ്, മാന്യമായ സുരക്ഷാ റേറ്റിംഗ്, ആകർഷകമായ ഒന്നുമില്ല-എന്നാൽ ജോലി ജോലിയായിരുന്നു.

ടെക് ലീഡ് അദ്ദേഹത്തിന് പുതിയ സമ്മാനം കാണിച്ചു: "ഞങ്ങൾ കഴിഞ്ഞ മാസം ഇത് അപ്‌ഗ്രേഡ് ചെയ്തു. എല്ലാ സജീവ ചാനലുകളും ഇപ്പോൾ ഈ പ്ലാറ്റ്‌ഫോമിൽ ഏകീകരിച്ചിരിക്കുന്നു." മാർക്ക് തലയാട്ടി, പക്ഷേ അദ്ദേഹത്തിന്റെ കണ്ണുകൾ സ്‌ക്രീൻ കടന്ന് അതിന് പിന്നിലെ കേബിൾ ട്രേകളിലേക്കും ഇൻഫ്രാസ്ട്രക്ചറുകളിലേക്കും പോയി. സ്‌ക്രീനുകൾ വാഗ്ദാനം ചെയ്യുന്നത് വിശ്വസിക്കാതിരിക്കാൻ അദ്ദേഹം പഠിച്ചിരുന്നു.

ചാനൽ ഇൻവെന്ററിയിലൂടെ ഫ്ലിപ്പ് ചെയ്തപ്പോൾ, മാർക്കിന്റെ ശ്രദ്ധ പിടിച്ചുപറ്റുന്ന ഒരു എൻട്രി കണ്ടെത്തി: #alert-legacy-infra. സ്റ്റാറ്റസ്: നിശ്ശബ്ദമാക്കി. അവസാനത്തെ സജീവ കോൺഫിഗറേഷൻ: 14 മാസം മുമ്പ്.

"ഇതെന്താണ്?"

ടെക് ലീഡ് അതിലേക്ക് നിസ്സാരമായി നോക്കി. "ഓ, അത് പഴയ SRE-ൽ നിന്നുള്ളതാണ്. ഞങ്ങൾ മൈഗ്രേറ്റ് ചെയ്യുന്നതിന് മുമ്പ് അവൻ അത് സജ്ജമാക്കി. ഇപ്പോൾ ആരും അത് പരിപാലിക്കുന്നില്ല. ഞങ്ങൾ അത് നിശ്ശബ്ദമാക്കി വെച്ചു."

മാർക്ക് തന്റെ നോട്ട്ബുക്കിൽ ചാനൽ ഐഡി എഴുതി.

നിശ്ശബ്ദത ശ്രദ്ധിക്കുന്നു

അന്ന് വൈകുന്നേരം, മാർക്ക് നിശ്ശബ്ദമാക്കിയ ചാനലിന്റെ മുഴുവൻ 14 മാസത്തെ ചരിത്രവും എടുത്തു. താൻ കണ്ടെത്തിയത് ഒരിക്കലും സ്ഥിതിവിവരക്കണക്കുകൾ സൃഷ്ടിക്കുന്നത് നിർത്തിയിട്ടില്ലാത്ത ഒരു പ്രവർത്തിക്കുന്ന അലർട്ട് സിസ്റ്റമാണെന്ന് അദ്ദേഹം കണ്ടെത്തി-അവയിൽ നടപടിയെടുക്കാൻ കഴിയുന്ന ആർക്കും അത് കേൾക്കുന്നത് നിർത്തിവെച്ചു.

ചാനലിൽ രണ്ട് വർഷം മുമ്പ് എഴുതിയതും കൃത്യതയോടെ നിർമ്മിച്ചതുമായ റൂളുകളിൽ നിന്നുള്ള അലർട്ടുകൾ അടങ്ങിയിരിക്കുന്നു. അവരെഴുതിയ എഞ്ചിനീയർ-കോഡിലെ JL എന്ന ചുരുക്കെഴുത്ത് ഉപയോഗിച്ച് മാത്രം തിരിച്ചറിഞ്ഞു-അലർട്ടുകൾ എങ്ങനെ രൂപപ്പെടുത്താമെന്നതിനെക്കുറിച്ച് വ്യക്തമായി ചിന്തിച്ചിരുന്നു. റൂളുകൾ CPU ട്രെൻഡുകൾ, മെമ്മറി ലീക്കുകൾ, കണക്ഷൻ പൂൾ വാട്ടർമാർക്കുകൾ എന്നിവ ട്രാക്ക് ചെയ്തു. എന്നാൽ മാർക്കിനെ ഏറ്റവും ആകർഷിച്ചത് അവർ എത്രമാത്രം അഗ്രസീവ് ആയി ട്യൂൺ ചെയ്തു എന്നതാണ്: മുന്നറിയിപ്പിനായി 70% പരിധിയും ഗുരുതരമായതിന് 85%-വും, അവയ്ക്കിടയിൽ പ്രത്യേകമായി 15% നിരീക്ഷണ വിൻഡോയും. ഭൂരിഭാഗം ടീമുകളും അവരുടെ നിർണ്ണായക പരിധിയായി 90% ഉപയോഗിച്ചു. ഉയർന്നുവരുന്ന പ്രശ്നങ്ങളെക്കുറിച്ച് നിശബ്ദമായി സംസാരിക്കാനാണ് JL സിസ്റ്റം രൂപകൽപ്പന ചെയ്തിരിക്കുന്നത്, അല്ലാതെ ഒരു സിസ്റ്റം ദുരിതത്തിൽ നിലവിളിക്കുന്നത് വരെ കാത്തിരിക്കാനല്ല.

ആ നമ്പറുകളിൽ മാർക്ക് എന്തോ തിരിച്ചറിഞ്ഞു. അലർട്ടുകൾ ദുരന്തത്തോട് പ്രതികരിക്കണമെന്ന് JL വിശ്വസിച്ചില്ല-അവ അത് പ്രവചിക്കണം.

ടൈംലൈൻ വളരെ വ്യക്തമായിരുന്നു: പുതിയ AI പ്ലാറ്റ്‌ഫോം സമാരംഭിച്ച തിങ്കളാഴ്ച, പഴയ ചാനൽ അപ്പോഴും സാധാരണപോലെ അലർട്ടുകൾ പമ്പ് ചെയ്തു. ബുധനാഴ്ച, കട്ട്ഓവർ സംഭവിച്ചു. വെള്ളിയാഴ്ച, ആരെങ്കിലും #alert-legacy-infra മ്യൂട്ട് ചെയ്തതായി കോൺഫിഗർ ചെയ്തു. രണ്ടാഴ്‌ചയ്‌ക്കുശേഷം, ജെഎൽ രാജിക്കത്ത് സമർപ്പിച്ചു. അദ്ദേഹത്തിന്റെ ഹാൻഡ്‌ഓവർ ഡോക്യുമെന്റ് വ്യക്തമായിരുന്നു: "കൈമാറ്റ നിരീക്ഷണത്തിനായി കുറഞ്ഞത് ഒരു മാസമെങ്കിലും സൂക്ഷിക്കാൻ ശുപാർശ ചെയ്യുന്നു." ആ ശുപാർശ ഫയൽ ചെയ്യുകയും മറക്കുകയും ചെയ്തു.

ആർക്കും കാണാൻ കഴിയാത്ത പ്രശ്നം

ഉപേക്ഷിക്കപ്പെട്ട ചാനലിലെ ഏറ്റവും പുതിയ അലർട്ടിലേക്ക് മാർക്ക് സ്ക്രോൾ ചെയ്തു. അദ്ദേഹത്തിന്റെ ഓഡിറ്റിന് മൂന്ന് ദിവസം മുമ്പ് മാത്രമാണ് അത് ഫയർ ചെയ്തത്:

[07-08 03:14:22] WARN [conn_pool]
Connection pool utilization: 72% → 84% (7d trend: +12pp)
Rule: conn_pool_sustained_growth
Author: JL

ഇതൊരു പെട്ടെന്നുള്ള കുതിച്ചുചാട്ടമായിരുന്നില്ല-ഇത് ഒരാഴ്‌ചയിലധികമായി തുടരുന്ന വളർച്ചയായിരുന്നു. കണക്ഷൻ പൂൾ സ്ഥിരമായി 85% അലർട്ട് പരിധിയിലേക്ക് ഉയരുകയായിരുന്നു. ദിവസങ്ങളായി ഈ പ്രവണത ഉയരുകയാണ്: 72%, 78%, 81%, 84%.

NOC ചുവരിൽ പ്രധാനമായി പ്രദർശിപ്പിച്ചിരിക്കുന്ന പുതിയ AI ഡാഷ്‌ബോർഡിൽ, കണക്ഷൻ പൂൾ മെട്രിക് പൂർണ്ണമായും പച്ച കാണിച്ചു. മുന്നറിയിപ്പില്ല. ഫ്ലാഗില്ല. AI സിസ്റ്റം നിശ്ശബ്ദമാക്കിയ ചാനലുകളിൽ നിന്നുള്ള ഡാറ്റ റൂട്ടിംഗ് നിർത്തിവച്ചു, അതിനാൽ വളർന്നുവരുന്ന ഈ പ്രവണത സ്‌ക്രീൻ കാണുന്ന ആർക്കും അദൃശ്യമായിരുന്നു.

മാർക്ക് കൂടുതൽ ആഴത്തിൽ കുഴിച്ചു. JL സൃഷ്ടിച്ച മറ്റൊരു റൂൾ അദ്ദേഹം കണ്ടെത്തി: മെമ്മറി റീക്ലെയിം ലേറ്റൻസി ട്രാക്കിംഗ്, ഓഫ്-പീക്ക് സമയങ്ങളിൽ ഗാർബേജ് ശേഖരണത്തിന്റെ താൽക്കാലികമായി നിർത്തുന്ന സമയം കൂടുന്നത് നിരീക്ഷിക്കുന്നു. അത് 14 മാസം മുമ്പ് ആശങ്കകൾ ഫ്ലാഗ് ചെയ്തിരുന്നു. ആധുനിക ഡാഷ്‌ബോർഡിൽ, ആ മുഴുവൻ വിഭാഗവും പച്ച കാണിച്ചു.

JL അതിൽ നിർമ്മിച്ച അച്ചടക്കത്തോടെ നിശ്ശബ്ദമാക്കിയ ചാനൽ പ്രവർത്തിച്ചുകൊണ്ടിരുന്നു. അത് കേൾക്കാൻ ആരുമുണ്ടായിരുന്നില്ല.

ആരും കേൾക്കാതിരിക്കുമ്പോൾ എന്ത് സംഭവിക്കും

JL-ന്റെ നെയിമിംഗ് കൺവെൻഷനുകളുടെ ഘടനയെക്കുറിച്ച് മാർക്ക് ചിന്തിച്ചു: _trend മന്ദഗതിയിലുള്ള മാറ്റങ്ങൾക്ക്, _sustained തുടരുന്ന പാറ്റേണുകൾക്കായി, _spread ക്രോസ്-ലെയർ വിതരണത്തിനായി. സാധാരണ രീതിയല്ല. ഇൻഫ്രാസ്ട്രക്ചർ ശാന്തമായ നിമിഷങ്ങളിൽ എന്താണ് സംഭവിക്കുന്നതെന്ന് നിങ്ങളോട് പറയണമെന്ന് വിശ്വസിക്കുന്ന ഒരാളുടെ സൃഷ്ടിയായിരുന്നു അത്, അല്ലാതെ എന്തെങ്കിലും പൊട്ടിത്തെറിക്കുന്നത് വരെ കാത്തിരിക്കരുത്.

മൈഗ്രേഷൻ കഴിഞ്ഞ് താമസിയാതെ ജെഎൽ കമ്പനി വിട്ടിരുന്നു. കൃത്യതയോടും അച്ചടക്കത്തോടും കൂടി ഓരോ അലർട്ട് സൈക്കിളും വിലയിരുത്തിക്കൊണ്ട്, രൂപകൽപന ചെയ്തതുപോലെ തന്നെ JL നിർമ്മിച്ച സിസ്റ്റം പ്രവർത്തിക്കുന്നത് തുടർന്നു. ഇനി ആരും അത് ശ്രദ്ധിക്കുന്നില്ല എന്നത് മാത്രമായിരുന്നു.

ട്രെൻഡ്-ലൈൻ സ്ക്രീൻഷോട്ടും 14-മാസ ട്രിഗർ ഫ്രീക്വൻസി ചാർട്ടും മാർക്ക് ഒരു ഫോൾഡറിലേക്ക് സേവ് ചെയ്തു. ഹൈലൈറ്റുകളില്ല, നാടകമില്ല. ലാപ്ടോപ്പ് അടച്ചപ്പോൾ, അയാൾ തന്റെ തണുത്ത കോഫി കുടിച്ചു തീർത്തു. അയാൾക്ക് നിശ്ശബ്ദത നന്നായി മനസ്സിലായി. ഒരിക്കൽ അദ്ദേഹവും അവിടെ ഉണ്ടായിരുന്നു-ആരും വായിക്കാത്ത ലോഗുകളിൽ മുന്നറിയിപ്പുകൾ സൃഷ്ടിച്ചു.

വെള്ളിയാഴ്ചയാണ് ഓഡിറ്റ് റിപ്പോർട്ട് നൽകേണ്ടിയിരുന്നത്. ആദ്യത്തെ അഞ്ച് പേജുകൾ നെറ്റ്‌വർക്ക് സെക്യൂരിറ്റി റേറ്റിംഗുകൾ, ആക്സസ് കൺട്രോളുകൾ, ബാക്കപ്പ് കംപ്ലയൻസ് എന്നിവ ഉൾക്കൊള്ളുന്നു-എല്ലാം നിലവാരമുള്ളവ. പേജ് ആറ് എന്നത് ഒരൊറ്റ ചാർട്ട് അടങ്ങുന്ന ഒരു അനുബന്ധമായിരുന്നു. വ്യാഖ്യാനങ്ങളില്ല. അപേക്ഷയില്ല. വെറും ഡാറ്റ മാത്രം.

എന്തുകൊണ്ട് ഇത് പ്രധാനമാണ്

ഈ സ്റ്റോറി 36 തന്ത്ര പരമ്പരകൾ എന്ന് വിളിക്കപ്പെടുന്ന ഒരു വലിയ പാറ്റേണിന്റെ ഭാഗമാണ്-ആധുനിക AI വിന്യാസങ്ങളിൽ പ്ലേ ചെയ്യുന്ന പുരാതന തന്ത്രപരമായ തത്വങ്ങൾ. ഇവിടെയുള്ള തീം "ഒരു ആത്മാവിനെ തിരികെ കൊണ്ടുവരാൻ ഒരു ശവം കടമെടുക്കുക" എന്നതാണ്: മരിച്ചതായി പ്രഖ്യാപിച്ച എന്തെങ്കിലും എടുക്കുകയും അതിൽ ഇപ്പോഴും ജീവനുണ്ടെന്ന് കണ്ടെത്തുകയും ചെയ്യുന്നു.

ഈ പ്രത്യേക കണ്ടെത്തലിനെ പ്രധാനമാക്കുന്നത് അത് വെളിപ്പെടുത്തുന്ന കാര്യമാണ്: ആധുനിക AI ഡാഷ്‌ബോർഡുകൾക്ക് ഒന്നും കാണാതെ തന്നെ എല്ലാം കാണിക്കാൻ കഴിയും. അവർ നിരീക്ഷിക്കേണ്ട സിഗ്നലുകൾ കൃത്യമായി ഫിൽട്ടർ ചെയ്യുമ്പോൾ തന്നെ അവർ മിനുക്കിയതും സമഗ്രവുമായി കാണാനാകും. ഒരു സിസ്റ്റത്തിന് എന്തെങ്കിലും പറയാനുണ്ടെന്ന് എല്ലാവർക്കും മറന്നുപോകത്തക്കവിധം വളരെക്കാലം നിശ്ശബ്ദമാക്കി വെക്കാൻ കഴിയും.

പുതിയ ഡാഷ്‌ബോർഡ് പഴയ ചാനലിനേക്കാൾ മികച്ചതാണോ എന്നതല്ല യഥാർത്ഥ ചോദ്യം. കേൾക്കുന്നത് നിർത്താൻ തീരുമാനിക്കുന്നതിന് മുമ്പ് ആ പഴയ ചാനൽ എന്താണ് പറയുന്നതെന്ന് ആരെങ്കിലും പരിശോധിച്ചിട്ടുണ്ടോ എന്നതാണ് ചോദ്യം.

ഉപസംഹാരം

ഒരു നെറ്റ്‌വർക്ക് ഓഡിറ്റ് ഒരിക്കലും പ്രവർത്തനം നിർത്തിയിട്ടില്ലാത്ത 14 മാസം പഴക്കമുള്ള നിശ്ശബ്ദമാക്കപ്പെട്ട ഒരു അലർട്ട് ചാനൽ പുറത്തുകൊണ്ടുവന്നു-കൂടാതെ ആധുനിക AI ഡാഷ്‌ബോർഡ് അദൃശ്യമാക്കിയ ഒരു യഥാർത്ഥ പ്രശ്നം അത് ട്രാക്ക് ചെയ്യുന്നുണ്ടെന്നും കണ്ടെത്തി. പുതിയ സിസ്റ്റങ്ങൾ മോശമാണെന്നോ പഴയ സിസ്റ്റങ്ങൾ നല്ലതാണെന്നോ അല്ല പാഠം. എന്തെങ്കിലും നിശ്ശബ്ദമാക്കുന്നത് അത് ശരിയാകുന്നതിൽ നിന്ന് തടയുന്നില്ല എന്നതാണ് പാഠം. എവിടെയോ, ആരോ പ്രശ്നങ്ങളെക്കുറിച്ച് വ്യക്തമായി ചിന്തിക്കുന്ന എന്തെങ്കിലും നിർമ്മിച്ചിട്ടുണ്ട്. നിങ്ങൾ അത് ഓഫാക്കാൻ തീരുമാനിക്കുമ്പോൾ, നിങ്ങൾ എന്താണ് കേൾക്കാതിരിക്കാൻ തിരഞ്ഞെടുക്കുന്നതെന്ന് കൃത്യമായി മനസ്സിലാക്കേണ്ടതാണ്.

ഗുണങ്ങൾ

• ലെഗസി സിസ്റ്റങ്ങൾ പലപ്പോഴും കഠിനാധ്വാനത്തിലൂടെ നേടിയ വൈദഗ്ദ്ധ്യം എൻകോഡ് ചെയ്യുന്നു. ഇൻഫ്രാസ്ട്രക്ചർ യഥാർത്ഥത്തിൽ എന്താണ് പറയേണ്ടതെന്നതിനെക്കുറിച്ചുള്ള ശ്രദ്ധാപൂർവ്വമായ ചിന്തയാണ് JL-ന്റെ അലർട്ട് പരിധികളും നെയിമിംഗ് കൺവെൻഷനുകളും പ്രതിഫലിപ്പിച്ചത്.
• അഗ്രസ്സീവ് അലർട്ടിംഗ് എന്നത് പ്രതിസന്ധികളാകുന്നതിന് മുമ്പ് ട്രെൻഡുകളെ പിടിക്കുന്നു. സിസ്റ്റങ്ങൾ പരാജയപ്പെടുന്നതിനായി കാത്തിരിക്കുന്നതിന് പകരം 70% മുന്നറിയിപ്പ് പരിധി നേരത്തേ തന്നെ പ്രശ്നങ്ങൾ കണ്ടെത്തുന്നു.
• മ്യൂട്ടിംഗ് ഡിലീറ്റ് ചെയ്യുന്നതിന് തുല്യമല്ല. പഴയ ചാനൽ പ്രവർത്തിച്ചുകൊണ്ടിരുന്നു; ആർക്കും അത് പുനർനിർമ്മിക്കാനോ ലോജിക് വീണ്ടും കണ്ടുപിടിക്കാനോ കഴിഞ്ഞില്ല.
• ഒന്നിലധികം മോണിറ്ററിംഗ് സമീപനങ്ങൾ റിഡൻഡൻസി നൽകുന്നു. വ്യത്യസ്ത സിസ്റ്റങ്ങൾക്ക് വ്യത്യസ്ത പ്രശ്നങ്ങൾ കണ്ടെത്താനാകും; ഒരെണ്ണം പൂർണ്ണമായും മാറ്റിസ്ഥാപിക്കുന്നത് വിലപ്പെട്ട കാഴ്ചപ്പാടിനെ ഇല്ലാതാക്കുന്നു.
• വ്യക്തമായ ഡിസൈൻ പാറ്റേണുകൾ ചിന്തയെ വെളിപ്പെടുത്തുന്നു, അല്ലാതെ നിർവ്വഹണം മാത്രമല്ല. JL-ന്റെ റൂളുകളുടെ ഘടന ഇൻഫ്രാസ്ട്രക്ചർ അലർട്ടുകളെക്കുറിച്ച് എങ്ങനെ ചിന്തിക്കണമെന്ന് വായനക്കാരെ പഠിപ്പിച്ചു.

ദോഷങ്ങൾ

• രേഖപ്പെടുത്താത്ത സിസ്റ്റങ്ങൾ കാലക്രമേണ അദൃശ്യമാകുന്നു. സജീവമായ അറ്റകുറ്റപ്പണികളും അവലോകനവും കൂടാതെ, പ്രവർത്തിക്കുന്ന സിസ്റ്റങ്ങൾ പോലും മറന്നുപോകുന്നു.
• ഓർഗനൈസേഷണൽ പരിവർത്തനങ്ങൾക്ക് പലപ്പോഴും സ്ഥാപനപരമായ അറിവ് നഷ്ടപ്പെടുന്നു. എഞ്ചിനീയർമാർ പോകുമ്പോൾ, ഡിസൈൻ ചോയിസുകളെക്കുറിച്ചുള്ള അവരുടെ ന്യായവാദം അവരോടൊപ്പം അപ്രത്യക്ഷമാകും.
• ആധുനിക ഡാഷ്‌ബോർഡുകൾക്ക് തെറ്റായ ആത്മവിശ്വാസം സൃഷ്ടിക്കാൻ കഴിയും. പച്ച സ്റ്റാറ്റസ് കാണിക്കുന്ന പോളിഷ് ചെയ്ത ഇന്റർഫേസുകൾ പ്രധാനപ്പെട്ട ഡാറ്റാ സ്ട്രീമുകൾ നിശ്ശബ്ദമാക്കിയിരിക്കുന്നു എന്ന വസ്തുത മറച്ചുവെച്ചേക്കാം.
• അലർട്ട് ക്ഷീണം അമിതമായി നിശ്ശബ്ദമാക്കുന്നതിനെ ന്യായീകരിക്കുന്നു. ശബ്ദം കുറയ്ക്കുന്നതിന് ഓർഗനൈസേഷനുകൾ പലപ്പോഴും ചാനലുകളെ നിശ്ശബ്ദമാക്കുന്നു, ചിലപ്പോൾ അവരോടൊപ്പം മറ്റെന്താണ് നിശ്ശബ്ദമാക്കിയതെന്ന് പരിശോധിക്കാൻ അവർ മറക്കുന്നു.
• ഒറ്റ സിസ്റ്റത്തിനും എല്ലാം കണ്ടെത്താനാകില്ല. ഒരു AI ഡാഷ്‌ബോർഡിനെ ആശ്രയിക്കുന്നത്, എത്ര വികസിതമായാലും, വ്യത്യസ്തമായി രൂപകൽപ്പന ചെയ്ത സിസ്റ്റങ്ങൾ കണ്ടെത്തുന്ന പാറ്റേണുകൾ നിങ്ങൾക്ക് നഷ്ടമാകുമെന്ന് ഉറപ്പ് നൽകുന്നു.

ജാഗ്രത

DEV കമ്മ്യൂണിറ്റി സ്ട്രാറ്റജംസ് പരമ്പരയിൽ പ്രസിദ്ധീകരിച്ച ഒരു യഥാർത്ഥ കേസ് സ്റ്റഡിയെ അടിസ്ഥാനമാക്കിയുള്ള ഒരു വിദ്യാഭ്യാസ വിവരണമാണ് ഈ ലേഖനം. ഇത് ലെഗസി സിസ്റ്റങ്ങൾ, മോണിറ്ററിംഗ്, ഓർഗനൈസേഷണൽ ട്രാൻസിഷനുകൾ എന്നിവയെക്കുറിച്ചുള്ള തത്വങ്ങൾ വ്യക്തമാക്കുന്നു. ഉറവിട മെറ്റീരിയലിൽ അവതരിപ്പിച്ചിരിക്കുന്നതുപോലെയാണ് പ്രത്യേക മെട്രിക്കുകൾ, പരിധികൾ, സാങ്കേതിക വിശദാംശങ്ങൾ (70% മുന്നറിയിപ്പ് പരിധി, കണക്ഷൻ പൂൾ മോണിറ്ററിംഗ്, ഗാർബേജ് ശേഖരണ ട്രാക്കിംഗ്) എന്നിവ. അടിസ്ഥാന സൗകര്യ തീരുമാനങ്ങൾക്കായി ഈ കഥയെ ആശ്രയിക്കുന്നതിന് മുമ്പ് വായനക്കാർ യഥാർത്ഥ DEV കമ്മ്യൂണിറ്റി ലേഖനത്തിനെതിരായ അവകാശവാദങ്ങൾ പരിശോധിക്കേണ്ടതാണ്. വിപുലമായ പാഠം-ഒരു സിസ്റ്റത്തെ നിശ്ശബ്ദമാക്കുന്നത് അത് ശരിയാകുന്നതിൽ നിന്ന് തടയുന്നില്ല എന്നതാണ്-ഈ ഒറ്റ കേസിനപ്പുറം ഇത് ബാധകമാണ് കൂടാതെ ഏത് സാങ്കേതിക പരിവർത്തനത്തിലും ചിന്തിക്കാവുന്ന പരിഗണന അർഹിക്കുന്നു.

പതിവായി ചോദിക്കുന്ന ചോദ്യങ്ങൾ

ഒരു അലർട്ട് പരിധി എന്താണ്? — ഒരു മോണിറ്ററിംഗ് സിസ്റ്റം നിരീക്ഷിക്കുന്ന ഒരു പരിധിയാണിത്. മെട്രിക്‌സ് ആ ലൈൻ കടക്കുമ്പോൾ, സിസ്റ്റം ഒരു അലർട്ട് അയയ്‌ക്കുന്നു. ഈ സ്റ്റോറിയിൽ, കണക്ഷൻ പൂൾ ഉപയോഗത്തിനായി JL പരിധി 70% (മുന്നറിയിപ്പ്), 85% (ഗുരുതരം) ആയി സജ്ജീകരിച്ചു, അതിനാൽ ആ പോയിന്റുകളിൽ അലർട്ടുകൾ ഫയർ ചെയ്യും.

ഒരു കമ്പനി എന്തിനാണ് അലർട്ട് ചാനൽ മ്യൂട്ട് ചെയ്യുന്നത്? — അലർട്ടുകൾ ഇനി പ്രസക്തമല്ലെന്ന് ചിന്തിക്കുമ്പോൾ ശബ്ദം കുറയ്ക്കുന്നതിന് ടീമുകൾ പലപ്പോഴും ചാനലുകൾ നിശ്ശബ്ദമാക്കുന്നു. ഈ സാഹചര്യത്തിൽ, ഓർഗനൈസേഷൻ പുതിയ AI ഡാഷ്‌ബോർഡിലേക്ക് മാറിയതിനാലും ലെഗസി സിസ്റ്റം അനാവശ്യമാണെന്ന് വിശ്വസിച്ചതിനാലും പഴയ ചാനൽ നിശ്ശബ്ദമാക്കി.

എന്താണ് കണക്ഷൻ പൂൾ, അതെന്തുകൊണ്ട് പ്രധാനമാണ്? — ആപ്ലിക്കേഷനുകൾ ഉപയോഗിക്കുന്ന ഡാറ്റാബേസ് കണക്ഷനുകളുടെ ഒരു ഗ്രൂപ്പാണ് കണക്ഷൻ പൂൾ. ഉപയോഗം 85% ആയി ഉയർന്നാൽ, സിസ്റ്റത്തിന് ലഭ്യമായ കണക്ഷനുകൾ ഇല്ലാതാകുകയും അഭ്യർത്ഥനകൾ പരാജയപ്പെടുകയും ചെയ്യും. ഇത് നിരീക്ഷിക്കുന്നത് ഡാറ്റാബേസ് തകരാറുകൾ തടയുന്നു.

എന്താണ് ഗാർബേജ് കളക്ഷൻ? — പ്രോഗ്രാമിന് ആവശ്യമില്ലാത്ത മെമ്മറി ക്ലീൻ ചെയ്യാൻ ഉപയോഗിക്കുന്ന പ്രക്രിയയാണ് ഗാർബേജ് ശേഖരണം. ഇത് സാവധാനത്തിൽ പ്രവർത്തിക്കുന്നുവെങ്കിൽ (ഉയർന്ന ലേറ്റൻസി), മുഴുവൻ ആപ്ലിക്കേഷനും അൽപ്പനേരത്തേക്ക് മരവിപ്പിക്കാൻ കഴിയും. ഉയർന്നുവരുന്ന പ്രശ്നങ്ങൾ നേരത്തെ തന്നെ കണ്ടെത്തുന്നതിന് ഓഫ്-പീക്ക് സമയങ്ങളിൽ JL-ന്റെ റൂൾ ഇത് ട്രാക്ക് ചെയ്തു.

ആരും വായിക്കുന്നില്ലെങ്കിൽ ആരെങ്കിലും പഴയ ചാനൽ സൂക്ഷിക്കുന്നത് എന്തുകൊണ്ട്? — "എന്തെങ്കിലും ആവശ്യമുണ്ടായാലോ എന്ന് കരുതി അവർ അത് സൂക്ഷിച്ചു" എന്ന് ടെക് ലീഡ് പറഞ്ഞു, എന്നാൽ പിന്നീട് അത് നിശ്ശബ്ദമാക്കിയതായി കോൺഫിഗർ ചെയ്തു. ഇതിനർത്ഥം സിസ്റ്റം ഇപ്പോഴും പ്രവർത്തിക്കുന്നുണ്ട് എന്നാൽ ആർക്കും നോട്ടിഫിക്കേഷനുകൾ ലഭിച്ചില്ല എന്നാണ്-അതിനാൽ അത് കണ്ടെത്തിയ പ്രശ്നങ്ങളെക്കുറിച്ച് ആർക്കുമറിയില്ല.

എന്താണ് 36 തന്ത്ര പരമ്പര? — ആധുനിക AI വിന്യാസങ്ങളിലും ഓർഗനൈസേഷണൽ മാറ്റങ്ങളിലും യഥാർത്ഥത്തിൽ എന്താണ് സംഭവിക്കുന്നതെന്ന് പരിശോധിക്കാൻ പുരാതന ചൈനീസ് തന്ത്രപരമായ തത്വങ്ങൾ ഉപയോഗിക്കുന്ന DEV കമ്മ്യൂണിറ്റിയിലെ സ്റ്റോറികളുടെ ഒരു പരമ്പരയാണിത്. ഈ കഥ "ഒരു ആത്മാവിനെ തിരികെ കൊണ്ടുവരാൻ ഒരു ശവം കടമെടുക്കുക" എന്ന തത്വം വ്യക്തമാക്കുന്നു-മരിച്ചുവെന്ന് കരുതുന്ന ഒന്നിനെ പുനരുജ്ജീവിപ്പിക്കുക.

AI ഡാഷ്‌ബോർഡുകൾ എങ്ങനെ ഡാറ്റ ഫിൽട്ടർ ചെയ്യും? — ഡാഷ്‌ബോർഡുകൾ സാധാരണയായി സജീവവും റൂട്ട് ചെയ്‌തതുമായ ചാനലുകളിൽ നിന്നും സിസ്റ്റങ്ങളിൽ നിന്നുമുള്ള ഡാറ്റ മാത്രമേ പ്രദർശിപ്പിക്കൂ. #alert-legacy-infra നിശ്ശബ്ദമാക്കിയപ്പോൾ, അതിന്റെ ഡാറ്റ പുതിയ ഡാഷ്‌ബോർഡിലേക്ക് റൂട്ട് ചെയ്യുന്നത് നിർത്തി, അലർട്ടുകൾ ഫയർ ചെയ്തുകൊണ്ടിരുന്നിട്ടും അതിനെ അദൃശ്യമാക്കി.

പുതിയ മോണിറ്ററിംഗ് സിസ്റ്റത്തിലേക്ക് മാറുന്നതിന് മുമ്പ് ടീമുകൾ എന്താണ് ചെയ്യേണ്ടത്? — പഴയ സിസ്റ്റം എന്താണ് കണ്ടെത്തിയതെന്നും ട്രാക്ക് ചെയ്തതെന്നും അവലോകനം ചെയ്യുക. മാറ്റത്തിന്റെ സമയത്ത് രണ്ട് സിസ്റ്റങ്ങളും സമാന്തരമായി പ്രവർത്തിപ്പിക്കുക. അലർട്ടുകൾ എന്തുകൊണ്ട് പ്രധാനമാണെന്നും പരിധികൾ എന്താണ് അർത്ഥമാക്കുന്നതെന്നും ഡോക്യുമെന്റ് ചെയ്യുക. പുതിയതോ ഫാൻസിയോ ആയ ഒരു സിസ്റ്റം അതിന്റെ മുൻഗാമികൾ ചെയ്തതെല്ലാം സ്വയമേവ കാണുമെന്ന് ഒരിക്കലും വിചാരിക്കരുത്.

ടാഗുകൾ

#infrastructure #monitoring #alerts #legacysystems #ai #organizationalchange #debtnotforgotten #infra-as-truth