ബിഗ് ഡാറ്റ
പരമ്പരാഗത ഡാറ്റാ പ്രോസസ്സിംഗ് ആപ്ലിക്കേഷൻ സോഫ്‌റ്റ്‌വെയർ കൈകാര്യം ചെയ്യാൻ കഴിയാത്തത്ര വലുതോ സങ്കീർണ്ണമോ ആയ ഡാറ്റാ സെറ്റുകളെയാണ് ബിഗ് ഡാറ്റ പ്രധാനമായും സൂചിപ്പിക്കുന്നത്. നിരവധി എൻട്രികളുള്ള (വരികൾ) ഡാറ്റ കൂടുതൽ സ്റ്റാറ്റിസ്റ്റിക്കൽ പവർ വാഗ്ദാനം ചെയ്യുന്നു, അതേസമയം ഉയർന്ന സങ്കീർണ്ണതയുള്ള ഡാറ്റ (കൂടുതൽ ആട്രിബ്യൂട്ടുകൾ അല്ലെങ്കിൽ കോളങ്ങൾ) ഉയർന്ന തെറ്റായ കണ്ടെത്തൽ നിരക്കിലേക്ക് നയിച്ചേക്കാം.[2]വലിയ ഡാറ്റ പുസ്തകങ്ങളുടെ ഒരു ഭീമാകാരമായ ലൈബ്രറി ഉള്ളതുപോലെയാണ്; ഏതാനും പേജുകൾ മാത്രം വായിച്ചുകൊണ്ട് നിങ്ങൾക്ക് പൂർണ്ണമായ അർത്ഥം മനസ്സിലാക്കാൻ കഴിയില്ല. നിങ്ങൾ മുഴുവൻ ചിത്രവും നോക്കുമ്പോൾ മാത്രം മനസ്സിലാകുന്ന ഒരു വലിയ അളവിലുള്ള വിവരമാണിത്.[3]
വലിയ ഡാറ്റകൾ വിശകലനം ചെയ്യുമ്പോഴുള്ള വെല്ലുവിൾ ഡാറ്റ ക്യാപ്ചർ ചെയ്യൽ, ഡാറ്റ സംഭരണം, ഡാറ്റ വിശകലനം, തിരയൽ, പങ്കിടൽ, കൈമാറ്റം, ദൃശ്യവൽക്കരണം, ചോദ്യം ചെയ്യൽ, അപ്ഡേറ്റ് ചെയ്യൽ, വിവര സ്വകാര്യത, ഡാറ്റ ഉറവിടം എന്നിവ ഉൾപ്പെടുന്നു. ബിഗ് ഡാറ്റ യഥാർത്ഥത്തിൽ മൂന്ന് പ്രധാന ആശയങ്ങളുമായി ബന്ധപ്പെട്ടിരിക്കുന്നു: വോളിയം, വൈവിധ്യം, വേഗത.[4]ബിഗ് ഡാറ്റ വിശകലനം ഒരു വലിയ പസിൽ സോൾവ് ചെയ്യാൻ ശ്രമിക്കുന്നത് പോലെയാണ്, ചിലപ്പോൾ ശരിയായ ഭാഗങ്ങൾ തിരഞ്ഞെടുക്കുന്നത് ബുദ്ധിമുട്ടാണ്. നിങ്ങളുടെ പക്കലുള്ള വിവരങ്ങൾ വിശ്വാസയോഗ്യമാണെന്നും ഒരു പസിൽ കഷണങ്ങൾ പോലെ കൃത്യമായി യോജിക്കുന്നുവെന്നും ഉറപ്പാക്കുന്നതാണ് ബിഗ് ഡാറ്റയിലെ സത്യസന്ധത കൊണ്ടർത്ഥമാക്കുന്നത്. ബിഗ് ഡാറ്റ വിശ്വസനീയമാണെന്ന് ഉറപ്പുവരുത്തുന്നില്ലെങ്കിൽ, വിശാലവും വൈവിധ്യപൂർണ്ണവുമായ വിവരങ്ങൾ കൈകാര്യം ചെയ്യുന്നത് നിങ്ങളുടെ സ്ഥാപനത്തിന് നേട്ടങ്ങളേക്കാൾ കൂടുതൽ പ്രശ്‌നങ്ങൾ സൃഷ്ടിക്കും.[5]
"ബിഗ് ഡാറ്റ" എന്നതിന്റെ അർത്ഥം, ഭാവിയിലെ ട്രെൻഡുകൾ പ്രവചിക്കുക അല്ലെങ്കിൽ ആളുകൾ ഓൺലൈനിൽ എങ്ങനെ പെരുമാറുമെന്ന് മനസ്സിലാക്കുക തുടങ്ങിയ നിരവധി വിവരങ്ങളിൽ പ്രധാനപ്പെട്ട പാറ്റേണുകൾ കണ്ടെത്തുന്നതിന് ഫാൻസി കമ്പ്യൂട്ടർ തന്ത്രങ്ങൾ ഉപയോഗിക്കുക എന്നാണ്. ഇത് ഒരു വലിയ അളവിലുള്ള ഡാറ്റ ഉള്ളത് മാത്രമല്ല, അത് മനസ്സിലാക്കാനും ഉപയോഗപ്രദമായ സ്ഥിതിവിവരക്കണക്കുകൾ നേടാനും സ്മാർട്ട് ടൂളുകൾ ഉപയോഗിക്കുന്നതിനെക്കുറിച്ചാണ്. ഡാറ്റയുടെ പുതിയ ലോകത്ത് പ്രാധാന്യമുള്ള പ്രധാന കാര്യമല്ല ധാരാളം ഡാറ്റ ഉള്ളത്; എല്ലാ വിവരങ്ങളും മനസ്സിലാക്കാനും അതിൽ നിന്ന് പ്രയോജനം നേടാനും സ്മാർട്ട് ടെക്നിക്കുകൾ എങ്ങനെ ഉപയോഗിക്കുന്നു എന്നതാണ് കൂടുതൽ പ്രധാനം. വളരെയധികം ഡാറ്റ ഉള്ളത് മാത്രമല്ല, അത് മനസ്സിലാക്കാനും വിലപ്പെട്ട സ്ഥിതിവിവരക്കണക്കുകൾ എക്‌സ്‌ട്രാക്‌റ്റുചെയ്യാനും സ്മാർട്ട് രീതികൾ ഉപയോഗിക്കുക എന്നതാണ് പ്രധാനം.[6]ശാസ്ത്രജ്ഞർ, ബിസിനസുകാർ, ഡോക്ടർമാർ, പരസ്യദാതാക്കൾ, ഗവൺമെന്റുകൾ തുടങ്ങിയ ആളുകൾക്ക് വലിയൊരു കൂട്ടം വിവരങ്ങൾ കൈകാര്യം ചെയ്യുന്നത് ബുദ്ധിമുട്ടാണ്, പ്രത്യേകിച്ചും ഓൺലൈൻ തിരയലുകൾ, സാമ്പത്തിക സാങ്കേതികവിദ്യ, ആരോഗ്യ ഡാറ്റ, മാപ്പുകൾ, നഗര വിവരങ്ങൾ, ബിസിനസ് ഡാറ്റ തുടങ്ങിയ കാര്യങ്ങളിൽ പ്രവർത്തിക്കുമ്പോൾ. ഇത് ഒരു ഭീമാകാരമായ പസിൽ കൈകാര്യം ചെയ്യുന്നതുപോലെയാണ്, അവിടെ ഉപയോഗപ്രദമായ പാറ്റേണുകൾ കണ്ടെത്തുന്നതും ഡാറ്റയെ മനസ്സിലാക്കുന്നതും ഉൾപ്പെട്ടിരിക്കുന്ന എല്ലാവർക്കും വലിയ വെല്ലുവിളിയായി മാറുന്നു.[7] കാലാവസ്ഥ, ജീനുകൾ, മസ്തിഷ്ക ബന്ധങ്ങൾ, ഫിസിക്സ് സിമുലേഷനുകൾ, ജീവജാലങ്ങൾ, പരിസ്ഥിതി എന്നിവ പഠിക്കുന്നത് പോലെയുള്ള ഓൺലൈൻ അധിഷ്ഠിത പ്രവർത്തനങ്ങളിൽ ശാസ്ത്രജ്ഞർ വെല്ലുവിളികൾ നേരിടുന്നു. കാലാവസ്ഥ പ്രവചിക്കുക, നമ്മുടെ ജീനുകളെ മനസ്സിലാക്കുക, സങ്കീർണ്ണമായ ഭൗതികശാസ്ത്രത്തെ മനസ്സിലാക്കുക, ജീവജാലങ്ങളെ പഠിക്കുക, പരിസ്ഥിതി പര്യവേക്ഷണം ചെയ്യുക തുടങ്ങിയവ[8]
മൊബൈൽ ഉപകരണങ്ങൾ, വിലകുറഞ്ഞതും നിരവധി വിവരങ്ങൾ ഉൾക്കൊളളുന്ന സംവേദനാത്മകവുമായ ഇന്റർനെറ്റ് ഓഫ് തിങ്സ് ഉപകരണങ്ങൾ, ഏരിയൽ (റിമോട്ട് സെൻസിംഗ്), സോഫ്‌റ്റ്‌വെയർ ലോഗുകൾ, ക്യാമറകൾ, മൈക്രോഫോണുകൾ, റേഡിയോ ഫ്രീക്വൻസി ഐഡന്റിഫിക്കേഷൻ തുടങ്ങിയ ഉപകരണങ്ങൾ വഴി ഡാറ്റ ശേഖരിക്കുന്നതിനാൽ ലഭ്യമായ ഡാറ്റാ സെറ്റുകളുടെ വലുപ്പവും എണ്ണവും അതിവേഗം വളർന്നു. അതൊടൊപ്പം തന്നെ റേഡിയോ ഫ്രീക്വൻസി ഐഡന്റിഫിക്കേഷൻ(RFID) റീഡറുകളും വയർലെസ് സെൻസർ നെറ്റ്‌വർക്കുകളും.[9][10]1980-കൾ മുതൽ, ഓരോ 40 മാസത്തിലും വിവരങ്ങൾ സംഭരിക്കുന്നതിനുള്ള കഴിവ് ഇരട്ടിയാകുന്നു.[11]2012-ൽ, ഓരോ ദിവസവും 2.5 എക്സാബൈറ്റ് ഡാറ്റ സൃഷ്‌ടിക്കുന്നു, വിവരങ്ങൾ സൃഷ്‌ടിക്കാനും സംഭരിക്കാനുമുള്ള ശേഷിയിൽ അവിശ്വസനീയമായ വളർച്ച കാണിക്കുന്നു.[12]ഒരു ഐഡിസി(IDC) റിപ്പോർട്ട് പ്രവചനത്തെ അടിസ്ഥാനമാക്കി, 2013-നും 2020-നും ഇടയിൽ ആഗോള ഡാറ്റാ വോളിയം 4.4 സെറ്റാബൈറ്റിൽ നിന്ന് 44 സെറ്റാബൈറ്റായി വളരുമെന്ന് പ്രവചിക്കപ്പെട്ടു. 2025 ആകുമ്പോഴേക്കും 163 സെറ്റാബൈറ്റ് ഡാറ്റ ഉണ്ടാകുമെന്ന് ഐഡിസി പ്രവചിക്കുന്നു.[13]ഐഡിസിയുടെ കണക്കനുസരിച്ച്, ബിഗ് ഡാറ്റയ്ക്കും ബിസിനസ് അനലിറ്റിക്‌സ് (ബിഡിഎ) സൊല്യൂഷനുകൾക്കുമുള്ള ആഗോള ചെലവ് 2021-ൽ 215.7 ബില്യൺ ഡോളറിലെത്തുമെന്ന് കണക്കാക്കി.[14][15]സ്റ്റാറ്റിസ്റ്റ റിപ്പോർട്ട് ചെയ്യുന്നത് പ്രകാരം, ആഗോള ബിഗ് ഡാറ്റ മാർക്കറ്റ് 2027 ഓടെ 103 ബില്യൺ ഡോളറായി വളരുമെന്ന് പ്രവചിക്കപ്പെടുന്നു.[16]2011-ൽ മക്കിൻസി & കമ്പനി റിപ്പോർട്ട് പ്രകാരം, കാര്യക്ഷമതയും ഗുണനിലവാരവും വർദ്ധിപ്പിക്കുന്നതിന് യുഎസ് ഹെൽത്ത് കെയർ ക്രിയാത്മകമായും ഫലപ്രദമായും ബിഗ് ഡാറ്റ ഉപയോഗിക്കുകയാണെങ്കിൽ, ഈ മേഖലയ്ക്ക് ഓരോ വർഷവും 300 ബില്യൺ ഡോളർ മൂല്യം സൃഷ്ടിക്കാൻ കഴിയും.[17]യൂറോപ്പിലെ വികസിത സമ്പദ്‌വ്യവസ്ഥകളിൽ, ഗവൺമെന്റ് അഡ്‌മിനിസ്‌ട്രേറ്റർമാർക്ക് 100 ബില്യൺ യൂറോയിൽ കൂടുതൽ (149 ബില്യൺ ഡോളർ) ലാഭിക്കാനാകും. വ്യക്തിഗത-ലൊക്കേഷൻ ഡാറ്റയുടെ പശ്ചാത്തലത്തിൽ, 600 ബില്യൺ ഡോളർ ഉപഭോക്തൃ മിച്ചം വരുമെന്നത് കൊണ്ട് ഉദ്ദേശിക്കുന്നത് ഉപയോക്താക്കൾക്ക് അവരുടെ ലൊക്കേഷൻ വിവരങ്ങൾ വിവിധ ആപ്ലിക്കേഷനുകൾക്കായി പ്രയോജനപ്പെടുത്തുന്നതിലൂടെ പ്രവർത്തനക്ഷമമാക്കിയ സേവനങ്ങളിൽ നിന്ന് കാര്യമായ പ്രയോജനം നേടാനാകുമെന്നാണ്.[16]വൻകിട കമ്പനികളിലെ ബിഗ്-ഡാറ്റ പ്രോജക്റ്റുകൾ ആരാണ് നയിക്കേണ്ടതെന്ന് തീരുമാനിക്കുക എന്നതിനർത്ഥം ഏത് ടീമിനെയോ നേതാവിനെയോ കൈകാര്യം ചെയ്യാനും ഈ സംരംഭങ്ങൾ മുഴുവൻ ഓർഗനൈസേഷനായി പരമാവധി പ്രയോജനപ്പെടുത്താനും ഏറ്റവും അനുയോജ്യമാണെന്ന് കണ്ടെത്തുക എന്നതാണ്. മൊത്തത്തിലുള്ള ബിസിനസ്സ് ലക്ഷ്യങ്ങളുമായി ഫലപ്രദമായ ഏകോപനവും വിന്യാസവും ഉറപ്പാക്കുന്നതിന് ഐടി, ഡാറ്റ, ബിസിനസ് യൂണിറ്റുകൾ എന്നിവയ്ക്കിടയിൽ ശരിയായ ബാലൻസ് കണ്ടെത്തുന്നതിനാണ് ഈ തീരുമാനം എടുക്കുന്നത്.[18]