தரவு அறிவியலுக்கு AI என்ன செய்யும்

நான் சமீபத்தில் சைபர் செக்யூரிட்டிக்காக தரவு அறிவியலைப் பயன்படுத்துவது குறித்த வகுப்பை நடத்தினேன், பாக்கெட் கேப்சர் டேட்டாவின் பகுப்பாய்வில் கவனம் செலுத்துகிறது—இது ஓரளவு தொழில்நுட்பம் மற்றும் பாரம்பரியமாக உலர்ந்த தலைப்பு. நான் பகிர்ந்த அணுகுமுறை நிதி நிறுவனங்களுக்குள் இணையப் பாதுகாப்பில் எனது அனுபவத்திலிருந்து பெறப்பட்டது, ஆய்வுத் தரவு பகுப்பாய்வு, பதிவுத் தரவை முன் செயலாக்கம் செய்தல் மற்றும் மாற்றுதல் மற்றும் கிளஸ்டரிங் மற்றும் கிராஃப் நெட்வொர்க் பகுப்பாய்வு ஆகியவற்றின் மூலம் முரண்பாடுகளைக் கண்டறிதல் போன்ற முக்கிய படிகளை உள்ளடக்கியது.

ஒரு ஆச்சரியமான அம்சம் என்னவென்றால், இந்த அமர்வுக்குத் தயாராக நான் செலவழித்த நேரம்-நான் வழக்கமாக முதலீடு செய்வதில் ஒரு பகுதியே. AI செயல்முறையை ஒழுங்குபடுத்துவதில் குறிப்பிடத்தக்க பங்கைக் கொண்டிருந்தது. கோடிங், அவுட்லைனை உருவாக்க மற்றும் ஸ்லைடுகளை உருவாக்குவதற்கு நான் கிளாடைப் பயன்படுத்தினேன். மொத்தத்தில், முழு பாடமும் 48 மணி நேரத்திற்குள் தயாராக இருந்தது.

அமர்வு சுவாரஸ்யமாக மாறியது. பங்கேற்பாளர்கள், முதன்மையாக குறியீடு செய்யாத CISOக்கள், AI இன் உதவியுடன் வடிவமைக்கப்பட்ட பயிற்சிகள் உள்ளுணர்வு மற்றும் கைகளில் இருப்பதைக் கண்டறிந்தனர். தரவு மற்றும் குறியீட்டுடன் நேரடியாக வேலை செய்வதில் அவர்களை மூழ்கடிப்பதே எனது நோக்கமாக இருந்தது. நவீன சைபர்த்ரீட் கண்காணிப்பு மற்றும் SIEM இயங்குதளங்கள் பொதுவாக தன்னியக்கமாக செயல்படுவதை கைமுறையாக ஆராய்வதற்கான வாய்ப்பை அவர்கள் குறிப்பாக பாராட்டினர், "ஹூட்டின் கீழ்" நடக்கும் செயல்முறைகள் பற்றிய நுண்ணறிவுகளைப் பெறுகின்றனர்.

வகுப்பில் இருந்து நான் எடுத்துக்கொண்டது வியக்கத்தக்க வகையில் எதிர்மறையானது: தரவு அறிவியல், நமக்குத் தெரிந்தபடி, இறுதியில் AI ஆல் மாற்றப்படும் . இந்த பார்வை முன்கூட்டியே தோன்றலாம் அல்லது ஒருவேளை அதன் காலத்திற்கு முன்னதாக இருக்கலாம் - ஆனால் இது விவாதத்திற்கு உத்தரவாதம் அளிக்கும் ஒரு முன்னோக்கு.

எச்சரிக்கை: இவற்றில் சில மக்களைத் தூண்டலாம்.

பாலியல் என்பது சாமான்கள்

ஒரு தசாப்தத்திற்கும் மேலாக, தரவு அறிவியல் "21 ஆம் நூற்றாண்டின் கவர்ச்சியான வேலை" என்று கொண்டாடப்படுகிறது. இன்னும் AI வேகமாக முன்னேறும் போது, புலத்தின் அடிப்படை சவால்களை கவனிக்காமல் இருப்பது கடினம் என்பது தெளிவாகிறது. சக்தி வாய்ந்த ஜெனரேட்டிவ் AI இன் வருகையானது, ஒரு ஒழுங்குமுறைக்கான முக்கிய புள்ளியாக இருக்கலாம், பின்னோக்கிப் பார்த்தால், ஆரம்பத்தில் ஒப்புக்கொள்ளப்பட்டதை விட மிகவும் தளர்வாக வரையறுக்கப்பட்டு மிகைப்படுத்தப்பட்டிருக்கலாம்.

அதன் சாராம்சத்தில், தரவு அறிவியல் கணினி அறிவியல், புள்ளிவிவரங்கள் மற்றும் வணிக புத்திசாலித்தனத்தை ஒருங்கிணைக்கிறது, நிறுவனங்களுக்கு பரந்த அளவிலான தரவுகளிலிருந்து செயல்படக்கூடிய நுண்ணறிவுகளின் வாக்குறுதியை வழங்குகிறது. இன்றைய தரவு உந்துதல் உலகில் இந்த திறன் மறுக்கமுடியாத மதிப்புமிக்கது. இருப்பினும், அதன் மெருகூட்டப்பட்ட படத்தின் கீழ், புலம் குறிப்பிடத்தக்க சிக்கல்களை எதிர்கொள்கிறது. தரவு அறிவியல் என்று அடிக்கடி பெயரிடப்படுவது, எப்போதும் நேர்த்தியாகச் சீரமைக்காத தளர்வான தொடர்புடைய பணிகளின் ஒட்டுவேலையாக மாறுகிறது, மேலும் புலத்தில் உள்ள பல வல்லுநர்கள் ஒழுக்கம் கோரும் முழு அகலம் மற்றும் சிக்கலான தன்மையுடன் போராடுகிறார்கள்.

தரவு பகுப்பாய்வு, மாடலிங் மற்றும் நுண்ணறிவு உருவாக்கம் ஆகியவற்றைக் கையாளும் திறன் கொண்ட AI- உந்துதல் கருவிகளின் எழுச்சி, தரவு அறிவியலின் பங்கு மற்றும் எதிர்காலத்தை நாம் எவ்வாறு பார்க்கிறோம் என்பதில் மாற்றத்தை ஏற்படுத்தலாம். தரவு அறிவியலில் உள்ள பல அடிப்படைப் பணிகளை AI தொடர்ந்து எளிமைப்படுத்தி தானியக்கமாக்குவதால், அறிவார்ந்த தன்னியக்க யுகத்தில் தரவு விஞ்ஞானியாக இருப்பதன் உண்மையான அர்த்தம் என்ன என்பதை இந்தத் துறையில் கணக்கிடலாம்.

விரிசல்

பல தரவு விஞ்ஞானிகள், அதிநவீன குறியீட்டு திறன்கள் மற்றும் டிஜிட்டல் கருவிகளைப் பயன்படுத்தினாலும், வியக்கத்தக்க வகையில் கைமுறை மற்றும் பிழை ஏற்படக்கூடிய வேலைகளில் ஈடுபடுகின்றனர். தரவு தயாரித்தல், சுத்தப்படுத்துதல் மற்றும் பகுப்பாய்வு ஆகியவை மீண்டும் மீண்டும் மற்றும் இயந்திரத்தனமான கடினமான, நேரத்தை எடுத்துக்கொள்ளும் பணிகளை உள்ளடக்கியது. உண்மையில், கணிசமான அளவு தரவு அறிவியல் உழைப்பு தரவுத்தொகுப்புகளைத் தயாரிப்பதில் செல்கிறது - இது உருவாக்கப்படும் உற்சாகமான, கண்டுபிடிப்பு-உந்துதல் அறிவியலைக் காட்டிலும், இது பெரும்பாலும் கடினமானதாக உணர்கிறது. இந்தத் துறையில் நுழையும் பலர், சிறந்த முறையில், அமெச்சூர்களாக இருப்பதால், இந்தப் பிரச்சனை மேலும் அதிகரிக்கிறது. Python அல்லது R இல் சில ஆன்லைன் படிப்புகளை எடுத்துள்ளதால், இந்த "தரவு விஞ்ஞானிகள்" பெரும்பாலும் பாத்திரத்தின் கடுமைக்கு தயாராக இல்லை . தரவு அறிவியல் என்பது குறியிடுவது மட்டுமல்ல. இது ஆழ்ந்த பகுப்பாய்வு, சூழல் சார்ந்த புரிதல் மற்றும் தொழில்நுட்பம் அல்லாத பார்வையாளர்களுக்கு நுண்ணறிவுகளை வழங்கும் திறன் ஆகியவற்றை உள்ளடக்கியது. உண்மையில், இது ஒரு ஆராய்ச்சிப் பணியாகும், இது துறையில் உள்ள பலருக்கு இல்லாத படைப்பாற்றல் மற்றும் பகுப்பாய்வு சிந்தனை ஆகியவற்றின் கலவை தேவைப்படுகிறது.

மேலும், பல தரவு விஞ்ஞானிகள் தங்கள் தலைப்பின் அடிப்படையில் அதிக சம்பளம் மற்றும் இலாபகரமான பேக்கேஜ்களை எதிர்பார்க்கும் உரிமை உணர்வை உருவாக்கியுள்ளனர். இந்த அணுகுமுறை நிறுவனங்களை முடக்குகிறது, குறிப்பாக செலவுத் திறன் மிக முக்கியமான துறைகளில். ஒரு காலத்தில் தரவு விஞ்ஞானிகளை பணியமர்த்த விரைந்த நிறுவனங்களை நான் சந்தித்தேன், ஆனால் இப்போது மறுபரிசீலனை செய்து வருகின்றன. AI ஆனது விரைவாகவும், சிறப்பாகவும், செலவின் ஒரு பகுதியிலும் அதைச் செய்யும்போது, தரவுச் சுத்தம் செய்வதில் அதிக நேரத்தைச் செலவிடும் ஒருவருக்கு ஏன் அதிக ஊதியம் கொடுக்க வேண்டும்?

AI யார்?

நான் தனிப்பட்ட முறையில் வகுப்பை எழுதுவதை அனுபவித்ததால், தரவு அறிவியல் பலவீனமாக இருக்கும் பகுதிகளில் ஜெனரேட்டிவ் AI ஒரு சக்திவாய்ந்த சக்தியாக உருவெடுத்துள்ளது. தரவுத் தயாரித்தல், சுத்தப்படுத்துதல் மற்றும் அடிப்படைத் தரமான பகுப்பாய்வு போன்ற பணிகள்—ஒரு தரவு விஞ்ஞானியின் அதிக நேரத்தைச் செலவழிக்கும் செயல்பாடுகள்—இப்போது AI அமைப்புகளால் எளிதாக தானியங்கு செய்யப்படுகின்றன . மோசமானது (அல்லது சிறந்தது, நீங்கள் நிற்கும் இடத்தைப் பொறுத்து) AI வேகமானது, மிகவும் துல்லியமானது மற்றும் மனித பிழை அல்லது சோர்வுக்கு குறைவாகவே உள்ளது.

பல தரவு விஞ்ஞானிகளுக்கு, இது திகிலூட்டும். எல்லாவற்றிற்கும் மேலாக, இந்த பணிகள் அவர்களின் அன்றாட வேலையின் பெரும்பகுதியைக் குறிக்கின்றன. எடுத்துக்காட்டாக, தரவுச் சுத்திகரிப்பு என்பது நேரத்தைச் செலவழிக்கும் மற்றும் தவறுகளுக்கு ஆளாகிறது, ஆனால் AI இப்போது அதைச் சில கிளிக்குகள் மற்றும் துல்லியமான துல்லியத்துடன் நிறைவேற்ற முடியும். தரவு விஞ்ஞானிகள் பெரும்பாலும் இந்த முணுமுணுப்பு பணிகளைப் பற்றி புகார் செய்கின்றனர், இருப்பினும் அவை அவற்றின் பாத்திரங்களுக்கு அடிப்படையானவை. AI அமைப்புகள் மேம்படுவதால், மனிதர்கள் இந்த வேலைகளைச் செய்வதற்கான தேவை குறைகிறது. AI க்கு எதிரான பெரும்பாலான குரல் விமர்சனங்கள் தரவு விஞ்ஞானிகளிடமிருந்தே வருவதில் ஆச்சரியமில்லை. அவர்கள் சுவரில் எழுதப்பட்டிருப்பதைக் கண்டு தங்கள் வேலைகளுக்கு பயப்படுகிறார்கள்.

சிறுமை

தரவு விஞ்ஞானிகளுக்கு விஷயங்களை மோசமாக்க, சமீபத்திய ஆண்டுகளில் இந்தத் துறையில் குறிப்பிடத்தக்க முன்னேற்றம் இல்லை. பிரபலத்தில் விண்கற்கள் உயர்ந்தாலும், தரவு அறிவியலானது திறமையின்மை, பிழைகள் மற்றும் அது சரியாக என்னவாக இருக்க வேண்டும் என்பதற்கான தெளிவின்மை ஆகியவற்றால் இன்னும் பாதிக்கப்பட்டுள்ளது. ஒரு காலத்தில் அதிநவீன கருவிகள் மற்றும் சிறந்த பயிற்சி துறையை மேம்படுத்தும் என்று நம்பப்பட்டது, ஆனால் இது எதிர்பார்த்த அளவிற்கு செயல்படவில்லை. மாறாக, AI சீராக மேம்பட்டுள்ளது. இயந்திர கற்றல் வழிமுறைகள், இயற்கை மொழி செயலாக்கம் மற்றும் உருவாக்கும் மாதிரிகள் வேகமாக உருவாகி, பாரம்பரிய தரவு அறிவியலை தூசியில் விட்டுச் செல்கின்றன.

மீண்டும், தரவு விஞ்ஞானிகளின் அதிக சம்பள எதிர்பார்ப்புகள் சிக்கலை அதிகரிக்கின்றன . ஒரு காலத்தில் திறமையின்மையைப் பொறுத்துக் கொண்டிருந்த நிறுவனங்கள், மனித உழைப்புடன் இணைக்கப்பட்ட அதிக விலைக் குறி இல்லாமல் AI பல முணுமுணுப்பு வேலைகளை மாற்ற முடியும் என்பதை இப்போது உணர்ந்து கொண்டிருக்கின்றன. பகுப்பாய்வு, முன்கணிப்பு மற்றும் விளக்கக்காட்சி போன்ற முக்கிய பணிகளைச் செய்வதில் AI மிகவும் திறமையானதாக இருப்பதால், தரவு அறிவியலின் கையேடு தன்மை பெருகிய முறையில் தேவையற்றதாகி வருகிறது. தரவு விஞ்ஞானிகளின் குழு தேவைப்படுவதை இப்போது AI-இயங்கும் கருவிகள் மூலம் மிகவும் திறமையாக கையாள முடியும் என்பதை பல நிறுவனங்கள் உணரும்.

தி ஷிப்ட்

உண்மை என்னவென்றால், தரவு அறிவியல், பாரம்பரியமாக வரையறுக்கப்பட்டபடி, வழக்கற்றுப்போகும் விளிம்பில் உள்ளது. உருவாக்கும் AI வியக்கத்தக்க விகிதத்தில் முன்னேறுவதால், மனித தரவு விஞ்ஞானிகளின் தற்போதைய வடிவத்தில் தேவை குறையும் . தரவு உந்துதல் முடிவெடுப்பதில் மனிதர்களுக்கு எந்தப் பங்கும் இல்லை என்பதை இது குறிக்கவில்லை, ஆனால் உன்னதமான "தரவு விஞ்ஞானி" பாத்திரம் விரைவில் கடந்த காலத்தின் ஒரு கருத்தாக இருக்கலாம். AI உடன் ஒத்துழைப்பதில் திறமையான வல்லுநர்கள் இப்போது தேவைப்படுவது, மூலோபாய சிந்தனை மற்றும் சிக்கலான சிக்கலைத் தீர்ப்பதில் அதிக அளவில் கவனம் செலுத்துவதன் மூலம் அதன் திறன்களைப் பயன்படுத்துகின்றனர்.

AI என்பது பகுப்பாய்வு, நுண்ணறிவு அல்லது முடிவெடுக்கும் முடிவல்ல—அது அவற்றின் பரிணாமத்தை பிரதிபலிக்கிறது . தற்போதைய தரவு அறிவியல் துறையானது படிப்படியாக வளர்ச்சியடையவில்லை என்றால் வழக்கற்றுப் போகும் அபாயம் உள்ளது. AI ஏற்கனவே தொழில்களில் புரட்சியை ஏற்படுத்தி வருகிறது, மேலும் தரவு அறிவியலை மாற்றியமைக்க வேண்டும் அல்லது இந்த அலையால் முறியடிக்கப்பட வேண்டும். இறுதியில், AI தரவு அறிவியலை அகற்றுமா என்பது கேள்வியாக இருக்காது, ஆனால் தரவு அறிவியல் அதன் வாக்குறுதிகளை எப்போதாவது முழுமையாக வழங்குமா என்பதுதான்.

அல்லது நாம் இறுதியாக "தரவு அறிவியல்" மிகைப்படுத்தலுக்கு அப்பால் நகர்ந்து, அடுத்த தர்க்கரீதியான முன்னேற்றமாக AI ஐ ஏற்றுக்கொண்டாலும் வேறுபாடு முக்கியமில்லை.

என்னைப் பற்றி: தரவு, AI, இடர் மேலாண்மை, உத்தி மற்றும் கல்வி ஆகியவற்றை ஒருங்கிணைக்கும் 25+ வருட IT அனுபவம். 4x ஹேக்கத்தான் வெற்றியாளர் மற்றும் தரவு வழக்கறிஞரின் சமூக தாக்கம். தற்போது பிலிப்பைன்ஸில் AI பணியாளர்களை ஜம்ப்ஸ்டார்ட் செய்யும் பணியில் ஈடுபட்டுள்ளனர். இங்கே என்னைப் பற்றி மேலும் அறிக: https://docligot.com