கே:
பெரிய தரவை பகுப்பாய்வு செய்ய ஹடூப்பைப் பயன்படுத்த நான் எவ்வாறு கற்றுக்கொள்ள முடியும்?
ப:ஹடூப் என அழைக்கப்படும் அப்பாச்சி மென்பொருள் தொகுப்பு பெரிய தரவுத் தொகுப்புகளைக் கையாள்வதற்கான மிகவும் பிரபலமான வளமாகி வருகிறது. சில வகையான தரவுத் திட்டங்களை மிகவும் திறமையாக மாற்றக்கூடிய வடிவமைப்புகளின் அடிப்படையில், குறிப்பிட்ட வழிகளில் தரவை ஒருங்கிணைக்க உதவும் வகையில் இந்த வகை தரவு கையாளுதல் மென்பொருள் கட்டமைப்பு கட்டப்பட்டது. பெரிய தரவுத் தொகுப்புகளைக் கையாள்வதற்கான பல கருவிகளில் ஹடூப் ஒன்றாகும்.
ஹடூப்புடனான பெரிய தரவு பகுப்பாய்வைப் பற்றி அறிய முதல் மற்றும் மிக அடிப்படையான வழிகளில் ஒன்று, ஹடூப்பின் சில உயர்மட்ட கூறுகளையும் அது என்ன செய்கிறது என்பதையும் புரிந்துகொள்வது. சில வகையான நெட்வொர்க் அமைப்புகளுக்குப் பயன்படுத்தக்கூடிய ஒரு ஹடூப் YARN "வள மேலாண்மை தளம்" மற்றும் பெரிய தரவுத் தொகுப்புகளுக்குப் பொருந்தக்கூடிய ஒரு ஹடூப் வரைபடம் செயல்பாடுகளை உள்ளடக்கியது. ஒரு ஹடூப் விநியோகிக்கப்பட்ட கோப்பு முறைமை (எச்டிஎஃப்எஸ்) உள்ளது, இது விநியோகிக்கப்பட்ட அமைப்புகளில் தரவைச் சேமிக்க உதவுகிறது, இதனால் விரைவாகவும் திறமையாகவும் குறியிடப்படலாம் அல்லது மீட்டெடுக்க முடியும்.
இதற்கு அப்பால், ஹடூப்பைப் பற்றி அதிகம் தெரிந்து கொள்ள விரும்புவோர், மென்பொருளை ஒரு தொடர்புடைய மட்டத்தில் விளக்கும் நிபுணர்களுக்கான தனிப்பட்ட வெளியிடப்பட்ட வளங்களைப் பார்க்கலாம். தனிப்பட்ட வலைப்பதிவில் கிறிஸ் ஸ்டுச்சியோவின் இந்த எடுத்துக்காட்டு ஹடூப் மற்றும் தரவு அளவைப் பற்றிய சிறந்த புள்ளிகளை வழங்குகிறது. அடிப்படை நடவடிக்கைகளில் ஒன்று என்னவென்றால், ஹடூப் அவசியமானதை விட பொதுவாகப் பயன்படுத்தப்படலாம், மேலும் இது ஒரு தனிப்பட்ட திட்டத்திற்கான சிறந்த தீர்வாக இருக்காது. இந்த வகையான வளங்களை மதிப்பாய்வு செய்வது எந்தவொரு சூழ்நிலையிலும் ஹடூப்பைப் பயன்படுத்துவதற்கான விவரங்களை தொழில் வல்லுநர்கள் நன்கு அறிந்திருக்க உதவும். ஹடூப்பின் செயல்பாடுகளை குறிப்பிட்ட உடல் பணிகளுடன் தொடர்புபடுத்துவதற்கான உருவகங்களையும் ஸ்டுச்சியோ வழங்குகிறது. இங்கே, எடுத்துக்காட்டு ஒரு நூலகத்தில் உள்ள புத்தகங்களின் எண்ணிக்கையை கணக்கிடுகிறது, அதேசமயம் ஒரு ஹடூப் செயல்பாடு அந்த நூலகத்தை பிரிவுகளாக பிரிக்கக்கூடும், இது ஒரு மொத்த தரவு முடிவாக கலக்கும் தனிப்பட்ட எண்ணிக்கையை வழங்குகிறது.
குறிப்பிட்ட பயிற்சி வளங்கள் மற்றும் திட்டங்கள் மூலம் தொழில் வல்லுநர்கள் ஹடூப் மற்றும் பெரிய தரவுகளுக்கு அதன் பயன்பாடு பற்றி மேலும் அறியக்கூடிய ஒரு ஆழமான வழி. எடுத்துக்காட்டாக, தொலைநிலை பயிற்சி அமர்வுகளின் முக்கிய வழங்குநரான ஆன்லைன் கற்றல் நிறுவனமான கிள oud டெரா, ஹடூப் பயன்பாடு மற்றும் இதே போன்ற தரவு கையாளுதல்களைச் சுற்றி பல சுவாரஸ்யமான விருப்பங்களைக் கொண்டுள்ளது.
