பொருளடக்கம்:
வரையறை - அப்பாச்சி தீப்பொறி என்றால் என்ன?
அப்பாச்சி ஸ்பார்க் என்பது தரவு பகுப்பாய்வுகளுக்குப் பயன்படுத்தப்படும் ஒரு திறந்த மூல நிரலாகும். இது அப்பாச்சி ஹடூப் மற்றும் இன்றைய பகுப்பாய்வு சமூகத்திற்கான பிற திறந்த மூல வளங்கள் உள்ளிட்ட பெரிய கருவிகளின் தொகுப்பாகும்.
ஒப்பீட்டளவில் புதிய திறந்த மூல மென்பொருளை தரவு பகுப்பாய்வு கிளஸ்டர் கம்ப்யூட்டிங் கருவியாக வல்லுநர்கள் விவரிக்கின்றனர். இது ஹடூப் விநியோகிக்கப்பட்ட கோப்பு முறைமை (எச்டிஎஃப்எஸ்) உடன் பயன்படுத்தப்படலாம், இது ஒரு குறிப்பிட்ட ஹடூப் கூறு ஆகும், இது சிக்கலான கோப்பு கையாளுதலுக்கு உதவுகிறது.
அப்பாச்சி ஸ்பார்க் பயன்பாட்டை அப்பாச்சி ஹடூப் மேப்ரூட் கூறுக்கு மாற்றாக சில தகவல் தொழில்நுட்ப நன்மைகள் விவரிக்கின்றன. MapReduce என்பது ஒரு கிளஸ்டரிங் கருவியாகும், இது டெவலப்பர்கள் பெரிய அளவிலான தரவை செயலாக்க உதவுகிறது. அப்பாச்சி ஸ்பார்க்கின் வடிவமைப்பைப் புரிந்துகொள்பவர்கள், சில சூழ்நிலைகளில், மேப் ரீடூஸை விட இது பல மடங்கு வேகமாக இருக்கும் என்று சுட்டிக்காட்டுகின்றனர்.
அப்பாச்சி தீப்பொறியை டெக்கோபீடியா விளக்குகிறது
அப்பாச்சி ஸ்பார்க்கின் நவீன பயன்பாட்டைப் பற்றி புகாரளிப்பவர்கள் நிறுவனங்கள் அதை பல்வேறு வழிகளில் பயன்படுத்துகிறார்கள் என்பதைக் காட்டுகின்றன. ஒரு பொதுவான பயன்பாடு தரவை ஒருங்கிணைத்து அதை மேலும் சுத்திகரிக்கப்பட்ட வழிகளில் கட்டமைப்பதாகும். அப்பாச்சி ஸ்பார்க் பகுப்பாய்வு இயந்திர கற்றல் வேலை அல்லது தரவு வகைப்பாட்டிற்கும் உதவக்கூடும்.
பொதுவாக, நிறுவனங்கள் தரவை ஒரு திறமையான மற்றும் ஓரளவு தானியங்கி முறையில் சுத்திகரிக்கும் சவாலை எதிர்கொள்கின்றன, இந்த வகையான பணிகளுக்கு அப்பாச்சி ஸ்பார்க் பயன்படுத்தப்படலாம். சிலர் ஸ்பார்க்கைப் பயன்படுத்துவது நிரலாக்கத்தைப் பற்றி குறைந்த அறிவுள்ளவர்கள் மற்றும் பகுப்பாய்வு கையாளுதலில் ஈடுபட விரும்புவோருக்கு அணுகலை வழங்க உதவும் என்பதையும் குறிக்கிறது.
அப்பாச்சி ஸ்பார்க்கில் பைதான் மற்றும் தொடர்புடைய மென்பொருள் மொழிகளுக்கான API கள் உள்ளன.
