பொருளடக்கம்:
தரவு சேகரிப்பு மற்றும் பகுப்பாய்வு பல தசாப்தங்களாக இருந்தபோதிலும், சமீபத்திய ஆண்டுகளில் பெரிய தரவு பகுப்பாய்வு வணிக உலகத்தை புயலால் தாக்கியுள்ளது. இருப்பினும், இது சில வரம்புகளுடன் வருகிறது., பெரிய தரவு பகுப்பாய்வு நிறுவனங்கள் எதிர்காலத்தில் எதிர்கொள்ளவிருக்கும் சவால்களைப் பற்றி பேசுவோம்.
பெயர் குறிப்பிடுவது போல, அளவு மற்றும் வணிக சிக்கலான அடிப்படையில் பெரிய தரவு மிகப்பெரியது. இது கட்டமைக்கப்பட்ட தரவு, அரை கட்டமைக்கப்பட்ட தரவு மற்றும் கட்டமைக்கப்படாத தரவு போன்ற பல்வேறு வடிவங்களில் வருகிறது, மேலும் பரவலான தரவு மூலங்களிலிருந்து வருகிறது. விரைவான, செயல்படக்கூடிய நுண்ணறிவுக்கு பெரிய தரவு பகுப்பாய்வு பயனுள்ளதாக இருக்கும். பெரிய தரவு பகுப்பாய்வு பல்வேறு அளவுருக்கள் மற்றும் பரிமாணங்களை அடிப்படையாகக் கொண்டிருப்பதால், இது சில சவால்களுடன் வருகிறது:
- ஒரு குறிப்பிட்ட நேரத்தில் ஒரு பெரிய அளவிலான தரவைக் கையாளுதல்
- விரும்பிய அர்த்தமுள்ள வெளியீட்டைப் பெறுவதற்காக தரவை சுத்தம் செய்தல் மற்றும் வடிவமைத்தல்
- காட்சி வடிவத்தில் தரவைக் குறிக்கும்
- பயன்பாட்டை அளவிடக்கூடியதாக மாற்றுகிறது
- பகுப்பாய்வுக்கான சரியான தொழில்நுட்பம் / கருவிகளைத் தேர்ந்தெடுப்பது
குறைந்த அளவிலான தரவுகளின் அளவைக் கையாளுதல்
ஒரு குறிப்பிட்ட நேரத்தில் ஒரு பெரிய அளவிலான தரவைக் கையாள்வது ஒரு குறிப்பிடத்தக்க சவாலாகும், இது தினசரி அடிப்படையில் 2.5 குவிண்டிலியன் பைட்டுகள் தரவுகள் உருவாக்கப்படுகின்றன. அதற்கு மேல், தரவு உருவாக்கப்படும் பல்வேறு ஆதாரங்கள் அனைத்தையும் கூட நாம் பெயரிட முடியாது - தரவு மூலங்கள் சென்சார்கள், சமூக ஊடகங்கள், பரிவர்த்தனை அடிப்படையிலான தரவு, செல்லுலார் தரவு அல்லது எண்ணற்ற ஆதாரங்களில் ஏதேனும் இருக்கலாம்.
