தரவு பகுப்பாய்வு

தரவு பகுப்பாய்வு (Data analysis) என்பது பயனுள்ள தகவல்களைக் கண்டுபிடிப்பதையும் , முடிவுகளைத் தெரிவிப்பதையும் , முடிவெடுப்பதையும் ஆதரவளிப்பதயும் நோக்கமாகக் கொண்டு தரவைச் சீர்படுத்துதல், படிமமாக்குதல் முறைகளை ஆய்வு செய்யும் செயல்முறையாகும். தரவு பகுப்பாய்வு பல கூறுகளையும் அணுகுமுறைகளையும் கொண்டுள்ளது. இது பல்வேறு தொழில்நுட்பங்களைப் பல்வேறு பெயர்களில் உள்ளடக்கியது.  இவை பல்வேறு வணிக, அறிவியல், சமூக அறிவியல் களங்களில் பயன்படுத்தப்படுகின்றன. இன்றைய வணிக உலகில் , தரவு பகுப்பாய்வு முடிவுகளை மிகவும் அறிவியல் முறையில் எடுப்பதிலும் , வணிகங்கள் மிகவும் திறம்பட செயல்பட உதவுவதிலும் பங்கு வகிக்கிறது.

தரவுச் சுரங்கம் என்பது ஒரு குறிப்பிட்ட தரவு பகுப்பாய்வு நுட்பமாகும். இது புள்ளியியல் படிமமாக்கத்திலும், அறிவுக் கண்டுபிடிப்பிலும் கவனம் செலுத்துகிறது , இது முற்றிலும் விளக்க நோக்கங்களைக் காட்டிலும் முன்கணிப்புக்கானதாகும். அதேவேளையில் வணிக நுண்ணறிவு தரவுப் பகுப்பாய்வை உள்ளடக்கியதாகும். இது முதன்மையான வணிகத் தகவல்களில் கவனம் செலுத்துகிறது. புள்ளியியல் பயன்பாடுகளில் தரவுப் பகுப்பாய்வை விளக்கமுறைப் புள்ளிவிவரங்கள் சார்ந்து, தேட்டத் தரவு பகுப்பாய்வு (EDA), உறுதிப்படுத்தல் தரவு பகுப்பாய்வு (CDA) எனப் பிரிக்கலாம். தேட்டத் தரவு பகுப்பாய்வு  தரவுகளில் புதிய கூறுகளைக் கண்டுபிடிப்பதில் கவனம் செலுத்துகிறது , அதே நேரத்திலவூறுதிப்படுத்தல் தரவு பகுப்பாய்வு(CDA) ஏற்கனவே உள்ள கருதுகோள்களை உறுதிப்படுத்துவதிலோ அல்லது பொய்யாக்குவதிலோ கவனம் செலுத்துகிறது. முன்கணிப்புப் பகுப்பாய்வு முன்கணிப்புக்கான அல்லது வகைப்பாட்டிற்கான புள்ளியியல் படிமங்களின் பயன்பாட்டில் கவனம் செலுத்துகிறது. அதே நேரத்தில் உரை பகுப்பாய்வு புள்ளிவிவர மொழியியலையும் கட்டமைப்பு நுட்பங்களையும் பயன்படுத்தி உரை வாயில்களிலிருந்து தகவல்களைப் பிரித்தெடுக்கவும் வகைப்படுத்தவும் செய்கிறது. மேற்கூறிய அனைத்தும் தரவு பகுப்பாய்வின் வகைகள் ஆகும்.

தரவு ஒருங்கிணைப்பு என்பது தரவு பகுப்பாய்விற்கு ஒரு முன்னோடியாகும். மேலும் தரவு பகுப்பாய்வு தரவு காட்சிப்படுத்தலுடனும் தரவு பரப்புதலுடனும் நெருக்கமாக இணைக்கப்பட்டுள்ளது.

தரவு பகுப்பாய்வுச் செயல்முறை 

பகுப்பாய்வு என்பது ஒரு முழுப்பொருளையும் தனிப்பட்ட செய்முறைக்காக அதன் தனித்தனி கூறுகளாகப் பிரிப்பதைக் குறிக்கிறது. தரவு பகுப்பாய்வு என்பது மூலத் தரவைப் பெறுவதற்கான ஒரு செயல்முறையாகும்.  இம்முறை பின்னர் இதைப் பயனர்களால் முடிவெடுப்பதற்கு  ஏற்ற பயனுள்ள தகவல்களாக மாற்றுகிறது. செய்முறைக் கருதுகோள்கள் அல்லது கோட்பாடுகளை நிறுவாத கேள்விகளுக்குப் பதிலளிக்க தரவு  திரட்டப்பட்டுப் பகுப்பாய்வு செய்யப்படுகிறது.

புள்ளியியல் வல்லுனர் ஜான் தூக்கே 1961 இல் தரவு பகுப்பாய்வைப் பின்வருமாறு வரையறுத்தார்." தரவுகளைப் பகுப்பாய்வு செய்வதற்கான செயல்முறைகள், இத்தகைய செயல்முறைகளின் முடிவுகளை விளக்கும் நுட்பங்கள், பகுப்பாய்வை எளிதாக்குவதற்கும்  மிகவும் துல்லியமாக்குவதற்கும்  உதவும் துல்லியமான தரவுகளைத் திரட்டலைத் திட்டமிடுவதற்கான வழிகள்ஆகிய  பகுத்தறிவதற்குப் பொருந்தும் அனைத்து  பொறிமுறைகளும், புள்ளியியல் முடிவகளும்.கீழே விவரிக்கப்பட்டுள்ள பல கட்டங்களை வேறுபடுத்திக் காட்டலாம். கட்டங்கள் மீண்டும் மீண்டும் நிகழ்கின்றன. ஏனெனில் பிற்காலக் கட்டங்களிலிருந்து வரும் பின்னூட்டங்கள் முந்தைய கட்டங்களில் கூடுதல் வேலைகளை ஏற்படுத்தக்கூடும். தரவுச் சுரங்கத்தில் பயன்படுத்தப்படும் கிரிசுப்பு(CRISP) கட்டமைப்பும் இதே போன்ற படிநிலைகளைக் கொண்டுள்ளது.

தரவு தேவைகள் 
பகுப்பாய்விற்கான உள்ளீடுகளாக தரவு கட்டாயமாகத் தேவைப்படுகிறது. இது பகுப்பாய்வுகளை இயக்குவோரின் (அல்லது பகுப்பாய்வில் முடிக்கப்பட்ட பலன்களைப் பயன்படுத்தும் வாடிக்கையாளர்களின்) தேவைகளின் அடிப்படையில் குறிப்பிடப்படுகிறது. தரவு  திரட்டப்படும் பொதுவான வகை ஒரு செய்முறை அலகு (எ. கா. ஒரு தனியர்ர் அல்லது மக்கள் தொகை எனக் குறிப்பிடப்படுகிறது. மக்கள்தொகை சார்ந்த குறிப்பிட்ட மாறிகள் (எ. கா. அகவை, வருமானம்) குறிப்பிடப்பட்டு பெறப்படலாம்.   அவை தரவு எண்ணாகவோ (அதாவது, எண்களுக்கான  அடையாள உரை ) அல்லது வகைப்படுத்தப்பட்டதாகவோ  அமையலாம் .

தரவு திரட்டல் 
பல்வேறு தரவுகளிலிருந்து தகவல்கள் திரட்டப்படுகின்றன. ஆய்வு மற்றும் ஆராய்ச்சிக்கான தரவு வாயில்களின் பட்டியல் கிடைக்கிறது. தேவைகள் ஒரு நிறுவனத்திற்குள் தகவல் தொழில்நுட்ப பணியாளர்கள் போன்ற தரவுகளின் பாதுகாவலர்களுக்கு ஆய்வாளர்களால் தெரிவிக்கப்படலாம். போக்குவரத்து கேமராக்கள் , செயற்கைக்கோள்கள் , பதிவு செய்யும் சாதனங்கள் உள்ளிட்ட சூழலில் உள்ள  உணரிகளிலிருந்தும் தரவு திரட்டப்படலாம். நேர்காணல்கள் வழியும் இணைய வாயில்களிலிருந்து பதிவிறக்கம் வழியும் அல்லது ஆவணங்களைப் படித்தும் தகவல்களைத் திரட்டலாம் பெறலாம்.

தரவுச் செயலாக்கம் 

தொடக்கத்தில்  தரவு பெறப்படும்போது அது பகுப்பாய்விற்றபடி கையாளப்பட வேண்டும் அல்லது ஒழுங்கமைக்கப்பட வேண்டும். எடுத்துக்காட்டாக , இவை தரவை வரிசைகள் மற்றும் நெடுவரிசைகளில் அட்டவணை வடிவத்தில் பெரும்பாலும் விரிதாள் அல்லது புள்ளியியல் மென்பொருளைப் பயன்படுத்தி வைப்பதை உள்ளடக்கலாம் (மேலும், இது பகுப்பாய்விற்காகக் கட்டமைக்கப்பட்ட தரவு என அழைக்கப்படுகிறது) .

தரவுச் சீர்செயல் 
 
செயலாக்கப்பட்டு ஒழுங்கமைக்கப்பட்டவுடன் தரவு முழுமையடையாமல் இருக்கலாம். நகல்களைக் கொண்டிருக்கலாம் அல்லது பிழைகளைக் கொண்டிருக்கலாம். தரவை உள்ளிட்டு  தேக்கும் விதத்தில் உள்ள சிக்கல்களிலிருந்து சீர்செய்யப்பட வேண்டிய தேவை எழும். தரவுச் சீர்செயல் என்பது இந்த பிழைகளைத் தடுப்பதும் சரிசெய்வதும் ஆகும். பொதுவான பணிகளில் தரவுகளின் தவறான தன்மையை அடையாளம் காணுதலில், தற்போதுள்ள தரவுகளின் ஒட்டுமொத்தத் தரம், வரிசை, நெடுவரிசை பிரிவுகள் ஆகியவை அடங்கும். இத்தகைய தரவுச் சிக்கல்களை பல்வேறு பகுப்பாய்வு நுட்பங்களாலும்ம் அடையாளம் காணலாம். எடுத்துக்காட்டாக , நிதி தகவல்களுடன் குறிப்பிட்ட மாறிகளுக்கான மொத்தங்களை, நம்பகமானவை என்று நம்பப்படும் தனித்தனியாக வெளியிடப்பட்ட எண்களுடன் ஒப்பிடலாம். முன்னரே தீர்மானிக்கப்பட்ட வரம்புகளுக்கு மேலே அல்லது அதற்குக் கீழே உள்ள  இயல்பற்ற தொகைகளையும் மதிப்பாய்வு செய்யலாம்.  பல வகையான தரவு சீர்செயல்  முறைகள் உள்ளன , அவை தொகுப்பில் உள்ள தரவின் வகையைப் பொறுத்து அமையும். இது தொலைபேசி எண்கள், மின்னஞ்சல் முகவரிகள், முதலாளிகள் அல்லது எனப் பிற மதிப்புகளாகவும் இருக்கலாம். தவறான முறையில் உள்ளீடு செய்யப்படுவதற்கான அதிக வாய்ப்பைக் கொண்டதாகத் தோன்றும் தரவை அகற்றுவதற்கு வெளிப்புறக் கண்டறிதலுக்கான அளவியலான தரவு முறைகளைப் பயன்படுத்தலாம். தவறாக தட்டச்சு செய்யப்பட்ட சொற்களின் அளவைக் குறைக்க உரை தரவு எழுத்துப்பிழை சரிபார்ப்புகளைப் பயன்படுத்தலாம். இருப்பினும் , சொற்கள் சரியானவையா என்று சொல்வது  அரிதே.

தேட்டத் தரவு பகுப்பாய்வு 
தரவுத்தொகுப்புகள்  சீர்செய்யப்பட்டவுடன் அவற்றை பகுப்பாய்வு செய்யலாம். பெறப்பட்ட தரவுகளில் உள்ள செய்திகளைப் புரிந்துகொள்ள ஆய்வாளர்கள் தேட்டத் தரவு பகுப்பாய்வு எனப்படும் பல்வேறு நுட்பங்களைப் பயன்படுத்தலாம். தரவு தேட்டச் செயல்முறை கூடுதல் தரவு சீர்செயல்ளின் அல்லது தரவு கூடுதல் கோரிக்கைகள் விளைவாக இருக்கலாம் இவ்வாறு இந்தப் பிரிவின் முன்னணிப் பத்தியில்  தர்வைச் சீர்செய்யும் பன்னிச் செயல்முறை குறிப்பிடப்பட்டுள்ளது. தொடக்கநிலைத். தரவைப் புரிந்துகொள்ள உதவும் வகையில் நிரல் அல்லது நடுவன் போன்ற விளக்கமுறைப் புள்ளிவிவரங்களை உருவாக்க முடியும். தரவு காட்சிப்படுத்தல் என்பது ஒரு நுட்பமாகும். இதில் ஆய்வாளர்கள் தரவுகளுக்குள் உள்ள செய்திகளைப் பற்றிய கூடுதல் நுண்ணறிவுகளைப் பெறுவதற்காகத் தரவை வரைகலை வடிவத்தில் ஆராய்கின்றனர்.

படிமமாக்கமும்  நெறிநிரல்களும் 
கணித வாய்பாடுகள் அல்லது படிமங்கள் (நெரிநிரல்(அல்காரிதம்) என்று அழைக்கப்படுகின்றன) மாறிகளுக்கிடையேயான உறவுகளை அடையாளம் காண தரவுகளைப் பயன்படுத்தப்படலாம் , எடுத்துக்காட்டாக,  ஒட்டுறவு அல்லது காரண-காரிய முறைமையைப் பயன்படுத்துதலைக் கூறலாம். பொதுவாக , செயல்படுத்தப்பட்ட  படிமத்தின் துல்லியத்தைப் பொறுத்து, சில எஞ்சிய பிழையுடன் பிற மாறியின் அடிப்படையில் ஒரு குறிப்பிட்ட மாறியை மதிப்பிடுவதற்கும்  படிமங்கள் உருவாக்கப்படலாம் (எ. கா. தரவு = படிமம் + பிழை).

உய்த்துணர்வுப் புள்ளிவிவரங்கள் குறிப்பிட்ட மாறிகளுக்கு இடையிலான உறவுகளை அளவிடும் நுட்பங்களைப் பயன்படுத்துவதை உள்ளடக்கியது. எடுத்துக்காட்டாக , விளம்பரத்தில் மாற்றம் ஏற்பட்டுள்ளதா என்பதை படிமமாகக் காட்டுவதற்கு பின்னேகும் பகுப்பாய்வு பயன்படுத்தப்படலாம். (தற்சார்பு மாறி X) விற்பனையில் உள்ள மாறுபாட்டிற்கான விளக்கத்தை வழங்குகிறது (சார்பு மாறி Y). கணிதத்தில் , Y ( விறபனை) என்பது X  என்ற விளம்பரப்படுத்துதலின் செயல்பாடு ஆகும். இது (Y = aX + b + error) என விவரிக்கப்படலாம். அங்குக் கணிதவியல் படிமம்  வடிவமைக்கப்பட்டுள்ளது , அதாவது X இன் மதிப்புகளின் குறிப்பிட்ட வரம்பிற்கு படிமம்  Y  இன் மதிப்பைக் கணிக்கும்போது (a), (b) ஆகியன பிழையைக் குறைக்கும்.

தரவு  ஆக்கம் 
தரவு   ஆக்கம்   என்பது கணினிவழி தரவு உள்ளீடுகளழீட்டு வெளியீடுகளை உருவாக்கும் வழிமுறையாகும்.  இவை மீண்டும் சூழலுக்குள் ஊட்டப்படும். தரவு  ஆக்கம் ஒரு படிமத்தையோ நெறிநிரலையோ பயன்படுத்தலாம்.  எடுத்துகாட்டாக , வாடிக்கையாளர் கொள்முதல் வரலாறு பற்றிய தரவை பகுப்பாய்வு செய்யும் ஒரு பயன்பாடு  வாடிக்கையாளர்  நுகரவியலும்  கொள்முதல்களைப் பரிந்துரைக்கப் பயன்படுத்துகிறது.

தகவல் தொடர்பு 

தரவு பகுப்பாய்வு செய்யப்பட்டவுடன்,  அந்தப் பகுப்பாய்வு முடிவுகளைப் பயனர்களுக்கு அவர்களின் தேவைகளைச் ச்சந்திக்க பல வடிவங்களில் தெரிவிக்கலாம். பயனர்கள் கூடுதல் பகுப்பாய்விற்கு வழிவகுக்கும் பின்னூட்டங்களைக் கொடுக்கலாம். எனவே , பகுப்பாய்வுச் சுழற்சியின் பெரும்பகுதி, அத்தாவது தரவு ஆக்கத்தின் பெரும்பகுதி இதுபோல  பன்னிச்(பலமுறைச்) செய்தலாகும் .

முடிவுகளை எவ்வாறு  அறிவிப்பது என்பதை தீர்மானிக்கும் போது , பார்வையாளர்களுக்கு செய்தியை இன்னும் தெளிவாகவும் திறமையாகவும் தொடர்பு கொள்ள உதவும் வகையில் பல்வேறு தரவு காட்சிப்படுத்தல் நுட்பங்களை செயல்படுத்துவது குறித்து ஆய்வாளர் கருதி பார்க்கலாம். தரவு காட்சிப்படுத்தல் தகவல் காட்சிகளைப் பயன்படுத்துகிறது (அட்டவணைகள், வரைபடங்கள் போன்ற வரைவியல் தரவுகளில் உள்ள முதன்மைச் செய்திகளைதசறிவிப்பதற்கு உதவுகிறது. அட்டவணைகள் ஒரு பயனரின் குறிப்பிட்ட எண்களை வினவவும் கவனம் செலுத்தவும் உதவும் ஒரு மதிப்புமிக்க கருவியாகும். அதே வேளையில் விளக்கப்படங்கள் (எ. கா. பட்டை விளக்கப்படங்கள் அல்லது வரி விளக்கப்படங்கள்) தரவுகளில் உள்ள அளவுசார் செய்திகளை விளக்க உதவும்.

அளவியலான செய்திகள் 
 

பயனர்கள் ஒரு தரவுத் தொகுப்பிலிருந்து புரிந்துகொள்ள அல்லது  அறிவிக்க  உதவும் எட்டு வகையான அளவுசார் செய்திகளை சுட்டீவன் பூ விவரிந்துள்ளார். மேலும் செய்தியைத் தெரிவிக்க உதவும் தொடர்புடைய வரைபடங்களை. தேவைகளைக் குறிப்பிடும் வாடிக்கையாளர்களும்  தரவு பகுப்பாய்வு செய்யும் ஆய்வாளர்களும் செயல்முறையின் போது இந்த செய்திகளைக்  கூறக் கருத்தில் கொள்ளலாம்.

 நேரத் தொடர்: 10 ஆண்டு காலப்பகுதியில் வேலையின்மை விகிதம்  ஒரு குறிப்பிட்ட காலப்பகுதியில் ஒரு ஒற்றை மாறியாகப் பதிவு செய்யலாம். இந்த மாறியின் போக்கை நிறுவ அல்லது விளக்க வரி விளக்கப்படத்தைப் பயன்படுத்தலாம்.
 தரவரிசை: வகைப்படுத்தப்பட்ட உட்பிரிவுகள் விற்பனை செயல்திறனின் தரவரிசை போன்று ஏறுவரிசை அல்லது இறங்கு வரிசையில் தரவரிசைப்படுத்தப்படுகின்றன (விற்பனையாளர்களின் திறனை அளவிடும் வகை) ஒவ்வொரு விற்பனையாளருக்கும் ஒரு குறிப்பிட்ட உட்பிரிவுடன் ஒரே காலகட்டத்தில்.  விற்பனையாளர்கள்  இடையிலான ஒப்பீட்டைக் காட்ட, ஒரு பட்டை விளக்கப்படத்தைப் பயன்படுத்தலாம்.
 பகுதி- முதல்  முழுமை வரை: இங்கு,வகைப்படுத்தப்பட்ட உட்பிரிவுகள் ஒட்டுமொத்தத்தின் விகிதமாக அளவிடப்படுகின்றன (அதாவது, நூற்ருவீதத்தில் ).  ஒரு பை விளக்கப்படம் அல்லது பட்டை விளக்கப்படம் சந்தையில் போட்டியாளர்களால்  உருவகப்படுத்தப்படும் சந்தைப் பங்கு போன்ற விகிதங்களின் ஒப்பீட்டைக் காட்டலாம்.
 விலகல்:  குறிப்பிட்ட காலத்திற்கு ஒரு வணிகத்தின் பல துறைகளுக்கான உண்மையான, வரவு செலவுத் திட்ட செலவினங்களின் ஒப்பீடு போன்ற ஒரு குறிப்புக்கு எதிராக வகைப்படுத்தப்பட்ட உட்பிரிவுகள் ஒப்பிடப்படுகின்றன.  ஒரு பட்டை விளக்கப்படம் உண்மையான, குறிப்பு தொகையின் ஒப்பீட்டைக் காட்ட முடியும்.
 நிகழ்வெண் பரவல்: பங்குச் சந்தை வருவாய் 0 - 10% - 11 - 20% போன்ற இடைவெளிகளுக்கு இடையில் இருக்கும் ஆண்டுகளின் எண்ணிக்கை போன்ற குறிப்பிட்ட இடைவெளியில் ஒரு குறிப்பிட்ட மாறியின் நோக்கீடுகளின் எண்ணிக்கையைக் காட்டுகிறது. இந்த பகுப்பாய்விற்கு ஒரு ஹிஸ்டோகிராம் ஒரு வகை பட்டை விளக்கப்படம் பயன்படுத்தப்படலாம்.
 ஒட்டுறவுகள்: இரண்டு மாறிகளால் குறிப்பிடப்படும் அவதானிப்புகளுக்கு இடையிலான ஒப்பீடு (அவை ஒரே அல்லது எதிர் திசைகளில் நகர்கின்றனவா என்பதை தீர்மானிக்க). எடுத்துக்காட்டாக , வேலையின்மை (X) மற்றும் பணவீக்கம் (Y) மாதப் படிமத்தைத் திட்டமிடுதல். இந்த செய்தியை விளக்க, ஒரு சிதறல் வரைவு பொதுவாக பயன்படுகிறது.
 இயல்பளவு ஒப்பீடு: தயாரிப்பு குறியீட்டின் அடிப்படையில் விற்பனை அளவு போன்ற குறிப்பிட்ட வரிசையில் வகைப்படுத்தப்பட்ட உட்பிரிவுகளை ஒப்பிடுதல். இந்த ஒப்பீட்டிற்கு ஒரு பட்டை விளக்கப்படம் பயன்படும்.
 புவியியல் அல்லது புவிப்பரப்பியல்:  இவை  வரைபடம் அல்லது அமைப்பில் ஒரு மாறியின் ஒப்பீடு,  அதாவது, மாநில வாரியாக வேலையின்மை விகிதம் அல்லது ஒரு கட்டிடத்தின் பல்வேறு தளங்களில் உள்ள நபர்களின் எண்ணிக்கை போன்றவை. ஒரு நிலவரைவுப்படம் என்பது   இதற்குப் பயன்படும் ஒரு பொதுவான வரைவியல் முறையாகும்.

அளவியலான தரவை பகுப்பாய்வு செய்யும் நுட்பங்கள் 
எழுத்தாளர் ஜொனாதன் கூமி , அளவு தரவைப் புரிந்துகொள்வதற்கான சிறந்த  பின்வரும் நடைமுறைகளின் வரிசையைப் பரிந்துரைத்துள்ளார்:  

 பகுப்பாய்வு செய்வதற்கு முன்  பிறழ்வுகளுக்கான மூலத் தரவைச் சரிபார்க்கவும்.
 சூத்திரம் சார்ந்த தரவுகளின் நெடுவரிசைகளை சரிபார்ப்பது போன்ற முதன்மைக் கணக்கீடுகளை மீண்டும் செய்யவும்.
 முதன்மை மொத்தம் துணை மொத்தங்களின் கூட்டுத்தொகை என்பதை உறுதிப்படுத்தவும்.
 காலப்போக்கில் விகிதங்கள் போன்ற கணிக்கக்கூடிய வழியில் தொடர்புடைய எண்களுக்கு இடையிலான உறவுகளைச் சரிபார்க்கவும்.
 ஒரு நபருக்கான தொகைகளைப் பகுப்பாய்வு செய்வது அல்லது மொத்த உள்ளக உற்பத்தியுடன் தொடர்புடைய அல்லது ஒரு அடிப்படை ஆண்டுடன் தொடர்புடைய இலக்கு மதிப்பாக ஒப்பிடுவதை எளிதாக்க எண்களை இயல்பாக்கவும்.
 சமபங்கு மீதான வருவாய் குறித்த  தூடுபோன்ட்டுப் பகுப்பாய்வு போன்ற முடிவுகளுக்கு வழிவகுத்த காரணிகளைப் பகுப்பாய்வு செய்து சிக்கல்களை கூறுகளாக உடைக்கவும்.

செய்முறையின் கீழ் உள்ள மாறிகளுக்கு , ஆய்வாளர்கள் பொதுவாக சராசரி, செந்தர விலகல் போன்ற  விளக்கமுறைப் புள்ளிவிவரங்களைப் பெறுகிறார்கள். தனிப்பட்ட மதிப்புகள் சராசரியைச் சுற்றி எவ்வாறு குவிகின்றன என்பதைப் பார்க்க முதன்மை மாறிகளின் பரவலையும் அவர்கள் பகுப்பாய்வு செய்யலாம்.

மெக்கின்சி அண்ட் கம்பெனியின்  அறிவுரையாளர்கள் ஒரு அளவியல் சிக்கலை அதன் கூறுகளாக உடைப்பதற்கான ஒரு நுட்பத்திற்குப் தமக்குள் விலகிய ஒட்டுமொத்த விரிவுக் (MECE) கொள்கை என்று பெயரிட்டனர். ஒவ்வொரு அடுக்கையும் அதன் கூறுகளாகப் பிரிக்கலாம். ஒவ்வொரு துணை கூறுகளும் ஒன்றுக்கொன்று  சிறப்பானதாக இருக்க வேண்டும். மேலும் அவை மேலே உள்ள அடுக்குடன் கூட்டப்பட வேண்டும். இந்த உறவு " தமக்குள் விலகிய ஒட்டுமொத்த விரிவு "  (MECE) என்று குறிப்பிடப்படுகிறது.  எடுத்துக்காட்டாக , வரையறையின்படி  ஈட்டத்தை(இலாபத்தை) மொத்த வருவாயாகவும்  மொத்தச் செலவாகவும் பிரிக்கலாம். மொத்த வருவாயை அதன் கூறுகளான A, B, C   (இவை ஒன்றுக்கொன்று தமக்குள்  விலகியவை) ஆகியவற்றின் வருவாயால்  பகுப்பாய்வு செய்யலாம்.. மேலும் இவற்றை மொத்த வருவாயில் சேர்க்க வேண்டும் (ஒட்டுமொத்தமாக விரிவானவை).

சில பகுப்பாய்வு சிக்கல்களைத் தீர்க்க ஆய்வாளர்கள் வலுவான புள்ளியியல் அளவீடுகளைப் பயன்படுத்தலாம். உண்மையான விவகாரங்கள் பற்றிய ஒரு குறிப்பிட்ட கருதுகோள் ஆய்வாளரால் உருவாக்கப்பட்டு , அந்த நிலைமை உண்மையா அல்லது பொய்யா என்பதை தீர்மானிக்க தரவு திரட்டப்படும்போது கருதுகோள் செய்முறை பயன்படுத்தப்படுகிறது. எடுத்துக்காட்டாக , " வேலையின்மை பணவீக்கத்தில் எந்த விளைவையும் ஏற்படுத்தாது " என்று கருதலாம் , இது பிலிப்சு வரைவு எனப்படும் பொருளியல் கருத்துடன் தொடர்புடையது. கருதுகோள்  செய்முறையில் வகை I, வகை II பிழைகளின் சாத்தியக்கூறுகளைக் கருத்தில் கொள்வதும் அடங்கும் , இது கருதுகோளை ஏற்றுக்கொள்வதா அல்லது நிராகரிப்பதா என்பதை தரவு  ஏற்கிறதா என்பது தொடர்புடையது.

தற்சார்பு மாறி X எந்த அளவிற்கு சார்பு மாறி Y ஐ மாற்றுகிறது என்பதைத் தீர்மானிக்க முயற்சிக்கும்போது பின்னேகும் பகுப்பாய்வு பயன்படுத்தப்படலாம் (எ. கா. " வேலையின்மை விகிதத்தில்  ஏற்படும் மாற்றங்கள்(X) பணவீக்க விகிதத்தை(Y)) எந்த விகிதத்தில்  மாற்றுகிறது . இது ஒரு சமன்பாட்டுக் கோடு அல்லது வரைவை தரவுகளுக்குப்  படிமமாகப் பொருத்துவதற்கான முயற்சியாகும் , அதாவது Y என்பது X இன் சார்பாகும்.

தேவையான கட்டுத்தளை பகுப்பாய்வு (NCA) பகுப்பாய்வாளர் எந்த அளவிற்கு தர்சார்பு Xமாறியை    Y மாறி  ஏற்கிறது என்பதை தீர்மானிக்க முயற்சிக்கும்போது பயன்படும். (எ. கா. " ஒரு குறிப்பிட்ட வேலையின்மை விகிதம் எந்த அளவிற்கு ஒரு குறிப்பிட்ட பணவீக்க விகிதத்திற்குத் தேவை). அதேவேளை (பல மடங்கு பின்னேகும் பகுப்பாய்வு சேர்க்கைத் தருக்கத்தைப் பயன்படுத்துகிறது , அங்கு ஒவ்வொரு எக்ஸ் மாறியும் விளைவை உருவாக்க முடியும். மேலும், எக்ஸ்  ஒன்றுக்கொன்று தம்முள் ஈடுசெய்ய முடியும் (அவை போதுமானவை ஆனால் கட்டாயமானவையில்லை.) தேவையான கட்டுத்தளைப் பகுப்பாய்வு (NCA) ஒன்று அல்லது அதற்கு மேற்பட்ட எக்ஸ் - மாறிகள் விளைவை  ஏற்க வேண்டிய கண்டிப்புத் தருக்கத்தைப் பயன்படுத்துகிறது; ஆனால் அதை உருவாக்காது. (அவை கட்டயமானவை ஆனால் போதுமானவை அல்ல). ஒவ்வொரு தேவையான  கட்டுத்தளையும் இருக்க வேண்டும்; ஆனால், ஈடுசெய்ய  வாய்ப்பில்லை.

தரவு பயனர்களின் பகுப்பாய்வு நடவடிக்கைகள் 
மேலே கோடிட்டுக் காட்டப்பட்ட பொதுவான செய்திக்கு மாறாக , பயனர்கள் ஒரு தரவு தொகுப்பிற்குள் குறிப்பிட்ட தரவு புள்ளிகளைக் கொண்டிருக்கலாம். இத்தகைய குறைந்த அளவிலான பயனர் பகுப்பாய்வு நடவடிக்கைகள் பின்வரும் அட்டவணையில் வழங்கப்பட்டுள்ளன. வகைபிரித்தல், மதிப்புகளை மீட்டெடுப்பது, தரவுப் புள்ளிகளைக் கண்டறிதல், தரவுப் புள்ளிகளை ஏற்பாடு செய்தல்  ஆகிய மூன்று செயல்பாடுகளால் ஒழுங்கமைக்கப்படலாம். .

பயனுள்ள பகுப்பாய்விற்கான தடைகள் 
பயனுள்ள பகுப்பாய்விற்கான தடைகள் தரவு பகுப்பாய்வு செய்யும் ஆய்வாளர்களிடையே அல்லது பார்வையாளர்களிடையே இருக்கலாம். அறிவாற்றல் சார்புகள், எண்ணற்ற தன்மை ஆகியவற்றிலிருந்து உண்மையை வேறுபடுத்துவது  அனைத்துத் தரவு பகுப்பாய்விற்கும்   அறைகூவல்களாகும்.

குழப்பமான உண்மையும் கருத்தும் 
 
பயனுள்ள பகுப்பாய்விற்குக்  கேள்விகளுக்கு பதிலளிக்க பொருத்தமான உண்மைகளைப் பெறுவது தேவைப்படுகிறது - ஒரு முடிவு அல்லது முறையான கருத்து அல்லது செய்முறை கருதுகோள்களை  ஏற்கிறது. வரையறையின்படி உண்மைகள் மறுக்க முடியாதவை , அதாவது பகுப்பாய்வில் ஈடுபட்டுள்ள எந்தவொரு நபரும் அவற்றை ஒப்புக் கொள்ள முடியும். எடுத்துக்காட்டாக , 2010 ஆகத்தில்  பேராயப் பாதீட்டு  அலுவலகம் (சிபிஓ) புஷ்ஷின் 2001, 2003 ஆம் ஆண்டுகளுக்கான வரிக் குறைப்புகளை 2011 - 2020 காலத்திற்கு நீட்டித்திருப்பது தேசியக் கடனில் சுமார் 3 டிரில்லியன் டாலர்களை சேர்க்கும் என்று மதிப்பிட்டது. உண்மையில் இதைத்தான் சிபிஓ அறிக்கை செய்ததாக அனைவரும் ஒப்புக் கொள்ள முடியும் , அவர்கள் அனைவரும் அறிக்கையை ஆராய முடியும்.  எனவே,இது ஒரு உண்மையாக மாறுகிறது. சிபிஓ அலுவலகத்துடன் மக்கள் உடன்படுகிறார்களா அல்லது உடன்படவில்லையா என்பது அவர்களின் சொந்த கருத்து.

மற்றோர்  எடுத்துகாட்டு , பொது வணிக நிறுவனங்களின் நிதி அறிக்கைகள் அனைத்து விஷயங்களிலும் நியாயமாக கூறப்பட்டுள்ளதா என்பது குறித்து ஒரு பொது நிறுவனத்தின் தணிக்கையாளர் ஒரு முறையான கருத்தை அடைய வேண்டும். இதற்கு அவர்களின் கருத்தை ஆதரிக்க உண்மைத் தரவு, சான்றுகளின் விரிவான பகுப்பாய்வு தேவைப்படுகிறது. உண்மைகளிலிருந்து கருத்துக்களுக்குப் பாய்ச்சலைச் செய்யும்போது , கருத்து தவறாகும் வாய்ப்பு எப்போதும் உள்ளது.

அறிவாற்றல் சார்புகள் 
பகுப்பாய்வை மோசமாக பாதிக்கக்கூடிய பல்வேறு அறிவாற்றல் சார்புகள் உள்ளன. எடுத்துக்காட்டாக , உறுதிப்படுத்தல் சார்பு என்பது ஒருவரின் முன்கூட்டிய கருத்துக்களை உறுதிப்படுத்தும் வகையில் தகவல்களைத் தேடும் அல்லது விளக்கும் போக்கு ஆகும். கூடுதலாக , தனிநபர்கள் தங்கள் கருத்துக்களை ஆதரிக்காத தகவல்களை இழிவுபடுத்தலாம்.

இந்த சார்புகளைப் பற்றியும் அவற்றை எவ்வாறு சமாளிப்பது என்பதையும் அறிந்திருக்க ஆய்வாளர்கள் குறிப்பாகப் பயிற்றுவிக்கப்படலாம். ஓய்வுபெற்ற சிஐஏ ஆய்வாளர் ரிச்சர்ட்ஸ் ஹியூயர் தனது புத்தகமான உளவியல் உளவியல் பகுப்பாய்வில் , ஆய்வாளர்கள் தங்கள் அனுமானங்களையும் அனுமானச் சங்கிலிகளையும் தெளிவாக வரையறுக்க வேண்டும் என்றும் முடிவுகளில் உள்ள நிச்சயமற்ற தன்மையின் அளவு மற்றும் மூலத்தைக் குறிப்பிட வேண்டும் என்றும் எழுதினார். மாற்றுக் கண்ணோட்டங்களை வெளிப்படுத்தவும் விவாதிக்கவும் உதவும் நடைமுறைகளை அவர் வலியுறுத்தினார்.

எண்கல்வி  இன்மை 
பயனுள்ள ஆய்வாளர்கள் பொதுவாக பல்வேறு எண் நுட்பங்களில் திறமையானவர்கள். இருப்பினும் பார்வையாளர்கள் எண்ணிக்கை அல்லது எண்ணியல்  கல்வியறிவு இல்லாமல் இருக்கலாம் - அவர்கள் எண்கல்வியற்றவர்கள் என்று கூறப்படுகிறது.  தரவுகளை   அறிவிப்பவர்களும் தவறான எண் நுட்பங்களைப் பயன்படுத்தி வேண்டுமென்றே தவறாக வழிநடத்தவோ அல்லது தவறாக தெரிவிக்கவோ முயற்சி செய்யலாம்.

எடுத்துக்காட்டாக , ஒரு எண் உயர்கிறதா அல்லது வீழ்ச்சியடைகிறதா என்பது முத்ன்மைக் காரணியாக இருக்காது. அரசு வருவாய் அளவு அல்லது பொருளியல் சார்ந்த செலவினங்கள் (GDP) அல்லது பெருநிறுவன நிதி அறிக்கைகளில் உள்ள வருவாய் சார்ந்த செலவின் அளவு போன்ற மற்றொரு எண்ணுடன் தொடர்புள்ள எண்ணிக்கை மிக முதன்மையானதாக இருக்கலாம். இந்த எண்நுட்பம் இயல்பாக்கம் அல்லது பொது அளவாக்கம் என குறிப்பிடப்படுகிறது. பணவீக்கத்திற்கு சரிசெய்வது (அதாவது உண்மையான, பெயரளவு தரவுகளை ஒப்பிடுவது அல்லது மக்கள் தொகை அதிகரிப்பு ,  மக்கள்தொகையியல் ஆகிய பலவற்றைக் கருத்தில் கொள்வது) போன்ற பல நுட்பங்கள் ஆய்வாளர்களால் பயன்படுத்தப்படுகின்றன. மேலே உள்ள பிரிவில் விவரிக்கப்பட்டுள்ள பல்வேறு அளவு செய்திகளைத் தீர்க்க ஆய்வாளர்கள் பல்வேறு நுட்பங்களைப் பயன்படுத்துகின்றனர்.

ஆய்வாளர்கள் வெவ்வேறு  கற்பிதங்கள் அல்லது சூழ்நிலைகளின் கீழ் தரவைப் பகுப்பாய்வு செய்யலாம். எடுத்துக்காட்டாக , ஆய்வாளர்கள் நிதி அறிக்கையைப் பகுப்பாய்வு செய்யும்போது , அவர்கள் பெரும்பாலும் எதிர்கால பணப்புழக்கத்தின் மதிப்பீட்டை அடைய உதவும் வகையில் வெவ்வேறு  கற்பிதங்களின் கீழ் நிதி அறிக்கைகளை மறுசீரமைப்பார்கள் , பின்னர் அவர்கள் நிறுவனத்தின் அல்லது அதன் பங்குகளின் மதிப்பீட்டைத் தீர்மானிக்க சில வட்டி விகிதத்தின் அடிப்படையில் தற்போதைய மதிப்புக்கு தள்ளுபடி செய்கிறார்கள்.  இதேபோல் , அரசாங்கத்தின் வருவாய் ஒதுக்கீடுகளிலும் பற்றாக்குறைகளிலும் பல்வேறு கொள்கை விருப்பங்களின் விளைவுகளை பாதீட்டு அலுவலகம் செய்கிறது. மேலும், முதன்மை நடவடிக்கைகளுக்கான மாற்று எதிர்காலச் சூழ்நிலைகளையும் உருவாக்குகிறது.

பிற தலைப்புகள்

திறனுறு கட்டிடங்கள் 
கட்டிடங்களில் ஆற்றல் நுகர்வைக் கணிப்பதற்காக தரவு பகுப்பாய்வு அணுகுமுறையைப் பயன்படுத்தலாம். தரவு பகுப்பாய்வுச் செயல்முறையின் பல்வேறு படிநிலைகள்  உயர்திறக் கட்டிடங்களை அடைவதற்காக மேற்கொள்ளப்படுகின்றன  இங்குக் கட்டிட மேலாண்மையும் கட்டுப்பாட்டு நடவடிக்கைகளும் வெப்பமூட்டல்  காற்ருப்பதனம், விளக்கமைப்பு,  பாதுகாப்பு ஆகியவற்றில் கட்டிடப் பயனர்களின் தேவைகளைப் நிறைவு செய்வதாலும் ஆற்றல்,  நேரம் போன்ற வளங்களை மேம்படுத்துவதாலும் தானாகவே உகப்புநிலை பகுத்தப்படுகின்றன.

பகுப்பாய்வும் வணிக நுண்ணறிவும் 
பகுப்பாய்வு என்பது "  தர்வுகளை விரிவாகப் பயன்படுத்தி, முடிவுகளையும் செயல்முறைகளையும் மேற்கொள்ள, புள்ளியியல்,  அளவியலான பகுப்பாய்வையும் விளக்கல், முன்கணிப்பு படிமங்களையும் உண்மை அடிப்படையிலான மேலாண்மையையும் விரிவாகப் பயன்படுத்தும் புலமாகும். இது வணிக நுண்ணறிவின் துணைக்குழுவாகவும் தொழில்நுட்பங்களும் செயல்முறைகளும் இனந்த தொகுப்பாகவும்  முடிவெடுப்பதற்கு வணிக செயல்திறனைப் புரிந்துகொள்ளவும் பகுப்பாய்வு செய்யவும் தரவைப் பயன்படுத்துகிறது.

கல்வி 

கல்வியில் பெரும்பாலான கல்வியாளர்கள் மாணவர் தரவைப் பகுப்பாய்வு செய்யும் நோக்கத்திற்காக ஒரு தரவு அமைப்பை அணுகலாம். இந்த தரவு அமைப்புகள்( உட்திவு  அடையாளங்கள்,  துணைநிரப்பு ஆவணங்கள்,   முதன்மைத் தொகுப்பு / காட்சி, உள்ளடக்க முடிவுகளை எடுக்கும் உதவி அமைப்பு போன்றன) கல்வியாளர்களின் தரவு பகுப்பாய்வுகளின் துல்லியத்தை மேம்படுத்தும்  தரவு வடிவத்தை கல்வியாளர்களுக்கு வழங்குகின்றன.

பயிற்சியாளர் குறிப்புகள் 
இந்தப் பகுதியில் பயிற்சியாளர்களுக்கு உதவக்கூடிய தொழில்நுட்ப விளக்கங்கள் உள்ளன. ஆனால்  இவை விக்கிப்பீடியா கட்டுரையின் வழக்கமான மரபுக்கு அப்பாற்பட்டவை.

முதன்மைத் தரவு பகுப்பாய்வு 
தொடக்கநிலைத் தரவு பகுப்பாய்வு கட்டத்திற்கும் முதன்மைப் பகுப்பாய்வுக் கட்டத்திற்கும் இடையிலான மிக தலையாய வேறுபாடு என்னவென்றால், தொடக்கநிலைத் தரவுப் பகுப்பாய்வின் போது மூல ஆராய்ச்சி கேள்விக்கு பதிலளிப்பதை நோக்கமாகக் கொண்ட எந்தவொரு பகுப்பாய்விலிருந்தும் ஒருவர் விலகிச் செல்கிறார். தொடக்கநிலைத்  தரவு பகுப்பாய்வுக் கட்டம் பின்வரும் நான்கு கேள்விகளால் வழிநடத்தப்படுகிறது:

தரவுகளின் தரம் 
தரவுகளின் தரத்தை விரைவில் சரிபார்க்க வேண்டும். தரவு தரத்தை,  நிகழ்வெண், விளக்கமுறை புள்ளியியல் ( நிரல்,  செந்தர விலகல், நடுமன் போன்றன), இயல்புநிலை( சாய்மை, குர்த்தோசிசுமுறை, அலைவெண் வரைவுகள் போன்றன) போன்ற பல்வேறு வகையான பகுப்பாய்வுகளைப் பயன்படுத்தி, பல்வேறு வழிகளில் மதிப்பிட முடியும்.

 அறுதிநிலை நோக்கீடுகளின் பகுப்பாய்வு: தரவுகளில் உள்ள விளிபுநிலை நோக்கீடுகள்   இயற்பரவலைத் தொந்தரவு செய்கின்றனவா என்று பார்க்க,  பகுப்பாய்வு செய்யவேண்டும்.
 குறிமுறைத் திட்டங்களில் உள்ள வேறுபாடுகளை ஒப்பிடுதலும் திருத்துதலும்: மாறிகள் தரவு தொகுப்பின் வெளிப்புற மாறிகளின் குறிமுறைத் திட்டங்களுடன் ஒப்பிடப்படவேண்டும். மேலும் குறியீட்டு திட்டங்கள் ஒப்பிடப்படாவிட்டால் சரிசெய்யப்படவேண்டும்.
 பொதுமுறை வேறுபாட்டிற்கான சோதனை செய்யவேண்டும்..

தொடக்கநிலைத் தரவு பகுப்பாய்வு கட்டத்தில் தரவு தரத்தை மதிப்பிடுவதற்கான பகுப்பாய்வுகளின் தேர்வு, முதன்மைப் பகுப்பாய்வு கட்டத்தில் நடத்தப்படும் பகுப்பாய்வுகளைப் பொறுத்தது.

அளவீடுகளின் தரம் 
அளவீட்டுக் கருவி ஆய்வின் குவியம் அல்லது ஆராய்ச்சி கேள்வி அல்ல எனில், அளவீட்டு கருவிகளின் தரம் தொடக்கநிலைத் தரவு பகுப்பாய்வுக் கட்டத்தில் மட்டுமே சரிபார்க்கப்பட வேண்டும். .  அளவீட்டு கருவிகளின் அமைப்பு  தரவரைவில் தெரிவிக்கப்பட்ட கட்டமைப்புடன் ஒத்திருக்கிறதா என்பதை ஒருவர் சரிபார்க்க வேண்டும்.

அளவீட்டு தரத்தை மதிப்பிடுவதற்கு இரண்டு வழிகள் உள்ளன:

 உறுதிப்படுத்தும் காரணி பகுப்பாய்வு
 ஒருபடித்தான பகுப்பாய்வு (உட்புற ஒருபடிநிலைமை) ஒரு அளவீட்டு கருவியின் நம்பகத்தன்மையின் அறிகுறியைக் கொடுக்கிறது. இந்த பகுப்பாய்வின் போது , உருப்படிகளின் மாறுபாடுகள், ஒரு உருப்படி ஒரு அளவிலிருந்து நீக்கப்படும் போது, அளவுகோல்களின் குரோன்பாக்கின் ஆல்பா, குரோன்பேக்கின் ஆல்பாவில் ஏற்படும் மாற்றம் ஆகியவற்றை ஒருவர் ஆய்வு செய்கிறார் .

தொடக்க்கநிலை  உருமாற்றங்கள் 
தரவு, அளவீடுகளின் தரத்தை மதிப்பிட்ட பிறகு , காணாமல் போன தரவைக் கண்டரியவோ அல்லது ஒன்று அல்லது அதற்கு மேற்பட்ட மாறிகளின் தொடக்கநிலை மாற்றங்களைச் சரிசெய்யவோ முடிவு செய்யலாம் , இருப்பினும் இதை முதன்மைப் பகுப்பாய்வு கட்டத்திலும் செய்யலாம்.

 சதுர வேர் மாற்றம் (விநியோகம் இயல்பானதிலிருந்து மிதமாக வேறுபட்டால்)
 பதிவு - மாற்றம் (விநியோகம் இயல்பானவற்றிலிருந்து கணிசமாக வேறுபட்டால்)
 தலைகீழ் மாற்றம் (விநியோகம் இயல்பானதிலிருந்து கடுமையாக வேறுபட்டால்)
 வகைப்படுத்தல் (வரிசை / இருதரப்பு) (விநியோகம் இயல்பிலிருந்து கடுமையாக வேறுபட்டால் மற்றும் எந்த மாற்றமும் உதவாது)

ஆய்வை செயல்படுத்துவது ஆராய்ச்சி வடிவமைப்பின் நோக்கங்களை நிறைவு செய்கிறதா? 
எடுத்துக்காட்டாக , சீரற்றமயமாக்கல் செயல்முறையின் வெற்றியை ஒருவர் சரிபார்க்க வேண்டும் எனில்,, பின்னணி, கணிசமான மாறிகள் குழுக்களுக்குள்ளும்  அமைப்பு முழுவதும் சமமாக பகிரப்படுகிறதா என்பதைச் சரிபார்க்க வேண்டும். ஆய்வுக்கு ஒரு சீரற்ற செயல்முறை தேவையில்லை அல்லது பயன்படுத்தவில்லை என்றால் , ஒருவர் சீரற்ற படிமத்தின் வெற்றியை சரிபார்க்க வேண்டும் , எடுத்துக்காட்டாக , ஆர்வமுள்ள மக்கள்தொகையின் அனைத்து துணைக்குழுக்களும்  படிமத்தில் குறிப்பிடப்படுகிறதா என்பதைச் சரிபார்க்க வேண்டும்.சரிபார்க்கப்பட வேண்டிய பிற வாய்ப்புள்ள பின்வரும் தரவு சிதைவுகள் சரிபார்க்கப்படவேண்டும்:

 இடைநிற்றல் (இது ஆரம்ப தரவு பகுப்பாய்வு கட்டத்தில் அடையாளம் காணப்பட வேண்டும்)
 பொருள் பதிலளிக்காதது (இது சீரற்றதாக இருந்தாலும் இல்லாவிட்டாலும் ஆரம்ப தரவு பகுப்பாய்வு கட்டத்தில் மதிப்பீடு செய்யப்பட வேண்டும்)
 சிகிச்சையின் தரம் (கையாளுதல் சோதனைகளைப் பயன்படுத்துதல்.

தரவுப் பதக்கூறின் பான்மை 
எந்தவொரு அறிக்கையிலும் அல்லது கட்டுரையிலும் படிமத்தின் கட்டமைப்பு துல்லியமாக விவரிக்கப்பட வேண்டும். துணைக்குழு பகுப்பாய்வு முதன்மைப் பகுப்பாய்வு கட்டத்தில் செய்யப்படும்போது, குறிப்பாக துணைக்குழுக்களின் அளவு வரை, படிமத்தின் கட்டமைப்பைத் துல்லியமாக தீர்மானிப்பது மிகவும்  இன்றியமையாதது  .தரவு மாதிரியின் பண்புகளை பின்வருவனவற்றைப் பார்த்து மதிப்பீடு செய்யலாம்:

 முதன்மை மாறிகளின் அடிப்படை புள்ளிவிவரங்கள்
 சிதறடிக்கப்பட்ட வரைவுகள
 ஒட்டுறவுகளும்  கூட்டிணைவுகளும்
 குறுக்கு - அட்டவணைப்படுத்தல்கள் 127

தொடக்கநிலைத் தரவு பகுப்பாய்வின் இறுதிக் கட்டம் 
இறுதிக் கட்டத்தில்  தொடக்கநிலைத் தரவு பகுப்பாய்வின் கண்டுபிடிப்புகள் ஆவணப்படுத்தப்பட்டு , தேவையானவற்றுக்கு முன்னுரிமை அளிக்கப்படுகின்றன. மேலும், வாய்ப்புள்ள திருத்த நடவடிக்கைகள் எடுக்கப்படுகின்றன.மேலும் , முதன்மைத் தரவு பகுப்பாய்வுகளுக்கான மூலத் திட்டம் இன்னும் விரிவாக குறிப்பிடப்படலாம் அல்லது மீண்டும் எழுதப்படலாம்.இதைச் செய்ய , முதன்மைத் தரவு பகுப்பாய்வுகள் பற்றிய பல முடிவுகள் எடுக்கப்படலாம்..

 இயல்நிலைப் பரவல் சாராத நேர்வு: மாறிகளின் வகைகளை ஒழுங்கானவையா, எதிரிணைகளா என வகைப்படுத்த வேண்டும். பகுப்பாய்வு முறையை மாற்றியமைக்கவேண்டும்.
 தரவு காணாமல் போகும் நேர்வு: காணாமல் போன தரவை ஒருவர் புறக்கணிக்க வேண்டுமா அல்லது இடைக்கணிப்பு செய்ய வேண்டுமா அப்படியெனில், எந்த இடைக்கணிப்பு நுட்பத்தைப் பயன்படுத்த வேண்டும் என முடிவெடுக்க வேண்டும்.
 பொய்த்தகவல்கள் நிலை: ஒருவர் வலுவான பகுப்பாய்வு நுட்பங்களைப் பயன்படுத்த வேண்டுமா என முடிவெடுக்க வேண்டும். 
 உருப்படிகள் அளவுகோலில் பொருந்தா நிலை: உருப்படிகளைத் தவிர்த்து அளவீட்டு கருவியை மாற்றியமைக்க வேண்டுமா அல்லது அவற்றை மற்ற அளவீட்டுக் கருவிகளுடன் ஒப்பீட்டு உறுதிப்படுத்த வேண்டுமா  என முடிவெடுக்க வேண்டும்
 மிகச் சிறிய துணைக்குழுக்கள் நிலை: குழுக்களுக்கிடையேயான வேறுபாடுகள் பற்றிய கருதுகோளை ஒருவர் கைவிட வேண்டுமா அல்லது சரியான சோதனைகள் வழி அல்லது தொடக்கச் சிறுபடிம நுட்பங்களைப் பயன்படுத்த வேண்டுமா எனமுடிவெடுக்க வேண்டும்.
 சீரற்ற செயல்முறை குறைபாடுள்ளதாகத் தோன்றினால்: ஒருவர் முனைவு மதிப்பெண்களைக் கணக்கிட்டு அவற்றை முதன்மைப் பகுப்பாய்வுகளில்  இணைமாறிகளாகச் சேர்க்க வேண்டுமா என முடிவெடுக்க வேண்டும்

நேரியலற்ற பகுப்பாய்வு 
தொடக்கநிலைத் தரவு பகுப்பாய்வுக் கட்டத்தில் பல பகுப்பாய்வுகளைப் பயன்படுத்தலாம்:

 ஒற்றைமாறியல்பு புள்ளியியல் (ஒற்றை மாறி)
 இருமாறியல்பு கூட்டிணைவுகள் (ஒட்டுறவுகள்)
 வரைகலை நுட்பங்கள் (சிதறல் வரைவுகள்)

ஒவ்வொரு மட்டத்திற்கும் சிறப்பு புள்ளியியல் நுட்பங்கள் கிடைப்பதால் பகுப்பாய்வுகளுக்கு மாறிகளின் அளவீட்டு நிலைகளை கணக்கில் எடுத்துக்கொள்வது  இன்றியமையாதது ஆகும்.

 பெயரளவு மற்றும் வரிசை மாறிகள்
 அதிர்வெண் எண்ணிக்கை (எண்கள்,  நூற்றுவீதங்கள்)
 கூட்டிணைவுகள்
 சுற்றுவட்டத் தடங்கள் ( குறுக்கு அட்டவணைப்படுத்தல்கள்)
 படிநிலை லாக்லைனர் பகுப்பாய்வு (பேரளவாக 8 மாறிகளுக்கு கட்டுப்படுத்தப்பட்டுள்ளது)
 loglinear பகுப்பாய்வு (பொருத்தமான / முதன்மை மாறிகள், வாய்புள்ள குழப்பங்களை அடையாளம் காண)
 துல்லியமான சோதனைகள் அல்லது தொடக்கநிலைப்படுத்துதல் (துணைக்குழுக்கள் சிறியதாக இருந்தால்)
 புதிய மாறிகளின் கணக்கீடு
 தொடர்ச்சியான மாறிகள்
 பரவல்நிலை
 புள்ளியியல் (நிரல், செந்தர விலக்கம்,  வேறுபாடு, சாய்மை, குர்த்தோசிசுமுறை போன்றன)
 தண்டு, இலை காட்சிப் பெட்டிகள்
 பெட்டி  வரைவுகள்

நேரியல் அல்லாத பகுப்பாய்வு 
ஒரு நேரியலற்ற அமைப்பிலிருந்து தரவு பதிவு செய்யப்படும்போது நேரியல் அல்லாத பகுப்பாய்வு பெரும்பாலும் கட்டாயம் தேவை. நேரியல் அல்லாத அமைப்புகள் எளிய நேரியல் முறைகளைப் பயன்படுத்தி பகுப்பாய்வு செய்யும்போது, இருமைப் பிளவுகள் , குழப்பம் , கிளையலைகள் துணைக் கிளையலைகள்  உள்ளிட்ட சிக்கலான இயங்கியல் விளைவுகளை வெளிப்படுத்தலாம்.  நேரியல் அல்லாத தரவு பகுப்பாய்வு நேரியல் அல்லாத அமைப்பு அடையாளத்துடன் நெருக்கமாகத் தொடர்புடையது.

தொடக்கநிலைத் தரவு பகுப்பாய்வு 
முதன்மைப் பகுப்பாய்வுக் கட்டத்தில் , ஆராய்ச்சி கேள்விக்குப் பதிலளிப்பதை நோக்கமாகக் கொண்ட பகுப்பாய்வுகள் மேற்கொள்ளப்படுகின்றன , அத்துடன் ஆராய்ச்சி அறிக்கையின் முதல் வரைவை எழுதத் தேவையான வேறு பொருத்தமான பகுப்பாய்வும் செய்யப்படும்.

தேடல்,  உறுதிப்படுத்தல் அணுகுமுறைகள் 
முதன்மைப் பகுப்பாய்வு கட்டத்தில் ஒரு தேட்டம்(தேடல்) அல்லது உறுதிப்படுத்தல் அணுகுமுறையைப் பின்பற்றலாம். பொதுவாக தரவு  திரட்டப்படுவதற்கு முன்பு அணுகுமுறை தீர்மானிக்கப்படுகிறது. ஒரு தேட்டப் பகுப்பாய்வில் தரவைப் பகுப்பாய்வு செய்வதற்கு முன்கருதுகோள் எதுவும் கூறப்பட மாட்டாது. மேலும் தரவு நன்கு விவரிக்கும் படிமங்களுக்காகத்  தேடப்படுகிறது. ஒரு உறுதிப்படுத்தல் பகுப்பாய்வில் தரவு பற்றிய தெளிவான கருதுகோள்கள் சோதிக்கப்படுகின்றன.

தேட்டத் தரவு பகுப்பாய்வு கவனமாக விளக்கப்பட வேண்டும். ஒரே நேரத்தில் பல படிமங்களைச் சோதிக்கும்போது , அவற்றில் குறைந்தது ஒன்றையாவது குறிப்பிடத்தக்கதாகக் கண்டுபிடிப்பதற்கான அதிக வாய்ப்பு உள்ளது. ஆனால் இது வகை 1 பிழை காரணமாகவும் இருக்கலாம். பல படிமங்களைச் சோதிக்கும் போது எப்போதும் கணிசமானதைச் சரிசெய்வது முதன்மையானதாகும். எடுத்துக்காட்டாக, ஒரு பான்ஃபெரோனி திருத்தத்தைக் கூறலாம். மேலும் , ஒரு தேட்டப் பகுப்பாய்வை, அதே தரவுத்தொகுப்பில் உறுதிப்படுத்தல் பகுப்பாய்வுடன், ஒருவர் பின்பற்றக்கூடாது. ஒரு தேட்டப் பகுப்பாய்வு ஒரு கோட்பாட்டிற்கான  எண்ணக்கருக்களைக் கண்டறியப் பயன்படுத்தப்படுகிறது , ஆனால்  அது அந்தக் கோட்பாட்டைச் சோதிக்க செய்யப்படுவதன்று. ஒரு படிமத்தை ஒரு தரவுத்தொகுப்பில் ஆய்வு செய்யும்போது , அதே தரவுத்தளத்தில் உறுதிப்படுத்தல் பகுப்பாய்வுடன் அந்த பகுப்பாய்வைத் தொடர்ந்து உறுதிப்படுத்தல், பகுப்பாய்வின் முடிவுகள் முதல் இடத்தில் தேட்டப் படிமத்தை விளைவித்த அதே வகை 1 பிழை காரணமாகவும் இருக்கலாம் என்று கொள்ளவேண்டும். எனவே உறுதிப்படுத்தல் பகுப்பாய்வு அசல் ஆய்வு பகுப்பாய்வை விட அதிக தகவல் தருவதாக இருக்காது.

முடிவுகளின் நிலைத்தன்மை 
முடிவுகள் எவ்வளவு பொதுமைப்படுத்தக்கூடியவை என்பதற்கான சில அறிகுறிகளைப் பெறுவது முதன்மையானது. இது பெரும்பாலும் சரிபார்க்க கடினமாக இருந்தாலும் , முடிவுகளின் நிலைப்புத்தன்மையைப் பார்க்கலாம். முடிவுகள் நம்பகமானவையா,  மீண்டும் உருவாக்கக்கூடியவையா என்பதை அறிய இரண்டு முதன்மை வழிகள் உள்ளன.

 குறுக்கு சரிபார்ப்பு. தரவை பல பகுதிகளாகப் பிரிப்பதால் , ஒரு பகுப்பாய்வு தரவின் ஒரு பகுதியை அடிப்படையாகக் கொண்ட (பொருத்தப்பட்ட படிமம் போன்றது) தரவுகள் மற்றொரு பகுதிக்கும் பொதுமைப்படுகிறதா என்பதை நாம் சரிபார்க்கலாம். குழு தரவுகள் போல, தரவுகளுக்குள் ஒட்டுறவுகள் இருந்தால் குறுக்கு சரிபார்ப்பு பொதுவாக பொருத்தமற்றது. எனவே சில நேரங்களில் சரிபார்ப்புக்கான பிற முறைகளைப் பயன்படுத்த வேண்டி நேரும். இந்த தலைப்பைப் பற்றி மேலும் அறிய , காண்க, புள்ளியியல் படிமச் சரிபார்ப்பு.
 உணர்திறன் பகுப்பாய்வு. உலகளாவிய அளவுருக்கள் முறைப்படி மாறுபடும் போது ஒரு அமைப்பு அல்லது படிமத்தின் நடத்தையைப் படிப்பதற்கான ஒரு நடைமுறை.  இதைச் செய்வதற்கான ஒரு வழி , பூட்ஸ்ட்ராப்பிங் வழிமுறையாகும்.

தரவு பகுப்பாய்விற்கான இலவச மென்பொருள்கள் 
தரவு பகுப்பாய்விற்கான குறிப்பிடத்தக்க இலவச மென்பொருள்கள் பின்வருமாறு:

 DevInfo-மனித வளர்ச்சியைக் கண்காணிக்கவும் பகுப்பாய்வு செய்யவும் ஐக்கிய நாடுகள் மேம்பாட்டுக் குழு பரிந்துரைக்கும்  தரவுத்தள அமைப்பு.
 ELKI - ஜாவாவில் தரவு மீட்பு அடிப்படையிலான காட்சிப்படுத்தல் செயல்பாடுகளுடன் தரவுச் சுரங்கச் சட்டகம்.
 KNIME - கான்சுட்டான்சு தகவல் சுரங்கத் தொழிலகம் பயனர் நட்பு மற்றும் விரிவான தரவு பகுப்பாய்வு கட்டமைப்பை வழங்குகிறது.
 ஆரஞ்சுச்Orangeவ் - ஊடாடும் தரவு காட்சிப்படுத்தல்,  புள்ளியியல் தரவுப் பகுப்பாய்வு முறைகள் , தரவு சுரங்கம், இயந்திர கற்றல் ஆகிய முறைகளைக் கொண்ட ஒரு காட்சி நிரலாக்க கருவி.
 பாண்டாஸ் - தரவு பகுப்பாய்விற்கான பைத்தான் நூலகம்.
 PAW - CERN இல் உருவாக்கப்பட்ட FORTRAN / C தரவு பகுப்பாய்வுக் கட்டமைப்பு
 R - புள்ளியியல் கணிப்புக்கும்  கணிப்புசார் வரைவியலுக்குமான நிரலாக்க மொழியும்  மென்பொருள் சூழலும்.
 CERN இல் உருவாக்கப்பட்ட RoOT - C++ தரவு பகுப்பாய்வுக் கட்டமைப்பு.
 SciPy - தரவு பகுப்பாய்விற்கான பைத்தான் நூலகம்.
 ஜூலியா - எண் பகுப்பாய்வுக்கும்  கணக்கீட்டு அறிவியலுக்கும் மிகவும் பொருத்தமான ஒரு நிரலாக்க மொழி.

பன்னாட்டுத் தரவு பகுப்பாய்வு போட்டிகள் 
பல்வேறு குழுமங்கள் அல்லது நிறுவனங்கள் ஆராய்ச்சியாளர்கள் தங்கள் தரவைப் பயன்படுத்தவும் ஊக்குவிக்கவும் அல்லது தரவு பகுத்தறிவைப் பயன்படுத்தி ஒரு குறிப்பிட்ட கேள்வியைத் தீர்க்கவும் தரவு பகுப்பாய்வு போட்டிகளை நடத்துகின்றன , . நன்கு அறியப்பட்ட பன்னாட்டுத் தரவு பகுப்பாய்வு போட்டிகளின் சில எடுத்துக்காட்டுகள் பின்வருமாறு:

 காக்கிள் நடத்தும் காக்கிள் போட்டி.
 எல்டிபிபி தரவு பகுப்பாய்வு போட்டி FHWA,  ASCE. ஆகிய அமைப்புகளால் நடத்தப்பட்டது.

மேலும் காண்க 
 

Actuarial science
Analytics
Big data
Business intelligence
Censoring (statistics)
Computational physics
Computational science
Data acquisition
Data blending
Data governance
Data mining
Data Presentation Architecture
Data science
Digital signal processing
Dimensionality reduction
Early case assessment
Exploratory data analysis
Fourier analysis
Machine learning
Multilinear PCA
Multilinear subspace learning
Multiway data analysis
Nearest neighbor search
Nonlinear system identification
Predictive analytics
Principal component analysis
Qualitative research
Structured data analysis (statistics)
System identification
Test method
Text mining
Unstructured data
Wavelet
List of big data companies
List of datasets for machine-learning research

மேற்கோள்கள்

சான்றுகள்

நூல்தொகை 

Tabachnick, B.G. & Fidell, L.S. (2007). Chapter 4: Cleaning up your act. Screening data prior to analysis. In B.G. Tabachnick & L.S. Fidell (Eds.), Using Multivariate Statistics, Fifth Edition (pp. 60–116). Boston: Pearson Education, Inc. / Allyn and Bacon.

மேலும் படிக்க 

 
 Adèr, H.J. & Mellenbergh, G.J. (with contributions by D.J. Hand) (2008). Advising on Research Methods: A Consultant's Companion. Huizen, the Netherlands: Johannes van Kessel Publishing.  
 Chambers, John M.; Cleveland, William S.; Kleiner, Beat; Tukey, Paul A. (1983). Graphical Methods for Data Analysis, Wadsworth/Duxbury Press. 
 Fandango, Armando (2017). Python Data Analysis, 2nd Edition. Packt Publishers. 
 Juran, Joseph M.; Godfrey, A. Blanton (1999). Juran's Quality Handbook, 5th Edition. New York: McGraw Hill. 
 Lewis-Beck, Michael S. (1995). Data Analysis: an Introduction, Sage Publications Inc, 
 NIST/SEMATECH (2008) Handbook of Statistical Methods,
 Pyzdek, T, (2003). Quality Engineering Handbook, 
 Richard Veryard (1984). Pragmatic Data Analysis. Oxford : Blackwell Scientific Publications. 
 Tabachnick, B.G.; Fidell, L.S. (2007). Using Multivariate Statistics, 5th Edition. Boston: Pearson Education, Inc. / Allyn and Bacon, 

அறிவியல் வழிமுறைகள்
தரவுப் பகுப்பாய்வு
தரவுச் செயலாக்கம்
தரவு மேலாண்மை