 தரவுப் பொறியியல் தரவு அறிவியலில் இருந்து எவ்வாறு வேறுபடுகிறது?
தரவு வாழ்க்கைச் சுழற்சியில் தரவு அறிவியலுக்கு முன் தரவு பொறியியல் ஏற்படுகிறது. பல்வேறு ஆதாரங்களில் இருந்து தரவு உருவாக்கப்படலாம் மற்றும் இந்த மூலத் தரவு கட்டமைக்கப்பட்டதாகவோ, அரை கட்டமைக்கப்பட்டதாகவோ அல்லது கட்டமைக்கப்படாததாகவோ இருக்கலாம். இந்தத் தரவைப் புரிந்து கொள்ள, தரவு உள்ளிழுக்கப்பட்டு மாற்றப்பட வேண்டும். இந்த நேரத்தில்தான் டேட்டா இன்ஜினியரிங் படம் வருகிறது. தரவுப் பொறியியல் என்பது மூலத் தரவைப் பிரித்தெடுத்தல், தரவு ஏரி போன்ற அமைப்பில் தரவை உட்செலுத்துதல், வணிகத் தேவைகளுக்குத் தரவை மாற்றுதல் மற்றும் இறுதியாக அதை அட்டவணையில் ஏற்றுதல் போன்ற செயல்களை உள்ளடக்கியது. இது பொதுவாக ELT (Extract-Load-Transform) என அழைக்கப்படுகிறது. ETL (எக்ஸ்ட்ராக்ட்-டிரான்ஸ்ஃபார்ம்-லோட்) என்பதும், ஏற்றப்படும் நிலைக்கு முன் மாற்றம் நிகழும்போது சாத்தியமாகும். தரவு அறிவியல் மற்றும் பகுப்பாய்வு என்பது தரவு வாழ்க்கைச் சுழற்சியின் அடுத்த படியாகும். குறிப்பிட்ட வணிகத் தேவைக்குத் தேவையான தரவு கிடைத்தவுடன், தரவு விஞ்ஞானிகள் இந்தத் தரவைப் பயன்படுத்தி மிகத் துல்லியமான மாதிரியைக் கண்டறிய இயந்திர கற்றல் மாதிரிகளை இயக்குகின்றனர். இந்தத் தரவு தரவு விஞ்ஞானிகளுக்கு அட்டவணை வடிவில் கிடைக்கிறது. தரவு ஆய்வாளர்கள் இந்தத் தரவைப் பயன்படுத்தி சில ஆய்வுப் பகுப்பாய்வைச் செய்து டாஷ்போர்டுகளை உருவாக்குகின்றனர். சாராம்சத்தில், தரவு வாழ்க்கைச் சுழற்சி பின்வருமாறு இருக்கும்: பல்வேறு ஆதாரங்களில் இருந்து மூல தரவு -> தரவு பொறியியல் -> தரவு அறிவியல் மற்றும் பகுப்பாய்வு