Web archiving
வலை காப்பகம் என்பது எதிர்கால ஆராய்ச்சியாளர்கள், வரலாற்றாசிரியர்கள் மற்றும் பொதுமக்களுக்காக ஒரு காப்பகத்தில் தகவல் பாதுகாக்கப்படுவதை உறுதி செய்வதற்காக உலகளாவிய வலையின் பகுதிகளை சேகரிக்கும் செயல்முறையாகும். வலை காப்பகவியலாளர்கள் பொதுவாக இணையத்தில் உள்ள மிகப்பெரிய அளவு மற்றும் தகவல்களின் அளவு காரணமாக தானியங்கி பிடிப்புக்காக வலை கிராலர்களைப் பயன்படுத்துகின்றனர். மொத்த ஊர்ந்து செல்லும் அணுகுமுறையை அடிப்படையாகக் கொண்ட மிகப்பெரிய வலை காப்பக அமைப்பு வேபேக் மெஷின் ஆகும், இது முழு வலையின் காப்பகத்தையும் பராமரிக்க முயற்சிக்கிறது. இணையத்தில் உருவாக்கப்பட்ட மற்றும் பதிவு செய்யப்பட்ட மனித கலாச்சாரத்தின் வளர்ந்து வரும் பகுதி, மேலும் மேலும் நூலகங்கள் மற்றும் காப்பகங்கள் வலை காப்பகத்தின் சவால்களை எதிர்கொள்ள வேண்டியிருக்கும் என்பதை தவிர்க்க முடியாததாக ஆக்குகிறது. தேசிய நூலகங்கள், தேசிய காப்பகங்கள் மற்றும் பல்வேறு அமைப்புகளின் கூட்டமைப்பும் கலாச்சார ரீதியாக முக்கியமான வலை உள்ளடக்கத்தை காப்பகப்படுத்துவதில் ஈடுபட்டுள்ளன. பெருநிறுவன பாரம்பரியம், ஒழுங்குமுறை அல்லது சட்ட நோக்கங்களுக்காக தங்கள் சொந்த வலை உள்ளடக்கத்தை காப்பகப்படுத்த வேண்டிய நிறுவனங்களுக்கும் வணிக வலை காப்பக மென்பொருள் மற்றும் சேவைகள் கிடைக்கின்றன. 1990 களின் நடுப்பகுதி முதல் பிற்பகுதி வரை வலையின் சீரமைப்பு மற்றும் அமைப்பு நடைமுறையில் இருந்தபோதிலும், முதல் பெரிய அளவிலான வலை காப்பகத் திட்டங்களில் ஒன்று இன்டர்நெட் காப்பகமாகும், இது 1996 இல் ப்ரூஸ்டர் கஹ்லே உருவாக்கிய இலாப நோக்கற்ற அமைப்பாகும். இன்டர்நெட் ஆர்கைவ் 2001 ஆம் ஆண்டில் காப்பகப்படுத்தப்பட்ட வலை உள்ளடக்கத்தைப் பார்ப்பதற்காக அதன் சொந்த தேடுபொறியான வேபேக் மெஷினை வெளியிட்டது. 2018 ஆம் ஆண்டு நிலவரப்படி, இன்டர்நெட் காப்பகத்தில் 40 பெட்டாபைட் தரவு இருந்தது. இன்டர்நெட் ஆர்கைவ் அதன் தரவுகளை சேகரித்து சேமிக்க அதன் சொந்த கருவிகளில் பலவற்றை உருவாக்கியது, இதில் பெரிய அளவிலான தரவுகளை திறமையாகவும் பாதுகாப்பாகவும் சேமிப்பதற்கான பெட்டாபாக்ஸ் மற்றும் நார்டிக் தேசிய நூலகங்களுடன் இணைந்து உருவாக்கப்பட்ட வலை ஊர்ந்து செல்லும் ஹெரிட்ரிக்ஸ் ஆகியவை அடங்கும். அதே நேரத்தில் தொடங்கப்பட்ட பிற திட்டங்களில் கனடாவின் தேசிய நூலகம், ஆஸ்திரேலியாவின் பண்டோரா, டாஸ்மேனிய வலை காப்பகங்கள் மற்றும் ஸ்வீடனின் குல்டுரார்வு 3 ஆகியவற்றின் வலை காப்பகத் திட்டம் அடங்கும். 2001 முதல் சர்வதேச வலை காப்பக பணிமனை (ஐ. டபிள்யூ. ஏ. டபிள்யூ) அனுபவங்களைப் பகிர்ந்து கொள்வதற்கும் கருத்துக்களைப் பரிமாறிக்கொள்வதற்கும் ஒரு தளத்தை வழங்கியது. 2003 ஆம் ஆண்டில் நிறுவப்பட்ட சர்வதேச இணைய பாதுகாப்பு கூட்டமைப்பு (ஐ. ஐ. பி. சி), வலை காப்பகங்களை உருவாக்குவதற்கான தரநிலைகள் மற்றும் திறந்த மூல கருவிகளை உருவாக்குவதில் சர்வதேச ஒத்துழைப்பை எளிதாக்கியுள்ளது. இப்போது செயல்படாத இன்டர்நெட் மெமரி ஃபவுண்டேஷன் 2004 ஆம் ஆண்டில் நிறுவப்பட்டது மற்றும் ஐரோப்பாவில் வலையை காப்பகப்படுத்துவதற்காக ஐரோப்பிய ஆணையத்தால் நிறுவப்பட்டது. இந்த திட்டம் "பணக்கார ஊடக பிடிப்பு, தற்காலிக ஒத்திசைவு பகுப்பாய்வு, ஸ்பேம் மதிப்பீடு மற்றும் சொற்களஞ்சிய பரிணாமக் கண்டறிதல்" போன்ற பல திறந்த மூல கருவிகளை உருவாக்கி வெளியிட்டது. அறக்கட்டளையின் தரவு இப்போது இன்டர்நெட் காப்பகத்தால் வைக்கப்பட்டுள்ளது, ஆனால் தற்போது பொதுவில் அணுக முடியாது. அதன் பாதுகாப்புக்கு மையப்படுத்தப்பட்ட பொறுப்பு இல்லை என்ற போதிலும், வலை உள்ளடக்கம் விரைவாக அதிகாரப்பூர்வ பதிவாக மாறி வருகிறது. எடுத்துக்காட்டாக, 2017 ஆம் ஆண்டில், அமெரிக்க நீதித்துறை ஜனாதிபதியின் ட்வீட்களை அதிகாரப்பூர்வ அறிக்கைகளாக அரசாங்கம் கருதுகிறது என்பதை உறுதிப்படுத்தியது. வலை வலை காப்பகங்களை சேகரிப்பது பொதுவாக எச். டி. எம். எல் வலைப்பக்கங்கள், ஸ்டைல் ஷீட்டுகள், ஜாவாஸ்கிரிப்ட், படங்கள் மற்றும் வீடியோ உள்ளிட்ட பல்வேறு வகையான வலை உள்ளடக்கங்களை காப்பகப்படுத்துகிறது. அணுகல் நேரம், மைம் வகை மற்றும் உள்ளடக்க நீளம் போன்ற சேகரிக்கப்பட்ட வளங்களைப் பற்றிய மெட்டாடேட்டாவையும் அவர்கள் காப்பகப்படுத்துகிறார்கள். காப்பகப்படுத்தப்பட்ட சேகரிப்பின் நம்பகத்தன்மை மற்றும் ஆதாரத்தை நிறுவ இந்த மெட்டாடேட்டா பயனுள்ளதாக இருக்கும். தொலைநிலை அறுவடை முறைகள் மிகவும் பொதுவான வலை காப்பக நுட்பம் வலைப்பக்கங்களை சேகரிக்கும் செயல்முறையை தானியக்கமாக்க வலை கிராலர்களைப் பயன்படுத்துகிறது. வலை ஊர்ந்து செல்வோர் பொதுவாக உலாவியைக் கொண்ட பயனர்கள் வலையைப் பார்ப்பதைப் போலவே வலைப்பக்கங்களை அணுகுகிறார்கள், எனவே தொலைநிலை அறுவடை வலை உள்ளடக்கத்தின் ஒப்பீட்டளவில் எளிய முறையை வழங்குகிறார்கள். வலை காப்பகத்திற்கு பயன்படுத்தப்படும் வலை ஊர்ந்து செல்வதற்கான எடுத்துக்காட்டுகள் பின்வருமாறுஃ ஹெரிட்ரிக்ஸ் HTTrack Wget வலை ஊர்ந்து செல்லும் நுட்பங்களைப் பயன்படுத்தி "தேவைக்கேற்ப" வலை வளங்களை காப்பகப்படுத்த பல்வேறு இலவச சேவைகள் உள்ளன. இந்த சேவைகளில் வேபேக் மெஷின் மற்றும் வெப்சைட் ஆகியவை அடங்கும். தரவுத்தள காப்பக தரவுத்தள காப்பகப்படுத்தல் என்பது தரவுத்தளத்தால் இயக்கப்படும் வலைத்தளங்களின் அடிப்படை உள்ளடக்கத்தை காப்பகப்படுத்துவதற்கான முறைகளைக் குறிக்கிறது. இதற்கு பொதுவாக தரவுத்தள உள்ளடக்கத்தை ஒரு நிலையான திட்டத்திற்குள் பிரித்தெடுப்பது தேவைப்படுகிறது, பெரும்பாலும் எக்ஸ்எம்எல் பயன்படுத்தப்படுகிறது. அந்த நிலையான வடிவத்தில் சேமிக்கப்பட்டவுடன், பல தரவுத்தளங்களின் காப்பகப்படுத்தப்பட்ட உள்ளடக்கத்தை ஒற்றை அணுகல் அமைப்பைப் பயன்படுத்தி கிடைக்கச் செய்யலாம். இந்த அணுகுமுறை முறையே பிப்லியோதேக் நேஷனல் டி பிரான்ஸ் மற்றும் ஆஸ்திரேலியாவின் தேசிய நூலகம் உருவாக்கிய டீப்ஆர்க் மற்றும் சின்க் கருவிகளால் எடுத்துக்காட்டப்படுகிறது. டீப்ஆர்க் ஒரு தொடர்புடைய தரவுத்தளத்தின் கட்டமைப்பை ஒரு எக்ஸ்எம்எல் திட்டத்துடன் வரைபடமாக்க உதவுகிறது, மேலும் உள்ளடக்கத்தை ஒரு எக்ஸ்எம்எல் ஆவணத்தில் ஏற்றுமதி செய்கிறது. சின்க் பின்னர் அந்த உள்ளடக்கத்தை ஆன்லைனில் வழங்க அனுமதிக்கிறது. வலைத்தளத்தின் அசல் தளவமைப்பு மற்றும் நடத்தையை சரியாக பாதுகாக்க முடியாது என்றாலும், அடிப்படை வினவல் மற்றும் மீட்டெடுப்பு செயல்பாட்டைப் பிரதிபலிக்க Xinq அனுமதிக்கிறது. பரிவர்த்தனை காப்பகம் என்பது ஒரு நிகழ்வு-உந்துதல் அணுகுமுறையாகும், இது ஒரு வலை சேவையகத்திற்கும் வலை உலாவிக்கும் இடையில் நடைபெறும் உண்மையான பரிவர்த்தனைகளை சேகரிக்கிறது. ஒரு குறிப்பிட்ட இணையதளத்தில் ஒரு குறிப்பிட்ட தேதியில் உண்மையில் பார்க்கப்பட்ட உள்ளடக்கத்தின் சான்றுகளைப் பாதுகாப்பதற்கான ஒரு வழிமுறையாக இது முதன்மையாகப் பயன்படுத்தப்படுகிறது. தகவல்களை வெளிப்படுத்துவதற்கும் தக்கவைத்துக்கொள்வதற்கும் சட்ட அல்லது ஒழுங்குமுறை தேவைகளுக்கு இணங்க வேண்டிய நிறுவனங்களுக்கு இது குறிப்பாக முக்கியமானதாக இருக்கலாம். ஒரு பரிவர்த்தனை காப்பக அமைப்பு பொதுவாக ஒவ்வொரு HTTP கோரிக்கையையும் இடைமறித்து, வலை சேவையகத்திலிருந்து பதிலளிப்பதன் மூலமும், நகல் உள்ளடக்கத்தை அகற்ற ஒவ்வொரு பதிலையும் வடிகட்டுவதன் மூலமும், பதில்களை பிட்ஸ்ட்ரீம்களாக நிரந்தரமாக சேமிப்பதன் மூலமும் செயல்படுகிறது. வலையை சேகரிப்பதற்கான முதன்மை வழிமுறையாக வலை ஊர்ந்து செல்வதை நம்பியிருக்கும் சிரமங்கள் மற்றும் வரம்புகள் வலை காப்பகங்கள் வலை ஊர்ந்து செல்வதில் உள்ள சிரமங்களால் பாதிக்கப்படுகின்றனஃ ரோபோக்கள் விலக்கு நெறிமுறை ஒரு வலைத்தளத்தின் சில பகுதிகளை அணுக வேண்டாம் என்று ஊர்ந்து செல்வோரைக் கோரலாம். சில வலை காப்பக வல்லுநர்கள் கோரிக்கையை புறக்கணித்து எப்படியும் அந்த பகுதிகளை வலம் வரலாம். ஒரு வலைத்தளத்தின் பெரிய பகுதிகள் ஆழமான வலையில் மறைக்கப்படலாம். எடுத்துக்காட்டாக, கிராலர்கள் முடிவுகளின் பக்கத்திற்கான இணைப்பைப் பின்பற்ற முடியாவிட்டால், ஒரு வலை படிவத்தின் பின்னால் உள்ள முடிவுகளின் பக்கம் ஆழமான வலையில் இருக்கலாம். கிராலர் ட்ராப்ஸ் (எ. கா., காலெண்டர்கள்) ஒரு கிராலரை எண்ணற்ற பக்கங்களைப் பதிவிறக்கச் செய்யலாம், எனவே கிராலர்கள் பொதுவாக அவை வலம் வரும் மாறும் பக்கங்களின் எண்ணிக்கையைக் கட்டுப்படுத்த கட்டமைக்கப்படுகின்றன. பெரும்பாலான காப்பகக் கருவிகள் பக்கத்தைப் பிடிப்பதில்லை. காப்பகப்படுத்தும் போது விளம்பர பதாகைகள் மற்றும் படங்கள் பெரும்பாலும் தவறவிடப்படுகின்றன என்பது கவனிக்கப்படுகிறது. இருப்பினும், ஒரு சொந்த வடிவ வலை காப்பகம், அதாவது, வேலை செய்யும் இணைப்புகள், ஊடகங்கள் போன்றவற்றுடன் முழுமையாக உலாவக்கூடிய வலை காப்பகம், கிராலர் தொழில்நுட்பத்தைப் பயன்படுத்தி மட்டுமே உண்மையில் சாத்தியமாகும் என்பதைக் கவனத்தில் கொள்ள வேண்டும். வலை மிகவும் பெரியது, அதன் கணிசமான பகுதியை ஊர்ந்து செல்வதற்கு ஏராளமான தொழில்நுட்ப வளங்கள் தேவைப்படுகின்றன. மேலும், வலை மிகவும் வேகமாக மாறி வருகிறது, ஒரு வலைத்தளத்தின் சில பகுதிகள் ஒரு ஊர்ந்து செல்வவர் அதை வலம் வருவதற்கு முன்பே மாற்றங்களை சந்திக்கக்கூடும். பொதுவான வரம்புகள் சில வலை சேவையகங்கள் வழக்கமான உலாவி கோரிக்கைகளுக்கு பதிலளிப்பதை விட வெவ்வேறு பக்கங்களை வலை காப்பக கோரிக்கைகளுக்குத் திருப்புவதற்காக கட்டமைக்கப்பட்டுள்ளன. இது பொதுவாக தேடுபொறிகளை ஒரு வலைத்தளத்திற்கு அதிக பயனர் போக்குவரத்தை வழிநடத்த முட்டாளாக்குவதற்காக செய்யப்படுகிறது, மேலும் பெரும்பாலும் பொறுப்புக்கூறலைத் தவிர்ப்பதற்காகவோ அல்லது அதைக் காட்டக்கூடிய உலாவிகளுக்கு மட்டுமே மேம்பட்ட உள்ளடக்கத்தை வழங்குவதற்காகவோ செய்யப்படுகிறது. வலை காப்பக வல்லுநர்கள் வலை காப்பகத்தின் தொழில்நுட்ப சவால்களைச் சமாளிப்பது மட்டுமல்லாமல், அவர்கள் அறிவுசார் சொத்துரிமைச் சட்டங்களுடனும் போராட வேண்டும். பீட்டர் லைமான் கூறுகையில், "இணையம் ஒரு பொது கள வளமாக பிரபலமாகக் கருதப்பட்டாலும், அது பதிப்புரிமை பெற்றது, எனவே, காப்பகவியலாளர்களுக்கு இணையத்தை நகலெடுக்க சட்டப்பூர்வ உரிமை இல்லை". இருப்பினும், சில நாடுகளில் உள்ள தேசிய நூலகங்களுக்கு சட்டப்பூர்வ வைப்புத்தொகையின் நீட்டிப்பின் கீழ் வலையின் சில பகுதிகளை நகலெடுக்க சட்டப்பூர்வ உரிமை உள்ளது. வெப்சைட், இன்டர்நெட் ஆர்கைவ் அல்லது இன்டர்நெட் மெமரி ஃபவுண்டேஷன் போன்ற சில தனியார் இலாப நோக்கற்ற வலை காப்பகங்கள் உள்ளடக்க உரிமையாளர்கள் பொதுமக்களுக்கு அணுகலை விரும்பாத காப்பகப்படுத்தப்பட்ட உள்ளடக்கத்தை மறைக்க அல்லது அகற்ற அனுமதிக்கின்றன. பிற வலை காப்பகங்கள் சில இடங்களிலிருந்து மட்டுமே அணுகக்கூடியவை அல்லது ஒழுங்குபடுத்தப்பட்ட பயன்பாட்டைக் கொண்டுள்ளன. வெப்சைட் கூகிளின் கேச்சிங்கிற்கு எதிரான சமீபத்திய வழக்கை மேற்கோள் காட்டுகிறது, அதை கூகிள் வென்றது. 2017 ஆம் ஆண்டில், அமெரிக்காவின் நிதி ஒழுங்குமுறை அமைப்பான நிதி தொழில் ஒழுங்குமுறை ஆணையம் (ஃபின்ரா), டிஜிட்டல் தகவல்தொடர்புகளைச் செய்யும் அனைத்து வணிகங்களும் ஒரு பதிவை வைத்திருக்க வேண்டும் என்று ஒரு அறிவிப்பை வெளியிட்டது. இதில் வலைத்தளத் தரவு, சமூக ஊடக பதிவுகள் மற்றும் செய்திகள் அடங்கும். சில பதிப்புரிமைச் சட்டங்கள் வலை காப்பகப்படுத்துதலைத் தடுக்கலாம். உதாரணமாக, அறிவியல்-ஹப் மூலம் கல்வி காப்பகப்படுத்துதல் சமகால பதிப்புரிமைச் சட்டத்தின் எல்லைக்கு வெளியே உள்ளது. திறந்த அணுகல் உரிமம் இல்லாதவை உட்பட கல்விப் பணிகளுக்கு நீடித்த அணுகலை இந்த தளம் வழங்குகிறது, இதன் மூலம் அறிவியல் ஆராய்ச்சியின் காப்பகத்திற்கு பங்களிக்கிறது, இல்லையெனில் அது இழக்கப்படலாம். மேலும் காண்க அண்ணா காப்பக காப்பக தள காப்பகக் குழு archive.today (முன்பு archive.is) கூட்டு நினைவகம் பொதுவான கிரால் டிஜிட்டல் சேமிப்பு டிஜிட்டல் நூலகம் கூகிள் கேச் வலை காப்பக முன்முயற்சிகளின் பட்டியல் விக்கிப்பீடியாஃ விக்கிப்பீடியா நினைவுக் குறிப்பு திட்ட மினர்வா முன்முயற்சி இணைய காப்பகங்களின் பட்டியல் கண்ணாடி வலைத்தளம் தேசிய டிஜிட்டல் தகவல் உள்கட்டமைப்பு மற்றும் பாதுகாப்பு திட்டம் (என். டி. ஐ. ஐ. பி. பி) தேசிய டிஜிட்டல் நூலகத் திட்டம் (என். டி. எல். பி) PADICAT பக்கம்ஃப்ரீசர் பண்டோரா காப்பக இங்கிலாந்து வலை காப்பக மெய்நிகர் கலைப்பொருள் வேபேக் இயந்திரம் வலை ஊர்ந்து செல்வது வெப்சைட் குறிப்புகள் பொது நூலியல் மேற்கோள்கள் வெளிப்புற இணைப்புகள் சர்வதேச இணைய பாதுகாப்பு கூட்டமைப்பு (ஐ. ஐ. பி. சி)-சர்வதேச கூட்டமைப்பு அதன் நோக்கம் இணையத்திலிருந்து அறிவையும் தகவலையும் பெறுவது, பாதுகாப்பது மற்றும் அணுகுவது