வலை ஸ்பைடர் மற்றும் வலை கிராலர்கள் வரையறை

ஸ்பைடர்ஸ் தரவுகளை தேடும் வலை மூலம் 'வலைவலம்' என்று நிரல்கள் (அல்லது தானியங்கி ஸ்கிரிப்ட்கள்) ஆகும். ஸ்பைடர்ஸ் வலைத்தள URL கள் வழியாக பயணிக்க முடியும் மற்றும் மின்னஞ்சல் முகவரிகளைப் போன்ற வலைப்பக்கங்களிலிருந்து தரவை இழுக்க முடியும். ஸ்பைடர்ஸ் வலைத்தளங்களில் தேடுபொறிகளுக்கான தகவல்களுக்குப் பயன்படுகிறது.

ஸ்பைடர்ஸ், 'வலை கிரால்களே' எனும் இணையத்தளத்தையும் தேடுகின்றன, அவை அனைத்துமே தங்கள் விருப்பப்படி நட்புடன் இல்லை.

தகவல் சேகரிக்க ஸ்பேமர் ஸ்பைடர் இணையதளங்கள்

கூகிள், யாஹூ! மற்றும் மற்ற தேடுபொறிகள் வலைத்தளங்களை ஊடுருவலில் ஆர்வமுள்ளவை அல்ல - எனவே ஸ்கேமர்கள் மற்றும் ஸ்பேமர்கள்.

ஸ்பைடர்ஸ் மற்றும் பிற தானியங்கு கருவிகள் ஸ்பேமர்களால் மின்னஞ்சல் முகவரிகள் (வலைத்தளங்களில் இந்த பழக்கம் அடிக்கடி 'அறுவடை' என அழைக்கப்படுகிறது) வலைத்தளங்களில் கண்டுபிடிக்கப்பட்டு ஸ்பேம் பட்டியலை உருவாக்க அவற்றைப் பயன்படுத்துகின்றன.

ஸ்பைடர்ஸ் உங்கள் வலைத்தளத்தைப் பற்றிய மேலும் தகவலைக் கண்டறிய, தேடுபொறிகளால் பயன்படுத்தப்படும் ஒரு கருவியாகும், ஆனால் உங்கள் தளத்தை எவ்வாறு தேடுவது என்பது முக்கிய தகவல் பாதுகாப்பு அபாயங்களை வழங்கலாம் என்பதற்கான வழிமுறைகளை (அல்லது, 'அனுமதிகளை' ஸ்பைடர்ஸ் பின்வரும் இணைப்புகளால் பயணிக்கப்படுகிறது, மேலும் தரவுத்தளங்கள், நிரல் கோப்புகள் மற்றும் பிற அணுகல் ஆகியவற்றிற்கு இணைப்புகளை கண்டுபிடிப்பதில் மிகவும் நுட்பமானவை.

ஸ்பைடர்ஸ் மற்றும் பிற ரோபோகள் தங்கள் தளங்களை பார்வையிட்டிருப்பதைப் பார்ப்பதற்கு வெப்மாஸ்டர்கள் பதிவைப் பார்க்கலாம். இந்தத் தகவல் வெப்மாஸ்டர்களுக்கு அவர்களது தளத்தை யார் குறியாக்குகிறார்கள், எத்தனை அடிக்கடி உதவுகிறது என்பதற்கு உதவுகிறது.

இந்த தகவல் பயனுள்ளதாக இருக்கும், ஏனென்றால் இது வலைதளங்கள் தங்கள் எஸ்சிஓ மற்றும் robot.txt கோப்புகளை எதிர்காலத்தில் தங்கள் தளத்தை ஊடுருவி இருந்து சில ரோபோக்களை தடை செய்ய அனுமதிக்கிறது.

தேவையற்ற ரோபோ கிரால்களிலிருந்து உங்கள் வலைத்தளத்தைப் பாதுகாப்பதற்கான உதவிக்குறிப்புகள்

உங்கள் வலைத்தளத்தில் இருந்து தேவையற்ற கிராலர்கள் வெளியே வைக்க ஒரு எளிய வழி உள்ளது. உங்கள் தளத்தை ஊடுருவக்கூடிய தீங்கிழைக்கும் சிலந்திகளைப் பற்றி நீங்கள் அக்கறை கொள்ளவில்லை என்றால், (மின்னஞ்சல் முகவரி அகற்றப்படுவது, உங்களை மிகவும் பாதுகாப்பற்றவர்களிடமிருந்து பாதுகாக்காது), நீங்கள் முக்கியமான வழிமுறைகளுடன் தேடு பொறிகளை வழங்க வேண்டும்.

அனைத்து வலைத்தளங்களும் ஒரு கோப்பைக் கோப்பினைக் கொண்டிருக்க வேண்டும், இது ஒரு robots.txt கோப்பாகும். இந்த குறியீட்டை இணைய தேடுபொறிகளுக்கு அறிவுறுத்துவதன் மூலம், குறியீட்டு பக்கங்களுக்கு (தேடுபொறிகளாக இருந்தால், ஒரு குறிப்பிட்ட பக்கத்தின் மெட்டா டேட்டாவில் குறியிடப்படாத வகையில் குறிப்பிடப்பட்டால்) அவற்றைக் காண வேண்டும்.

நீங்கள் உலவ வேண்டும் என்று விரும்பும் இடங்களை நீங்கள் சொல்ல முடியுமானால், உங்கள் முழு வலைத்தளத்திலிருந்தும் குறிப்பிட்ட கிராலரிகளைத் தடுக்கவும் கூட அவற்றைத் தடுக்கவும் முடியும்.

Robots.txt கோப்பில் தேடுபொறிகளுக்கு மிகப்பெரிய மதிப்பு இருக்கும் என்பதையும் உங்கள் வலைத்தளத்தின் செயல்திறனை மேம்படுத்துவதில் முக்கிய உறுப்புகளாக இருக்கலாம் என்பதையும் நினைவில் கொள்ள வேண்டியது முக்கியம், ஆனால் சில ரோபோ கிராலர்கள் இன்னும் உங்கள் வழிமுறைகளை புறக்கணிப்பார்கள். இந்த காரணத்திற்காக, உங்கள் எல்லா மென்பொருட்களையும், செருகுநிரல்களையும், பயன்பாடுகளையும் எல்லா நேரங்களிலும் வைத்திருக்க வேண்டியது அவசியம்.

தொடர்புடைய கட்டுரைகள் மற்றும் தகவல்

மோசமான (ஸ்பேம்) நோக்கங்களுக்காக பயன்படுத்தப்படும் தகவல் அறுவடைகளின் காரணமாக, சில நடைமுறைகளை சட்டவிரோதமாகச் செயல்படுத்த 2003 இல் சட்டம் இயற்றப்பட்டது. இந்த நுகர்வோர் பாதுகாப்பு சட்டங்கள் 2003 ஆம் ஆண்டின் CAN-SPAM சட்டத்தின் கீழ் வருகின்றன.

உங்கள் வியாபாரத்தை எந்தவிதமான அஞ்சல் அஞ்சல் அல்லது தகவல் அறுவடையில் ஈடுபடுத்தினால், CAN-SPAM சட்டத்தின் மீது நீங்கள் படிக்க வேண்டிய நேரம் இது முக்கியம்.

ஸ்பேம் எதிர்ப்பு சட்டங்கள் மற்றும் ஸ்பேமர்களை சமாளிப்பது எப்படி, வணிக உரிமையாளராக நீங்கள் என்ன செய்யலாம் என்பதைக் குறித்து பின்வரும் கட்டுரைகளை படித்து தெரிந்து கொள்ளலாம்:

• CAN-SPAM சட்டம் 2003
• லாப நோக்கற்றவர்களுக்கு CAN-SPAM சட்ட விதிகள்
• 5 CAN-SPAM விதிகள் சிறு வணிக உரிமையாளர்கள் புரிந்து கொள்ள வேண்டும்