முழு இணையதளத்திலும் முகவரிகளைக் கண்டறி
ஒரு URL-இலிருந்து தொடங்கி இணைந்த பக்கங்களைத் தானாகக் கண்டறிந்து 10,000 பக்கங்கள் வரை முகவரிகளைச் சேகரியுங்கள்.
ஒரு தள URL-இலிருந்து தொடங்கு#
தொகுதி ஸ்கேனில் முழுத் தளத்தைத் தேர்ந்து தொடக்க URL கொடுங்கள். Premium முழுக் கிடைக்கும் பட்டியலைத் திறக்கும்; இல்லாவிட்டால் மாதிரியை முயன்று மூன்று முகவரிகளைக் காணலாம்.
உள் இணைப்புகள், ஆதரிக்கப்படும் XML தளவரைபடங்கள் மூலம் பொதுப் பக்கங்கள் கண்டறியப்படும். தொடக்கப் பக்கத்தின் வழிமாற்றங்கள் தீர்க்கப்பட்ட பிறகு அதன் அதே இணையதள ஆரிஜினில் உள்ள பக்கங்களை மட்டுமே ஸ்கேன் பின்தொடரும். பிற ஹோஸ்ட்களும் துணைடொமைன்களும் தானாகச் சேராது.
- தொகுதி ஸ்கேன், பின்னர் முழு இணையதள ஸ்கேன் திற.
- தொடக்கத் தள URL கொடு.
- பக்க வரம்பும் விருப்பங்களும் அமை.
- ஸ்கேன் தொடங்கு என்பதைத் தேர்வுசெய்.
- முகவரிகளையும் சுருக்கத்தையும் பார்.
வரம்பும் ஸ்கேன் விருப்பங்களும் தேர்வுசெய்#
மேம்பட்ட விருப்பங்களில் 1 முதல் 10,000 வரை பக்க வரம்பை அமைக்கவும். தற்போதைய படிவம் 10,000-இல் தொடங்கும். இது பக்க முயற்சிகளின் உச்சம்; அந்த எண்ணிக்கையில் பக்கமோ முகவரியோ கிடைக்கும் வாக்குறுதி அல்ல.
HTML அல்லது உரை முறையைத் தேர்ந்து அமைப்பு முகவரிகளைத் தவிர்க்க வேண்டுமா, robots.txt பின்பற்ற வேண்டுமா முடிவுசெய்யுங்கள். விதிகள் படிக்க முடியாவிட்டால், இயக்கப்பட்ட robots தேர்வைப் புறக்கணிக்காமல் பிழையுடன் நிற்கலாம்.
பொதுப் பக்க ஸ்கேனை அறி#
முழுத் தள ஸ்கேன் கண்டறிந்த பக்கங்களின் பொது HTML-ஐக் கேட்கும். ஒவ்வொரு பக்கத்தையும் முழுத் தாவலாகக் காட்டாது; அனைத்து ஸ்கிரிப்ட்களையும் இயக்காது; உள்நுழையாது; உங்கள் கணக்கு அமர்வைப் பயன்படுத்தாது.
JavaScript, உள்நுழைவு, படிவ ஊடாட்டம் அல்லது அணுகமுடியாத ஆவணத்தில் மட்டும் வரும் முகவரிகள் விடுபடலாம். அணுகலுள்ள குறிப்பிட்ட பக்கத்தை சாதாரண தாவலில் ஏற்றி பாப்அப் அல்லது URL பட்டியல் பயன்படுத்துங்கள்.
முன்னேற்றத்தைப் பார்த்துப் பாதுகாப்பாக நிறுத்து#
தற்போதைய URL, கண்டறிந்த, ஸ்கேன் செய்த பக்கங்கள், தனித்துவ முகவரிகள் தெரியும். தோல்வி, தவிர்ப்பு, வரம்புக்கு வெளியே இருப்பதால் பக்க எண்ணிக்கைகள் மாறலாம்.
டாஷ்போர்டு தாவலிலேயே இடைநிறுத்தித் தொடருங்கள். நிறுத்தினால் அதுவரை முடிவுகள் சேமிக்கப்படும். மற்ற பிரிவிற்குச் செல்லலாம்; தாவலும் உலாவியும் திறந்திருக்க வேண்டும். மீளேற்றம் அல்லது மறுதொடக்கம் ஊர்வலத்தைத் தொடராது.
முடிவுகளையும் பரவலையும் பார்#
முகவரிகளையும் மூல URL-களையும் ஆய்வு செய்து நகலெடுக்க, ஏற்றுமதி செய்ய அல்லது சேமிக்கத் தேர்வுசெய்யுங்கள். வெற்றல்லாத செயல்கள் தக்கவைப்பு அமைப்பின்படி வரலாற்றின் முழுத் தளப் பிரிவில் சேமிக்கப்படும்.
முடிந்த ஸ்கேன் வரம்பிற்குள் கண்டறிந்து படித்த பக்கங்களைச் சொல்கிறது. எல்லாப் பக்கங்களும் அணுகப்பட்டன அல்லது எல்லா முகவரிகளும் கிடைத்த HTML-இல் இருந்தன என உறுதியளிக்காது. பிழைகளையும் முக்கிய விடுபட்ட பக்கங்களையும் பாருங்கள்.