Как найти адреса электронной почты на всём сайте
Сканируйте до 10,000 страниц на одном сайте, автоматически переходите по связанным подстраницам и собирайте найденные адреса электронной почты в один список.
В этом руководстве используется Email Extractor для перехода по внутренним ссылкам и сбора адресов электронной почты на одном сайте.
Содержание
Что делает поиск адресов на всём сайте#
Полезный адрес электронной почты не всегда находится на странице, которую вы открываете первой. Веб-сайт может распространять контактные данные по страницам отделов, профилям команд, разделам поддержки и страницам прессы. Полное сканирование веб-сайта начинается с одного URL сайта, обнаруживает другие страницы на этом сайте и проверяет их общедоступный HTML на наличие адресов электронной почты. Вам не нужно собирать и вставлять каждую URL страницы вручную. Используйте этот рабочий процесс, когда хотите автоматически исследовать сайт. Если у вас уже есть точный список страниц для проверки, сканирование списка URL является более целенаправленным вариантом.
Как сканирование проходит по веткам сайта#
Думайте о веб-сайте как о наборе связанных ветвей. Главная страница может ссылаться на /about, которая ссылается на /company, которая затем ссылается на /press. Адрес электронной почты может находиться на несколько шагов дальше от начальной страницы. Email Extractor следует внутренним ссылкам и читает поддерживаемые XML-карты сайта, чтобы обнаруживать страницы. Страница не обязательно должна содержать адрес электронной почты, чтобы перенаправлять сканирование на другую страницу. В приведенном ниже примере /company не содержит электронную почту, но ее ссылка на /press ведет к press@example.com. Сканирование остается на том же веб-сайте, а не следует внешним ссылкам по всему интернету.
example.com/contact/support
/about/companyНа этой странице нет адресов/presspress@example.com
/team/careers
Запустите полное сканирование сайта в Email Extractor#
Откройте панель управления Email Extractor, разверните раздел Пакетное сканирование и выберите Сканирование всего сайта. Введите URL сайта, который вы хотите изучить, желательно его обычную публичную домашнюю страницу. Выберите лимит страниц и режим сканирования, затем начните сканирование. Premium предоставляет доступ к полным результатам сканирования сайта. Вы также можете выбрать Попробовать демо, чтобы выполнить реальное сканирование и просмотреть три уникальных адреса электронной почты перед обновлением. Оставьте панель управления доступной, пока сканирование выполняется. Вы можете следить за текущей страницей и индикаторами прогресса или использовать Стоп, если у вас уже достаточно результатов.
Установите лимит страниц до 10,000#
Ограничение по количеству страниц контролирует, сколько запросов к страницам может сделать сканирование. Форма начинается с 10,000, и вы можете выбрать более низкий предел для меньшего сканирования. Начинайте с меньшего предела, когда проверяете новый сайт или тестируете свои настройки. Предел - это максимум, а не обещанное количество страниц: на маленьком сайте может быть меньше страниц, а некоторые запросы могут закончиться неудачей или быть пропущены. Если сканирование достигнет своего предела до завершения проверки всех обнаруженных страниц, просмотрите статус, прежде чем решать, запускать ли более крупное сканирование.
Выберите Полный HTML или Текст страницы#
Полный HTML проверяет HTML, возвращаемые сайтом, включая адреса электронной почты в ссылках mailto. Это полезно, когда кнопка контакта гласит "Напишите нам по электронной почте", но адрес хранится в целевой ссылке. Поиск по тексту страницы ищет текст в возвращенном документе, исключая скрипты, стили и аналогичное содержимое. Сканирование сайта также позволяет пропускать обычные системные адреса, такие как почтовые ящики noreply. Сохраняйте включенным Соблюдать robots.txt, чтобы следовать правилам сайта, распознаваемым сканером. Эти настройки применяются к сканированию сайта; они не делают его идентичным сканированию полностью отображенной страницы в текущей вкладке браузера.
Следите за ходом сканирования и проверяйте собранный список#
Найденные страницы, просканированные страницы и найденные адреса электронной почты измеряют разные вещи. Найденная страница является кандидатом для сканирования; просканированная страница была успешно прочитана; одна страница может содержать несколько адресов или ни одного. Повторяющиеся появления одного и того же адреса электронной почты объединяются в результатах, вместо того чтобы создавать новый контакт каждый раз, когда футер повторяет его. Информация об исходной странице позволяет проверить, где был найден адрес. Проверьте окончательный статус для пропущенных страниц, ошибок запроса или неполного обнаружения. Завершенный запуск означает, что доступная очередь была обработана в рамках своих настроек, а не то, что каждая возможная страница была доступна.
Копируйте или экспортируйте результаты сканирования сайта#
Просмотрите адреса и их исходные страницы перед переносом списка в другой инструмент. Используйте «Копировать» для доступного списка адресов или скачайте файл TXT напрямую из результатов сканирования сайта. Откройте представление «Результаты» для большего пространства при проверке сканирования и используйте доступные там опции экспорта. Сохраняйте информацию, которая объясняет, почему адрес полезен для вашей задачи, особенно когда один и тот же почтовый ящик появляется на нескольких страницах. Обнаруженный шаблон электронной почты является кандидатом для проверки; сканирование не подтверждает, существует ли этот почтовый ящик или будет ли доставлено сообщение.
Понимайте, какие страницы могут быть пропущены#
Сканирование всего веб-сайта читает общедоступный HTML-ответы; оно не запускает каждую страницу как полностью интерактивную вкладку браузера и не использует вашу авторизованную сессию для открытия приватного контента. Адреса, вставленные только с помощью JavaScript, контактные данные, загруженные после взаимодействия, и страницы за входом в систему могут быть пропущены. Страницы без обнаруживаемой внутренней ссылки и без поддерживаемой записи в карте сайта также могут оставаться неизвестными. Внешние домены и другие поддомены находятся за пределами области начального веб-сайта. Если конкретная страница кажется неполной, откройте её обычным способом в вашем браузере и попробуйте сканирование отдельной страницы после загрузки её содержимого.
Примените этот сценарий на практике
Ознакомьтесь с соответствующей документацией для элементов управления продуктом и ограничений, используемых здесь. Связаться с поддержкой если вам нужна помощь с конкретным результатом.
Email ExtractorСкачайте Email Extractor
Найдите адреса электронной почты на веб-страницах и преобразуйте результаты в список, который можно использовать.
