Как собрать адреса с нескольких URL в пакетном режиме

Сканируйте список URL веб-страниц, объединяйте найденные адреса и экспортируйте проверенный список. Узнайте, когда лучше сканировать весь сайт.

В этом руководстве используется Email Extractor автоматически сканировать предоставленный список URL и объединять результаты.

Содержание

Сканирование списка URL начинается со страниц, которые вы предоставляете#

Массовый сбор адресов электронной почты полезен, когда вы уже знаете, какие страницы проверять: страницы контактов поставщиков, каталоги отделов, участников конференции или несколько веб-сайтов проектов. Добавьте соответствующую URL страницы в список и позвольте сканеру обработать их. Если вы предоставите десять главных страниц, этот рабочий процесс проверит эти указанные страницы; он не будет автоматически обнаруживать все страницы контактов за ними. По возможности используйте фактическую страницу контактов или команды URL. Если вы знаете только начальный адрес веб-сайта и хотите исследовать его внутренние страницы, выберите вместо этого весь веб-сайт.

Как сканировать несколько URL в Email Extractor#

Вставляйте по одному полному URL в строке, например https://studio.test/contact, затем https://atlas.test/team. Список ожидает HTTP- или HTTPS-адреса страниц, поэтому указывайте протокол, а не только домен. Это однозначно определяет нужную страницу. Перед длинным списком проверьте небольшую выборку: URL должны открываться, а режим - находить ожидаемые адреса. Далее описана работа на панели управления. Не смешивайте адреса электронной почты с URL страниц: входные данные представляют очередь страниц для сканирования.

  1. Подготовьте по одному полному HTTP- или HTTPS-URL страницы в строке.
  2. Откройте панель управления Email Extractor, разверните «Пакетное сканирование» и выберите сканирование списка URL.
  3. Вставьте URL и выберите доступные настройки сканирования в этом представлении.
  4. Запустите сканирование и оставьте браузер открытым, пока страницы обрабатываются.
  5. Просмотрите завершенные, пустые и неудачные страницы перед экспортом полезных результатов.

Понимание ограничения URL и результатов демо#

Premium поддерживает до 1,000 предоставленных URL на список и открывает полный набор найденных результатов. Демонстрация принимает до 10 URL и показывает предварительный просмотр трех уникальных адресов электронной почты. Предварительный просмотр - это лимит результатов, а не другой формат CSV или доказательство того, что были найдены только три адреса. Проверьте указанное общее количество, прежде чем решать, открывать ли полный список. Эти лимиты списков URL отличаются от сканирования всего веб-сайта, которое может обрабатывать до 10,000 страниц на одном сайте. Сохранение различий между этими двумя лимитами значительно упрощает планирование более крупного сканирования.

Выберите страницы и настройки, соответствующие источнику#

Контактные данные могут появляться после загрузки страницы или после того, как пользователь развернет раздел. Используйте параметры ожидания и сканирования, предлагаемые списковым представлением URL, затем проверьте репрезентативный результат перед обработкой большего количества страниц. Полный HTML полезен, когда кнопки контакта содержат цели mailto; сканирование текста полезно, когда вам нужны адреса в читаемом содержимом страницы. Общедоступный каталог может вести себя иначе, чем интерактивное приложение. Если странице требуется взаимодействие, которое массовый запуск не выполняет, проверьте её вручную и используйте сканирование отдельной страницы после загрузки необходимого содержимого.

Держите браузер доступным и проверяйте неудачные страницы#

сканирование списка URL использует страницы браузера для чтения предоставленного содержимого, поэтому дождитесь завершения процесса, прежде чем закрывать панель управления или вкладки сканирования. Неудачный запрос или пустой результат требуют иного толкования, чем страница, вернувшая несколько адресов. Снова откройте подозрительно пустые URL по одному, чтобы проверить, изменилась ли страница, произошел ли редирект, загружалась ли медленно или содержала только контактную форму. Если каждая страница пустая, сначала исследуйте общие настройки или проблему с доступом браузера. Если сбой произошел только на одной странице, полезнее изучить этот источник, чем повторно запускать весь список без изменений.

Объединяйте результаты, не теряя контекст источника#

Один и тот же контактный адрес может появляться на нескольких URL, особенно в общих подвалах или навигации отдела. Полезный объединённый список помогает отличить уникальный адрес от страниц, на которых он встречался. Просмотрите эти исходные записи, когда вам нужно узнать, почему контакт был сохранён. Например, один почтовый ящик редакции, обнаруженный на пяти статьях, обычно представляет собой один почтовый ящик с пятью источниками, а не пять отдельных контактов. Удалите нерелевантные совпадения и сохраните исходные поля, необходимые для вашего следующего шага. Также это хорошее время для сравнения итогового списка с первоначальным проектом или исследовательским планом.

Экспортируйте проверенный список пакетного сканирования#

Откройте соответствующие результаты и выберите формат, подходящий для назначения: TXT для простого списка, CSV или XLSX для таблицы, HTML для читаемого отчета или JSON для структурированной обработки. Все пять форматов экспорта поддерживаются; доступ Premium управляет полным набором результатов, а не делает CSV платным форматом. Проверьте предварительный просмотр экспорта и доступные столбцы перед загрузкой. Для повторяемой работы сохраните входной список URL, а также выходной, чтобы вы могли объяснить, какие страницы были предоставлены, и повторно обработать только те источники, которые действительно нуждаются в повторной проверке.

Примените этот сценарий на практике

Ознакомьтесь с соответствующей документацией для элементов управления продуктом и ограничений, используемых здесь. Связаться с поддержкой если вам нужна помощь с конкретным результатом.

Email Extractor

Скачайте Email Extractor

Найдите адреса электронной почты на веб-страницах и преобразуйте результаты в список, который можно использовать.

Добавить в ChromeДобавить в EdgeДобавить в Firefox