Статья The Harvester

Привет! В этой статье я покажу очередной инструмент, который поможет собрать информацию о целевом объекте, перед началом тестирования на проникновение.

upload_2016-10-12_22-28-3.png


Утилита называется theHarvester – по словам разработчиков, она является универсальным инструментом для сбора учетных записей, электронной почты, имена субдоменов, виртуальных хостов, открытых портов, баннеров и имен сотрудников из различных общедоступных источников (поисковые системы, ключевые серверы PGP)

Инструмент достаточно прост, но в то же время достаточно эффективен на ранних стадиях тестирования. Так же его можно использовать для того, чтобы посмотреть, как много о вашей компании можно узнать в интернете.

Список изменений в версии v2.7 11/10/2016 (взято с сайта разработчиков):

· Discovery: Fixed PGP keyserver search.

· Added missing search engines, fixed search engine handling.

· Fixed email parser for cleaner results. Thanks Th4nat0s

· Improved XML exporting file format

· Removed 123people

· Fixed Bing cookies order

Зависимости:

· Python 2.7.x


· Необходима библиотека ( ) > pip install

Пассивные:

· google: google поисковая система –

· googleCSE:
google система пользовательского поиска

· google-profiles:
google поиск конкретных профилей пользователей Google

· bing: microsoft поисковая система –

· bingapi: microsoft поисковая система, с помощью API (вы должны добавить свой API ключ в поиск /bingsearch.py)

· dogpile: Dogpile поисковая система –

· pgp: сервер ключей PGP – mit.edu

· linkedin: google поисковая система, специализированный поиск для пользователей Linkedin

· vhost: Bing поиск виртуальных хостов

· twitter: twitter аккаунты связаны с интересующим доменом (использует google поиск)

· googleplus:
пользователи работающие в целевой компании (использует google поиск)

· yahoo:
Yahoo поисковая система

· baidu:
Baidu поисковая система

· shodan: Shodan Computer поисковая система, будет искать открытые порты и баннеры обнаруженных хостов ( )


Активные:

· DNS brute force: этот плагин позволит запустить перебор по словарю

· DNS reverse lookup: обратный поиск имен хостов, по найденным адресам

· DNS TDL expansion:
TLD словарь для брутфорса

Модули, которым необходим API ключ для работы:

· googleCSE:
Необходимо создать Google Custom Search engine(CSE), и добавить свой

Google API key и CSE ID в плагин (discovery/googleCSE.py)

· shodan:
Необходимо добавить свой API key в discovery/shodansearch.py

Теперь установим его себе и запустим:

> git clone http://github.com/laramies/theHarvester

> cd theHarvester

> chmod a+x theHarvester.py

> ./theHarvester.py

upload_2016-10-12_22-29-35.png

upload_2016-10-12_22-29-46.png


Я полагаю не нужно вдаваться в подробности об опциях использования программы т.к. все видно и предельно ясно. Во всяком случае, вопросы жду в комментариях.

Еще добавлю, что запуск программы с опциями:

> theHarvester.py –d mycompany.com –l 500 –b all –s 300

в отношении компании, о структуре которой, я знаю практически все, дал довольно обширные результаты:

· Мэйлы сотрудников

· Виртуальные хосты


И еще много всякого, обладая такой информацией можно более гибко подойти к разработке стратегии тестирования на проникновение, а так же представить себе более отчетливо архитектуру цели. В целом рекомендую к использованию.
 

z3RoTooL

Grey Team
28.02.2016
803
697
BIT
9
у меня почему-то харвестер только первый раз собирает почты, а потом всё... не хочет. Я попозже тему сделаю с ещё одним интересным способом
 
  • Нравится
Реакции: Vander
T

tagerSU

у меня почему-то харвестер только первый раз собирает почты, а потом всё... не хочет!!!! В чем может быть загвоздка?
 

dandu

Green Team
19.10.2016
21
4
BIT
0
почему то после набора команды theHarvester.py –d domain.com –l 500 –b all –s 300 у меня сообщает что command not found
 

dandu

Green Team
19.10.2016
21
4
BIT
0
виноват бразэ, я не спец, тока начинаю, ща попробую
 
P

petyaorvasya

*******************************************************************
* *
* | |_| |__ ___ /\ /\__ _ _ ____ _____ ___| |_ ___ _ __ *
* | __| '_ \ / _ \ / /_/ / _` | '__\ \ / / _ \/ __| __/ _ \ '__| *
* | |_| | | | __/ / __ / (_| | | \ V / __/\__ \ || __/ | *
* \__|_| |_|\___| \/ /_/ \__,_|_| \_/ \___||___/\__\___|_| *
* *
* TheHarvester Ver. 2.7 *
* Coded by Christian Martorella *
* Edge-Security Research *
* cmartorella@edge-security.com *
*******************************************************************

Запускаю команду она банер просто выдаёт
 

Elektrolife

Green Team
21.10.2016
208
33
BIT
23
*******************************************************************
* *
* | |_| |__ ___ /\ /\__ _ _ ____ _____ ___| |_ ___ _ __ *
* | __| '_ \ / _ \ / /_/ / _` | '__\ \ / / _ \/ __| __/ _ \ '__| *
* | |_| | | | __/ / __ / (_| | | \ V / __/\__ \ || __/ | *
* \__|_| |_|\___| \/ /_/ \__,_|_| \_/ \___||___/\__\___|_| *
* *
* TheHarvester Ver. 2.7 *
* Coded by Christian Martorella *
* Edge-Security Research *
* cmartorella@edge-security.com *
*******************************************************************

Запускаю команду она банер просто выдаёт


Укажите ключи запуска. Я когда тестировал данную софтину,она почему то работала только на сбор ящиков
 

Elektrolife

Green Team
21.10.2016
208
33
BIT
23
Что то у меня тоже перестал работать ((

Подкиньте что нибудь аналогичное. Недавно натыкался,теперь найти не могу
 
L

Licht

о каком API идет речь? как исправить эту проблему? не хочет ничего выдавать вообще
31548
 
  • Нравится
Реакции: HomoSapiens

wolcha

One Level
11.03.2020
5
2
BIT
0
о каком API идет речь? как исправить эту проблему? не хочет ничего выдавать вообще
Посмотреть вложение 31548
Если ещё актуально, то в папке с программой есть файл api-keys.yaml И в нём сказано какие ключи нужны (их просто в этот файл нужно вписать)
 
  • Нравится
Реакции: Vander
Мы в соцсетях:

Обучение наступательной кибербезопасности в игровой форме. Начать игру!