Soft Snoop Project инструмент разведки на основе открытых данных (OSINT world)

Snoop Project один из самых перспективных OSINT-инструментов по поиску никнеймов.​

Snoop — это исследовательская работа (собственная база данных/закрытые багбаунти)
в области поиска и обработки публичных данных в сети интернет.
По части специализированного поиска Snoop способен конкурировать с традиционными поисковыми системами.

Сравнение индексаций БД-никнеймов подобных инструментов:

Платформы:

Платформа	Поддержка​
GNU/Linux	​
Windows 7/10 (32/64)	​
Android (Termux)	​
macOS	️​
IOS	​
WSL	​

Snoop Local database​

Snoop Full version database 2200+ websites ️️️

Релиз/Release​

snoop.exe (for Windows) and snoop (for GNU/Linux)
Download Snoop Project

Snoop поставляется готовыми сборками (релиз) и не требует зависимостей (библиотек) или установки python3, то есть работает на чистой машине с OS Windows или GNU/Linux.

Также имеется полная поддержка Android:​

Больше информации в репозитории и

Ссылка скрыта от гостей

.​

Способы поддержать проект:

Ссылка скрыта от гостей

Ссылка скрыта от гостей

Ссылка скрыта от гостей

 

[Сергей Попов]

Через неделю исполняется 2 года проекту. В течение след. недели скидка 50% на full версию по промокоду "codeby2022".

Еще бы ссылку на покупку

 

[MLNK]

Еще бы ссылку на покупку

Через неделю исполняется 2 года проекту. В течение след. недели скидка 50% на full версию по промокоду "codeby2022".

Плюсую добавить ссылку на покупку. С ценой и коротким мануалом по активации платной версии.

 

[Snoop007]

Еще бы ссылку на покупку

Из любой демо версии, например, на windows:
snoop.exe --donate #откроется браузер с сылками на покупку/пожертвование и офертой.

Инфоомация так же доступна/продублирована в ПО, snoop.exe --help. В документации и лицензии.

 

[SearcherSlava]

Любители OSINT'а, здравы будьте!
ИБезопасность проверить не забудьте.

Ар Кар Мьо. Исследование и разработка методов и программных средств интеллектуального анализа данных на основе прецедентов.

Богомолова Е.И. Взаимосвязь личностных характеристик с особенностями активности пользователей социальных сетей Интернета.

Бессонова Е.Е. Метод идентификации пользователей в сети Интернет с использованием компонентного профиля.

Браницкий А.А. Обнаружение аномальных сетевых соединений на основе гибридизации методов вычислительного интеллекта.

Воробьева А.А. Методика идентификации Интернет-пользователя на основе стилистических и лингвистических характеристик коротких электронных сообщений.

Любарский С.Н. Анализ пользовательских данных с целью использования его результатов в коммерческих целях.

Закаблуковский Е.В. Виртуальные сетевые сообщества: философско-антропологический анализ.

Мартьянов Е.А. Исследование и разработка методик оценки защищенности информационных объектов от потенциальных нарушителей.

Ушаков И.А. Обнаружение инсайдеров в компьютерных сетях на основе комбинирования экспертных правил, методов машинного обучения и больших данных.

Царев Д.В. Методы и программные средства анализа поведения пользователей при работе с текстовыми данными для решения задач информационной безопасности.

Чесноков В.О. Алгоритмическое и программное обеспечение анализа графов ближайшего окружения для выявления ботов и определения неуказанных атрибутов пользователей в онлайновых социальных сетях.

Люди давно стали товаром на бирже, где продаются услуги, посредством оцифровывания личных данных.

 

[Vertigo]

Любители OSINT'а, здравы будьте!

Просто рад тебя видеть ,Бро. Спасибо за советы.

 

[SearcherSlava]

Просто рад тебя видеть ,Бро. Спасибо за советы.

Взаимно здрав будь, Бро! Как всегда, несешь в мир добро.

Буквари, из которых можно кое-что почерпнуть на тему предиктива & прескриптива, заодно пополнить багаж знаний, ведь инструмент универсальный, а направление перспективно.

 

[Snoop007]

Snoop обновление: v1.3.7

* Расширена поисковая web-base Snoop до 2700 сайтов.

* Android. Ускорен поиск snoop на Termux ~ на 200%
(требуется обновление Termux и обновление Python до версии 3.11, либо установка пропатченного python 3.7-3.10 из
tur-repo, в крайнем случае сохранена обратная совместимость и небыстрый поиск).

* Android. [Из-за специфичной локали в Termux] если пользователь ищет ник, например, на кириллице,
то лишь в html результатах ник будет переименован, как 'nickname_ч_м_г_время', мера необходима для корректного
автооткрытия результатов поиска в вэб-браузере, txt/csv отчёты не затронуты.

* Переработана и улучшена интеллектуальная логика поиска. Snoop в большинстве случаев не делает повторные запросы
на зацензурированные ресурсы внешней стороной или внутренним регулятором
(экономия времени при поиске, в противном случае, ресурсы были бы потрачены впустую, актуально в Full-версиях).

* Улучшено детектирование трёх групп сайтов
(1. исключаются ошибки ложного сраб. при поиске, если проблемы с серверами или они на ТО, затрагивает ~50% БД snoop.
2. Больше результатов при поиске на сайтах, которые давно заброшены или имеют проблемы с безопасностью.
3. Расширен формат БД Snoop для манипуляций с редкими проблемными кодировками/сайтами, например, когда сервер
возвращает/не возвращает одну кодировку, а в тегах присутствует другая).

* Исправлен подсчёт % Bad_raw при любых манипуляциях с БД Snoop, а также учитывааются сайты из Dynamic gray_list
(дефолтная локальная БД; скачанная БД; синхронизированная онлайн БД; сокращённые БД с ключами '-s', '-i', '-e').

* Добавлена проверка опечаток: nickname не может быть короче 2-х символов
(если пользователь опечатался '-s', например, при наборе ключа $ snoop_cli - s ebay username, поведение ранее
вызвало бы поиск сразу чётырёх nickname(s) по всей БД snoop:: '-', 's', 'ebay' , 'username' вместо поиска
одного username на одном указанном ресурсе — ebay.com).

* Добавлена новая опция поиска: режим '--quick', которая ускоряет общий поиск
(подробнее о новом режиме поиска в '--help', quick-режим актуален для Full-версий, при слабых мощностях, OS Windows).

* Переработана кодовая база некоторых частей ПО, в проекте стало меньше сторонних lib-зависимостей.

* Косметические изменения в ПО
(удалена опция 'Normal'; переименована опция "one-level" в "include"; опция удаления отчетов теперь выводит баннер и
запрашивает подтверждение на удаление; логгирование low/high ошибок стало более информативным;
расширен блок snoop-info; при поиске nickname и получения ошибок в CLI, связанных с Internet Censorship/ssl,
справа от ресурса появляется буквенный код страны, например, если у пользователей из РФ-локации очень часто возникают
ошибки на UA-ресурсах, это значит, что "слон в комнате"; поддержать проект теперь можно и с помощью QIWI;
поправлены print-опечатки и смысловые конструкции).

 

[Сергей Попов]

Большая часть юзеров использует тёмный стиль форума. Синий шрифт сливается с фоном. Исправил шрифт по умолчанию

 

[Snoop007]

Snoop обновление: v1.3.8

* Расширена поисковая web-base Snoop ↑ 3000+ сайтов.

* Исправлены баги в редких случаях:
1) поиск nickname с опцией сохранения отчетов 'snoop_cli -S username', если при поиске на "плохом" ресурсе username найдено,
но на сервере указана несуществующая кодировка или кодировка с опечаткой, то при сохранении страницы она ломала автоопределение
кодировки в snoop;
2) при поиске nickname мультипроцессинг на Snoop for GNU/Linux full версии мог и крашился
(почти невозможно было воспроизвести проблему, спасибо за отчёты подписчику Snoop full версии из Сербии).

* Расширен шаблон запрещённых символов при поиске nickname, например, китайский алфавит и др. символы, отличные от латиницы, кириллицы, цифр, некоторых спец.символов — теперь недозволен.

* При использовании опции '-u/userlist' (загрузка nickname(s) из файла) в cli-отчёт добавлена промежуточная таблица: short nickname(s)
(также файл 'bad_nicknames.txt' обновляется если не только в CLI были введены 'неправильные' nickname, но и выгружены из файла:
формат 'bad_nicknames.txt' выглядит следующим образом:: дата/время/неправильный nickname из файла/или из CLI/bad_username.

* Яндекс присоединился к интернет-цензуре и теперь письма с его домена не отправляются в международную почтовую службу 'protonmail'
(для пользователей зарегистрированных в 'яндекс/mailru', которые ранее не могли связаться с разработчиком по электронке, в оферу
и документацию Snoop добавлена дополнительная нецензурируемая почта для запросов и предложений).

* Изменены условия предоставления Snoop full версии для студентов: скидка на ПО составляет теперь 50%, ранее подписка стоила 0р
(также обновлены реквизиты сберкарты).

* Добавлены Readme на Испанском; Китайском; Французском и Немецком языках.

 

[Snoop007]

Snoop обновление: v1.3.9
* Расширена поисковая web-base Snoop ↑ 3500 сайтов.

* Исправлена утечка памяти, которая затрагивала пользователей Snoop version for Windows.

* Исправлено падение Snoop при сохранении отчетов с опцией "--save-page/-S" в крайне-редких случаях
(например, если сайты намеренно вредили парсингу или в своём исходном коде содержали неподдерживаемые символы в заявленной кодировке.
За отчёт спасибо подписчику из Сербии, ранее он уже присылал информацию по найденным багам).

* В режим вербализации опция "--verbose/-v" добавлена новая метрика: отслеживания доступной/потребляемой памяти RAM.

* Ускорен вывод на печать сайтов из "dynamic gray list" и недопустимые/кириллица "nickname(s)" на определенных сайтах
(оптимизация актуальна для пользователей Snoop for Windows full версий).

* В ПО Snoop Project добавлена пасхалка, связанная с поиском особых nickname(s).

* Спрятаны редко-используемые опции из help-a: "--cert/-C" и "Headers/-H" чтобы не загромождать справку
(опции продолжают работать если их задействовать, описание ключей осталось в документации и readme).

* Во все отчёты добавлен "copyright".

* Слиты ветки "snoop_termux" и "master", немного изменилась инструкция по установке Snoop на Android/Termux
(код синхронизирован, экономия дискового пространства и упрощение дальнейшей разработки/поддержки кодовой базы.
Для получения обновлений из "source code" пользователи Snoop for OS Android/Termux должны сделать
"git checkout master" или "git clone" по-новому).

* Объединены флаги государств Kb/WR
(WR — означает весь мир. Kb — ранее означало "киберпанки", обычно это форумы где общение проходит на EN-языке,
но в условиях использования или политике конфиденциальности/обратной связи не указана локация).

* Обновлена документация.

* Мелкие визуальные улучшения.

 

[Snoop007]

Snoop обновление: v1.4.0
* Расширена поисковая web-base Snoop ↑ 3700+ сайтов.

* Ускорен поиск в Snoop for GNU/Linux ~ на 140% т.е. почти в 2.5 раза!
(при скорости интернет соединения не менее 12 Мбит/с поиск 'username', используя БД Snoop full версии, в quick-режиме '--quick/-q' длится менее 1-й минуты).

* Ускорен запуск Snoop Project build version на старых ПК с OS Windows/HDD.

* Добавлен новый и умный алгоритм автоопределения явно не указанных/проблемных перепутанных кодировок сайтов
при поиске в различных режимах.

* Добавлено больше информативности в CLI при поиске по сокращенной БД, используя опции фильтры: '--site/--exclude/--include'
(кол-во веб сайтов при сужении поиска отображается в квадратных скобках справа от общего кол-ва сайтов БД).

* Изменен порог оповещения о Bad_raw: поднят c 2% до 2.5%.

* Форматирование. Улучшено стилизирование инфострок в CLI на небольших/сжатых по размеру терминалах, например, в CLI Termux на Android
(добавлены авто отступы строк с учетом пользовательского CLI-окружения). Переработан внешний вид премиальных предложений,
которые действуют для всех пользователей Snoop full version.

* Обновлен HTML-репорт:
1) изменены стили кнопок;
2) добавлена подсветка, увеличение строки из списка websites при наведении курсора, двигаясь по списку при выборе ресурса сложно теперь промахнуться;
3) удалена дублирующая строка/тавтология о том, на скольких ресурсах найден 'username';
4) в Snoop demo version добавлена парочка упоминаний об использовании demo версий/просьба о пожертвовании на развитие проекта/full;
5) увеличена визуальная составляющая группировки флагов стран;
6) добавлено отображение title(s) саундтреков при наведении на них курсора.

* Исправлено автотестирование сети в режиме вербализации '--verbose/-v' в случае, когда тесты иногда проваливались из-за отказа
некоторых серверов принимать соединение по незащищенному каналу.

* Во всех версиях Snoop убран звук из CLI
(звуковые оповещения об ошибках и об окончании поиска).

* К Snoop full version добавлены light сборки, позволяющие запукать ПО почти мгновенно.

* Android. Немного ускорен поиск в режиме вербализации.

* Android. Если пользователь предпочитает открывать html-отчеты вручную и из своего GUI ФМ, то теперь подтягиваются и все стили.

* Обновлены плагины 'GEO_IP/domain' и 'ReverseVgeocoder' до новых версий. Расширена визуализация данных в html-отчетах в Snoop full версиях, в частности добавлены:
1) чекбокс фильтрации данных по странам;
2) графики со статистикой по странам, регионам, объектам, провайдерам;
3) новый слой — топокарты, меняется по клику/свайпу;
4) режим переключения в полный экран;
5) авто отображение координат в любой точке на карте;
6) масштаб линейки;
7) памятка, отображающая статистику по InvalidData;
8) copyright;
9) поиск;
10) в плагине 'ReverseVgeocoder' увеличен масштаб покрытия/точности от 10-100 раз по округам/объектам в RU; EU и CIS локациях.


! Для того чтобы воспользоваться всеми обновлениями, если ранее пользователь уже пользовался старыми сборками Snoop, то нужно сбросить кэш (разовая операция):

snoop_cli --autoclean

если пользователь предпочитал использовать Snoop в исходной форме, обновить библиотеки:

cd ~/snoop && python3 -m pip install -r requirements_android.txt  #Android;
cd ~/snoop && python3 -m pip install -r requirements.txt  #Desktop.

 

[Snoop007]

Посмотреть вложение 4 years.gif

0KHQsNC80L7QuSDQvNCw0YHRiNGC0LDQsdC90L7QuSDQv9C+0LjRgdC60L7QstC+0Lkg0YHQuNGB
0YLQtdC80LUg0LIg0LzQuNGA0LUgU25vb3AgUHJvamVjdCDQsiDRjdGC0L7QvCDQvNC10YHRj9GG
0LUg0LjRgdC/0L7Qu9C90Y/QtdGC0YHRjyA0INCz0L7QtNCwLiDQkiDRh9C10YHRgtGMINGC0LDQ
utC+0LPQviDRgdC+0LHRi9GC0LjRjyDRgdC60LjQtNC60LAg0L3QsCDQn9CeIFNub29wIGZ1bGwg
dmVyc2lvbiA1MCUg0LLRgdC10Lwg0YHQvtC+0LHRgNCw0LfQuNGC0LXQu9GM0L3Ri9C8INC/0L7Q
u9GM0LfQvtCy0LDRgtC10LvRj9C8IENvZGVieSDQtNC+INC60L7QvdGG0LAg0YTQtdCy0YDQsNC7
0Y8gMjAyNNCzLiDQn9GA0L7QvNC+0LrQvtC0IOKAlCAnY29kZWJ5X3Nub29wMjAyNCcK

 

[Snoop007]

Snoop обновление: v1.4.1
* Расширена поисковая web-base Snoop ↑ 4200+ сайтов
(с момента последнего релиза в БД было добавлено 500 вебсайтов).

* Улучшен алгоритм агрессивного режима поиска: опция "--quick/-q" в Snoop for Windows.
(ускорение поиска составляет от 5% до 200% в зависимости от версии Windows и производительности ПК, снижено потребление ОЗУ).

* В snoop full version добавлена новая опция: '--pool/-p': отключить автооптимизацию и задать вручную ускорение поиска
(эта опция персональна и способна разогнать поиск в Snoop full version до высоких скоростей).

* В блок 'snoop info' опции '--version/-V' добавлен предварительно расчетный параметр. "Recommended pool".

* Исправлена дозапись "bad_username's" в файл "bad_nicknames.txt"
(snoop мог иногда путаться откуда считывал невалидные username's из файла или CLI).

* Обновлен формат дат в CLI/отчетах согласно международному стандарту ISO 8601
(гг-м-д).

 

[Snoop007]

Snoop обновление: v1.4.2
* Расширена поисковая web-base Snoop ↑ 4700+ сайтов.

* Исправлен подсчет bad_raw в случае, когда был задан поиск по множеству username's из CLI или с опцией
'--userlist/-u', среди которых попадался невалидный nick в комбинациях: например, один из username's
короче 3-х символов, номер телефона, кириллический или из спецсимволов, где ПО его отфильтровывает,
но позже на том же ресурсе принимался следующий, валидный username
(при превышении bad_raw 2.5% параметр не рассчитывался, теперь подобные варианты просчитываются).

* Нетривиальное использование HTTP библиотек позволило на Snoop for Windows оптимизировать утилизацию
ресурсов CPU, прирост производительности к скорости поиска на длинной дистанции составил ~20-25%.

* Немного повышена эффективность повторных запросов при неудачных попытках соединения.

* Оптимизирован алгоритм автоскорости поиска утилиты на слабых одноядерных VPS и мощных многоядерных ЭВМ с
OS GNU/Linux. Также изменены ограничения верхнего предела утилизации ресурсов ЭВМ при разгоне поиска вручную:
на OS GNU/Linux, Android/Termux — планка поднята, на OS Windows — планка опущена.

* Ускорена работа ПО в режиме '--save-page/-S': поиск и сохранение локальных HTML-страничек.

* На OS GNU/Linux и Android/Termux прерывание работы софта с безопасным высвобождением ресурсов немного
ускорено и составляет менее 1 сек. (Ctrl +c).

* На Snoop for Android/Termux добавлено оповещение о недоступности диска и предложение: что бы Snoop Project
автоматически исправил ошибку доступа к общедоступному каталогу в OS Android "/storage/emulated/0/snoop/*"
(Если пользователь новичок устанавливал Termux впервые и собирал Snoop из исходного кода, не читая инструкцию,
т.е. пропуская шаги, то Snoop автоматически не мог создавать общедоступный каталог для результатов поиска и
открывать data за пределами Termux, issue_95, issue_96, issue_97.

* Изменен нижний порог с 2.5% до 2% при срабатывании оповещений Bad_raw. Также при превышении bad_raw 2%
в CLI Snoop full version добавлена пример-подсказка с предложением изменить поиск, минуя сбойные ресурсы.

* В CLI Snoop demo version добавлено оповещение о том, как можно получить Snoop full version без чтения справки.

* В CLI и csv отчеты добавлен "плавающий" параметр bad_zone — главные одна/две геолокации,
в которых чаще всего происходят ошибки соединения в основном из-за интернет цензуры.

* В txt отчёте улучшено форматирование столбцов, сделан реверс данных: "Адрес | Ресурс" и добавлен параметр "Гео".
В html отчёте усилена визуализация разбивки по странам/скобки. В csv отчёте заменен столбец "username"
на строку "Nick", добавлен параметр отслеживания сайтов со статусом: "завис"
(редкое явление, когда какой-нибудь ресурс временно подвисает:
подавляет выставленные лимиты в т.ч. и на низком уровне redirect/timeout запросов, подольше удерживая ресурсы ЭВМ).

* В HTML-отчете изменена функция кнопки, которая ранее вела на страницу донатов Юмани
(кнопка теперь генерирует HTML: Donate/Buy с методами поддержки проекта в т.ч. и QR-кодом).

* Функции: удаление кэша, обновление ПО, проверка БД — зациклены
(при взаимодействии с ними и неверном выборе/опечатке происходит не выход из программы,
а повторный запрос на ввод с подсказкой).

* Уменьшена зависимость от кол-ва сторонних библиотек в Snoop demo version:
убран плагин с частичным функционалом "Reverse Vgeocoder".
(Унифицирован способ самостоятельной сборки Snoop for Android/Termux & Desktop, т.е. синхронизированы зависимости
между Snoop for Termux и Snoop for Desktop. Ускорены: сборка проекта из исходного кода и запуск Snoop build версии).

* На Snoop full version for Windows по окончанию поиска добавлена ненавязчивая, по событиям,
подсказка про оптимизацию скорости поиска.

* В CLI добавлено оповещение и рекомендация, как исправить/улучшить работу утилиты, если пользователь собрал Snoop
из исходного кода, но при сборке пренебрег инструкциями/документацией
(при этом ПО не прерывает работу, оповещает пользователя и переключается в режиме совместимости, например,
если используются устаревшие версии HTTP библиотек/API и c прекратившим жизненный цикл Python 3.7).

* В блок 'snoop info', секция 'Recommended pool', опция '--version/-v' добавлены ~расчеты по требованиям к ресурсам ЭВМ
для нормальной работы ПО в любых конфигурациях при его разгоне вручную на разных OS.

* Незначительные визуальные изменения в CLI.

* Проведено агрессивное сжатие репозитория. Сохранен полный бэкап истории.
Пользователи, собирающие, обновляющие Snoop из исходного кода, должны сделать 'git clone' по-новому.

Релиз