Здравствуй Хабр! А мы тут продолжаем цикл статей об OSINT и, самое главное, о полезных для этого нелегкого дела инструментах.
Сегодня мы разберем расширения для Google Chrome которые помогут нам собирать и анализировать данные из открытых источников, ну и в целом улучшат наш опыт проведения расследований.
DISCLAIMER: Данная статья написана в ознакомительных целях и не является руководством к неправомерным действиям или обучающим материалом для сокрытия правонарушений.
Поиск и маркировка данных
И начнем мы с поиска и обогащения и маркировки данных.
1. Vortimo OSINT-tool — расширение позволяет помечать текст на любой веб-странице и обогащать его собственными или внешними ресурсами или API. Очень удобно даже при простой работе в интернете, а уж про полезность в OSINT и говорить не приходится.
Сайт: https://www.vortimo.com/
2. Gotanda — это расширение веб-браузера для OSINT, которое позволяет вам искать информацию на веб-странице (IP, домен, URL-адрес, SNS и т. д.). Расширение оптимизировано для Японии, но достаточно хорошо работает и в российском сегменте сети.
3. Fast Advanced Google Search — интерфейс расширенных параметров поиска Google. Полезно не только в рамках OSINT.
Работа с соц. сетями
Теперь давайте рассмотрим несколько расширений для работы с социальными сетями, так как это очень важная часть OSINT расследования.
4. OSINT.support — это не одно, а целая коллекция расширений для OSINT, которые устанавливаются в режиме разработчика. Они предназначены по большей части для работы с Facebook. Также есть определение скрытых друзей, работа с идентификаторами, «парсинг» данных, SOCMINT и захват почты.
5. Treeverse — это расширение для навигации по разговорам в Твиттере. Все чаты удобно визуализированы в виде дерева.
Теперь, когда Twitter принадлежит Илону Маску, возможно, что в RU сегменте популярность этой соц. сети возрастет и расширение придется как раз к месту. Вообще на тему расширений для соц. сетей мы, наверное, сделаем отдельную статью…
Исследование изображений
Плавно перетекаем в исследование фотографий и изображений.
6. EXIF Viewer Pro — позволяет быстро исследовать метаданные фотографий, размещенных в Интернете. Это может помочь вам установить время и место съемки, тип камеры и настройки камеры, если таковые не были удалены.
7. InVID & WeVerify — Плагин был разработан для проверки фактов и новостей в социальных сетях, особенно при проверке видео и фотографий.
8. TinEye Reverse Image Search — поисковая система для поиска модифицированных изображений. Ищет не только «неповторимый оригинал», но и все его «жалкие пародии».
9. Search by Image — инструмент обратного поиска изображений с поддержкой различных поисковых систем, таких как Google, Bing, Yandex, Baidu и TinEye.
Мониторинг сайтов
Теперь давайте рассмотрим мониторинг сайтов.
10. Distill — расширение позволяет пассивно отслеживать изменения на социальных страницах и сайтах. Если они появятся, расширение отправит сообщение через SMS, электронную почту или уведомления.
Сохранение скришнотов сайта
Сохранение копий веб-страниц. Казалось бы, ну что может быть проще? А если нужно сделать скриншот всей страницы целиком, а не сохранять копию? Эти расширения вам в этом помогут.
11. FireShot — позволяет быстро сделать скриншот веб-страницы в полноэкранном режиме. Все скриншоты хранятся локально и не генерируют трафик. Более того, FireShot может работать автономно.
12. Nimbus Screenshot & Screen Video Recorder — еще одно расширение для создания скриншотов и видеозаписи веб-страниц.
Просмотр копий сайта
А теперь давайте поговорим о получении различных данных с архивных и не очень копий сайтов. Вы ведь не думали, что только Web Archive занимается подобным?
13. Go Back in Time — это расширение, позволяющее просматривать заархивированную версию веб-страницы. Источниками информации для него являются версии веб-страниц, закешированные поисковыми системами, и служба интернет-архива.
14. Wayback Machine — это расширение «его величества» Интернет-архива. Оно также позволяет просматривать заархивированную версию веб-страницы. Крайне незаменимая вещь в OSINT.
Парсеры данных на веб-страницах
А тут у нас расширения для сбора и систематизации данных, ну или как у нас в русских деревнях любят говорить – «парсеры»
15. Instant Data Scraper — это инструмент для автоматической очистки данных для любого веб-сайта. Он использует искусственный интеллект, чтобы предсказать, какие данные наиболее актуальны на HTML-странице, и позволяет сохранить их в файл Excel или CSV (XLS, XLSX, CSV).
16. Email extract — это расширение для поиска адресов электронной почты на посещаемых вами страницах. Просто и быстро. То, что порой и надо.
17. Hunter — это расширение для поиска адреса электронной почты на любом веб-сайте одним щелчком мыши, ну ладно, может и двумя...
Исследование сайтов
18. OSIRIS — это расширение для анализа репутации IoC. На вход он получает список IP-адресов, которые затем проверяет в таких сервисах, как Virustotal, Malwares, CISCO Talos, X-Force Exchange, AbuseIPDB, MXtoolbox.
19. Sputnik — это расширение для быстрого и удобного поиска IP-адресов, доменов, хэшей файлов и URL-адресов с использованием бесплатных ресурсов. Не путать с печально известным российским поисковиком.
https://github.com/mitchmoser/sputnik
20. IP Address and Domain Information — модуль отображает подробную информацию о текущем веб-сайте. Информация включает данные IP (IPv4 и IPv6): местоположение, DNS, данные whois, маршрутизацию, соседние домены и многое другое. Как и в случае с Hunter – просто и быстро.
Средства личной безопасности
Ну и самое, на мой взгляд, это аддоны для личной безопасности при проведении расследований, да и для повседневной жизни тоже.
21. NoScript — позволяет запускать JavaScript, Flash, Java и другой исполняемый контент только из доверенных доменов по вашему выбору. Кроме того, расширение защищает ваши «границы доверия» от атак межсайтового скриптинга (XSS), повторной привязки DNS между зонами/CSRF-атак (взлом маршрутизатора) и попыток Clickjacking. Работает по принципу белого списка. Сразу после установки будет запрещено ВСЕ и вы сами сможете задать границы доверия для каждого сайта.
22. HTTPS Everywhere — еще одно крайне полезное расширение, которое принудительно пытается для всех сайтов переключить вас на https версию сайта.
23. User-Agent Switcher and Manager — расширение заменяет User-Agent на сайтах, что позволяет подделывать цифровой отпечаток устройства исследователя, притворяясь смартфоном или iPad или вообще веб-камерой.
24. uBlock Origin – наверное, лучшее на сегодняшний день приложение для блокировки рекламы и трекеров в интернете. А для той рекламы, которая увернется от встроенных фильтров расширений, имеется возможность ручного выделения и удаления рекламных баннеров.
25. ClearURLs – приложение для срезания трекинговые метки из URL адресов. В результате ваша адресная строка будет выглядеть как https://example.com, а не как обычно https://example.com?utm_source=newsletter1&utm_medium=email&utm_campaign=sale...
Если у Вас есть какие-нибудь интересные на ваш взгляд расширения, то напишите в комментариях. Будет замечательно пополнить инструментарий.
Bonus. У меня, например, такое расширение – это блокировщик рекламы AdNauseam (https://adnauseam.io). В подборку он не вошел, так как хотел о нем рассказать отдельно. Его дополнительный функционал помимо просто блокировки рекламы – это переход по всем заблокированным ссылкам и порча ваших маркетинговых данных в различных системах (Google, Yandex, Amazon, Facebook …)
Концепт здесь прост – поскольку мы не можем запретить крупным компаниям собирать данные о нашей активности в интернете, то мы можем, как минимум, эти данные избыточно переобогащать, чтобы системы этих компаний не могли отличить, что мы искали: машины, квартиры, игровые кресла или перфоратор. Это очень важный этический аспект. О том, что такое ADINT и как за нами можно следить через рекламные идентификаторы, мы подробно рассказывали в статье: ЦРУ? ФСБ? Нет мой друг… Маркетологи. ADINT или как за тобой следят через рекламу
Ну вот и все на сегодня. Надеемся, что вы нашли для себя новые расширения для браузера, которые пригодятся вам не только в работе, но и просто в жизни.