Прежде чем перейти к статье, хочу вам представить, экономическую онлайн игру Brave Knights, в которой вы можете играть и зарабатывать. Регистируйтесь, играйте и зарабатывайте!
Здравствуй Хабр! А мы тут продолжаем цикл статей об OSINT и, самое главное, о полезных для этого нелегкого дела инструментах.
Сегодня мы разберем расширения для Google Chrome которые помогут нам собирать и анализировать данные из открытых источников, ну и в целом улучшат наш опыт проведения расследований.
DISCLAIMER: Данная статья написана в ознакомительных целях и не является руководством к неправомерным действиям или обучающим материалом для сокрытия правонарушений.
ПОИСК И МАРКИРОВКА ДАННЫХ
И начнем мы с поиска и обогащения и маркировки данных.
1. Vortimo OSINT-tool — расширение позволяет помечать текст на любой веб-странице и обогащать его собственными или внешними ресурсами или API. Очень удобно даже при простой работе в интернете, а уж про полезность в OSINT и говорить не приходится.
Ссылка: https://chrome.google.com/webstore/detail/vortimo-osint-tool/mnakbpdnkedaegeiaoakkjafhoidklnf
Сайт: https://www.vortimo.com/
2. Gotanda — это расширение веб-браузера для OSINT, которое позволяет вам искать информацию на веб-странице (IP, домен, URL-адрес, SNS и т. д.). Расширение оптимизировано для Японии, но достаточно хорошо работает и в российском сегменте сети.
Ссылка: https://chrome.google.com/webstore/detail/gotanda/jbmdcdfnnpenkgliplbglfpninigbiml
3. Fast Advanced Google Search — интерфейс расширенных параметров поиска Google. Полезно не только в рамках OSINT.
Ссылка: https://chrome.google.com/webstore/detail/fast-advanced-google-sear/idijdjdcncjcgmeiipcnkpjedhgepalk
РАБОТА С СОЦ. СЕТЯМИ
Теперь давайте рассмотрим несколько расширений для работы с социальными сетями, так как это очень важная часть OSINT расследования.
4. OSINT.support — это не одно, а целая коллекция расширений для OSINT, которые устанавливаются в режиме разработчика. Они предназначены, по большей части, для работы с Facebook. Также есть определение скрытых друзей, работа с идентификаторами, «парсинг» данных, SOCMINT и захват почты.
Ссылка: https://osint.support/chrome-extensions/
5. Treeverse — это расширение для навигации по разговорам в Твиттере. Все чаты удобно визуализированы в виде дерева.
Ссылка: https://chrome.google.com/webstore/detail/treeverse/aahmjdadniahaicebomlagekkcnlcila?hl=en
Теперь, когда Twitter принадлежит Илону Маску, возможно, что в RU сегменте популярность этой соц. сети возрастет и расширение придется как раз к месту. Вообще на тему расширений для соц. сетей мы, наверное, сделаем отдельную статью…
ИССЛЕДОВАНИЕ ИЗОБРАЖЕНИЙ
Плавно перетекаем в исследование фотографий и изображений.
6. EXIF Viewer Pro — позволяет быстро исследовать метаданные фотографий, размещенных в Интернете. Это может помочь вам установить время и место съемки, тип камеры и настройки камеры, если таковые не были удалены.
Ссылка: https://chrome.google.com/webstore/detail/exif-viewer-pro/mmbhfeiddhndihdjeganjggkmjapkffm
7. InVID & WeVerify — Плагин был разработан для проверки фактов и новостей в социальных сетях, особенно при проверке видео и фотографий.
Ссылка: https://chrome.google.com/webstore/detail/fake-news-debunker-by-inv/mhccpoafgdgbhnjfhkcmgknndkeenfhe?hl=en
8. TinEye Reverse Image Search — поисковая система для поиска модифицированных изображений. Ищет не только «неповторимый оригинал», но и все его «жалкие пародии».
Ссылка: https://chrome.google.com/webstore/detail/tineye-reverse-image-sear/haebnnbpedcbhciplfhjjkbafijpncjl
9. Search by Image — инструмент обратного поиска изображений с поддержкой различных поисковых систем, таких как Google, Bing, Yandex, Baidu и TinEye.
Ссылка: https://chrome.google.com/webstore/detail/search-by-image/cnojnbdhbhnkbcieeekonklommdnndci
МОНИТОРИНГ САЙТОВ
Теперь давайте рассмотрим мониторинг сайтов.
10. Distill — расширение позволяет пассивно отслеживать изменения на социальных страницах и сайтах. Если они появятся, расширение отправит сообщение через SMS, электронную почту или уведомления.
Ссылка: https://chrome.google.com/webstore/detail/distill-web-monitor/inlikjemeeknofckkjolnjbpehgadgge?hl=en-US
СОХРАНЕНИЕ СКРИШНОТОВ САЙТА
Сохранение копий веб-страниц. Казалось бы, ну что может быть проще? А если нужно сделать скриншот всей страницы целиком, а не сохранять копию? Эти расширения вам в этом помогут.
11. FireShot — позволяет быстро сделать скриншот веб-страницы в полноэкранном режиме. Все скриншоты хранятся локально и не генерируют трафик. Более того, FireShot может работать автономно.
Ссылка: https://chrome.google.com/webstore/detail/take-webpage-screenshots/mcbpblocgmgfnpjjppndjkmgjaogfceg?hl=en-US
12. Nimbus Screenshot & Screen Video Recorder — еще одно расширение для создания скриншотов и видеозаписи веб-страниц.
Ссылка: https://chrome.google.com/webstore/detail/nimbus-screenshot-screen/bpconcjcammlapcogcnnelfmaeghhagj
ПРОСМОТР КОПИЙ САЙТА
А теперь давайте поговорим о получении различных данных с архивных и не очень копий сайтов. Вы ведь не думали, что только Web Archive занимается подобным?
13. Go Back in Time — это расширение, позволяющее просматривать заархивированную версию веб-страницы. Источниками информации для него являются версии веб-страниц, закешированные поисковыми системами, и служба интернет-архива.
Ссылка: https://chrome.google.com/webstore/detail/go-back-in-time/hgdahcpipmgehmaaankiglanlgljlakj
14. Wayback Machine — это расширение «его величества» Интернет-архива. Оно также позволяет просматривать заархивированную версию веб-страницы. Крайне незаменимая вещь в OSINT.
Ссылка: https://chrome.google.com/webstore/detail/wayback-machine/fpnmgdkabkmnadcjpehmlllkndpkmiak
ПАРСЕРЫ ДАННЫХ НА ВЕБ-СТРАНИЦАХ
А тут у нас расширения для сбора и систематизации данных, ну или как у нас в русских деревнях любят говорить – «парсеры»
15. Instant Data Scraper — это инструмент для автоматической очистки данных для любого веб-сайта. Он использует искусственный интеллект, чтобы предсказать, какие данные наиболее актуальны на HTML-странице, и позволяет сохранить их в файл Excel или CSV (XLS, XLSX, CSV).
Ссылка: https://chrome.google.com/webstore/detail/instant-data-scraper/ofaokhiedipichpaobibbnahnkdoiiah
16. Email extract — это расширение для поиска адресов электронной почты на посещаемых вами страницах. Просто и быстро. То, что порой и надо.
Ссылка: https://chrome.google.com/webstore/detail/email-extract/ejecpjcajdpbjbmlcojcohgenjngflac
17. Hunter — это расширение для поиска адреса электронной почты на любом веб-сайте одним щелчком мыши, ну ладно, может и двумя...
Ссылка: https://chrome.google.com/webstore/detail/hunter-email-finder-exten/hgmhmanijnjhaffoampdlllchpolkdnj
ИССЛЕДОВАНИЕ САЙТОВ
18. OSIRIS — это расширение для анализа репутации IoC. На вход он получает список IP-адресов, которые затем проверяет в таких сервисах, как Virustotal, Malwares, CISCO Talos, X-Force Exchange, AbuseIPDB, MXtoolbox.
Ссылка: https://chrome.google.com/webstore/detail/osiris-osint-reputation-i/jjdjccppehnjdennppcnlnaadcdlffdf
19. Sputnik — это расширение для быстрого и удобного поиска IP-адресов, доменов, хэшей файлов и URL-адресов с использованием бесплатных ресурсов. Не путать с печально известным российским поисковиком.
Ссылка: https://chrome.google.com/webstore/detail/sputnik/manapjdamopgbpimgojkccikaabhmocd
https://github.com/mitchmoser/sputnik
20. IP Address and Domain Information — модуль отображает подробную информацию о текущем веб-сайте. Информация включает данные IP (IPv4 и IPv6): местоположение, DNS, данные whois, маршрутизацию, соседние домены и многое другое. Как и в случае с Hunter – просто и быстро.
Ссылка: https://chrome.google.com/webstore/detail/ip-address-and-domain-inf/lhgkegeccnckoiliokondpaaalbhafoa
СРЕДСТВА ЛИЧНОЙ БЕЗОПАСНОСТИ
Ну и самое, на мой взгляд, это аддоны для личной безопасности при проведении расследований, да и для повседневной жизни тоже.
21. NoScript — позволяет запускать JavaScript, Flash, Java и другой исполняемый контент только из доверенных доменов по вашему выбору. Кроме того, расширение защищает ваши «границы доверия» от атак межсайтового скриптинга (XSS), повторной привязки DNS между зонами/CSRF-атак (взлом маршрутизатора) и попыток Clickjacking. Работает по принципу белого списка. Сразу после установки будет запрещено ВСЕ и вы сами сможете задать границы доверия для каждого сайта.
Ссылка:
https://chrome.google.com/webstore/detail/noscript/doojmbjmlfjjnbmnoijecmcbfeoakpjm/}
22. HTTPS Everywhere — еще одно крайне полезное расширение, которое принудительно пытается для всех сайтов переключить вас на https версию сайта.
Ссылка:
https://chrome.google.com/webstore/detail/https-everywhere/gcbommkclmclpchllfjekcdonpmejbdp
23. User-Agent Switcher and Manager — расширение заменяет User-Agent на сайтах, что позволяет подделывать цифровой отпечаток устройства исследователя, притворяясь смартфоном или iPad или вообще веб-камерой.
Ссылка: https://chrome.google.com/webstore/detail/user-agent-switcher-and-m/bhchdcejhohfmigjafbampogmaanbfkg
24. uBlock Origin – наверное, лучшее на сегодняшний день приложение для блокировки рекламы и трекеров в интернете. А для той рекламы, которая увернется от встроенных фильтров расширений, имеется возможность ручного выделения и удаления рекламных баннеров.
Ссылка: https://chrome.google.com/webstore/detail/ublock-origin/cjpalhdlnbpafiamejdnhcphjbkeiagm
25. ClearURLs – приложение для срезания трекинговые метки из URL адресов. В результате ваша адресная строка будет выглядеть как https://example.com, а не как обычно https://example.com?utm_source=newsletter1&utm_medium=email&utm_campaign=sale...
Если у Вас есть какие-нибудь интересные на ваш взгляд расширения, то напишите в комментариях. Будет замечательно пополнить инструментарий.
Bonus. У меня, например, такое расширение – это блокировщик рекламы AdNauseam (https://adnauseam.io). В подборку он не вошел, так как хотел о нем рассказать отдельно. Его дополнительный функционал помимо просто блокировки рекламы – это переход по всем заблокированным ссылкам и порча ваших маркетинговых данных в различных системах (Google, Yandex, Amazon, Facebook …)
Концепт здесь прост – поскольку мы не можем запретить крупным компаниям собирать данные о нашей активности в интернете, то мы можем, как минимум, эти данные избыточно переобогащать, чтобы системы этих компаний не могли отличить, что мы искали: машины, квартиры, игровые кресла или перфоратор. Это очень важный этический аспект. О том, что такое ADINT и как за нами можно следить через рекламные идентификаторы, мы подробно рассказывали в статье: ЦРУ? ФСБ? Нет мой друг… Маркетологи. ADINT или как за тобой следят через рекламу
Ну вот и все на сегодня. Надеемся, что вы нашли для себя новые расширения для браузера, которые пригодятся вам не только в работе, но и просто в жизни.