image

Независимый интернет-исследователь Гверн Брэнвен выложил на своём сайте всеобъемлющий архив с данными торговых площадок т.н. «даркнета», которые он тщательно собирал с 2013 года. Объём данных составляет около 50 Гб в архиве (и более 1,6 Тб в распакованном виде). Среди них – интернет-магазины, форумы, доски объявлений и другие сайты, находившиеся на «скрытых сервисах» Tor и торговавшие всякими интересными, и поэтому запрещёнными, товарами.

Всего в выборку попало 89 магазинов, 37 форумов и 5 других сайтов, которые неутомимый исследователь, рискуя своей репутацией перед правоохранительными органами, посещал и скачивал в ежедневном режиме. Архив доступен для скачивания в виде торрента.

Это исследование, по признанию автора, было вдохновлено возникновением первого масштабного магазина Silk Road, владельца которого не так давно арестовали и осудили. Когда в 2013 году магазин прекратил своё существование, в образовавшийся вакуум хлынули его конкуренты мелкого масштаба – и вот тогда-то и началось всё самое интересное. Развитие даркнета сподвигло Гверна на сбор подробной информации с целью её дальнейшего изучения.

Благодаря самоотверженности и альтруизму исследователя, теперь абсолютно любой человек, интересующийся обработкой данных, сможет изучить и перелопатить эти ценные горы. Что же можно сделать с такими интересными данными? Сам исследователь советует следующее:
  • сбор информации о продавцах, и отзывов о них
  • составление чартов популярности различных веществ
  • расчёт денежного оборота чёрного рынка, комиссий и доходов
  • корреляция движения денежных средств с транзакциями, записанными в цепочке блоков Bitcoin
  • подсчёт потерь, связанных с мошенниками, притворявшимися продавцами
  • разработка стратегий по своевременному выявлению подобных мошенников
  • анализ популярных тем на форумах
  • анализ данных, способствующих деанонимизации посетителей (GPS-метки в метаданных фотографий, повторное использование никнеймов и электронных адресов как в даркнете, так и в интернете, и т.д.)
  • просто интересное времяпрепровождение

Комментарии (8)


  1. and7ey
    16.07.2015 21:48
    +5

    Почему он назван исследователем, а его собранные данные — исследованием? Он действительно что-то изучил, сделал какие-то выводы и т.п., а не всего лишь собрал данные для исследования?


    1. Ohar
      17.07.2015 09:48
      +2

      Вы предлагаете называть его собирателем?


      1. and7ey
        17.07.2015 09:53
        +5

        Коллекционером ;).
        Но на самом деле оригинальная статья куда как длиннее, чем эта, и в ней приведены некоторые работы, сделанные автором на основании этих данных (например, «Evaluating drug trafficking on the Tor Network: Silk Road 2, the sequel»), так что он действительно исследователь. Просто в статье об этом ничего не сказано.


  1. mifki
    17.07.2015 03:02
    -1

    Могут и по башке дать.


    1. polym0rph
      18.07.2015 20:48
      +1

      По башке могут дать за что угодно, особенно если в подкорке уже вдолблена идея, что «Могут и по башке дать», с такой аудиторией проще работать. Это разве повод на всякий случай ничего не делать?


      1. mifki
        19.07.2015 16:35
        -1

        Да ладно, есть еще такие штуки как осторожность и глупость. А нарко- и оружейные торговцы, и кто там еще тусуется, реально могут по башке дать, независимо от идей в голове. Выложил бы все то же самое анонимно — результат тот же, и спать спокойно можно.


  1. eaa
    17.07.2015 11:42

    Если бы он жил у нас, его бы давно посадили совсем так не на малый срок…
    Тут ученых сажают (Молодому учёному из Краснодара грозит 11 лет строгого режима geektimes.ru/post/253626), а он прям «посещал и скачивал в ежедневном режиме»…


    1. STFBEE
      17.07.2015 18:08

      Уже все хорошо, прокуратура отказалась от обвинения на 11 лет.