Начнем с простого примера: как думаете, легко найти более или менее адекватный датасет, который позволил бы ну хоть как-то поработать с квадрокоптерами?

Вполне может оказаться, что среди первых достойных результатов окажется именно этот набор. Обновил его совсем недавно, увеличив примерно вдвое. Под катом больше деталей (включая парусную яхту А, которая уже в прошлом году путешествовала в несколько странном виде), но если интересны исключительно датасеты: список доступных на текущий момент (пополняется). Да, пожалуйста, напишите какие датасеты могут быть полезны именно вам.

Собственно, датасеты являются побочным результатом развития идеи детальной сегментации видеопотоков. Тестировать на очень разных реальных объектах так или иначе необходимо, а полезный результат (если он есть конечно) выбрасывать желания нет.

Все эти сложности с детальной сегментацией могут показаться совершенно лишними, до тех пор, пока вы не откроете упаковку своего любимого печенья с джемом и не найдете джема на половине печенек. Разочарование, но если задуматься о решении проблемы, то кроме как визуальной проверкой проблему не побороть. В свою очередь, это или человеческий фактор или автоматизированная система, которая так или иначе должна быть способна оценить площадь, занимаемую незаменимым джемом.

Давайте рассмотрим несколько примеров:

Возможно, будет интересно посмотреть детальнее: печеньки с джемом и без оного (кажется milka). Но задачи ведь разные, на месте печенек могут оказаться и другие уникальные объекты, ценность которых может быть далеко не самой очевидной. Собственно, по этой причине тестовые наборы (и результаты) очень разные:

Сложность тоже варьируется, поскольку часто важен не только сам объект, но и детали окружения. К слову, в данном посте опускаю детали реализации (в достаточной мере они раскрыты ранее), но если будет интересно — расскажу подробнее, поскольку для достижения желаемого результата пришлось реализовать всю "магию" самостоятельно.

Детали в принципе очень важны и чем их больше (при условии достаточной стабильности результата) — тем лучше для решения любых бизнес-задач. Следующий пример иллюстрирует как важность деталей, так и проблему стабильности:

Примеров, как и результатов, на самом деле очень много. Размещу ссылки под постом, но вернемся к основному вопросу: с чем работаете или планируете работать вы? Какие датасеты могли бы вам помочь?

В свою очередь, в новом году продолжим расширять набор доступных датасетов, среди которых появятся и яхты. Парусная яхта А была замечена с отсутствующим гиком и пока в таком виде и будет добавлена в соответствующий набор.

Детальнее на странице проекта:

Надеюсь не утомил примерами. В любом случае, если вы сталкивались с реальной проблемой, для решения которой можно использовать детальную сегментацию — напишите.

Полезные ссылки:

• Датасеты на Kaggle

• Metavision.zone - страница проекта

• Пример работы segmentation pipeline

• Примеры на YouTube