Самое утомительное поле при вводе паспорта — «Кем выдан». Вбивать в форму какое-нибудь «Отделом внутренних дел Медведевского района республики Марий Эл» муторно. Люди злятся, сокращают название как придется, ошибаются.
Было бы здо?рово подсказывать варианты по коду подразделения.
Давно мечтали о подсказках по подразделениям, выдавшим паспорт
Хорошего справочника нет (но есть плохой)
У нас уже есть подсказки: по адресам, компаниям, банкам, ФИО, емейлам. То есть движок готов, нужны только данные.
Проблема в том, что открытого официального справочника подразделений УФМС попросту нет. Наверняка он существует где-то в недрах ведомств, за семью печатями, но наружу не показывается. Где брать информацию — непонятно.
Постоянно всплывает вот эта база. Но авторство ее неизвестно, а качество данных внутри — низкое, мы проверяли. Еще хуже, что названия подразделений хранятся в именительном падеже, в анкетах же просят творительный. Если нужно, пользуйтесь этим справочником на здоровье, но мы ни за что не отвечаем.
А хорошие данные все равно приходится где-то искать: у нас каждый день спрашивают подсказки по «Где выдан». Оно и понятно, потому что поле все время встречается в анкетах. В конце концов нам ничего не осталось, кроме как собрать справочник самим. Ну как самим… с помощью зала.
Собираем справочник для всех, красивый и полный
Мы подумали — а чего бы не сделать справочник подразделений УФМС всем вместе. И запустили форму для сбора данных dadata.ru/fix/fms. Идея такая.
- Желающие оставляют данные о подразделении, указанном в паспорте. В форме три поля, ничего персонального в этих данных нет.
- Мы чистим данные своими инструментами, приводим к единому формату и собираем в .csv.
- Готовый справочник выкладываем в открытый доступ.
Чтобы получить итоговый справочник, свои данные можно не оставлять. Поделимся со всеми, забирайте хоть сейчас:
- сырые данные (обновляются каждую минуту);
- очищенные данные (обновляем раз в неделю).
Если поделитесь подразделением, которое выдало паспорт, приблизите завершение проекта. Окончательный справочник мы отполируем совсем уж до блеска и схлопнем сложные дубли.
О прогрессе отчитаемся
Все это — эксперимент. Мы не знаем, что получится. Может быть, никто просто не поделится данными, тогда из затеи ничего не выйдет. И уж подавно мы не знаем, как долго будем собирать справочник.
Но что точно обязуемся делать, так это отчитываться в твиттере. Каждый день едва ли, но о важных вехах непременно сообщим. Об итогах эксперимента расскажем и здесь тоже.
По нашим прикидкам, в стране меньше 10 000 подразделений, выдающих паспорта. Это совсем немного, в конце-то концов. Давайте попробуем их собрать.
Комментарии (64)
DEADStop Автор
28.02.2019 14:56Мы ни в коем случае не будем ограничивать доступ к собранным данным. Ссылки из статьи, по которым можно скачать актуальную версию справочника, будут активны. Если соберем полную базу, почистим данные набело и выложим отдельно.
roscomtheend
28.02.2019 15:10Наверняка он существует где-то в недрах ведомств, за семью печатями, но наружу не показывается
И не будет, он ДСП (по крайней мере сколь доносили слухи).
Hint: на самом деле на один код подразделения может быть несколько наименований. Так быть не должно ни в коем случае, но так есть, придётся это учитывать (ну или пусть кому выпала неверная подсказка исправляет руками), а склонение там простое:
отдел — отделом, отделение — отделением, управление — управлением, вариантов не так много. А ещё есть подразделения МВД, которые тоже выдавали паспорта.
А ещё есть — http://ingvarr.net.ru/ufms
, где что-то похожее на правду (кроме того что СПб не в ЛО находится).DEADStop Автор
28.02.2019 15:23на самом деле на один код подразделения может быть несколько наименований. Так быть не должно ни в коем случае, но так есть, придётся это учитывать (ну или пусть кому выпала неверная подсказка исправляет руками)
Это мы уже знаем, спасибо! Скорее всего, просто не будем схлопывать сильно отличающиеся варианты. Например, вот эти подсказки будем показывать одновременно, потому что код у них одинаковый: «ОТДЕЛЕНИЕМ ПО РАЙОНУ ХАМОВНИКИ ОУФМС РОССИИ ПО ГОР. МОСКВЕ В ЦАО» и «ОТДЕЛЕНИЕМ УФМС РОССИИ ПО Г.МОСКВЕ ПО РАЙОНУ ХАМОВНИКИ». А там уж человек сам разберется. И всегда можно вбить руками, да.
а склонение там простое: отдел — отделом, отделение — отделением, управление — управлением, вариантов не так много
Нам показалось, что не все так просто. Вот пример: «ДУБКИНСКОЕ ПОМ Г. КИЗИЛЮРТА РЕСПУБЛИКИ ДАГЕСТАН». Тут уже на «ДУБКИНСКИМ» придется менять, а сколько еще разных сценариев.
Evengard
28.02.2019 15:24+1Шаманы, вы для примера использовали самую свежую выгрузку видимо, которую я только что пополнил чтоли? =)
Evengard
28.02.2019 15:23Для этого видимо и просят в том числе год выдачи.
DEADStop Автор
28.02.2019 15:25Год — для подстраховки. Не уверены, что он так уж поможет: есть предположение, что даже в пределах года названия подразделений могут отличаться. Пока следим.
Но выход есть в любом случае — просто по одному коду показывать несколько подсказок одновременно, если названий несколько.
nalgeon
28.02.2019 16:16+1Я думаю, что очень даже поможет ? Кардинальные отличия в названиях как раз в основном зависят от года.
kilyazov
28.02.2019 22:05И вариантов будет 16 000+ умножить на Х+ (где Х — несколько вариантов каждого кода), при этом конечного варианта не будет в связи с поныне изменяемыми названиями подразделений.
Если вы занимаетесь вводом данных паспортов, то вам стоит (если уже не) сделать «клич» по видам документов, признаваемых в России как документы, удостоверяющие личность.
Готов поучаствовать в проекте сбора таких данных.
roscomtheend
01.03.2019 13:00Просят дату выдачи (если одно из полей неверно — номер, код, дата выдачи, фио, то отказать). Подразделение сравнивать сложно — сокращают кто во что горазд при заполнении. Название могут сменить и несколько раз за год (в основном в плане всяких сокращений — обл./области, района/р-на), могут никогда не менять — тут как повезёт (зависит от региона, меняется на региональном уровне обычно).
nalgeon — не встречал такого, зачастую переименовывают сразу несколько подразделений, а потом могут и обратно сменить. Но явление не так чтобы частое и, наверное, у многих реже раза в год.
dmshr — подозреваю это код 782-001 должен был быть тогда. Они выбирают вручную подразделения? После упразднения ФМС вообще не в курсе какие там номера.
dmshr
28.02.2019 15:28Получал новый паспорт в конце 2018 года, код подразделения 780-004, но при этом текстовая часть «ГУ МВД России по Санкт-Петербургу и Ленинградской области» без привычных «ТП№...»
brzsmg
01.03.2019 09:16А «Адмиралтейский район» из названия тоже убрали?
dmshr
01.03.2019 09:20Да, написано именно так, как я привел. Более того, паспорт я получал в Василеостровском районе, хотя сам поиск по коду 780-004 выдает Адмиралтейский.
killla
01.03.2019 13:28+1После принятия нового регламента, подразделения не пишутся в паспорте.
Записывается только территориальный орган ОВД (на уровне субъекта).
Подразделение этого органа, непосредственно выдавшее паспорт, присутствует в паспорте только в закодированном виде в «коде подразделение».
questor
28.02.2019 16:36Я не думаю, что получится собрать ВСЕ паспортные столы. Помнится, когда разгорелся солсберецкий скандал и номера паспортов двух туристов оказались различающимися всего парой цифр на конце — всплыло существование «специальных» паспортов для «своих», «илиты» и сотрудников спецслужб. (Не, может об этом и было известно в узких кругах, но вот я как обыватель об этом был не в курсе — просто не задумывался)
С другой стороны, вряд ли подобным персонам понадобится ваш сервис.
valery1707
28.02.2019 16:44У меня с женой различие в номере паспорта — одна последняя цифра.
Причём так было два раза.
Документы подавали через МФЦ.vindy123
28.02.2019 16:57У меня с женой различие в номере паспорта — одна последняя цифра.
ну с солсберецкими туристами различие в одну цифру в номере паспотра — это лишь одна из многих других вещей, которые в совокупности позволяют сделать какие-то выводы. Тут и «блатное» УФМС для своих, и специальные пометки в утекшем скане досье ФМС, и телефон Минобороны на нем. Белингкэт с Новой газетой вобщем качественно покопались.
DEADStop Автор
28.02.2019 16:48+1Нам бы покрыть потребности малого и среднего бизнеса: интернет-магазинов, разного рода облачных сервисов, курьеров. То есть дать подсказки абсолютному большинству их пользователей и клиентов.
Если в справочнике не будет законспирированных подразделений — ну что же. Придется людям, получившим там паспорта, вводить по старинке — без подсказок.
Protos
01.03.2019 04:17Так вы их так и вычислите, то есть после того как сбор прекратите, все кто ввел странное название считай чекист
svi0105
28.02.2019 16:59По нашим прикидкам, в стране меньше 10 000 подразделений, выдающих паспорта. Это совсем немного, в конце-то концов. Давайте попробуем их собрать.
Ну как бы несколько больше. По крайней мере их более 16 тыс.
И, может быть вместо года выдачи спрашивать дату выдачи? Подразделения вряд ли переименовывают строго с 1 января…brzsmg
01.03.2019 09:27+1Все же кодов подразделений меньше 10 000 (в одном из справочников, уникальных кодов 7 243).
Вот названий может и за 16 т перевалить.
Так как под одним кодом, могут менять способ записи хоть каждый год.
DEADStop Автор
28.02.2019 17:05Ну как бы несколько больше. По крайней мере их более 16 тыс.
Поделитесь, пожалуйста, откуда у вас эти данные.
может быть вместо года выдачи спрашивать дату выдачи?
Пока года вроде бы достаточно для целей справочника. Нам кажется, что с датой будет избыточно, да и заполнять форму сложнее. Но мы следим.
dimansyramolot
28.02.2019 17:06+1Доброго времени суток! Прошу заметить, что с 2016 года Федеральная миграционная служба перестала существовать и была присоединена к МВД РФ. И с этого самого времени паспорта выдаются Управлениями и отделами по вопросам миграции. А если паспорт выдан до 2004 года, то там вообще были Отделы и управления внутренних дел. По этой причине, вам следует обратить внимание на этот фактор! А так идея хорошая, поддерживаю!
killla
28.02.2019 21:14+1Это в теории.
На практике еще 2 года выдавались паспорта с красными печатями «ФМС» и записями «ФМС». Ибо старыми печатями им разрешили пользоваться до утверждения собственных. А если печать и запись «орган выдачи» различается — не комильфо.
По ЕГРЮЛ ФМС ликвидирована в марте 2018. Региональные подразделения чуть раньше.
Из всех указов ФМС вычеркнули вот только в декабре.
В 2004 было тоже самое. ФМС еще долго пользовалось печатями, бланками МВД.
killla
28.02.2019 21:21+1Наверняка он существует где-то в недрах ведомств, за семью печатями, но наружу не показывается.
У меня такое ощущение что и там его нет.
МВД пару месяцев назад в рамках общественного обсуждения на предложение использовать в одной из форм вместо названий коды подразделений ответило, что они не могут задействовать такой справочник: regulation.gov.ru/p/85329DEADStop Автор
28.02.2019 22:06Чуть выше пишут, что справочник есть, но для служебного пользования.
Как на самом деле — поди узнай, конечно.
Gritsuk
28.02.2019 21:31+1Избавители! Как же меня задолбало вот это
ТП №36 ОТДЕЛА УФМС РОССИИ ПО САНКТ-ПЕТЕРБУРГУ И ЛЕНИНГРАДСКОЙ ОБЛ. В КРАСНОГВАРДЕЙСКОМ Р-НЕ Г.САНКТ-ПЕТЕРБУРГА
Оно даже в форму на сайте почты не влезает!killla
01.03.2019 09:21Можно поменять паспорт.
С конца сентября 2017-го действует новый регламент МВД по выдаче паспортов. По которому в графе «паспорт выдан» записывается наименование территориального органа МВД России на региональном уровне.
153.1.1. В реквизите «Паспорт выдан» печатается наименование территориального органа МВД России на региональном уровне.
153.1.2. В реквизите «Код подразделения» указывается цифровой код, закрепленный за конкретным подразделением по вопросам миграции, которое осуществляет оформление паспорта. Например, паспорт оформлен отделением по вопросам миграции межмуниципального отдела МВД России «Барышский» УМВД России по Ульяновской области, который имеет код «730-006» и находится в подчинении УМВД России по Ульяновской области. В реквизите «Паспорт выдан» указывается «УМВД России по Ульяновской области», в реквизите «Код подразделения» — «730-006».
153.1.3. В паспортах, оформляемых в Главном управлении по вопросам миграции Министерства внутренних дел Российской Федерации, в реквизите «Паспорт выдан» указывается «МВД России».
Protos
01.03.2019 04:13Не проще ли вам у банка или у Faktura.ru купить эти данные? Купить данные которые точно проверены банками.
DEADStop Автор
01.03.2019 10:55Кажется, в легальном поле этого не сделать. А в нелегальное уходить не хочется.
kilyazov
01.03.2019 11:40Смешно: у «банка» (например, Сбербанка) даже стран мира вбито (без сортировки по алфавиту) в компах зала работы с клиентами всего несколько десятков… СТРАН! :) Причем в разных отделениях одного г. Красногорска (МО) список различался числом стран в пару раз :)
killla
01.03.2019 13:05+1Федеральный банк (кроме сбера) обычно присутствует в 2-3 федеральных округах. 20-30 регионов в лучшем случае, и еще десяток где банк присутствует только формально (одно отделение и десяток юриков в клиентах).
Покупать данные в лучшем случае по топ 50% отделений ФМС еще и очень ограниченного количества регионов. Неизвестно какого качества. IMHO глупая затея. Наиболее трудоемко как раз вторую половину отделений собрать.
EllaVS
01.03.2019 11:54+2Ну наконец-то кто-то придумал это сделать. Ведь реально проблема — найти такую базу, сколько раз уже сталкивались с отсутствием нормального справочника УФМС вместе с кодами подразделений — по факту каждой организации (в моем случае вузу, где ведется учет тысяч студентов/абитуриентов) приходится сейчас самостоятельно формировать этот справочник на основе данных приносимых физиками паспортов.
Вопрос: можно ли как-то Вам загрузить данные не по одному, а сразу кучкой? У нас уже имеется база примерно на 990 элементов (заполненная на базе подаваемых студентами паспортов).
rprr
01.03.2019 12:02Вот трижды уже менял паспорт, код подразделения один, а наименования каждый раз. Последний раз жена получала паспорт, через полгода после меня, код тот же, а наименование в очередной раз изменилось. Актуальность справочника поддерживать как станем?
DEADStop Автор
01.03.2019 12:06За актуальностью будем следить через техподдержку, другого способа пока не видим. Точно так же, как нам для других продуктов присылают ошибки в IP-геолокации или недостающие в ФИАС дома, будут и недостающие названия присылать.
В крайнем случае для каких-то подразделений иногда не всплывет подсказка и придется вводить руками. Неприятно, но жить можно
killla
01.03.2019 17:31+1Подразделения уже больше года не указываются в паспортах. Так что «актуальность» паспортов с 2018 года и далее в будущем изменится только при объединении/разделении субъектов федерации или территориальных органов ОВД субъектов. Это единицы изменений за год, и то не каждый год.
Вот по «прошлым» кодам нужно собирать данные по максимуму. Ведь есть паспорта, которые еще 15-20 лет будут действительны. Есть вообще бессрочные.
mikelavr
01.03.2019 12:49Если вам в каком то сервисе пользователи вбивают эти данные — соберите их оттуда :).
Кстати, в ваших csv в последней строке отсутствует перевод строки (0x0D 0x0A). То, что csv в Unicode, а Excel его не распознал не понял — это локальная мелочь.DEADStop Автор
01.03.2019 12:56Если вам в каком то сервисе пользователи вбивают эти данные — соберите их оттуда :)
Не вбивают :)
Но дело даже не в этом — мы не собираем введенные в сервисы данные и из-за оферты, и из принципа, и из репутационных соображений.
JediPhilosopher
01.03.2019 14:49+1А кто-нибудь может вообще объяснить, нахуа везде требуют это чертово наименование выдавшего органа? Зачем оно вообще нужно? Почему одного номера паспорта недостаточно? Как же я ненавижу эту хрень везде вводить, причем никто, НИКТО мне не может ответить кому и зачем оно нужно и где используется, и такое впечатление что вообще никто не проверяет что я там пишу. Зато зачастую придираются ко всякой ерунде, типа в паспорте указано ТП №49 а я написал ТП #49 — ооой все у вас документы не примут. Хотя все принимают (потому что видимо никому это поле и не нужно).
nalgeon
01.03.2019 15:12Это 100% так. «Кем выдан» никому не нужно, ошибки в нём ни на что не влияют. Больше того, нет ни одного закона или подзаконного акта, который требовал бы заполнять «кем выдан». Но — бюрократические традиции очень сильны ?\_(?)_/?
nalgeon
01.03.2019 18:38Коллеги напомнили, что ЦБ в каких-то своих мохнатых положениях требует «кем выдан». В любом случае, для паспорта это совершенно бессмысленно, потому что есть же код подразделения.
valery1707
01.03.2019 15:40Возможно это защита от присвоения одинаковых номеров двум паспортам, выданным в разных органах.
Просто предположение.
Askolock
01.03.2019 15:51Что планируется делать с строчными/прописными буквами?
В свое время при обсуждении сделали выводы о том, что в паспортах так печатается для улучшения читаемости. В официальных документах хотелось-бы некоего соответствия правилам великого-могучего.
Greyvhard
02.03.2019 12:58У нас медсистема, где регистратор ручками это дело вбивает. Кода подразделения там нет, но если бы был официальный справочник, думаю разработчики сделали бы селект по коду и это облегчило бы жизнь медрегистраторам и сократило бы время в очередях. А договориться с УФМС не получается? Хорошо бы вопрос на общественную инициативу кинуть — я думаю во многих сферах пригодилось бы. Или «за семью печатями» не просто так?
questor
Уточните пожалуйста, статус собранных данных. Вы коммерческая компания, готовы ли вы гарантировать, что не будете ограничивать доступ к данным. Собирать с мира по нитке (я готов вбить свой паспорт) краудсорсингом, а потом оставить её только себе как-то не очень красивый вариант.
По тексту статьи я так и не понял до конца.
А так задумка выглядит неплохо, поддерживаю.
Ещё один момент непонятный. А вот если на форме сбора данных предположить возможность сразу видеть, есть ли уже варианты, какие были — это как-то повлияет (в негативную сторону) на точность данных?
DEADStop Автор
Мы ни в коем случае не будем ограничивать доступ к собранным данным. Ссылки из статьи, по которым можно скачать актуальную версию справочника, будут активны. Если соберем полную базу, почистим данные набело и выложим отдельно.
Конечно, это гарантия под наше честное слово и репутацию — составить юридически значимую оферту минимум долго, максимум — не уверен, что вообще возможно.
В целом мы не продаем данные, мы продаем продукты для работы с ними.
questor
Мне достаточно гарантии под честное слово.
DEADStop Автор
Должен был быстрее, сейчас разберемся. Не подскажете номер подразделения?
questor
Я удалил это из своего комментария, т.к. файл скачанный на другой машине уже содержал мои данные. Вероятно браузер закешировал или прокси по пути была слишком агрессивна в кешировании.
Yaant
Аналогично, добавлял где-то в 15:30 по Мск, в сырой выгрузке до сих пор не наблюдаю. Код 470-004.
DEADStop Автор
Ого, как долго нет! Завтра постараемся разобраться.
Yaant
На самом деле написал комментарий, через полчаса скачал снова, и в новой версии уже увидел свой код. Но это точно не кэширование, потому что моя строчка появилась между строчек, присутствовавших и в прошлый раз.
DEADStop Автор
Спасибо, посмотрим!
nalgeon
Выкладка автоматическая через гугл-документы. Видимо, иногда у них подтупливает синхронизация.