1.5 годовое исследование IT-курсов открыло мне глаза на 3 вещи:

  1. Пандемия, господдержка и детский подход абитируентов к взрослому образованию в значительной степени сломали EdTech.

  2. Есть огромный, почти в 10 раз, разрыв в статистике трудоустройства выпускников между худшими и лучшими QA-курсами.

  3. У худших по трудоустройству курсов зачастую лучшие отзывы.

    При этом IT-компании, как и прежде, ищут квалифицированных джунов и редко находят.

Что происходит

На рынке EdTech вообще, и IT‑образования в частности последние пару лет постоянно что‑то происходит.

Что‑то меняется в лучшую сторону — пандемия исчезла, а господдержка закончилась.

Что‑то не изменится никогда — многие студенты так и будут по‑детски думать, что достаточно записаться на курс, и знания сами попадут в голову.

Что‑то меняется в худшую — разброс между плохими и хорошими курсами увеличивается, при этом на отзывы все сложнее ориентироваться.

Основная проблема IT‑образования остается в оценке качества.

Все услуги делятся на три типа — качество можно оценить ДО момента оказания услуги, ПОСЛЕ оказания услуги или вообще НИКОГДА.

Образовательные услуги относятся к третьему типу, чем и пользуются IT‑инфоцыгане. Они активно вкладываются в рекламу, предоставляют обучение крайне сомнительного качества и все это сходит с рук, потому что даже после конца обучения подавляющее большинство выпускников IT‑курсов не может внятно оценить его качество. «У нас было так. Не знаю, как на других курсах, может, там еще хуже». И даже факт трудоустройства конкретного единичного выпускника может ни о чем не говорить — может, он устроился в компанию с низкими требованиями и зарплатой 30’000 рублей?

В случае услуг третьего типа единственные отзывы, на которые можно ориентироваться — это отзывы других профессионалов. Во всех остальных случаях — это абсолютно бесполезная информация из разряда «врач был очень приветлив и внимателен».

В случае выбора врача единственный адекватный вариант — ориентироваться на отзывы других врачей.

В случае выбора юриста — ориентироваться на отзывы других юристов.

В случае выбора страховщика — на рейтинги страховых агентств (которые составляют профессиональные страховщики‑аудиторы).

В случае выбора объекта финансовых инвестиций — опять же на профессиональную оценку, а не «особое мнение» вложившегося знакомого.

Но на кого ориентироваться при выборе IT‑курса? Ближайший похожий аналог — ориентироваться на мнение знакомого специалиста, который уже работает в IT. Но максимум, что сможет этот знакомый — это оценить состав учебного плана. А теоретический план курса и его реализация на практике — это зачастую два непересекающихся множества.

Яростная борьба в фальсификатом и контрафактом

В начале исследования QA‑курсов, полтора года назад, мной двигали любопытство, некоторая ностальгия по работе фулстек‑разработчиком и возможность в режиме хобби поиспользовать навыки текущей профессии (стратегический консалтинг) в старом добром IT.

В середине исследования мотивировали интерес и возможность стать по сути первым, кто получит реальные значения статистики трудоустройств после разных курсов в российском EdTech. А еще меня зацепили личные истории сотен студентов, с которыми я общался для проведения исследования. Для многих из которых это была попытка изменить свою жизнь в лучшую сторону. И для многих из которых эта попытка стала неудачной.

Сейчас же меня больше мотивирует две вещи.

Во‑первых, хочется, чтобы результаты уникальной работы не «протухли». 1.5 года работы, пускай даже в режиме «хобби по вечерам» — это значительные трудозатраты.

Во‑вторых, когда на всех площадках отзывов я вижу пять звезд у одного из худших по результату исследования курсов со статистикой трудоустройства 5%, во мне что‑то закипает. А назначенный мне по условиям условно‑досрочного освобождения психолог говорит, что надо искать конструктивные пути выхода гнева (шутка).

Выражение лица, когда везде вижу пятизвездочные отзывы худшего по всем критериям курса, после которого по результатам исследования почти никто не трудоустраивается.
Выражение лица, когда везде вижу пятизвездочные отзывы худшего по всем критериям курса,
после которого по результатам исследования почти никто не трудоустраивается.

При этом абитуриенты начали обращаться с просьбами порекомендовать «лучший курс» еще с начала исследования. Ведь только статьи на Хабре про исследование набрали 400’000 просмотров — что показывает актуальность проблемы.

Но мне нечего было им ответить.

Изначально я действительно пытался рекомендовать отдельные курсы. Но через полгода их качество сильно изменялось, так как нынешний EdTech — это очень динамичная среда.
Затем я перестал называть какие‑то курсы, но стал давать студентам конкретные критерии, на которые нужно обращать внимание при выборе курсов. Но они, возможно, оказались не самыми очевидными для большинства.

В конце концов я вспомнил про несколько кейсов, с которыми работал в стратегическом консалтинге. Когда промышленные предприятия в рамках борьбы с контрафактом и недобросовестными конкурентами создавали некоммерческие ассоциации, которые объединяли разрозненные усилия добросовестных компаний по борьбе с любителями быстрых и простых денег.

В результате этого родился простой и эффективный инструмент для абитуриентов, позволяющий отличать качественные курсы, инвестирующие в качество обучения, от курсов, инвестирующих в рекламу.

Манифест профессионального IT-образования

Манифест — некоммерческое объединение курсов, ориентированных на результаты обучения не на словах и подтвердивших это аудитом.

Манифест:
а) задает требования к качественному IT‑образованию;
б) проверяет соблюдение этих требований курсами.

Соответствие курса требованиям манифеста подтверждается или внешним образовательным аудитом (если курс его уже проходил), или аудитом от самого манифеста.

Проверяется примерно десяток параметров, из которых самых важных два.

Для обучающих «с нуля» курсов — это то, что более 10% от числа изначально поступивших учиться на курсе в результате успешно трудоустроились.

Для «продвинутых» курсов — что NPS (Net Promoter Score, индекс потребительской лояльности) среди окончивших обучение более 1 месяца назад превышает 40%.

Как показывает практика, эти требования выполняются, если курс ориентируется в первую очередь на результаты обучения для студентов, а не собственные финансовые показатели.

С появлением манифеста профессионального IT‑образования добросовестные, дающие результат курсы больше не будут теряться на фоне тех, кто вкладывается только в рекламу.

Отзывы на платных площадках отзывов, фейковые положительные отзывы или фейковые негативные отзывы для конкурентов больше не будут иметь никакого смысла.

Абитуриенты смогут ориентироваться на самое главное — дает обучение результат или нет. А не на чье‑то субъективное мнение. И наконец, перестанут бессмысленно тратить деньги и время.

Манифест — это некоммерческий проект. Курсы, заявляющие о соответствии манифесту профессионального IT‑образования и действительно соответствующие ему, участвуют в проекте бесплатно, не платят за свое размещение в нем или переходы абитуриентов на их сайты. Единственное, что оплачивается — это привлечение профильных специалистов для проведения аудита по его себестоимости. Да и то только в том случае, если курс и не проходил внешний образовательный аудит, и не попал в исследование QA‑курсов 2021–2023 года.

Когда я планировал общение с курсами по поводу манифеста, мне казалось, что этот путь будет длинным. За последние месяцы я пообщался с руководителями десятков IT‑курсов, включая крупнейшие на рынке, и неожиданно выяснилось, что идея «витала в воздухе» и многие проявили интерес. Сейчас сразу шесть IT‑школ присоединяются к манифесту и выполняют необходимые формальности. Две из них были в моем исследовании QA‑курсов, а две я консультировал по улучшению качества обучения.

В исследовании я изучал только QA‑курсы. Но в комментариях обращали внимание, что можно заменить все упоминания QA на «iOS‑разработчик» или что‑то другое и в целом картина останется прежней.

Поэтому манифест профессионального IT‑образования не только про курсы тестировщика, но и про другие технические IT‑специальности. И, как исключение, про IT‑управленческие. Но это все равно не универсальный инструмент и про курсы дизайна, и маркетинга, и про всё на свете.

Как воспользоваться манифестом, чтобы не потерять время, деньги и достоинство на бесполезном образовании?

Самый простой способ актуален, если курс уже участвует в манифесте. Достаточно увидеть на странице курса логотип манифеста «курс соответствует требованиям профессионального образования», а после этого убедиться, что курс действительно присутствует в списке курсов на сайте манифеста.

Как и говорилось выше, к добавлению в манифест сейчас готовятся 6 школ. Так по трем из них уже есть самые важные данные — данные по трудоустройству, то они, как первые участники, уже размещены на сайте манифеста до окончания формальных процедур.
Каждое изменение в составе участников манифеста анонсируется в давно существующем телеграм‑канале QAsmokeQA — тестируем качество IT‑обучения.

Нахождение курса в списке соответствующих манифесту — гарантия того, что курс является тем, что пытается из себя представить. Он прошел аудит профессиональным специалистом по указанным требованиям и соответствует им. Изначально я не хотел давать абитуриентам список «лучших курсов», потому что он бы быстро устарел (как это произошло в прошлом году с одним курсом, который я рекомендовал). Прохождение аудита курсом два раза в год как раз и закрывает эту проблему.

Стоит подчеркнуть еще раз, что за нахождение на сайте манифеста курс ничего не платит, как и за переходы с этого сайта. Если курс присутствует на этом сайте — значит он действительно соответствует принципам качественного IT‑образования.

Если курс НЕ участвует в манифесте, но вы планируете на нем учиться, то правильное решение — попросить представителя курса прокомментировать, насколько курс соответствует требованиям манифеста, перечисленным на сайте. Такие важные параметры, как, например «Трудоустраиваются более 10% от начавших обучение» и «Школа возвращает денежные средства отчислившимся в первый месяц обучения студентам в сумме не менее 50% и в срок не более календарных 30 дней » вы проверить самостоятельно не сможете. Но параметры «Преподаватели с опытом не менее 3 лет» или «Кураторы/наставники с опытом не менее 1 года» — после пяти минут гугления преподавателей и наставников курса — вполне.

Если представитель курса не слышал про манифест (что нормально) и отделывается общими фразами, а не конкретными ответами на вопрос (что ненормально), то имеет смысл задуматься.

Как вариант, можете написать мне и я сам задам правильные вопросы в правильном порядке. Но надо понимать, что некоторые курсы принципиально не отслеживают статистику трудоустройства — с моей точки зрения, самого важного показателя обучения. Позиция «наша задача обучить, а не трудоустроить» в чем‑то справедлива, так как минимум половина успеха зависит от самого студента. Но с другой стороны, непонятно, как курс в этой ситуации может поддерживать программу в актуальном рынку состоянии. Если он не знает дальнейшую судьбу выпускников, если не понимает, с какими сложностями они сталкиваются на собеседованиях в частности и при поисках работы вообще.

Кстати, у IT‑курсов в US такая позиция встречается реже — американская прагматичность здесь работает в плюс.

Конец хайпа

Как показывает опыт других отраслей, в конкурентной борьбе не всегда выигрывают лучшие по соотношению цена/качество. Зачастую побеждают те, кто режет качество «в ноль, пока потребителю незаметно». И если речь про плохую работу низкооплачиваемых курьеров службы доставки, то это неприятно, но не смертельно. Но когда говорим про собственное интеллектуальное и профессиональное развитие, это может быть фатально.

Окончание хайпа вокруг IT‑образования, изначально разумной вещи, может привести к одному из двух очевидных результатов. Судя по симптомам «тысячи откликов на одну вакансию», пока что реализуется худший вариант. Ведь вариант «меньше кадров, но качественней» сложнее рекламировать, и на выходе он дает EdTech меньше денег.

При этом очевидно, что эволюция AI принесет большие потрясения IT‑рынку в ближайшие 5 лет. Было бы неплохо адаптироваться к этим изменениям с несколько более качественными кадрами, чем с теми, которые сейчас в основном предоставляет EdTech.

Но, возможно, если хорошие люди объединятся, еще не все потеряно?

QAsmokeQA

Эта статья - часть большого цикла хабр-статей в рамках исследования IT-курсов:

Если не хотите пропустить следующую Хабр‑статью автора или что‑то новое в IT‑курсах, подписывайтесь на http://t.me/QAsmokeQA

P.S. Список курсов, которые не пытаются собрать деньги со всех, а делают честный входной отбор и зачисляют только со способностями к тестированию. Если вы наткнулись на бесплатный или платный курс, который делает входной отбор за счет профориентации и/или тестирования, сообщите мне. Необязательно, чтобы это был курс именно по тестированию. Необязательно, чтобы это был именно курс — может быть есть какие‑то онлайн‑сервисы по профориентации.

P.P.S. Исследование QA‑курсов продолжается. Если вы сейчас как студент проходите QA‑курс (особенно англоязычный), заинтересованы в получении максимально качественного образования и готовы делиться удовлетворенностью о ходе обучения, напишите мне. В ответ при возникновении брешей в учебе или сложностей с доведением резюме до ума автор поможет.

P.P.P.S. Подисследование международного трудоустройства. Если вы недавно стали QA‑джуном и заинтересованы в релокации, то у автора есть кое‑что интересное для вас (так как он начал изучать иностранный QA‑рынок). А именно, закрытая группа из 10–20 QA‑джунов, которые настроены на целенаправленное трудоустройство именно в США/Европе и готовы активно кооперироваться по подходам/поиску контор. Условия: а) вход только по нормальному англоязычному резюме/сопроводительному б) готовность шарить с «подельниками» интересные вакансии не реже раза в две недели в) быть готовым к исключению при невыполнении б).

Комментарии (28)


  1. simenoff
    05.07.2023 15:52

    Почему только QA?


    1. 100chuk Автор
      05.07.2023 15:52

      Не только QA:

      Поэтому манифест профессионального IT‑образования не только про курсы тестировщика, но и про другие технические IT‑специальности. И, как исключение, про IT‑управленческие. Но это все равно не универсальный инструмент и про курсы дизайна, и маркетинга, и про всё на свете.


  1. janvarev
    05.07.2023 15:52

    Манифест очень понравился.

    Небольшое пожелание по сайту: сделать страницу "Критерии" или что-то такое - чтобы было сразу понятно, по каким критериям оцениваются эффективные школы. Потому что сейчас до пунктов "10%" и балльной шкалы пришлось мотать и выцеплять её в середине, хотя сначала хотел именно ознакомиться с ключевыми критериями.

    Ну и еще - конечно, по школам хотелось бы видеть разбивку по баллам и % трудоустройства или другим показателям. Хотя, возможно, это будет неудобно и из-за этого сайт будет подвергаться давлению.


    1. 100chuk Автор
      05.07.2023 15:52
      +1

      Спасибо за идею! Подумаю как лучше сделать.


      1. 100chuk Автор
        05.07.2023 15:52

        Пока что добавил в меню быструю ссылку https://manifestus.pro/#req


  1. velon
    05.07.2023 15:52
    +1

    1. Курсы обо всём - много их

    2. Каталоги курсов - считай платформы

    3. Исследования курсов и попытка их ранжировать - манифест

    4. Каталоги каталогов по "рангу"
      <мы здесь>

    5. Конкурирующие способы (манифесты) оценки

    6. Исследование способов оценки и попытка их ранжировать

    7. Каталог манифестов

      Был бы спрос - а подходящий уровень абстракции найдётся.

      А работа проделана титаническая


  1. sepulkary
    05.07.2023 15:52
    +3

    Абитуриенты смогут ориентироваться на самое главное — дает обучение результат или нет.

    Нет. Не даёт.

    Вы пытаетесь выбрать корову с самым вкусным и полезным молоком в стаде улыбчивых резиновых коров, сконструированных ровно для того, чтобы имитировать источники вкусного и полезного молока.

    Просто воспринимайте квест "Стать джуном в технологии Х" как первый шаг в профессии. Если человек не может сделать этот шаг, несмотря на гигантское количество профильной, хорошо структурированной информации - ну, может, и не дано...

    Всё, что добавляют курсы к этому океану - плохо оплачиваемый, плохо мотивированный, задёрганный пятикурсник на том конце чата, которого вам презентуют как, скажем, "Python-гуру" и который будет вам объяснять, что "самостоятельный поиск информации - тоже часть процесса обучения". Оно вам надо?


    1. 100chuk Автор
      05.07.2023 15:52
      +2

      Вы пытаетесь выбрать корову с самым вкусным и полезным молоком в стаде улыбчивых резиновых коров

      Если бы статистика трудоустройств между разными курс не отличалась на порядок, я бы согласился.

      гигантское количество профильной, хорошо структурированной информации

      Во-первых, соглашусь с выделенным - информации действительно гигантское количество. И все учащиеся самостоятельно (таких в исследовании тоже было много) жаловались на то, что не знают, в какой момент остановиться в изучении той или иной темы, тула и так далее.
      Ибо со структурированием большие проблемы. Даже популярный Большой учебник по тестированию - бессвязный набор статей с повторениями.

      Во-вторых, IT-профессии - прикладные и просто информация ничего не даст. Обучающимся на разработчика попроще, т.к. открыл код, написал, а он или работает или нет. Тому же QA баг-репорт не скомпилировать и, например, навыки работы с требованиями без работы в команде не отработать.


  1. simenoff
    05.07.2023 15:52
    +4

    А разве бывают качественные курсы? У них нет никакой мотивации делать их качественными


    1. 100chuk Автор
      05.07.2023 15:52

      Зависит от горизонта планирования организаторов курса.

      Если задача как можно быстрее "отбить бабки", то выгоднее вложиться в рекламу и получить быструю отдачу.

      Если планирование долгосрочное, то выгоднее вложиться в качество и тогда через какое-то время заработает бесплатный рекламный канал - сарафанное радио. С ним не все так просто (см. третий тип - качество нельзя объективно оценить даже после оказания услуги), но тем не менее.


      1. simenoff
        05.07.2023 15:52
        +1

        Есть примеры, кто планирует долгосрочно?


        1. suurtoll
          05.07.2023 15:52

          Есть примеры, кто планирует долгосрочно?

          Необязательно курсы, просто хоть что-либо в России?


          1. 100chuk Автор
            05.07.2023 15:52

            За всю Россию говорить сложно, но каждый из курсов, указанных сейчас на сайте манифеста, или имеет полноценное международное подразделение, или хотя бы группы на английском. Очевидно, это как раз попытка иметь возможность планировать долгосрочно.


        1. 100chuk Автор
          05.07.2023 15:52
          +2

    1. dnssn
      05.07.2023 15:52

      Смотря что понимать под курсами. Курсы Гарварда качественные?


  1. Leetc0deMonkey
    05.07.2023 15:52

    Не понимаю, при нынешней конкуренции, доходящей порой до 1000 кандидатов на вакансию, при весьма посредственных зарплатах, неужели ещё находятся чудаки, готовые отдавать свои кровные и тратить время и силы, ради чего? Или эти чудаки всерьёз верят что через пару-тройку лет они все станут синьйорами с 300К и заживут?


    1. 100chuk Автор
      05.07.2023 15:52
      +1

      готовые отдавать свои кровные и тратить время и силы, ради чего

      Так поступают не от хорошей жизни. Это в условной Норвегии разработчик и сантехник получают одинаково. В некоторых же странах IT - почти единственная возможность попасть в подобие среднего класса.

      доходящей порой до 1000 кандидатов на вакансию

      Так там как раз "кандидаты", а не "специалисты". Уже не раз поднимали тему с той стороны баррикад, что HRам из этой 1000 набрать некого.

      Да - большинство курсов учат непонятно как. Но это не значит, что нет нормальных вариантов. Собственно поэтому я и создал манифест.

      Или эти чудаки всерьёз верят что через пару-тройку лет они все станут синьйорами с 300К и заживут?

      У меня в исследовании минимум три человека за 12-18 месяцев прошли от стадии "я учусь на курсе" до "у меня в подчинении 5-6 QA / Тинькофф сделал оффер на синьора". Все трое толковые, двое из них еще учились и на толковых курсах.

      При всём этом я категорически настаиваю на том, что "тестирование - это не для каждого" и прежде чем идти на какой-либо курс, нужно провести серьезную работу - Беда “войти в айти” или курсы тестировщика отзывы: Как войти в IT с гарантией работы (но этот гайд не всем понравится)


      1. Leetc0deMonkey
        05.07.2023 15:52

        Так поступают не от хорошей жизни.

        Вот давайте только про "плохую жизнь" не будем. Мы не Индия. На каких машинах "подобие среднего класса" стоит в километровых пробках я вижу. Как кубометрами бетона застраивается каждый пятачок я тоже вижу. Если человек к 30-40 не осилил выбиться в люди, то при ближайшем рассмотрении оказывается либо отсутствие талантов/способностей, либо отсутствие предприимчивости монетизировать свои вполне восстребованные обществом таланты/способности. Ну и чем таким айти поможет? Вчера крутил гайки, а тут вдруг техлидом станет? Или в айти нет днищеконтор с ЗП 30 тыщ и потогонкой? Ведь кто-то работает там "зачем-то"!

        Так там как раз "кандидаты", а не "специалисты".

        Специалисты уже специалисты и им айти особо не нужно. Не курсы виноваты, а тот контингент который их посещает.


        1. varra2
          05.07.2023 15:52
          +2

          " Если человек к 30-40 не осилил выбиться в люди, то при ближайшем рассмотрении оказывается либо отсутствие талантов/способностей, либо отсутствие предприимчивости монетизировать свои вполне восстребованные обществом таланты/способности." - а дальше-то что? Откуда все эти таланты и способности возьмутся если ничего не делать и не испытывать себя ни в чём снова?


          1. Leetc0deMonkey
            05.07.2023 15:52

            Если их тупо нет, откуда они возьмутся, правда?

            Испытывать себя в айти надо было лет 10 назад. Гребли тогда всех, порог вхождения низкий. А сейчас рассматривать вайти как возможность для заработка это полное безрассудство. Если вы конечно не школьник ещё и без компьютеров себя не представляете.


            1. 100chuk Автор
              05.07.2023 15:52

              Я входил в IT в 2000-м году как разработчик. По такой логике меня должны были с корнем вырвать еще только на дальнем подходе к IT.


              1. Leetc0deMonkey
                05.07.2023 15:52

                Так и было. Я SQL не знал, кроме простейших селектов после семестра БД. Еле уговорили. А потому что других тогда не было и хватали любого кто назывался "программист". Да даже не программист - с матфака после получения диплома к нам устраивались программистами, с по сути околонулевыми навыками программирования.


                1. 100chuk Автор
                  05.07.2023 15:52

                  SQL не знал, только C++ на уровне реализовать какой-нибудь простой алгоритм из исследования операций с графическим интерфейсом.

                  Был студентом 5-го курса и по результату нашел работу за $100, что по тем временам было вполне круто.

                  Но поиски заняли 4 месяца - собственно примерно столько же сколько сейчас народ и ищет.


                  1. Leetc0deMonkey
                    05.07.2023 15:52

                    4 месяца это слишком много. Даже в глухой провинции как у нас работу можно было найти с полпинка. Возможно мало кто хотел "ещё студента" на вполне приличные по тем временам деньги. Но сейчас найти работу - это из разряда "выиграть лотерею". Ну реально просто нет такого количества работы на всех желающих вкатиться. Кто-то эту лотерею конечно выиграет, и кичится мол "вот, можно же".


    1. simenoff
      05.07.2023 15:52
      +1

      Чудаки не знают про 1000 кандидатов + им обещают высокие зарплаты и гарантию трудоустройства


    1. palyaros02
      05.07.2023 15:52
      +4

      Недавно был эксперимент на Хабре. Человек создал вакансию от лица работодателя и провел исследование присылаемых резюме. Из 700 откликов что-то вроде 300 были шаблонными резюме с Яндекс.Практикума и т.п. прям как под копирку, куча всякого треша, куча резюме с противоречиями в навыках и опыте, сопроводительные письма почти все безграмотные и в духе "хочу у вас работать, вы моя любимая компания, заинтересовал ваш проект" при том что ни компании, ни проекта нет. В общем, не все так ужасно с этой пресловутой тысячей откликов на вакансию. Большая часть - мусор, сразу отправляемый эйчаром по первым намёкам на неадекватность в корзину, а то и автоотсеиванием. Не помню заголовок, к сожалению, нагуглить не удается.


      1. Leetc0deMonkey
        05.07.2023 15:52
        +1

        Большая часть - мусор, сразу отправляемый эйчаром по первым намёкам на неадекватность в корзину

        Т.е. даже для адекватного кандидата шаг вправо-влево - и давай, до свидания.


        1. AlexandrSudarev
          05.07.2023 15:52

          "адекватный кандидат" и человек в чьем портфолио нет ссылки ни на один проект - это как будто бы разные люди