Уже начало ноября, и мои парсеры давно собрали свежие данные. Сегодня я поделюсь анализом обновления рейтинга и новостями проекта.
Новости проекта
Новые технологии
В этом месяце мы добавили несколько технологий:
Fortran, ClickHouse, RabbitMQ, Kafka
Перенос технологий
Qt был перенесен из библиотеки в фреймворки
Удаленные технологии
Удалён Ant Design из рейтинга
Улучшения парсера
Главное улучшение этого месяца - полная переработка парсера. Мы значительно
сократили процент нерелевантных вакансий, которые попадают в анализ. Алгоритм
фильтрации стал умнее:
Лучше распознаёт контекст упоминания технологии в описании вакансии
Снижает влияние случайных совпадений по названию
Повышает точность рейтинга
В ближайшем месяце ждёте ещё большие улучшения парсера.
Улучшение FAQ
В разделе "Часто задаваемые вопросы" мы подробно описали методологию расчёта
рейтинга:
Как собираются данные (HeadHunter, Habr Career)
Как применяется статистическая нормализация (Z-score)
Как рассчитывается финальный балл (3-50 пунктов)
Анализ рейтинга за ноябрь
Языки программирования
Go - поднялся на 3 пункта вверх, я услышал ваш фидбек начет go и после обновления парсера заменил поиск с golang на go.
JavaScript опередил C - JS занял 4-е место, сместив C на 5-е.
Топ-10 языков:
SQL
Python
1C
JavaScript ⬆️
C ⬇️
Java
C++
PHP
TypeScript ⬆️
C# ⬇️
Go ⬆️⬆️⬆️
Библиотеки и пакеты
Jackson поднялась на 16 пунктов!
caret обвалилась на 24 пункта!
Базы данных
PostgreSQL — лидер среди реляционных БД
MongoDB — актуальна для NoSQL задач
Redis — высокий спрос для кэширования и real-time приложений
ClickHouse (новое) — растущий спрос на аналитические БД
DevOps & Облако
Docker — остаётся стандартом контейнеризации
Kubernetes — активное развитие
AWS — лидер облачных платформ в России
RabbitMQ (пополнение) — стабильная альтернатива Kafka
Kafka (пополнение) — растущий спрос на потоковую обработку
? Ключевые выводы
Парсер стал точнее — результаты этого месяца более надёжны благодаря
улучшениям
? Что дальше?
Оптимизация парсера — дальнейшее улучшение фильтрации вакансий
Расширение метрик — планируется добавить дополнительные метрики для более полной картины
Спасибо, что следите за Trueindex! Ваша обратная связь помогает нам становиться
лучше.
Если у вас есть идеи по улучшению рейтинга или вы заметили неточности, пишите мне в
Telegram
Alexandroppolus
То, что найдено как "typescript", добавляется автоматом к js?
iam_hannes Автор
На уровне какой-то погрешности парсера да, но я посторался этот вопрос исправить