Анализ популярности ключевого навыка для специализации выполняется на основе вакансий, соответствующих специализации (рассматриваются только те вакансии, для которых указаны ключевые навыки). Под общим термином "специализация" могут подразумеваться термины "должность", "уровень должности", "профессия", "специализация по технологии", "технология" и так далее. Все вакансии взяты с hh.ru. Популярность ключевого навыка в исследовании измеряется количеством вакансий, в которых навык указан как ключевой (отношение количества вакансий по специализации с ключевым навыком к общему количеству вакансий по специализации). Обновление данных обычно происходит не реже 1 раза в неделю (частота обновления данных также зависит от частоты появления новых вакансий по специализации).
Какие вакансии рассматривались: поиск вакансий по наличию слов 'DATA ENGINEER' (или их синонимов) внутри заголовка вакансии. Область (местоположение) поиска вакансий: 'РОССИЯ'.
обзор навыков для различных профессий
Data Engineer: обзор зарплат из вакансий
5 онлайн-курсов: подборка для Data Engineer1312 ключевых навыков: расширенный список ключевых навыков для Data Engineer
| Ключевой навык (key skill) | Доля вакансий для 'Data Engineer' с этим ключевым навыком |
|---|---|
| python | 54.04% |
| sql | 52.38% |
| etl | 25.99% |
| hadoop | 21.39% |
| spark | 18.39% |
| postgresql | 17.22% |
| dwh | 12.09% |
| linux | 11.72% |
| big data | 11.11% |
| airflow | 10.99% |
| java | 9.44% |
| git | 9.35% |
| scala | 8.78% |
| clickhouse | 8.51% |
| kafka | 7.78% |
| docker | 7.05% |
| базы данных | 6.45% |
| ms sql | 5.98% |
| английский язык | 5.8% |
| hive | 5.59% |
| greenplum | 5.54% |
| oracle | 4.2% |
| data analysis | 3.94% |
| субд | 3.76% |
| анализ данных | 3.74% |
| работа с базами данных | 3.68% |
| kubernetes | 2.72% |
| pandas | 2.71% |
| machine learning | 2.54% |
| ml | 2.54% |
| ms sql server | 2.19% |
| power bi | 2.15% |
| mysql | 2.07% |
| aws | 2.07% |
| bash | 1.96% |
| apache airflow | 1.95% |
| аналитическое мышление | 1.69% |
| nosql | 1.63% |
| ci/cd | 1.58% |
| data engineer | 1.54% |
| teradata | 1.49% |
| tableau | 1.46% |
| oracle pl/sql | 1.46% |
| bi | 1.31% |
| data science | 1.25% |
| nifi | 1.22% |
| ооп | 1.19% |
| numpy | 1.19% |
| pytorch | 1.19% |
| atlassian jira | 1.16% |
| mongodb | 1.13% |
| vertica | 1.11% |
| databases | 1.11% |
| grafana | 1.1% |
| c++ | 1.05% |
| apache kafka | 1.05% |
| it | 1.0% |
| работа с большим объемом информации | 0.9% |
| pyspark | 0.9% |
| ansible | 0.85% |
| cassandra | 0.85% |
| qa | 0.84% |
| azure | 0.84% |
| математическая статистика | 0.78% |
| ssis | 0.78% |
| ssas | 0.76% |
| data mining | 0.75% |
| cистемы управления базами данных | 0.73% |
| gitlab | 0.73% |
| apache nifi | 0.73% |
| dbt | 0.73% |
| data engineering | 0.69% |
| tensorflow | 0.69% |
| ms powerpoint | 0.69% |
| prometheus | 0.69% |
| powerbi | 0.67% |
| api | 0.67% |
| hdfs | 0.67% |
| redis | 0.64% |
| jenkins | 0.64% |
| atlassian confluence | 0.64% |
| elt | 0.61% |
| transact-sql | 0.61% |
| apache spark | 0.61% |
| scrum | 0.61% |
| работа в команде | 0.59% |
| elasticsearch | 0.59% |
| business intelligence systems | 0.59% |
| devops | 0.58% |
| deep learning | 0.58% |
| c# | 0.56% |
| аналитика | 0.55% |
| agile | 0.53% |
| informatica | 0.52% |
| управление проектами | 0.52% |
| обучение и развитие | 0.52% |
| хранилище данных | 0.52% |
| rest api | 0.52% |
| ssrs | 0.5% |
| django framework | 0.49% |
1312 ключевых навыков: расширенный список ключевых навыков для Data Engineer
5 онлайн-курсов: подборка для Data Engineer
Зарплаты в IT: Telegram-канал
| Профессия, специальность или технология | Ключевые навыки в порядке убывания популярности |
|---|---|
| Big Data Engineer |
python
sql
hadoop
spark
linux
big data
git
docker
scala
java
...
|
| Data Quality Engineer |
sql
python
big data
hive
hadoop
postgresql
ms sql
проведение тестирований
qa
ручное тестирование
...
|
Marfatech | МОСКВА |
Вкусно — и точка | МОСКВА |
TradingView | РОСТОВ-НА-ДОНУ |
Транснефть-Технологии | МОСКВА |
Aston | РОСТОВ-НА-ДОНУ |
Sapiens solutions | МОСКВА |
Ростелеком | МОСКВА |
Велесстрой | МОСКВА |
WILDBERRIES | МОСКВА |
WILDBERRIES | МОСКВА |
РОСБАНК | МОСКВА |
YADRO | МОСКВА |
YADRO | НИЖНИЙ НОВГОРОД |
Lesta Games | МОСКВА |
Employcity | МОСКВА |
Employcity | САНКТ-ПЕТЕРБУРГ |
Heaad | САНКТ-ПЕТЕРБУРГ |
до 160 000 руб. до вычета налогов
Quanthill | САНКТ-ПЕТЕРБУРГ |
Heaad | МОСКВА |
80 000 - 200 000 руб. на руки
КАЗАНЬЭКСПРЕСС | САНКТ-ПЕТЕРБУРГ |
250 000 - 450 000 руб. до вычета налогов
X5 Digital | МОСКВА |
Российские железные дороги | МОСКВА |