znantrend

100 ключевых навыков Data Engineer | статистика востребованности компетенций, умений, знаний, технологий, навыков (skills)

Ключевые навыки: какие востребованы

Анализ популярности ключевого навыка для специализации выполняется на основе вакансий, соответствующих специализации (рассматриваются только те вакансии, для которых указаны ключевые навыки). Под общим термином "специализация" могут подразумеваться термины "должность", "уровень должности", "профессия", "специализация по технологии", "технология" и так далее. Все вакансии взяты с hh.ru. Популярность ключевого навыка в исследовании измеряется количеством вакансий, в которых навык указан как ключевой (отношение количества вакансий по специализации с ключевым навыком к общему количеству вакансий по специализации). Обновление данных обычно происходит не реже 1 раза в неделю (частота обновления данных также зависит от частоты появления новых вакансий по специализации).

Какие вакансии рассматривались: поиск вакансий по наличию слов 'DATA ENGINEER' (или их синонимов) внутри заголовка вакансии. Область (местоположение) поиска вакансий: 'РОССИЯ'.

Понятие 'Data Engineer' рассматривается как общее понятие, поэтому при формировании набора навыков также учитываются навыки из вакансий для следующих специализаций: 'Big Data Engineer', 'Data Quality Engineer' и так далее. Специализации перечислены в разделе "Ключевые навыки по некоторым профессиям и специализациям": возможно, списки навыков по уточнённым специализациям будут более полезными.

обзор навыков для различных профессий

Data Engineer: обзор зарплат из вакансий

5 онлайн-курсов: подборка для Data Engineer

1312 ключевых навыков: расширенный список ключевых навыков для Data Engineer

Data Engineer: ключевые навыки (key skills)
Ключевой навык (key skill) Доля вакансий для 'Data Engineer' с этим ключевым навыком
python 54.04%
sql 52.38%
etl 25.99%
hadoop 21.39%
spark 18.39%
postgresql 17.22%
dwh 12.09%
linux 11.72%
big data 11.11%
airflow 10.99%
java 9.44%
git 9.35%
scala 8.78%
clickhouse 8.51%
kafka 7.78%
docker 7.05%
базы данных 6.45%
ms sql 5.98%
английский язык 5.8%
hive 5.59%
greenplum 5.54%
oracle 4.2%
data analysis 3.94%
субд 3.76%
анализ данных 3.74%
работа с базами данных 3.68%
kubernetes 2.72%
pandas 2.71%
machine learning 2.54%
ml 2.54%
ms sql server 2.19%
power bi 2.15%
mysql 2.07%
aws 2.07%
bash 1.96%
apache airflow 1.95%
аналитическое мышление 1.69%
nosql 1.63%
ci/cd 1.58%
data engineer 1.54%
teradata 1.49%
tableau 1.46%
oracle pl/sql 1.46%
bi 1.31%
data science 1.25%
nifi 1.22%
ооп 1.19%
numpy 1.19%
pytorch 1.19%
atlassian jira 1.16%
mongodb 1.13%
vertica 1.11%
databases 1.11%
grafana 1.1%
c++ 1.05%
apache kafka 1.05%
it 1.0%
работа с большим объемом информации 0.9%
pyspark 0.9%
ansible 0.85%
cassandra 0.85%
qa 0.84%
azure 0.84%
математическая статистика 0.78%
ssis 0.78%
ssas 0.76%
data mining 0.75%
cистемы управления базами данных 0.73%
gitlab 0.73%
apache nifi 0.73%
dbt 0.73%
data engineering 0.69%
tensorflow 0.69%
ms powerpoint 0.69%
prometheus 0.69%
powerbi 0.67%
api 0.67%
hdfs 0.67%
redis 0.64%
jenkins 0.64%
atlassian confluence 0.64%
elt 0.61%
transact-sql 0.61%
apache spark 0.61%
scrum 0.61%
работа в команде 0.59%
elasticsearch 0.59%
business intelligence systems 0.59%
devops 0.58%
deep learning 0.58%
c# 0.56%
аналитика 0.55%
agile 0.53%
informatica 0.52%
управление проектами 0.52%
обучение и развитие 0.52%
хранилище данных 0.52%
rest api 0.52%
ssrs 0.5%
django framework 0.49%

1312 ключевых навыков: расширенный список ключевых навыков для Data Engineer

5 онлайн-курсов: подборка для Data Engineer Зарплаты в IT: Telegram-канал

Ключевые навыки по некоторым профессиям и специализациям

Востребованные ключевые навыки по некоторым специализациям
Профессия, специальность или технология Ключевые навыки в порядке убывания популярности
Big Data Engineer
python
sql
hadoop
spark
linux
big data
git
docker
scala
java
...
Data Quality Engineer
sql
python
big data
hive
hadoop
postgresql
ms sql
проведение тестирований
qa
ручное тестирование
...

Примеры вакансий для 'Data Engineer' с ключевыми навыками

Lead Data Engineering

Marfatech | МОСКВА |

airflow
clickhouse
cloud
dbt
etl
python
sql
ооп

Перейти к вакансии

Data Engineer

Вкусно — и точка | МОСКВА |

big data
clickhouse
data
data lake
dwh
etl
hadoop
kafka
mlops
ni-fi
postgresql
python
s3
spark
sql
базы данных

Перейти к вакансии

Data Engineer

TradingView | РОСТОВ-НА-ДОНУ |

apashe airflow
big data
docker
etl
linux
postgresql
python
sql
ооп

Перейти к вакансии

DevOps Инженер Big Data

Транснефть-Технологии | МОСКВА |

big data
devops
etl
hadoop
kafka
kubernetes
linux
postgresql
python
sql

Перейти к вакансии

Data Engineer

Aston | РОСТОВ-НА-ДОНУ |

data engineer
hadoop
hive
python
spark
sql

Перейти к вакансии

Data QA Engineer

ИВ РОШЕ | МОСКВА |

sql
анализ данных
работа с базами данных

Перейти к вакансии

Data engineer (Стажер)

Sapiens solutions | МОСКВА |

big data
dwh
greenplum
sql
анализ данных
английский язык
базы данных
дистанционное обучение
обучение и развитие
планирование карьеры
субд

Перейти к вакансии

Data engineer

Ростелеком | МОСКВА |

airflow
clickhouse
dagster
etl
git
postgresql
sql

Перейти к вакансии

Data Engineer

Велесстрой | МОСКВА |

etl
hadoop
mongodb
ms powerbi
python
субд ms sql

Перейти к вакансии

Data Engineer - Data Layer

WILDBERRIES | МОСКВА |

ansible
clickhouse
grafana
greenplum
prometheus

Перейти к вакансии

Junior Data Science Engineer (NLP), Ответы поставщикам

WILDBERRIES | МОСКВА |

data analysis
nlp
python
sql

Перейти к вакансии

Data Engineer

HR Prime | МОСКВА |

airflow
dwh
etl
hadoop
sql

Перейти к вакансии

Data engineer

РОСБАНК | МОСКВА |

etl
ms sql
sql
анализ данных
работа с базами данных

Перейти к вакансии

Middle Data Engineer

МАГНИТ, Розничная сеть | МОСКВА |

hadoop
python
spark
sql

Перейти к вакансии

Manual QA engineer / Инженер по тестированию (Data Services)

YADRO | МОСКВА |

linux
python
схд

Перейти к вакансии

Manual QA engineer / Инженер по тестированию (Data Services)

YADRO | НИЖНИЙ НОВГОРОД |

linux
python
схд

Перейти к вакансии

Data Engineer

ИЦ АЙ-ТЕКО | МОСКВА |

etl
scala
sql

Перейти к вакансии

Data Engineer

Технологии Доверия | МОСКВА |

bi
datamart
dwh
etl
power bi
sql

Перейти к вакансии

Big Data infrastructure engineer/DBA (Москва)

Lesta Games | МОСКВА |

clickhouse
kafka
linux
mongodb
mysql

Перейти к вакансии

Data Engineer (Middle+/Senior)

Employcity | МОСКВА |

docker
grafana
kafka
kibana
postgresql
python
sql

Перейти к вакансии

Data Engineer (Middle+/Senior)

Employcity | САНКТ-ПЕТЕРБУРГ |

docker
grafana
kafka
kibana
postgresql
python
sql

Перейти к вакансии

Data Engineer

GlowByte | МОСКВА |

python
spark (pyspark)
sql

Перейти к вакансии

Data Engineer

USETECH | МОСКВА |

etl

Перейти к вакансии

Разработчик (Data engineer/ETL Engineer)

Heaad | САНКТ-ПЕТЕРБУРГ |

до 160 000 руб. до вычета налогов

airflow
git
python
sql
аналитический склад ума

Перейти к вакансии

Data engineer

Quanthill | САНКТ-ПЕТЕРБУРГ |

airflow
dwh
etl
git
postgresql
python
sql

Перейти к вакансии

Data-engineer

Heaad | МОСКВА |

80 000 - 200 000 руб. на руки

microstrategybi
ms excel
sql

Перейти к вакансии

Data инженер

КАЗАНЬЭКСПРЕСС | САНКТ-ПЕТЕРБУРГ |

250 000 - 450 000 руб. до вычета налогов

airflow
apache kafka
big data
clickhouse
data analysis
data anchor
data vault
dwh
etl
java
kappa
lambda
oozie
postgresql
python
scala
spark
анализ данных

Перейти к вакансии

Data Engineer

X5 Digital | МОСКВА |

etl
greenplum
linux
mongodb
postgresql
python

Перейти к вакансии

Md / Sr Data Scienc инженер

Иннотех, Группа компаний | МОСКВА |

data scienc

Перейти к вакансии

Data-инженер

Российские железные дороги | МОСКВА |

hadoop
matplotlib
numpy
pandas
plotly
seaborn
spark

Перейти к вакансии