znantrend

100 ключевых навыков Data Engineer | статистика востребованности компетенций, умений, знаний, технологий, навыков (skills)

Ключевые навыки: какие востребованы

Анализ популярности ключевого навыка для специализации выполняется на основе вакансий, соответствующих специализации (рассматриваются только те вакансии, для которых указаны ключевые навыки). Под общим термином "специализация" могут подразумеваться термины "должность", "уровень должности", "профессия", "специализация по технологии", "технология" и так далее. Все вакансии взяты с hh.ru. Популярность ключевого навыка в исследовании измеряется количеством вакансий, в которых навык указан как ключевой (отношение количества вакансий по специализации с ключевым навыком к общему количеству вакансий по специализации). Обновление данных обычно происходит не реже 1 раза в неделю (частота обновления данных также зависит от частоты появления новых вакансий по специализации).

Какие вакансии рассматривались: поиск вакансий по наличию слов 'DATA ENGINEER' (или их синонимов) внутри заголовка вакансии. Область (местоположение) поиска вакансий: 'РОССИЯ'.

Понятие 'Data Engineer' рассматривается как общее понятие, поэтому при формировании набора навыков также учитываются навыки из вакансий для следующих специализаций: 'Big Data Engineer', 'Data Quality Engineer' и так далее. Специализации перечислены в разделе "Ключевые навыки по некоторым профессиям и специализациям": возможно, списки навыков по уточнённым специализациям будут более полезными.

обзор навыков для различных профессий

Data Engineer: обзор зарплат из вакансий

940 ключевых навыков: расширенный список ключевых навыков для Data Engineer

Data Engineer: ключевые навыки (key skills)
Ключевой навык (key skill) Доля вакансий для 'Data Engineer' с этим ключевым навыком
sql 60.4%
python 59.37%
etl 24.1%
hadoop 23.9%
spark 20.17%
postgresql 17.36%
linux 14.92%
git 11.68%
java 11.19%
big data 11.13%
dwh 10.88%
scala 10.19%
английский язык 9.35%
airflow 8.44%
docker 7.98%
clickhouse 7.12%
базы данных 7.06%
kafka 6.83%
hive 6.6%
ms sql 5.65%
oracle 4.42%
data analysis 4.19%
анализ данных 4.16%
работа с базами данных 4.07%
greenplum 3.7%
субд 3.24%
pandas 3.21%
aws 3.16%
machine learning 2.9%
ms sql server 2.53%
bash 2.32%
kubernetes 2.21%
oracle pl/sql 2.12%
ml 2.07%
power bi 2.07%
mysql 1.95%
apache airflow 1.89%
tableau 1.84%
atlassian jira 1.81%
ci/cd 1.75%
аналитическое мышление 1.72%
teradata 1.69%
nosql 1.58%
ооп 1.58%
data engineer 1.41%
bi 1.29%
mongodb 1.29%
grafana 1.26%
data science 1.18%
pytorch 1.18%
it 1.15%
numpy 1.15%
databases 1.12%
c++ 1.09%
apache nifi 1.06%
ssis 1.06%
cистемы управления базами данных 1.03%
ms powerpoint 1.03%
ssas 1.03%
nifi 1.0%
ansible 0.98%
qa 0.95%
data mining 0.92%
работа с большим объемом информации 0.92%
atlassian confluence 0.89%
azure 0.89%
business intelligence systems 0.89%
gitlab 0.89%
data engineering 0.86%
математическая статистика 0.86%
работа в команде 0.86%
vertica 0.83%
c# 0.8%
управление проектами 0.8%
deep learning 0.77%
hdfs 0.77%
sas 0.77%
ssrs 0.77%
apache spark 0.72%
informatica 0.72%
jenkins 0.72%
обучение и развитие 0.72%
cassandra 0.69%
prometheus 0.69%
scrum 0.69%
django framework 0.66%
tensorflow 0.66%
devops 0.63%
elasticsearch 0.63%
redis 0.63%
terraform 0.63%
flask 0.6%
powerbi 0.6%
transact-sql 0.6%
analytical skills 0.57%
pyspark 0.57%
sklearn 0.57%
системное мышление 0.57%
agile 0.55%
ms excel 0.55%

940 ключевых навыков: расширенный список ключевых навыков для Data Engineer

Зарплаты в IT: Telegram-канал

Ключевые навыки по некоторым профессиям и специализациям

Востребованные ключевые навыки по некоторым специализациям
Профессия, специальность или технология Ключевые навыки в порядке убывания популярности
Big Data Engineer
python
sql
linux
hadoop
spark
big data
docker
git
scala
java
...
Data Quality Engineer
sql
python
postgresql
big data
qa
hive
ручное тестирование
hadoop
data quality
git
...

Примеры вакансий для 'Data Engineer' с ключевыми навыками

Data Engineer (VK Play)

VK | МОСКВА |

airflow
hadoop
python

Перейти к вакансии

Спикер на курс «Data Engineer»

Skillbox | МОСКВА |

java
python
навыки презентации
обучение
подготовка презентаций
создание презентационных материалов о компании

Перейти к вакансии

Data Engineer

Nitka Technologies | МОСКВА |

airflow
databricks
data quality
etl-процессы
kafka
pyspark
python
sap business objects
snowflake
spark
sql
teradata

Перейти к вакансии

Data Engineer

СБЕР | МОСКВА |

big data
hadoop
java
scala
sql

Перейти к вакансии

Data Engineer (PySpark)

Axenix (ранее Accenture) | МОСКВА |

aws
hadoop
microsoft azure databricks
pyspark
spark
yandex.cloud

Перейти к вакансии

Middle Data Engineer (Omni 2)

МАГНИТ, Розничная сеть | КРАСНОДАР |

hive
linux
python
spark
sql

Перейти к вакансии

Senior Data engineer

Volna.tech | МОСКВА |

dwh
etl
mpp
ms sql
oracle
postgresql

Перейти к вакансии

Data Engineer Spark (Розничные риски)

Иннотех, Группа компаний | КРАСНОДАР |

dwh
postgresql
python
scala
spark
sql

Перейти к вакансии

Data Engineer Spark (Розничные риски)

Иннотех, Группа компаний | ОМСК |

dwh
postgresql
python
scala
spark
sql

Перейти к вакансии

Data Engineer (remote)

BestDoctor | МОСКВА |

от 200 000 руб. на руки

airflow
greenplum
postgresql
python
sql

Перейти к вакансии

Middle ML Engineer/Data Scientist в Рекомендательную платформу (Big Data)

МТС | МОСКВА |

a/b тесты
airflow
api
docker
git
hadoop
hive
ml
mlops
nosql
nympy
pandas
python
spark
sql

Перейти к вакансии

Data Engineer (Scala/Java)

СБЕР | МОСКВА |

big data
hadoop
java
scala
spark
sql
базы данных

Перейти к вакансии

Data engineer

билайн | МОСКВА |

airflow
big data
hadoop
kafka
linux
nifi
python
scala
spark
sql

Перейти к вакансии

Junior Data Engineer

СБЕР | МОСКВА |

hadoop
hive
python
spark
аналитическое мышление

Перейти к вакансии

Data Engineer (Платежи и переводы)

СБЕР | МОСКВА |

big data
hadoop
java
scala
sql

Перейти к вакансии

Data Engineer (Middle/Senior)

Синимекс | МОСКВА |

hadoop
java
scala
spark

Перейти к вакансии

Senior Data Engineer

ИНВИТРО | МОСКВА |

bi
big data
c#
dwh
etl
html
linux
.net framework
sql

Перейти к вакансии

Data Engineer

Марс | МОСКВА |

data platform
java
python
scala
spark
sql
yandex cloud

Перейти к вакансии

Data Quality Engineer/Инженер по качеству данных

Hoff Tech | МОСКВА |

linux
power bi
sql
transact-sql

Перейти к вакансии

DevOps инженер (Big Data)

Okko | МОСКВА |

airflow
elastalert
k8s
vmalert

Перейти к вакансии

Data инженер (ML)

Bell Integrator | МОСКВА |

git
hadoop
spark
sql

Перейти к вакансии

Data Engineer / Инженер данных

Альфа Капитал | МОСКВА |

dwh
etl
java
oracle
spring cloud data flow

Перейти к вакансии

Data engineer

KamaGames Studio | МОСКВА |

dwh
etl
hadoop
nosql
postgresql
python
sql

Перейти к вакансии

Senior QA Engineer (Data stack)

EXNESS Global Limited | МОСКВА |

от 4 500 EUR на руки

docker
k8s
kafka
python
quality assurance
sql

Перейти к вакансии

Senior Data Engineer

Internest | САНКТ-ПЕТЕРБУРГ |

clickhouse
hadoop
linux
python

Перейти к вакансии

Python Developer / Data Engineer

Smart Design | САНКТ-ПЕТЕРБУРГ |

airflow
ansible
data mining
django framework
docker
helm
kubernetes
mysql
postgresql
python
sql

Перейти к вакансии

Senior Data Scientist / ML Engineer

Mindbox | МОСКВА |

300 000 - 450 000 руб. на руки

docker
fastcluster
implicit
lightgbm
numpy
pandas
python
scikit
scipy
spacy
sql

Перейти к вакансии

Middle/Senior Data Engineer

ФГБУ ЦСП ФМБА России | МОСКВА |

big data
data analysis
etl
git
linux
postgresql
python
sql

Перейти к вакансии

Ведущий Data Engineer (Розничные риски)

Иннотех, Группа компаний | САНКТ-ПЕТЕРБУРГ |

dwh
etl
hadoop
postgresql
python
sas
sql

Перейти к вакансии

Junior Data Engineer / Data Analyst

СБЕР | МОСКВА |

python
sql

Перейти к вакансии