znantrend

100 ключевых навыков Data Engineer | статистика востребованности компетенций, умений, знаний, технологий, навыков (skills)

Ключевые навыки: какие востребованы

Анализ популярности ключевого навыка для специализации выполняется на основе вакансий, соответствующих специализации (рассматриваются только те вакансии, для которых указаны ключевые навыки). Под общим термином "специализация" могут подразумеваться термины "должность", "уровень должности", "профессия", "специализация по технологии", "технология" и так далее. Все вакансии взяты с hh.ru. Популярность ключевого навыка в исследовании измеряется количеством вакансий, в которых навык указан как ключевой (отношение количества вакансий по специализации с ключевым навыком к общему количеству вакансий по специализации). Обновление данных обычно происходит не реже 1 раза в неделю (частота обновления данных также зависит от частоты появления новых вакансий по специализации).

Какие вакансии рассматривались: поиск вакансий по наличию слов 'DATA ENGINEER' (или их синонимов) внутри заголовка вакансии. Область (местоположение) поиска вакансий: 'РОССИЯ'.

Понятие 'Data Engineer' рассматривается как общее понятие, поэтому при формировании набора навыков также учитываются навыки из вакансий для следующих специализаций: 'Big Data Engineer', 'Data Quality Engineer' и так далее. Специализации перечислены в разделе "Ключевые навыки по некоторым профессиям и специализациям": возможно, списки навыков по уточнённым специализациям будут более полезными.

обзор навыков для различных профессий

Data Engineer: обзор зарплат из вакансий

5 онлайн-курсов: подборка для Data Engineer

1114 ключевых навыков: расширенный список ключевых навыков для Data Engineer

Data Engineer: ключевые навыки (key skills)
Ключевой навык (key skill) Доля вакансий для 'Data Engineer' с этим ключевым навыком
python 57.47%
sql 56.7%
etl 25.36%
hadoop 23.06%
spark 19.5%
postgresql 17.58%
linux 13.2%
dwh 11.86%
big data 11.24%
git 10.56%
java 10.43%
scala 9.85%
airflow 9.6%
clickhouse 8.04%
docker 7.76%
английский язык 7.38%
базы данных 6.89%
kafka 6.87%
hive 6.27%
ms sql 5.55%
greenplum 4.39%
oracle 4.2%
data analysis 4.1%
работа с базами данных 3.99%
анализ данных 3.95%
субд 3.58%
pandas 3.05%
machine learning 2.82%
ms sql server 2.58%
aws 2.56%
kubernetes 2.37%
ml 2.28%
bash 2.18%
power bi 2.09%
apache airflow 2.01%
mysql 1.9%
oracle pl/sql 1.9%
ci/cd 1.77%
teradata 1.77%
tableau 1.71%
аналитическое мышление 1.69%
nosql 1.66%
atlassian jira 1.58%
data engineer 1.47%
ооп 1.43%
bi 1.28%
data science 1.28%
nifi 1.24%
mongodb 1.17%
numpy 1.17%
databases 1.15%
grafana 1.15%
pytorch 1.11%
it 0.98%
vertica 0.98%
c++ 0.96%
cистемы управления базами данных 0.92%
cassandra 0.9%
data engineering 0.9%
ssas 0.9%
ansible 0.87%
qa 0.87%
ssis 0.87%
работа с большим объемом информации 0.87%
apache nifi 0.85%
data mining 0.85%
ms powerpoint 0.85%
apache kafka 0.83%
atlassian confluence 0.83%
azure 0.83%
gitlab 0.83%
pyspark 0.83%
математическая статистика 0.81%
business intelligence systems 0.77%
работа в команде 0.73%
apache spark 0.7%
prometheus 0.7%
deep learning 0.68%
hdfs 0.68%
управление проектами 0.68%
devops 0.66%
scrum 0.66%
ssrs 0.66%
обучение и развитие 0.64%
elasticsearch 0.62%
informatica 0.62%
sas 0.62%
c# 0.6%
jenkins 0.6%
redis 0.6%
tensorflow 0.58%
transact-sql 0.58%
elt 0.55%
powerbi 0.55%
pytest 0.55%
sklearn 0.55%
django framework 0.53%
go 0.53%
nlp 0.53%
agile 0.51%

1114 ключевых навыков: расширенный список ключевых навыков для Data Engineer

5 онлайн-курсов: подборка для Data Engineer Зарплаты в IT: Telegram-канал

Ключевые навыки по некоторым профессиям и специализациям

Востребованные ключевые навыки по некоторым специализациям
Профессия, специальность или технология Ключевые навыки в порядке убывания популярности
Big Data Engineer
python
sql
hadoop
linux
spark
big data
docker
git
java
scala
...
Data Quality Engineer
sql
python
big data
postgresql
hive
qa
hadoop
ручное тестирование
data quality
spark
...

Примеры вакансий для 'Data Engineer' с ключевыми навыками

Data Engineer (Spark developer)

Axenix (ранее Accenture) | МОСКВА |

airflow
greenplum
kafka
postgresql
python
redis
spark

Перейти к вакансии

Инженер данных / Data Engineer

СИБУР, Группа компаний | МОСКВА |

hadoop
java
oracle
scala
spark
sql

Перейти к вакансии

Data Engineer (Greenplum)

Точка | МОСКВА |

до 400 000 руб. на руки

clickhouse
dwh
etl
greenplum
hadoop
oracle
oracle pl/sql

Перейти к вакансии

Data Engineer

Aston | САНКТ-ПЕТЕРБУРГ |

airflow
python
sql

Перейти к вакансии

Data Engineer

Aston | РОСТОВ-НА-ДОНУ |

airflow
data engineer
iron python
sql

Перейти к вакансии

Data Engineer / Инженер данных

Марс | МОСКВА |

azure
databases
dwh
git
hadoop
python
scala
spark
sql
yandex cloud

Перейти к вакансии

Программист баз данных (Data Engineer)

Фарматика | БЛАГОВЕЩЕНСК (АМУРСКАЯ ОБЛАСТЬ) |

от 100 000 руб. на руки

linux
ms sql
postgresql
python
sql

Перейти к вакансии

Data Engineer

Велесстрой | МОСКВА |

etl
hadoop
mongodb
ms powerbi
python
субд ms sql

Перейти к вакансии

Data-инженер

ГИСГИС | КАЗАНЬ |

postgresql
sql
базы данных
информационные технологии
субд

Перейти к вакансии

Data Engineer

WONE IT | МОСКВА |

до 200 000 руб. на руки

big data
clickhouse
databases
postgresql
sql
английский язык (intermediate)

Перейти к вакансии

Data Engineer

PARI | МОСКВА |

data analysis
docker
etl
sql

Перейти к вакансии

Senior Data Engineer (DWH, Spark)

EXNESS Global Limited | САНКТ-ПЕТЕРБУРГ |

5 000 - 5 500 EUR на руки

big data
ci/cd
k8s
postgresql
pyspark
python
spark

Перейти к вакансии

Middle Backend Data Engineer (Python)

Тазмар | МОСКВА |

150 000 - 250 000 руб. на руки

apache airflow
big data
docker
git
js
kafka
kubernetes
neo4j
postgresql
python
гис

Перейти к вакансии

Data Engineer

Литрес | МОСКВА |

data analysis
data science
etl
python
sql

Перейти к вакансии

Data engineer

Банк ВТБ (ПАО) | КРАСНОДАР |

airflow
etl
postgresql
python

Перейти к вакансии

Data engineer

Банк ВТБ (ПАО) | САМАРА |

etl
postgresql
python

Перейти к вакансии

Data Engineer

Газпромбанк | МОСКВА |

hadoop
sql

Перейти к вакансии

Senior/middle Data Engineer

Группа компаний С7 | МОСКВА |

airflow
kafka
python
rabbitmq
spark

Перейти к вакансии

Data engineer (Middle)

ФЛАУВАУ | МОСКВА |

airflow
python
sql

Перейти к вакансии

Data Engineer

Апптимизм | МОСКВА |

azure
datalake
dwh
etl
hadoop
hive
python
spark
sql
yandex cloud platform

Перейти к вакансии

Data Engineer

Playkot | МОСКВА |

clickhouse
python
scala
spark
sql

Перейти к вакансии

Data engineer / Разработчик DWH / ETL developer

Media Instinct Group | МОСКВА |

python
sql

Перейти к вакансии

Data Engineer (Senior)

Predicto | МОСКВА |

300 000 - 400 000 руб. на руки

python
spark
sql

Перейти к вакансии

Data Engineer (ETL) Москва

IBS | МОСКВА |

dwh
etl
greenplum
hadoop
linux
pl/sql
postrgesql
sql
база данных: oracle

Перейти к вакансии

Senior Data Engineer

Контур | КАЗАНЬ |

airflow
etl
python
sql

Перейти к вакансии

Data Engineer (ETL)

Carprice | МОСКВА |

от 250 000 руб. на руки

big data
ci/cd
clickhouse
databases
docker
dwh
etl
jira
linux
python
sql
базы данных

Перейти к вакансии

Data Analyst/Data engineer

СБЕР | МОСКВА |

python

Перейти к вакансии

ECommerce Data Engineer

PepsiCo | МОСКВА |

airflow
azure
databases
data engineer
docker
ecomm
kubernetes
python
rdbms
sql

Перейти к вакансии

Middle Data Engineer в продукт СТВ (Big Data)

МТС | МОСКВА |

greenplum
hadoop
pyspark
python
spark
sql
teradata

Перейти к вакансии

Data Engineer

Altenar | ВЛАДИМИР |

business intelligence
data engineer
dwh
etl
git
hadoop
hdfs
hive
kubernetes
spark

Перейти к вакансии