Middle Data Engineer (Communication Management Solution)

Дата:24 Мая, 2023
Работодатель:Sigma Software
Город:Київ (віддалено)
Квалификация:Щонайменьше 1 рік досвіду роботи з інструментами AWS, такими як Glue, Athena, Redshift, S3, Lambda, CloudFormation
3+ роки досвіду роботи з Python та SQL
Досвід роботи з Kafka
Досвід роботи з трансформацією та обробкою PySpark
Досвід запуску та оптимізації AWS Redshift DB
Досвід роботи з BI-інструментами (перевага надається Tableau)
Знання інженерії даних, наприклад, розмірного моделювання, ETL, інструментів звітності, регулювання даних, зберігання даних на основі інфраструктури AWS
Володіння розмовною та письмовою англійською мовою на рівні Upper-Intermediate
Задачи:Управління даними, наприклад їх перевірка та обробка
Впровадження конвеєрів на базі хмарних платформ AWS Cloud (Glue, Lambda, S3, Redshift тощо)
Виявлення, розуміння та впорядкування різних джерел даних і структурування їх у чисті моделі даних з чіткими та зрозумілими схемами
Створення конвеєра для збору даних в реальному часі та пакетних даних в озеро даних
Пропонування рішень для обробки даних в реальному часі та пакетної обробки даних
Контакты:https://rabota.ua/ua/company825/vacancy9496366