Інженер даних
Для розвитку напрямку з управління даними, потрібен інженер даних з глибокими знання в області сховищ даних (бажано стек SAP), великих даних, озер даних з досвідом практичного впровадження.
Вимоги:
• Інструменти ETL/ELT (бажано стек SAP)
• Розподілені системи та сховища: Hadoop, Apache Spark, Kafka (буде плюсом)
• Розробка алгоритмів та розуміння структури даних (процеси, логічні ланцюжки, послідовності дій у кожному типі структур).
• Досвід роботи з форматами даних parquet, OData, xml, json, MS Office
• Бази даних: знання в популярних базах даних (стек SAP, стек Azure, стек AWS, MSSQL, Oracle, MySQL тощо)
• SQL (бажано стек SAP)
• Python (буде плюсом)
• Знання хмарних платформ (загальні знання + інструменти озера даних): MS Azure, AWS
• Конвеєри: знання в обробці даних у реальному часі
• Вміння швидко знайти рішення для підключення до зовнішніх джерел, таких як програми стека SAP, WEB API, файли (структуровані та неструктуровані), бази даних вище в списку
Функції:
Аналіз джерел та одержувачів даних
Аналіз та підготовка даних до інтеграції
Створення та моніторинг потоків даних (SAP Data Services, SAP Data Intelligence, Python, AWS)
Розробка рішень у сховищі даних (SAP HANA SQL DWH)
Участь у формуванні стратегії та розвитку управління даних компанії