Senior Big Data Software Engineer

EPAM у пошуку Senior Big Data Software Engineer для розробки та підтримки внутрішніх систем сховищ даних для продуктів та додатків нашого клієнта.ResponsibilitiesРозробка та підтримка складних систем сховищ даних для обробки великих обсягів данихПроєктування і оптимізація архітектури баз даних та схем данихРозробка та впровадження ефективних запитів SQL для аналізу та обробки данихРозробка і впровадження програмних рішень за допомогою екосистеми Hadoop (Yarn, Map Reduce, Hive, HDFS)Використання Spark та Kafka для обробки та передачі даних у реальному часіНалаштування та керування хмарними сервісами AWS (EMR, S3, Lambda)Оптимізація існуючих рішень для зменшення витрат часу та ресурсівСпівпраця з іншими інженерами та командами для створення масштабованих і ефективних рішеньВиконання аналізу даних, створення звітів та рекомендацій для покращення системВизначення й реалізація кращих практик для забезпечення безпеки та цілісності данихУчасть у підготовці технічної документації та підтримка документації для користувачівRequirementsБільше 4 років досвіду в розробці сховищ даних та проєктуванні баз данихЕксперт в SQL з досвідом роботи не менше 2+ роківХороші навички розробки на PythonРозробка програмних рішень з використанням компонент екосистеми Hadoop (Yarn, Map Reduce, Hive, HDFS)Практичний досвід з Spark та KafkaДосвід роботи з хмарними сервісами AWS (EMR, S3, Lambda)Відмінні аналітичні навички та навички комплексного вирішення проблемХороші комунікаційні та презентаційні навичкиУважність до деталейЗдатність дотримуватися стислих термінів та вміння розставляти пріоритетиNice to haveДосвід роботи в адмініструванні баз данихДосвід роботи з AWS RedshiftПрактичний досвід з pysparkРозуміння підходів масштабування сервісів/аплікаційWe offerВідпустку та лікарняні дні (в тому числі без медичної довідки)Широку лінійку страхових програм Добровільного Медичного Страхування (ДМС) із забезпеченням як медичного лікувавання, так і різних профілактичних опцій (включно із спортивними активностями)Оформлення медичного страхування для членів родини за корпоративними тарифамиПідтримку від компанії під час знакових життєвих подій (народження або всиновлення дитини, шлюб та інше)Підтримку психологічного комфорту: знижки на послуги спеціалістів з ментального здоров'я або коучів, тематичні тренінгиE-kids - безкоштовну програму навчання для дітей EPAM-ерів мовам програмуванняПриємні корпоративні…