Data Engineer

Чем предстоит заниматься:

• Разрабатывать и внедрять алгоритмы парсинга данных из файлов Excel в базу данных Hadoop.
• Проектировать и реализовывать ETL-процессы (Extract/Transform/Load) для передачи данных между различными источниками и целевой базой данных.
• Оптимизировать процессы загрузки и выгрузки данных между различными системами.
• Обеспечивать целостность и безопасность данных при их передаче и хранении.
• Создавать и поддерживать скрипты для автоматизации задач обработки данных.
• Мониторить и оптимизировать производительность системы хранения данных.
• Взаимодействовать с командой разработчиков и аналитиков для решения бизнес-задач.

Наши пожелания к кандидатам:

• Иметь опыт работы дата-инженером от 2 лет.
• Обладать отличными знаниями SQL и опытом работы с реляционными базами данных.
• Глубоко понимать принципы работы распределённых систем хранения данных (HDFS, HBase и др.).
• Иметь опыт разработки на Python для работы с большими данными.
• Обладать навыками работы с инструментами анализа больших данных (Apache Spark, Apache Hive, Apache Impala и др.).
• Иметь опыт работы с Apache Airflow или другими средствами оркестрации задач.
• Уметь работать с версиями кода (Git).
• Обладать хорошими коммуникативными навыками и способностью работать в команде.

Что мы предлагаем:

• Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования.
• Возможность гибридного или удалённого графика работы.
• Карьерный рост: ты будешь понимать, что нужно сделать для перехода на другой уровень.
• Чувство локтя: у нас дружелюбная атмосфера и команда лучших профессионалов, которые готовы делиться с тобой экспертизой.
• Забота о твоём здоровье: программа ДМС, куда входит стоматология и обслуживание в лучших клиниках города, скидки на абонементы в фитнес-клубы, неформальные спортивные сообщества.
• Возможности для разнообразного досуга: скидки на услуги туристических агентств, продукты питания, в рестораны и бары, в магазины и салоны красоты.