Специализация
Data Science / Machine Learning
Ищем Data Engineer'а, который станет частью команды аналитической платформы данных.
Пользователи нашей платформы — это разработчики из продуктовых команд, Data Scientist'ы и аналитики.
Мы хотим создать стабильный, простой в использовании продукт, который станет надежным помощником для решения бизнес-задач любого уровня сложности.
Технологии/инструменты
RHELHadoopHiveSparkGreenplumPostgreSQLAirFlowNiFiZabbixJira/ConfluenceDockerGitlabGrafanaGraphQL
Чем мы занимаемся
- Мы разрабатываем с нуля новое хранилище данных для банка на MPP Greenplum. В качестве модели используем локальную модификацию DV2.0.
- Перед нашей командой стоит задача создать простой и удобный фреймворк для самостоятельной загрузки данных пользователями.
- Мы разрабатываем платформу таким образом, чтобы пользователю не приходилось писать код для добавления новой загрузки, достаточно заполнить метаданные.
Эта вакансия для тебя, если ты
- Уверенно пользуешься SQL (join’ы, агрегатные функции, подзапросы и оконные функции).
- Понимаешь как работают реляционные базы данных, интересуешься архитектурой СУБД, понимаешь основную механику работы БД.
- Хорошо владеешь Python (стандартные библиотеки + Jinja, Psycopg2 и т.п.).
- Имеешь опыт разработки/внедрения систем класса DWH и понимаешь концепцию хранилищ данных.
- Имеешь опыт в разработке сложных ETL-процессов.
- Имеешь опыт работы с Airflow или любым другим оркестратором.
- Пишешь прозрачный и читабельный код.
- Готов учиться и активно развивать свои навыки.
Будет преимуществом:
- Опыт работы с PostgreSQL.
- Опыт работы с распределенными СУБД (MPP, особенно Greenplum), понимание особенностей данных систем.
- Опыт с CI/CD практиками и инструментами.
- Готовность продемонстрировать один из своих проектов на GitHub.
- Знание различных типов СУБД (SQL, NSQL) и профилей использования (OLAP, OLTP), способность аргументированно выбрать оптимальный тип СУБД под задачу.
Условия
- Agile-подход на всех уровнях организации (разработка и развитие сервисов происходит в парадигме Scrum).
- Комфортная культура открытости и отзывчивости.
- Сильные профессиональные IT-сообщества.
- Отсутствие бюрократии и дресс-кода.
- Полностью удаленный формат работы.
- Обучение, митапы, конференции.
- ДМС со второй недели работы со стоматологией и массажем в РФ.
- Страхование жизни и выезжающих за рубеж, страхование в направлении онкологии.
- Специальные предложения по вкладам и кредитам.
- Скидки от компаний-партнеров по программе Prime Zone в РФ.
- Доплата за 14 дней в году по больничному листу до оклада (после испытательного срока).
- Доплата к отпускам, оформленным в январе и мае.
- 3 оплачиваемых отгула в год.
- Еще десятки льгот и бонусов для сотрудников.