Инженер сопровождения

SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Стек технологий: Linux (RHEL), Hadoop (Hive, YARN, Oozie) RH IDM IPA (LDAP, IDM, CA, DNS, HBAC, SUDO), PostgreSQL + Patroni, Apache Ozone, Kafka, HAProxy, NGinx, Grafana + Prometheus, Ansible, Jenkins, Vault (hashicorp), Git, Bash, Python. Место работы: г Москва Требуемый опыт: От 1 года до 3 лет Задачи * установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры * участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов * автоматизация рутинных операций для повышения производительности и надежности систем (самостоятельно и с привлечением смежных команд, выставление ТЗ на контрагентов) * анализ и оперативное устранение нештатных ситуаций, отказов приложений, а также исследование корневых причин их возникновения * поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку * создание эксплуатационной документации для сопровождаемых систем * организация работ, взаимодействие со смежными командами, исправления выявленных недостатков. Требования * глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux * написание различных SQL запросов, понимание что такое DML, DDL, DCL, TCL, знание принципов работы реляционных БД * понимание работы стека TCP/IP * опыт эксплуатации CI/CD систем (Jenkins/Github/TeamCity/etc) и с системами мониторинга (Prometheus, Zabbix) * понимание технологий интеграции между системами (форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ) * опыт автоматизации на скриптовых языках (shell/perl/python/etc) * опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP * знание ITSM, ITIL и опыт написания технической документации и технических заданий. Будет плюсом * опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flume, Solr, Ranger * английский язык на уровне чтения технической документации * техническое образование. Условия * офисный формат работы по адресу г Москва, наб Новоданиловская (БЦ Даниловский Форт, ДФ), 10 * график: 5/2 * ежегодный пересмотр зарплаты и годовая премия * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * программа адаптации и помощь руководителя на старте * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * подписка Прайм с возможностью совместного использования на трёх близких * вознаграждение за рекомендацию друзей в команду Сбера.