Добро пожаловать в форум, Guest  >>   Войти | Регистрация | Поиск | Правила | В избранное | Подписаться
Все форумы / Вакансии Новый топик    Ответить
 Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
andrei.ilin
Member

Откуда:
Сообщений: 67
Middle Java developer/Senior разработчик сервисов федеративного доступа к данными и сервисов защиты данных - 120 - 300 т.р. Рассмотрим начинающих карьеру с сильными инженерными наклонностями.

Мы ищем Java разработчиков для наших продуктов - сервисов федеративно доступа. Мы разрабатываем инфраструктурные компонента на основе open source кода для дата центра с данными объемом 10+ петабайт данных и десятками тысяч ядер, с фокусом на защиту данных и реализацию алгоритмов безопастности.
- Waggle-Danсе: Обеспечивает возможность работы с HMS нескольких кластеров Hadoop (SDP/Cloudera) при условии наличия федерации между кластерами. Фактически представляет собой proxy сервис, который в онлайне запрашивает данные из внешнихHMS. Технически это Java процесс который запускается отдельно от Cloudera и реализует Thrift интерфейс Hive Meta store.
- Sentry-proxy: Обеспечивает авторизация операций для Hive и Impala. Является proxy сервисов, который для настроенных федераций получает авторизационную информацию из внешних сервисов Sentry и Hadoop использует эту информацию для авторизации операция пользователя в Hive и Impala. Сервис собой представляет реализацию интерфейса Sentry и может запускаться как в случае наличия Sentryсервиса на локальном кластере, так и в случае его отсутствия. В случае отсутствия создаются синтетические права пользователям кластера.
- HDFS Gateway: Представляет собой proxy cервис (шлюз), реализующий Hadoop Data protocol. Для внешних пользователей представляет собой HDFS, к которому можно настраивать федерацию и подключатcя как Hadoop client. В процесс запроса данных компонент может трансформировать данные отдаваемые клиенту HDFS любым образом. В текущей момент планируется использовать как компонент Сервиса защиты данных для применения политик доступа к данным подписок. Потенциально может работать с любыми данными хранящимися в HDFS, сейчас реализована поддержка Apache parquet.
- Компоненты по работе с алгоритмами безопастности и сервисы защиты данных:
Основные типы защиты - at-rest/in-transit/in-use, поддержка обратимого и необратимого шифрования, токенизации (vaultless), обезличивание, контроль целостности и доступа. Адаптеры для различных инфраструктурных компонентов: Hadoop/Kafka и другие компоненты экосистемы Hadoop.

Вам предстоит:
- Исследовать OSS библиотеки и фреймворки, проводить их анализ и доработку
- Разрабатывать компоненты для маскирования и шифрования, компоненты работы с данными
- Работать с библиотеками шифрования
Требования:
- Уверенное владение Java SE
- Уверенные навыки кодирования
- Желателен опыт разработки библиотек и фреймворков
- Желателен опыт работы с авторизацией и ауфенктикацией в Java
- Будет плюсом опыт разработки ETL или инструментов для аналитики
- Будет плюсом опыт работы с различными протоколами (Protobuf, Thrift) + сетевыми протоколами (UDP/TCP)
Наши процессы/орг. информация:
- Москва/Московская область
- Возможна полная удаленка либо присутствие в офисе несколько дней в неделю
- ДМС/Фитнес
- Возможности карьерного роста
- Обучение - курсы, участие в конференциях, несколько обучающих онлайн ресурсов, Coursera
- Если вы что то не знаете, но у вас светлая голова и склонность к инженерной работе - мы вас всему научим

Инженер DevOps/SRE/Senior SRE - 120 - 300 т.р. - Рассмотрим начинающих карьеру с сильными инженерными наклонностями.

Мы ищем DevOps инженера/SRE для наших продуктов - сервисов федеративно доступа. Мы разрабатываем инфраструктурные компонента на основе open source кода для дата центра с данными объемом 10+ петабайт данных и десятками тысяч ядер.
- Waggle-Danсе: Обеспечивает возможность работы с HMS нескольких кластеров Hadoop (SDP/Cloudera) при условии наличия федерации между кластерами. Фактически представляет собой proxy сервис, который в онлайне запрашивает данные из внешнихHMS. Технически это Java процесс который запускается отдельно от Cloudera и реализует Thrift интерфейс Hive Meta store.
- Sentry-proxy: Обеспечивает авторизация операций для Hive и Impala. Является proxy сервисов, который для настроенных федераций получает авторизационную информацию из внешних сервисов Sentry и Hadoop использует эту информацию для авторизации операция пользователя в Hive и Impala. Сервис собой представляет реализацию интерфейса Sentry и может запускаться как в случае наличия Sentryсервиса на локальном кластере, так и в случае его отсутствия. В случае отсутствия создаются синтетические права пользователям кластера.
- HDFS Gateway: Представляет собой proxy cервис (шлюз), реализующий Hadoop Data protocol. Для внешних пользователей представляет собой HDFS, к которому можно настраивать федерацию и подключатcя как Hadoop client. В процесс запроса данных компонент может трансформировать данные отдаваемые клиенту HDFS любым образом. В текущей момент планируется использовать как компонент Сервиса защиты данных для применения политик доступа к данным подписок. Потенциально может работать с любыми данными хранящимися в HDFS, сейчас реализована поддержка Apache parquet.
- Компоненты по работе с алгоритмами безопастности и сервисы защиты данных:
Основные типы защиты - at-rest/in-transit/in-use, поддержка обратимого и необратимого шифрования, токенизации (vaultless), обезличивание, контроль целостности и доступа. Адаптеры для различных инфраструктурных компонентов: Hadoop/Kafka и другие компоненты экосистемы Hadoop.
Вам предстоит:
- Создавать пайплайны и скрипты по установке наших продуктов
- Разработка трубы CI/CD
- Поддержка продуктов в рамках 3-й линии
- Участвовать и координировать ПСИ
- Автоматизация тестирования
Требования:
- Уверенное владение Ansible, Linux, bash
- Опыт разработки пайплайнов CI/CD
- Большой плюс - опыт работы c Hadoop кластерами -Cloudera/Apache BigTop
- Опыт работы с промышленными средами и понимание процессов сопровождения
- Плюс знание Python или другого языка для автоматизации
- Плюс - опыт разработки автотестов
Наши процессы/орг. информация:
- Москва/Московская область
- Работает по Scrum
- Возможна полная удаленка либо присутствие в офисе несколько дней в неделю
- ДМС/Фитнес
- Возможности карьерного роста
- Обучение - курсы, участие в конференциях, несколько обучающих онлайн ресурсов, Coursera
- Если вы что то не знаете, но у вас светлая голова и склонность к инженерной работе - мы вас всему научим

Email - andrei.ilin@gmail.com
6 июн 20, 00:46    [22146727]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
Guzya
Member

Откуда:
Сообщений: 556
Отправил резюме.
8 июн 20, 11:42    [22147365]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
Zzz79
Member

Откуда:
Сообщений: 386
год работы в коммерческой разрабоке банковских продуктов,готов к интервью- почта в профиле
12 июн 20, 22:29    [22150026]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
andrei.ilin
Member

Откуда:
Сообщений: 67
Да, я виде резюме. Кому не отвечаю (должны назначить собеседование HR) - вы не подходите по резюме.
13 июн 20, 20:38    [22150257]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
monstrU
Member

Откуда: Москва
Сообщений: 1208
andrei.ilin
Да, я виде резюме. Кому не отвечаю (должны назначить собеседование HR) - вы не подходите по резюме.


какая то религия не позволяет ответить человеку, что его навыки вам не подходят?
если коротко то это невежливо
16 июн 20, 08:31    [22151343]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
Murmakil
Member

Откуда: Москва
Сообщений: 70
monstrU,

Это еще ничего. Вот когда после тестового задания и собеседования молчат это еще хуже. Впрочем, меня убеждают ,что это норма.
16 июн 20, 09:29    [22151367]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
alexeyvg
Member

Откуда: Moscow
Сообщений: 31328
Murmakil
monstrU,

Это еще ничего. Вот когда после тестового задания и собеседования молчат это еще хуже. Впрочем, меня убеждают ,что это норма.
После собеседования/тестов нужно отвечать, но отвечать на каждое письмо/резюме совершенно не обязательно.

monstrU вряд ли отвечает на все письма во входящих, почему все обязательно должны отвечать на его письма?
16 июн 20, 10:45    [22151421]     Ответить | Цитировать Сообщить модератору
 Re: Middle/Senior Java Dev and Devops engineer/SRE/Senior SRE - Москва и обл. Полная удаленка  [new]
monstrU
Member

Откуда: Москва
Сообщений: 1208
alexeyvg
Murmakil
monstrU,

Это еще ничего. Вот когда после тестового задания и собеседования молчат это еще хуже. Впрочем, меня убеждают ,что это норма.
После собеседования/тестов нужно отвечать, но отвечать на каждое письмо/резюме совершенно не обязательно.

monstrU вряд ли отвечает на все письма во входящих, почему все обязательно должны отвечать на его письма?


когда люди занимаются поиском сотрудников, то в ответ на резюме отклик стоить дать. а вот на спам - вы правы, ни к чему.
22 июн 20, 19:15    [22155425]     Ответить | Цитировать Сообщить модератору
Все форумы / Вакансии Ответить