Работа: в Москве, 7 вакансий

Вам предстоит руководить командой Java-разработки и принимать непосредственное участие в развитии продуктов Arenadata для распределённого хранения, пакетной и потоковой обработки больших объёмов данных, включая Arenadata Hyperwave и Arenadata Streaming.

Стек технологий:

• Java, Apache Hadoop, Apache Spark, Apache Kafka, Linux, Maven.
• В экосистеме продуктов также используются HBase, Hive, Ozone, Kyuubi, NiFi, Flink, Trino, Impala, Iceberg, ZooKeeper, Docker и другие технологии распределённой

...

Что нужно делать:

• Выполнять интеграционное, функциональное и end-2-end тестирование API
• Фиксировать дефекты, непроработанные/спорные требования
• Разрабатывать автотесты для имеющихся и новых продуктов компании в стэке Java
• Разрабатывать вспомогательные общие решения
• Проводить оптимизацию тестов
• Проводить code review
• Подготавливать и поддерживать тестовое окружение в Docker
• Интегрировать тесты в CI в качестве Quality Gate, анализировать результаты выполнения
• Тесно взаимодействовать с архитекторами, разработчиками, системными аналитиками

...

В компанию DataCatalog (Группа Arenadata) в отдел разработки требуется Devops.

Компания DataCatalog разрабатывает каталог данных внутри экосистемы Arenadata Enterprise Data Platform — многофункциональной корпоративной платформы сбора, хранения и обработки данных на базе технологий с открытым кодом.

Каталог данных является инструментом для организации совместной работы с данными в компаниях: интегрирует метаданные из различных систем обработки и анализа данных по всей компании;

...

Что нужно делать:

• Развивать модели кластера в ADCM: сервисы, компоненты, конфигурации, зависимости;
• Разрабатывать механизмы установки, обновления и настройки кластера;
• Разрабатывать новые компоненты дистрибутива: согласование со смежными командами требований, конфигураций;
• Разрабатывать собственные action и filter plugins, работать с API и плагинами ADCM;
• Разрабатывать Python-компоненты бандла: разбор ADCM inventory (сервисы, компоненты, хосты, их конфигурации), генерация и валидация конфигураций, проверки состояния сервисов, инструменты

...

Что нужно делать:

• заниматься ручным тестированием продуктов Arenadata QuickMarts (ADQM) и Arenadata QuickMarts Control (ADQM Control), а также связанных с ними bundle/core-доработок;
• участвовать в функциональном, интеграционном, регрессионном и исследовательском тестировании;
• тестировать функциональность распределенной СУБД: работу с данными и SQL, таблицами и их движками, шардированием, репликацией и взаимодействием компонентов кластера;
• проверять интеграции ADQM с внешними системами, сервисами и источниками данных;
• тестировать

...

Что нужно делать:

• Изучать архитектуру, программный код и roadmap Arenadata DB (на базе MPP-СУБД Greengage DB) для выступления в роли технического эксперта по этому продукту внутри и вне компании;

• Создавать технические статьи, пошаговые руководства, описывать лучшие практики и кейсы использования продукта для корпоративных блогов, Habr и профильных ресурсов;

• Участвовать в организации технических вебинаров, митапов и подкастов, посвященных продукту;

• Создавать обучающие

...

Что нужно делать:

• Автоматизировать тестирование компонентов Arenadata Hyperwave (ADH) и Arenadata Hyperwave Cloud (ADHC): Spark, Impala, Trino, Kyuubi, Hive, HBase, Ozone, HDFS, YARN, Airflow, Flink;
• Тестировать развёртывание и эксплуатацию платформы на bare metal, VM и в Kubernetes;
• Разрабатывать и развивать тестовые фреймворки на Python для распределённых Big Data-систем;
• Писать интеграционные и e2e-тесты на реальных кластерах: функциональность, отказоустойчивость, производительность;
• Поддерживать и

...