Разработчик C++ в команду Big Data

О команде:

Каждый день наши автономные машины собирают терабайты данных, которые мы собираем и анализируем для улучшения и тестирования нашего ПО.

Мы ищем единомышленника, который поможет нам в этой задаче и будет заниматься разработкой C++ модулей высокоэффективной обработки данных, в том числе камер, радаров и лидаров, а также будет заниматься разработкой backend для визуализации работы беспилотного транспортного средства.

Если есть желание развиваться в BigData Engineer, то мы только рады.

Примеры задач на первое время:

• Реализация модуля/пайплайан/шага в существующем пайплайне, в котором будет реализован алгоритм обработки merged cloud или декодирования видео на C++;
• Оптимизация обработки данных в существующем алгоритме, путем перехода со Spark на С++ модули с распараллеливанием обработки;
• Реализация Python обертки для C++ модуля или ноды;
• Опционально: участие в разработке 3D движка визуализации на C++.

Наш стек: Python (pandas, polars, pyspark), C++, Spark, Dagster, Kubernetes, S3, Clickhouse, Metabase.

Чем предстоит заниматься:

• Разработка C++ модулей обработки данных (в том числе видео, радарных и лидарных данных);
• Встраивание C++ модулей беспилотного автомобиля в оффлайн обработку данных;
• Разработка библиотек и инструментов для ядра беспилотной технологии;
• Проведение code-review.

Что мы ждем от кандидата:

• Уверенное знание С++14 и выше;
• Знание Python;
• Знание bash, make, cmake;
• Понимание OS Linux на уровне пользователя, опыт работы в консоли;
• Знание SQL Опыт работы с Docker;
• Опыт работы с Jira, с Confluence.

Будет плюсом++

• Опыт обработки данных с использованием Python (Pandas/Polars);
• Опыт обработки видео данных;
• Опыт работы с CI/CD системами;
• Знакомство с NoSQL базами;
• Знакомство со Spark;
• Знакомство с ROS 2.