архитектуры данных, хранилищ данных DWH, создание процессов ETL Наличие опыта работы с Airflow, Kafka, Spark Понимание принципов...
Hadoop, Spark, Kubernetes, Linux Команда и стек технологий: В команде 16 человек. Стек: Linux, Python, PyTorch..., Hive, Spark, YT и др.). Обладание математическим бэкграундом - линейная алгебра, теория вероятностей, мат. анализ Опыт...
работы с Big Data технологиями (желательно): Apache Hadoop, Apache Spark, ClickHouse. Опыт работы с инструментами разработки...
; Более двух лет практического опыта работы с Python, Spark; Опыт работы с технологиями на основе Hadoop (HDInsight, Spark...
Kotlin Знание Spring Boot - навыки написания поддерживаемого и расширяемого кода Будет плюсом: - Apache Flink, Kafka, Spark...
Yandex, S3. Профессиональное владение SQL. Практического опыта работы с Python и Spark. Опыт работы с технологиями на...
данными и версионирования моделей (DVC, ClearML и т.п.); RESTful API Spark AirFlow Docker. Будет плюсом: Опыт...
опыт работы хотя бы с 1 из технологий Big Data: Airflow, NiFi, Yaml, spark, scala, Hadoop, Kafka. * Знания одного из языков... программирования - Python, Spark, Scala, Java Понимание принципов построения интеграционных процессов, проектирования ХД, функционала...
. Стек на проекте: Java, Kafka, Flink, PostgreSQL, Hibernate, Spark, Airflow. Вместе с нами тебе предстоит: Разрабатывать... высоконагруженных сервисов; Будет плюсом: Опыт работы с Apache Flink, Apache Airflow, Apache Spark, OpenShift/Kubernetes...
работы с 1 из технологий Big Data: Airflow, NiFi, Yaml, spark, scala, Hadoop, Kafka Знания одного из языков программирования... - Python, Spark, Scala, Java Понимание принципов построения интеграционных процессов, проектирования ХД, функционала загрузки...
); Разработка документации и спецификаций к витринам данных; Разработка и оптимизация spark tasks, выполняющих etl на Hadoop...; Наличие опыта работы с Hadoop/Spark/Airflow/Python - ОБЯЗАТЕЛЬНО; Опыт промышленной разработки ETL Apache AirFlow...
— ключевая задача нашей команды Стек технологий: Hadoop (Hive, Spark), SQL, Bitbucket, Jira Требования: Опыт работы от 3 лет со... Pig, Sqoop и/или Flume, Apache Hive и/или Spark SQL, Apache Kafka; Опыт работы с реляционными БД (Oracle DB и/или...