Regular\Senior Python developer (Big Data)

PROJECT DESCRIPTION:

Разработка программы лояльности и кросс-продажи. Построение техналогии real time marketing для автоматизации банковских продаж on-line. Задачи предполагают работу с Highload системами и с высокотехнологичными компонентами такими как HBASE, KAFKA. Используются технологии Spark streaming и Batch/Streaming.

RESPONSIBILITIES:

Разработка кода.

Проведение code-review.

Участие в дизайне архитектуры программно-аппаратных комплексов, решающих бизнес-задачи Заказчика.

Создание технической документации.

MANDATORY SKILLS:

Python 3.

Linux.

Понимание архитектуры Hadoop.

Знание фреймворка Spark:

• Streaming;
• Structured Streaming;
• SparkSQL.

HBase.

Sqoop.

NICE-TO-HAVE SKILLS:

Cloudera Hadoop Distribution.

Java 8.

SSL/TLS.

Kerberos.

Kafka.

Hive.