Vladimir Tikhonov

Data Engineer @Mts Group

Moscow, RU

Строю DATA mesh platform в MTS-EXOLVE (exolve.ru). Используем lambda архитектуру. Поставляю данные смежным сервисам, продуктам и лицам принимающим решения. Реализовал streaming data pipeline по аггрегации СМС статистики, занимаюсь поддержкой и доработкой сервисов по API статистике и статистике звонков- пишу пайплайны трансформации данных на Spark Structured Streaming.xn-b1aemmlbei RND по NIFI и KSQL- забираю данные по CDC через Debezium или соединяю clikchouse и Postgres нативными средствами- использую KafkaConnect как CDC решения для MongoDB,так и для атомарной вставки в clikchouse пачками- выбираю движки в clickhouse для разных задач и витрин данных. Создаю роли и профили ролей- помогаю с настройками Apache Superset- Мониторю живучесть сервисов в Grafana- собираем логи через Vector и льем в Kafka, препроцессим spark- складываем parquet файлы в S3, версионируем DeltaLake- Kconnect,Spark,Vector,Superset -деплою в KS8. Девопсы помогают с gitlab-ci, остальное своими силами.

Dataexpert.io

Data Engineer, Data Engineering

Ивановский Государственный Энергетический Университет (ИГЭУ)

Диплом Специалиста По Инженерной Специальности, Прикладная Информатика