От CRM к DataLake с K8s и микросервисами
Доклад принят в программу конференции
Целевая аудитория
Тезисы
Как только система начинает разрастаться, появляются различные внешние и внутренние сервисы, с которыми необходимо реализовывать интеграции. Появляются задачи по построению аналитики или построению предиктивных моделей, а система не позволяет это делать без нагрузки? Или необходимо масштабировать систему?
Ответом на эти вопросы будут микросервисы, которые помогут реализовать всю необходимую логику. Как в этом помогают Kafka и Airflow, и что такое ETL. Все это поможет построить хорошую архитектуру, которую можно будет масштабировать и к которой можно подключать неограниченное число интеграций и внешних сервисов.
Работает с MSSQL более 10 лет. Последние 5 работает Data Engineer'ом. Разрабатывает различные интеграции, архитектуру и микросервисы на Python/Scala/Go.
ПерилаГлавСнаб
Видео
Другие доклады секции
Архитектуры и масштабируемость