Ярослав Боровиков, архитектор - “Analysis-Oriented Stream Processing“

Случалось ли вам быть первопроходцем? Хотелось ли вам использовать Scala, Spark, Kafka, Hadoop, $YOU_NAME_IT в реальных Big Data приложениях? Что если все это нужно сделать в компании с устойчивым бизнесом, но с устаревшим техническим подходом? Нашей команде удалось ответить на эти вопросы, ведь нам повезло - мы стали носителями изменений и начали с одной из важнейших частей бизнеса - аналитики. Нам предстояло разработать не только ряд приложений, используя вышеуказанными технологии, построить инфраструктуру и framework, которые в будущем будут использоваться и в других проектах компании, но и каким-то образом дать аналитикам простые средства для получения новых знаний и рефлексии над текущими процессами их сбора. Что из этого получилось - станет ясно из моего доклада.