Традиционный весенний хакатон при поддержке Samsung Innovation Campus состоялся на ФБКИ ИГУ. Две команды факультета заняли 1 и 3 места, а всего в соревновании приняли участие 8 команд ИГУ и ИРНИТУ (23 человека).
Тематика хакатона – большие данные по задачам индустриальных партнёров: Arenadata и VK Tech. С приветственным словом выступил Андрей Лимасов, куратор образовательных программ Samsung Innovation Campus. Он отметил, что впервые к организации подключились технологические компании, что говорит о востребованности темы. Также хакатону оказал поддержку образовательный проект «Академия ИТ» от группы компаний Эн+, направленный на подготовку IT-специалистов.
Компания Arenadata поставила задачу определения злоумышленника по паттерну передачи данных на сетевом оборудовании, для чего требовалось провести анализ сетевой активности, выявить аномалии и составить список пользователей оператора связи с подозрительным поведением.
VK Tech предложил задачу оптимизации запросов к данным. Каждой команде был выделен персональный вычислительный кластер, на котором хранилось более миллиарда записей. Требовалось улучшить производительность 22 запросов к этому набору данных. Команды выдвинули следующие гипотезы: оптимизация синтаксиса запросов, выделение и сохранение отдельно агрегатных данных, денормализация структуры базы данных, партиционирование таблиц.
Свои решения задач команды представили жюри экспертов, в которое вошли специалисты из отрасли:
Победители и призёры хакатона:
Важным итогом соревнования капитаны команд назвали опыт командной работы, возможность работы с инфраструктурой больших данных и инструментами, выходящими за рамки учебных курсов. Многие участники отметили доброжелательную атмосферу и взаимопомощь, дух творчества, отличную коммуникацию и высказали готовность участвовать в таких мероприятиях и далее.
Участники получили памятные сувениры от компаний Arenadata и VK Tech.
Поздравляем и желаем новых профессиональных достижений!
Справка. ФБКИ ИГУ сотрудничает с Samsung Innovation Campus неколько лет. В этом учебном году на факультет открыта новая магистратура “Большие данные и интеллектуальные системы”, в её состав входит дисциплина “Технологии организации и управления инфраструктурой больших данных”, разработанная совместно с Samsung Innovation Campus. В современных корпоративных системах зачастую объёмы данных достигают такого размера, что обработать на одном сервере их невозможно, поэтому для их обработки и анализа разработаны специальные программные решения, такие как Apache Hadoop или Spark.
