Big Data Days 2019

 8-10 октября   Москва

Соня Либерман

Outbrain, Израиль

Биография

Соня возглавляет отдел персонализации в рекомендательной группе компании Outbrain, разрабатывающий крупномасштабные алгоритмы машинного обучения для платформы рекомендаций контента, предоставляющей десятки триллионов рекомендации в день в режиме реального времени. Она специализируется в поиске информации, машинном обучении и компьютерной лингвистике. До прихода в Outbrain она возглавляла отдел разработки алгоритмов в компании ConvertMedia (позднее приобретенной Taboola). У нее имеется степень магистра в области компьютерных наук и степень бакалавра в области информатики и вычислительной биологии.

Доклад

От Spark до Elasticsearch и обратно - обучение масштабным моделям для рекомендации контента

Обслуживание десятков миллиардов персональных рекомендаций с задержкой 30 мс — сложная задача. В этом выступлении я поделюсь нашей алгоритмической архитектурой, включая автономный слой на основе Spark и его обслуживающий слой на основе Elasticsearch, которые позволяют проводить сложные модели в сложных ограничениях масштаба и сократить цикл между научными исследованиями и продукцией.

Ключевые слова

Machine Learning
Spark
Elasticsearch
Recommender System