Поисковый движок O2 в Ozon — сложная распределенная система, построенная на основе Apache Lucene. Базовый поиск O2 обслуживает операции с десятками миллионов документов с почти 14 тысячами разреженных полей при тысячах RPS.

С одной стороны, производительность и отказоустойчивость движка достигается сложной архитектурой системы — физической репликацией, шардированием, использованием CDN. С другой стороны — обработка тысяч запросов с необходимым временем ответа и пропускной способностью не была бы доступна без более низкоуровневых и точечно локализованных (микро)оптимизаций, специфических для сервиса базового поиска (а зачастую и для Java-рантайма), и которые не так часто встречаются в мейнстримной Java-разработке.

Поговорим про несколько необычных подходов к оптимизации работы базового поиска и историях, связанных с этим.

Ключевые темы:

Использование кодогенерации для уменьшения виртуальных вызовов на горячих путях исполнения поисковых запросов.
Борьба с аллокациями, ByteBuffer vs VarHandle и туплы без аллокаций.
Уменьшение индирекций и лишних прыжков по памяти.
Как мы уронили перф правильным использованием Objects#requireNonNull(..).

Также расскажу, как мы следим за производительностью и проводим перформанс-исследования.

Cassandra: The Path to Production

Speakers

Vladimir Khrostitskii

Other talks on «Architecture»

Other talks on «Frameworks/Libraries»

Other talks on «Storage»