VK выпустила Tarantool 2.10 — платформу для in-memory-вычислений

Что случилось? Команда разработчиков VK представила крупное обновление платформы Tarantool — 2.10. В этом релизе технологию разделили на три версии:

• Community — версия с открытым исходным кодом для всех разработчиков и компаний;
• Enterprise — для крупного бизнеса;
• Tarantool как сервис в облаке VK Cloud Solutions.

Какие возможности у Tarantool? Это платформа для in-memory-вычислений. Она представляет собой систему управления базами данных, которая хранит всё в оперативной памяти.

Базы данных из категории in-memory имеют наименьший отклик, потому что не обращаются к основной памяти компьютера — HDD- или SSD-дискам. К тому же они подвергаются риску потерять данные при поломке сервера. Но как раз для подобных случаев такие базы данных записывают каждую операцию в лог или периодически делают снимки файловой системы — снапшоты.

Базы данных в памяти нужны для высокой скорости доступа к данным — условно от 10 тысяч запросов в секунду. Например, это может быть приложение «Яндекс.Маркет» перед Новым годом.

В чём отличие версий? Enterprise-версия решает задачи, связанные с безопасностью, снижением стоимости вычислений и необходимостью повышения надёжности. Разработчики добавили:

• шифрование каналов передачи данных — алгоритмы шифрования AES, RSA и ГОСТ 34.12-2018;
• сжатие данных в памяти — алгоритмы ZSTD, LZ4;
• аудит событий — журнал операций с 25 типами действия (например, запись логов в формате JSON или CSV).

Community-версия получила расширенные алгоритмы выбора лидера в кластере (RAFT) и механизм параллельной работы с транзакциями (MVCC).

Tarantool в облаке даст пользователям всю функциональность Community-версии, а также упростит работу с платформой — инструмент уже настроен и полностью готов к загрузке данных. Ещё при работе с Tarantool в облаке VK Cloud Solutions не нужно знать язык программирования Lua, понимать принципы шардирования и самостоятельно администрировать решение.

Какое будущее у платформы? Павел Гонтарев, управляющий директор «VK Цифровые технологии», говорит, что VK видит высокий потенциал роста in-memory-технологий и планирует активно инвестировать в это направление:

Подробнее прочитать про обновления можно в Habr-блоге VK.