#onecloud — Public Fediverse posts

Внутри метастора S3 в One-Cloud

Как мы пришли к локальному скану, фильтру Блума и переезду очереди на Kafka — и почему это всё случилось Привет, Хабр. Я Данил Кислов, разработчик команды хранилищ. У нас в One-cloud (внутренняя корпоративная облачная платформа) лежит собственная S3-совместимая реализация — one-object-storage. Хочу рассказать, как эволюционировал метастор S3— та часть, что отвечает за метаданные объектов: списки версий, индексы, настройки бакетов и прочую служебную мелочь. История начинается с того, что система, построенная под одни требования, перестаёт им соответствовать и постепенно адаптируется к новым. Почти каждое решение из дальнейшего — компромисс, который приехал под конкретную боль на конкретном масштабе. И почти у каждого есть свои плюсы и минусы. Разбираем эволюцию метастора

https://habr.com/ru/companies/vk/articles/1051036/

#s3 #cassandra #архитектура #хранилище #метастор #onecloud

Непридуманная история о том, как мы перетащили 300 ТБ key-value данных в облако без простоя

Привет, Хабр! Меня зовут Виктор Лучиц, я архитектурный лид в отделе инфраструктурной разработки рекламных технологий VK. Я расскажу, как наша команда осуществила конвергенцию двух наших core-технологий, как справлялись с инцидентами и что в итоге получили. Это не столько рассказ о самих технологиях, сколько попытка частичной систематизации нашего опыта работы со сложными системами. Этим опытом нам хотелось бы поделиться с читателями Хабра, и надеемся, что он покажется вам полезным. Приступим к конвергенции

https://habr.com/ru/companies/vk/articles/1039688/

#onecloud #tarantool #devops #архитектура #рекламные_технологии

Управляем облаком, не привлекая внимания пользователей: разбор примеров из жизни One-cloud

Привет, Хабр! Меня зовут Алексей Волков, я руковожу группой core-разработки внутреннего облака VK — One-cloud. Хочу поделиться примерами из эксплуатации: какие были проблемы в проде на Java при высоких нагрузках, как мы это чинили и какие выводы сделали. Никакой теории на бумаге, только реальные истории из жизни крупной облачной платформы.

https://habr.com/ru/companies/vk/articles/995790/

#performance #облако #облачное_хранилище #облачный_сервис #миграция #onecloud #высокая_нагрузка