215 похожих чатов

Коллеги, можете посоветовать решение? Есть Tarantool master-master, он хранит метаинформацию о

медиа(аудио/видео) сегментах.
Каждому сегменту соответствует некоторый файл, лежащий на диске.

Репликация мета-данных на тарантуле работает прекрасно. Но хочется помимо мета-данных еще и файлы реплицировать.

Есть ли какой-либо простой способ зареюзать алгоритм репликации вшитый в тарантул еще и для репликации файлов (то есть например написать копирующий плагин). Очень хотелось бы чтобы сохранилась целостность, то есть синхронно с мета-данными отрабатывал плагин, копирующий внешние файлы.

Варианты взять GlusterFS/CEPH и т.п. не предлагайте, вопрос - можно ли это легко сделать средствами тарантула, желательно так, чтобы на уровне работой с моделью данных не учитывать.

Сохранять большой блоб информации в тарантул можно, работает - НО: Итоговый WAL и прочий кеш весят в 2 раза больше объема сохраненных медиа-блобов, именно поэтому храним файлы снаружи.

Прошу советов на эту тему 🙏🙏🙏

4 ответов

20 просмотров

А блобы лежат прям на серверах с Тарантулом на диске за нджинксом?

Andrey-Syvrachev Автор вопроса
Vladislav Grubov
А блобы лежат прям на серверах с Тарантулом на дис...

Да, прям на диске на серверах с тарантулом. Прям можно открыть файл из тарантула. Можно и за NGINX запрятать, как угодно.

есть пара мыслей через очерди и тп, чтобы не прокачивать сам файл через репликацию, но глобально это немного странненько. Кажется, что кол-во файлов будет расти, и скорее всего 2х серваков станет мало, тогда будет совсем неудобно жить. Может вы какой-нибудь небольшой s3 себе поднимете?

Andrey-Syvrachev Автор вопроса
Vladislav Grubov
есть пара мыслей через очерди и тп, чтобы не прока...

может быть, но есть одно но. Скорость записи в этот S3 не устраивает. Тестировали GlusterFS -> он проседает при увеличении числа машин. Возможно конечно мы его не так готовим:( Но скорость записи уж очень сильно меньше, а для нас это критично. То есть эти файлы, можно потом перенести, забекапить в S3, но нам важен реал-тайм.

Похожие вопросы

Обсуждают сегодня

Добрый вечер. Есть вопрос, а может и предложение. Был у меня диалог в другой группе о делфи и я задался вопросом: "А нельзя ли в делфи цвет //коментария и {комментария} сде...
Kraszx
24
Всем привет! Подскажи, пожалуйста, как передать в TComboBox сразу значение и id записи. На Delphi я делал так: ComboBox1.Items.AddObject('Какое-то значение', Pointer(id запис...
Евгений
13
Мдя, прикол, боевая сборка запускается (именно под отладчиком) после F9 примерно полторы минуты (97 секунд если быть точным). Начал копать - проблема детектится сразу - зависа...
Александр (Rouse_) Багель
38
я так понимаю, я так подозреваю, что создание такого плагина для человека, кто умеет писать плагины для делфи потребует минут 5-10 времени. но это мое подозрение. хотелось бы ...
Kraszx
7
Товарищи, кто работа с iphelper? Или может я в самой логике ошибки фигачу, не пойму.... var ifTable : PMIB_IFTABLE; size, corSize: DWORD; Buffer ...
Warfarellen
4
Здравствуйте, вопрос по структурам данных. Были у вас случаи, когда пришлось писать деревья или двунаправленные списки?
/ /
50
Коллеги, добрый вечер. Создаю коллекцию от TFPGMap, ключ - перечисление, значение - целое. Нужно отсортировать коллекцию по значению. Как это можно сделать?
Kirill Filippenok
11
Ребята, всем привет. Подскажите, пожалуйста, можно ли как-то через бота понять, что этого бота добавили в группу\канал и выдали ему права администратора?
Artem Stormageddon
9
Скажи а ты когда этот канал создавал ты уже дельфи не любил, или это со временем пришло?
Роман Лях (rgreat)
18
Привет, такой вопросик появился кажется ли вам что Rust слишком сложный/строгий для высокоуровневого программирования и слишком "безопасный"/строгий для низкоуровневого?
Крокант
10
Карта сайта