Каков лучший метод создания “окруженных стеной садов” для нескольких клиентов в Вашей базе данных?
Вы можете добавить микросхемы в очередь с помощью Amazon SQS, и работники или Lambdas будут вытаскивать эти отдельные задания из очереди. Затем вы можете настроить оповещение cloudwatch, которое контролирует глубину вашей очереди, где нулевая глубина очереди (задание выполнено) запускает лямбду «завершения», которая объединит отдельные выходные микросхемы.
Я полагаю, что CloudWatch предупреждает о состояниях очереди опроса с 5-минутными интервалами, поэтому для вашего случая использования, когда у вас длительное время обработки (~ 10-15 минут), здесь не будет узким местом (лямбда-тайм-ауты В любом случае, 15 минут, так что если вы установите опрос на 15 минут, ваша лямбда либо потерпит неудачу, либо будет завершена к тому времени).
Шаг за шагом, как это будет выглядеть:
- Загрузка нового файла на S3
- Загрузка запускает лямбду, чтобы разбить файл на «фишки» "в новой папке
- Добавить все микросхемы в новую очередь
- Лямбды извлекают микросхемы из очереди
- , когда очередь пуста, запускать конгломерацию лямбда
[ 1111] Вот еще один полезный ответ по настройке триггеров на основе состояния очереди: Эффективный способ проверить, пуста ли очередь SQS
2 ответа
При использовании направляющих 2.3 + у Вас есть роскошь объемов по умолчанию:
class Model < ActiveRecord::Base
default_scope :conditions => ['client_id = ?', client_id]
end
Необходимо было бы удостовериться, что client_id установлен где-нибудь в процессе init.
Это гарантировало бы, чтобы все запросы дб в той модели использовали client_id условие.
Как насчет добавления новой базы данных для каждого клиента? Так разделение клиентов будет более конкретным, и ошибки, когда клиенты могут использовать данные других клиентов, будут менее вероятны.