Java-фреймворк для агрегации и реализации скользящих окон [закрыто]

Закрыто. Этот вопрос вне -темы . В настоящее время ответы не принимаются.

Хотите улучшить этот вопрос?Обновите вопрос , чтобы он был #39;s в теме -для переполнения стека.

Закрыт в прошлом году .

У меня есть поток событий и хранилище ключей -val. Размер значения ограничен 4Кб. Интенсивность событий не очень большая -максимум сотни в день.

В этом значении мне нужно сохранить сериализованное представление структуры данных, которая обеспечивает эффективный механизм для чтения, хранения и обновления агрегированного количества событий за период в 3 месяца с ежедневными и еженедельными агрегациями и скользящими окнами 1/2 час.

Решение должно эффективно выполнять следующие задачи как для простого агрегирования числа событий, так и для стандартного отклонения числа событий. (максимальный период для всех задач, упомянутых ниже, составляет 3 месяца):

постоянные обновления (в ленивом режиме -по мере поступления соответствующего события)-в случае, если последние вычисленные агрегации слишком старые -удалять устаревшие данные и создавать новые агрегаты
обновление, запускаемое запросами на чтение (пользователь запрашивает некоторую информацию, например, количество событий для конкретного пользователя, стандартное отклонение количества событий для отдельного пользователя и т. д. )в случае, если последняя рассчитанные агрегации слишком старые -выбросьте их

Интересно,:существует ли какой-либо фреймворк Java с открытым исходным кодом, который может помочь реализовать описанное выше ?

Я также был бы признателен за рекомендации по дизайну :шаблоны проектирования и т. д.

Решение несложно реализовать с нуля, используя стандартный API Java,но перед этим я был бы признателен за некоторые предложения фреймворка с открытым исходным кодом (, если таковые имеются ).

Поиск решения в Google не привел меня ни к чему, за исключением некоторых теоретических статей, решений на основе SQL и набора инструментов IBM (с закрытым исходным кодом под названием SPL).

задан aviad 30 April 2012 в 08:40

0 ответов

Другие вопросы по тегам:

aggregate architecture data-processing java

Java-фреймворк для агрегации и реализации скользящих окон [закрыто]

0 ответов

Похожие вопросы: