Есть ли какие-либо платформы хранилища данных?
5 ответов
Я буду обсуждать несколько моментов на {бюджет, бизнес-служебная функция, период времени} спектр там. Для удобства давайте следовать за осмыслением архитектуры, с которым Вы связались в [1 131]
уровень
WikipediaDataWarehouseArticle
-
Operational базы данных исходные данные для хранилища данных - Нормализованный для В Одном обслуживании данных Place-Only
-
Уровень доступа к данным
преобразование Ваших исходных данных на Ваш информационный слой доступа.
инструменты ETL для извлечения преобразуйте, данные загрузки в склад попадают в этот слой. -
Информационный уровень
доступа • упрощающая отчет Структура данных
Данные не сохраняются здесь. Это - просто отражение Ваших исходных данных
Следовательно, денормализованные структуры (содержащий дубликат, но систематически производные данные)
являются обычно самыми эффективными здесь
• Инструменты создания отчетов
Как делают Вас, на самом деле предоставляют Ваш пользовательский доступ к данным
• предконсервированные отчеты (простые)
• более динамические методы доступа части-и-игры-в-кости
данные получили доступ для создания отчетов и анализа и инструментов для создания отчетов и анализа данных
попадите в этот слой. И различия Inmon-Kimball о методологии проектирования,
обсужденный позже в статье Wikipedia, имейте отношение к этому слою.
- уровень Metadata (упрощает автоматизацию, организацию, и т.д.)
Самокрутка (низкопроизводительная)
Для очень небольших личных расходов, просто распознав потребность в денормализованных структурах, может купить тех, которые не используют его, некоторая эффективность
Входит в ballgame (некоторые требуемые издержки)
, Вы не должны использовать всю функциональность платформы сразу.
IMO, однако, Вы хотите быть на платформе, которую Вы знаете, вырастет, и в высококонкурентной и консолидирующей среде BI, которая, кажется, один из четырех мегапоставщиков предприятия (мое мнение)
- Microsoft (платформа наших 110 фирм сотрудника)
- SAP
- Oracle
- IBM
Моя фирма на данном этапе, с помощью части возможности ETL, предлагаемой SQL Server Integration Services (SSIS) и некоторым альтернативным использованием открытого исходного кода, но в требовании лицензии практики продукт Talend на "Уровне доступа к данным", денормализованная структура создания отчетов (реализованный полностью в основной базе данных SQL Server), и SQL Server Reporting Services (SSRS) для большой автоматизации (на основе навыка) производства предуказанных отчетов. Обратите внимание, что SSRS "отчет" является просто (масштабируемой) конфигурацией XML / спецификация, которая представляется во времени выполнения через механизм SSRS. Выбором, таким как экспорт в файл Excel являются простые опции.
Серьезный Ордер на арест (некоторое значительное человеческое требуемое обязательство)
Уведомление выше этого мы должны все же использовать анализ данных / динамические возможности разрезания/игры в кости SQL Server Analysis Services. Мы работаем к этому, но теперь сфокусированный на улучшении качества нашей чистки данных на "Уровне доступа к данным".
я надеюсь, что это помогает Вам получить смысл того, где начать смотреть.
Pentaho соединил довольно всесторонний комплект продуктов. Продукты "свободны", но быть подготовленным к обычному тяжелому продают, как только Вы раскошеливаетесь на свою информацию об идентификации.
у меня не было шанса действительно расширить их, поскольку мы - магазин Microsoft от одного печального конца до другого.
Я думаю, что необходимо сначала проверить Kimball и Inmon и видеть, хотите ли Вы приблизиться к своему хранилищу данных конкретным способом. Kimball, в частности, размечает очень хорошую платформу для моделирования и конструкции склада.
Kimball является более простым методом для организации хранилищ данных.
Мы используем Informatica для того, чтобы переместить данные, но это не делает вещей DW как индексация по умолчанию.
Мне нравится, когда идея КРАСНОГО Wherescape, как инструмент DW и использование Связанные серверы SQL MS устраняет потребность в инструменте ETL.
Это не было обновлено в некоторое время, но существует хорошая Организация хранилищ данных / ETL пакет Ruby, названный ActiveWarehouse.
, Но я проверил бы продукты Pentaho как Nick, упомянутый в другом ответе. Это должно легко обработать объем данных, которые Вы имеете и можете предоставить Вам больше способов нарезать и поставить на карту Ваши данные, чем Вы, возможно, когда-либо воображали.