Что должен знать бухгалтер о хранении данных

Источниками информации для хранилищ служат базы данных и системы в различных подразделениях организации. Каждая база-источник обслуживает свои приложения.

Унаследованные системы могут хранить данные мэйнфреймов в сетевых базах компании.

Исходную информацию можно найти в файловых системах отделов, на рабочих местах и серверах компаний. Данные могут поступать извне: из баз данных, совместно используемых клиентами или поставщиками, из Интернета.

Перемещение данных в хранилище состоит из пяти этапов: извлечение, преобразование, интеграция, очистка и загрузка. Так как информация поступает из множества разных, часто несовместимых, источников, эффективное извлечение должно свести все данные в стандартные форматы и поля.

Очистка устраняет ошибки и несоответствия. Затем данные обобщаются, чтобы конечным пользователям было проще с ними работать.

Архитектура хранилища данных включает комплекс программных инструментов, которые обеспечивают доступ к данным и взаимодействие с системами поддержки принятия решений. Функциональные приложения извлекают, загружают и изменяют данные, делая их согласованными и готовыми к обработке в хранилище.

Программы преобразования данных автоматизируют извлечение информации из разнородных источников, переводят ее в целевую и создают программный код для ее обработки. Перед загрузкой поля из исходных баз данных идентифицируются, изменяются, упорядочивается их движение. После загрузки производится очистка данных, проверка их согласованности и цельности, поиск противоречивых записей. Создаются списки ошибок и отчеты об исключениях.

Загрузка данных может быть однократной или непрерывной, в зависимости от технологии сбора информации.