DataStage |
Автоматизация - Построение систем хранения данных |
Управление входными данными и процессами их преобразования к структуре хранения в ХД осуществляется на основе ведения единой метабазы. В качестве технологического средства создания процедур трансформации и загрузки данных в хранилище, а также для разработки структуры и сопровождения ХД в процессе эксплуатации и возможного развития, был выбран продукт DataStage от компании Ascential Software. Этот продукт позволяет: · в наглядной графической форме вести проектирование структуры хранилища; · генерировать процедуры трансформации данных и загрузки их в хранилище; · существенно облегчает эксплуатацию и дальнейшее развитие ХД. Кроме того, DataStage не зависит от выбранной платформы СУБД он может работать с любой базой данных. В нашем случае одновременно использовались Oracle и Informix. Пример процедуры преобразования данных Разработка процедур загрузки ХД, их администрирование, анализ качества данных первичных источников информации осуществлялись на клиентской части подсистемы сбора и хранения информации. На рабочем месте разработчика процедур заполнения ХД и администрирования их выполнения использовался пакет программ DataStage Developer, установленный на компьютер с Windows NT/2000. Пакет DataStage Developer состоит из следующих компонентов: · DataStage Administrator модуль по администрированию проектов, их созданию, удалению и изменению их параметров. Под проектом понимается набор описаний таблиц источников и целевых таблиц хранилища данных; набор функций извлечения данных, их трансформации и загрузки в хранилище, а также набор процедур, построенных на основе этих функций; · DataStage Designer модуль по созданию процедур извлечения, трансформации и закачки данных на основе имеющихся функций; · DataStage Director модуль для запуска процедур, контроля их выполнения, а также задания расписания выполнения процедур; DataStage Manager средство доступа и работы с DataStage репозиторием, в котором хранятся метаданные (описание таблиц, функций и т.д.). С помощью этого модуля происходит добавление, удаление, изменение описаний таблиц, функций извлечения, трансформации и очистки данных. В линейке продуктов DataStage есть специальное средство Quality Manager с его помощью контролируется качество входных данных. |
Читайте: |
---|
Диспетчеризация пунктов:
АВТОМАТИЗИРОВАННАЯ СИСТЕМА КОММЕРЧЕСКОГО УЧЕТА ОТПУСКА ПИТЬЕВОЙ ВОДЫ ПОТРЕБИТЕЛЯ![]() Заказчик: Комитет по управлению Жилищно-коммунальным хозяйством Администрации г. Новороссийск Объект: I-я очередь системы, включающая потребителей одной из зон водоснабжения (110 узлов учета). ... |
АВТОМАТИЗАЦИЯ КОМПЛЕКСА ЗДАНИЙ![]() Заказчик и разработчик: Управленческий центр религиозной организации «Свидетели Иеговы в России». Объект: комплекс зданий (22 корпуса жилых и служебных помещений, пос. Солнечное Ленинградской об... |
Автоматизированная система диспетчеризации и мониторинга Энергоучет сахарного к![]() Объект контроля: Объектом контроля является технический учет всех материальных и энергопотоков сахарного комбината: газа, пара, воды, конденсата, сырья и продукции. Сахарный комбинат состоит из д... |
Теория АСУ:
Методы автоматизации![]() Методы автоматизации производства и научные основы автоматизации развиваются главным образом по 3 направлениям.Во-первых, разрабатывают методы эффективного изучения закономерностей объектов управлен... |
Неизменяемая часть системы управления![]() Так вводится понятие неизменяемой части системы управления - неизменяемой в том смысле, что свойства её заданы до начала конструирования алгоритма управления и, как правило, не могут быть изменены. ... |
Автоматическая линия - общие понятия и применения![]() Автоматическая линия, система машин, комплекс основного и вспомогательного оборудования, автоматически выполняющего в определённой технологической последовательности и с заданным ритмом весь процесс... |
Принцип и функционирование устройства![]() Подвесные газовые обогреватели воздуха представляют особенную комбинацию классических напольных обогревателей воздуха и подвесных вентиляторных конвекторов, которые пользуются водой из котельной. ... |
Системой единиц![]() Совокупность единиц измерения, охватывающих определенную область величин, называется системой единиц. Развитие науки и техники привело к появлению ряда систем единиц: СГС, МКС, МТС, МКГСС и др. Испо... |
Оборудования в АСУ:
Многокомпонентное дозирование в приготовлении комбикорм![]() Недавно началась промышленная эксплуатация завода ЗАО «Неокорм» по производству премиксов в г. Лакинск Владимирской области.[1] ... |
Некоторые особенности дозаторов![]() Дозаторы инертных материалов песка и щебня (рис.3.) имеют ряд особенностей. Дозирующие заслонки установлены на раме с возможнос... |
Управление процессом:
Автоматизация машины круглоткацкой МКТ-2![]() Целью автоматизации являлась замена физически изношенной и морально устаревшей системы управления уникальной круглоткацкой машин... |
Особенности реализации системы управления заводом произ![]() · для запуска выполнения заявки на производство комбикормов оператору достаточно ввести требуемый рецепт и объем готовой смеси.... |