DataStage |
Автоматизация - Построение систем хранения данных |
Управление входными данными и процессами их преобразования к структуре хранения в ХД осуществляется на основе ведения единой метабазы. В качестве технологического средства создания процедур трансформации и загрузки данных в хранилище, а также для разработки структуры и сопровождения ХД в процессе эксплуатации и возможного развития, был выбран продукт DataStage от компании Ascential Software. Этот продукт позволяет: · в наглядной графической форме вести проектирование структуры хранилища; · генерировать процедуры трансформации данных и загрузки их в хранилище; · существенно облегчает эксплуатацию и дальнейшее развитие ХД. Кроме того, DataStage не зависит от выбранной платформы СУБД он может работать с любой базой данных. В нашем случае одновременно использовались Oracle и Informix. Пример процедуры преобразования данных Разработка процедур загрузки ХД, их администрирование, анализ качества данных первичных источников информации осуществлялись на клиентской части подсистемы сбора и хранения информации. На рабочем месте разработчика процедур заполнения ХД и администрирования их выполнения использовался пакет программ DataStage Developer, установленный на компьютер с Windows NT/2000. Пакет DataStage Developer состоит из следующих компонентов: · DataStage Administrator модуль по администрированию проектов, их созданию, удалению и изменению их параметров. Под проектом понимается набор описаний таблиц источников и целевых таблиц хранилища данных; набор функций извлечения данных, их трансформации и загрузки в хранилище, а также набор процедур, построенных на основе этих функций; · DataStage Designer модуль по созданию процедур извлечения, трансформации и закачки данных на основе имеющихся функций; · DataStage Director модуль для запуска процедур, контроля их выполнения, а также задания расписания выполнения процедур; DataStage Manager средство доступа и работы с DataStage репозиторием, в котором хранятся метаданные (описание таблиц, функций и т.д.). С помощью этого модуля происходит добавление, удаление, изменение описаний таблиц, функций извлечения, трансформации и очистки данных. В линейке продуктов DataStage есть специальное средство Quality Manager с его помощью контролируется качество входных данных. |
Читайте: |
---|
Диспетчеризация пунктов:
СИСТЕМА МОНИТОРИНГА И УПРАВЛЕНИЯ ЭЛЕКТРООБОРУДОВАНИЕМ СКЛАДСКОГО КОМПЛЕКСА![]() Заказчик: ООО «Юг Логистик - сервис», г. Москва Описание технологического процесса: Объектом мониторинга и удалённого управления являются системы электрооборудования и отдельные агрегаты складск... |
АСУ ТП и система диспетчеризация головных водозаборных сооружений![]() Объектом диспетчеризации и управления является технологическое оборудование артезианских скважин (общее число 80 скважин), находящееся в павильонах над артезианскими скважинами и водоводы (5 водовод... |
РЕГИОНАЛЬНАЯ ДИСПЕТЧЕРСКАЯ СИСТЕМА ГАЗОПРОВОДНОЙ СЕТИ![]() Заказчик: ОАО «Уральские газовые сети», Екатеринбург. Региональная газораспределительная организация Свердловской области. Описание технологического процесса: Наблюдаемыми объектами системы тел... |
Теория АСУ:
Малобюджетный вариант СМС-диспетчеризации. Контроллер РС-420, работающий по GSM![]() Одним из направлений работы компании Контэл (г. Владимир) является разработка и производство систем, программного обеспечения и приборов для мониторинга промышленных объектов, работающих без постоян... |
Регулирование температуры воды в подающем трубопроводе![]() В этом случае осуществляется регулирование температуры в подающем трубопроводе, которая является регулируемой величиной. Она косвенным образом влияет на температуру в помещении. Регулирование позвол... |
Перечень модулей ввода/вывода серии MAТCHBOX![]() MMB500-CPU Процессорный модуль 16-разрядный процессор Fujitsu MMB510-4DI Модуль дискретного ввода 24 в, 4 канала ММВ511-2DI Модуль дискретного ... |
Принцип погодозависимого регулирования![]() Поясним, каким образом осуществляется поддержание комнатной температуры с учетом изменений уличной. При настройке контроллера устанавливается так называемая температурная кривая, отражающая зависимо... |
Контроллеры. Программирование и составление программы PLC на ПЛК![]() Рассмотрим проблему выбора аппаратной части, стоящую перед инженером по автоматизации, в частности выбор контроллера, на базе которого и будет автоматизирован тот или иной процесс Быстроменяющаяс... |
Оборудования в АСУ:
Многокомпонентное дозирование в приготовлении комбикорм![]() Недавно началась промышленная эксплуатация завода ЗАО «Неокорм» по производству премиксов в г. Лакинск Владимирской области.[1] ... |
Некоторые особенности дозаторов![]() Дозаторы инертных материалов песка и щебня (рис.3.) имеют ряд особенностей. Дозирующие заслонки установлены на раме с возможнос... |
Управление процессом:
Система мониторинга здания правления ОАО Роснефть![]() Структура и состав системы:Сбор данных на местах производится модулями дискретного ввода серии I700 (ICP DAS) и контроллерами из... |
АСУ ТП химцеха ТЭЦ![]() Структура АСУ ТП В качестве ПТК предлагается несколько вариантов, основанных на программном продукте Master SCADA, реализующи... |