DataStage |
Автоматизация - Построение систем хранения данных |
Управление входными данными и процессами их преобразования к структуре хранения в ХД осуществляется на основе ведения единой метабазы. В качестве технологического средства создания процедур трансформации и загрузки данных в хранилище, а также для разработки структуры и сопровождения ХД в процессе эксплуатации и возможного развития, был выбран продукт DataStage от компании Ascential Software. Этот продукт позволяет: · в наглядной графической форме вести проектирование структуры хранилища; · генерировать процедуры трансформации данных и загрузки их в хранилище; · существенно облегчает эксплуатацию и дальнейшее развитие ХД. Кроме того, DataStage не зависит от выбранной платформы СУБД он может работать с любой базой данных. В нашем случае одновременно использовались Oracle и Informix. Пример процедуры преобразования данных Разработка процедур загрузки ХД, их администрирование, анализ качества данных первичных источников информации осуществлялись на клиентской части подсистемы сбора и хранения информации. На рабочем месте разработчика процедур заполнения ХД и администрирования их выполнения использовался пакет программ DataStage Developer, установленный на компьютер с Windows NT/2000. Пакет DataStage Developer состоит из следующих компонентов: · DataStage Administrator модуль по администрированию проектов, их созданию, удалению и изменению их параметров. Под проектом понимается набор описаний таблиц источников и целевых таблиц хранилища данных; набор функций извлечения данных, их трансформации и загрузки в хранилище, а также набор процедур, построенных на основе этих функций; · DataStage Designer модуль по созданию процедур извлечения, трансформации и закачки данных на основе имеющихся функций; · DataStage Director модуль для запуска процедур, контроля их выполнения, а также задания расписания выполнения процедур; DataStage Manager средство доступа и работы с DataStage репозиторием, в котором хранятся метаданные (описание таблиц, функций и т.д.). С помощью этого модуля происходит добавление, удаление, изменение описаний таблиц, функций извлечения, трансформации и очистки данных. В линейке продуктов DataStage есть специальное средство Quality Manager с его помощью контролируется качество входных данных. |
Читайте: |
---|
Диспетчеризация пунктов:
Автоматизированная система коммерческого учета электроэнергии на ОАО ПЕРМТРАНСЖРеализованная на ОАО ПЕРМТРАНСЖЕЛЕЗОБЕТОН АСКУЭ предназначена для осуществления эффективного и достоверного технического автоматизированного учета электроэнергии на заводах и предприятиях различны... |
Региональная диспетчерская система газопроводной сетиЗаказчик: ОАО «Уральские газовые сети», Екатеринбург. Региональная газораспределительная организация Свердловской области. Наблюдаемыми объектами являются газорегуляторные пункты (ГРП) газопровод... |
СИСТЕМА ДИСПЕТЧЕРИЗАЦИИ РАСПРЕДЕЛЕННЫХ ОБЪЕКТОВ КУРГАНВОДОКАНАЛАЗаказчик и разработчик: МУП «Курганводоканал» Объект: городские сети водоснабжения, пункт водозабора, насосные станции третьего подъема, канализационные насосные станции Состав системы: Сбор... |
Теория АСУ:
Теория автоматического управления ТАУТеория автоматического управления (ТАУ) изучает принципы построения систем автоматического управления и закономерности протекающих в них процессов, которые она исследует на динамических моделях дейс... |
Отопление больших помещений с помощью газаКогда мы говорим об отоплении промышленных помещений, большинство специалистов сразу думает о большой котельной, трубах, вентиляторных конвекторах, регулирующих клапанах, вентиляторах и т.д. Устойчи... |
Как уехать на заработки в другую странуСреди украинцев поездки в близкое зарубежье очень популярны. Ведь там можно заработать неплохо и вернуться обеспеченным человеком. Кроме того, работа в чужой стране позволяет выучить язык, другую куль... |
Сменный диспетчерствия, и поступают от программных устройств центрифуг, расходы рафинадной кашки - от ленточных весов, непрерывные и интегрируемые сигналы которых также преобразуются в число-импульсные. В табл. 19-2... |
Комплексная автоматизация технологических процессовТехническое перевооружение и реконструкция производства кроме решения задач проектирования и внедрения новых технологических процессов предусматривает также в качестве основного средства интенсифика... |
Оборудования в АСУ:
Многокомпонентное дозирование в приготовлении комбикормНедавно началась промышленная эксплуатация завода ЗАО «Неокорм» по производству премиксов в г. Лакинск Владимирской области.[1] ... |
Некоторые особенности дозаторовДозаторы инертных материалов песка и щебня (рис.3.) имеют ряд особенностей. Дозирующие заслонки установлены на раме с возможнос... |
Управление процессом:
Автоматизация установок ИКМ и ИМ-1 для контроля антиокиУстановки ИКМ предназначены для оценки антиокислительных свойств масел по методу ГОСТ 20457-75, а на ИМ-1 проводятся моторные и... |
Автоматизация цеха по производству яичного порошкаОбъектом автоматизации является цех по производству яичного порошка Кобринской птицефабрики (Республика Беларусь, Брестская обл.... |