Infology.Ru

Для проекта по построению хранилища данных в крупном российском банке требуется Архитектор данных/ Разработчик моделей данных

Обязанности

Архитектор данных:

• Участвует в сборе бизнес-требований к хранилищу (DWH) и витринам данных (data mart) в части необходимых данных
• Адаптирует отраслевую модель данных (data model) хранилища данных для финансовой отрасли, выступающую в качестве основы для построения централизованного хранилища данных
• Разрабатывает модели данных витрин данных для различных бизнес-задач

Читать дальше »

Опубликовано 24.06.2009 | Автор сообщения Константин Лисянский | Категории: DWH, Data Vault, Архитектор данных, Банки, Вакансии, Для продвинутых, Для экспертов, Концептуальное моделирование, На русском, Проектирование многомерных моделей, Проектирование нормализованных моделей, Проектирование хранилищ данных, Работа, Разработчик моделей данных

Для проекта по построению хранилища данных в крупном российском банке требуется Архитектор хранилища данных/Технический лидер.

Обязанности

Архитектор хранилища данных:

• Осуществляет руководство технической составляющей проекта по созданию централизованного хранилища данных. Отвечает за успех проекта в технологической части.
• Разрабатывает архитектуру хранилища данных и его подсистем на высоком уровне. Координирует работу архитекторов соответствующих подсистем. Тесно взаимодействует с архитекторами по различным подсистемам (хранилище данных, ETL, BI, метаданные, качество данных, безопасность).

Читать дальше »

Опубликовано 17.06.2009 | Автор сообщения Константин Лисянский | Категории: Business Intelligence, DWH, ETL, Архитектор BI, Архитектор ETL, Архитектор данных, Банки, Вакансии, Для продвинутых, Для экспертов, На русском, Технический архитектор

Position Overview

The Deutsche Bank Finance-IT department is responsible for the design, implementation and support of middle- and back-office systems with in Finance Group Risk Control in Frankfurt and in the regions. dbArtos is the central Credit Risk data management, calculation and reporting system that provides all Deutsche Bank Credit Risk reports for internal management and external/regulatory purpose. This has become more and more important given the current market conditions. The system is based on an Oracle data management layer, SAS calculation and a Java client weblogic J2EE / Microstrategy reporting layer. A significant portion of the development is performed by a Moscow based vendor.
Читать дальше »

В предыдущей статье были рассмотрены аппаратные и программные способы повышения производительности хранилищ данных (DWH). Сегодня рассмотрим архитектурные способы, проектирование и администрирование.

Архитектуные способы повышения производительности

Правильная архитектура имеет ключевое значение для производительности и пропускной способности всей системы в целом. Элементами архитектуры являются все системы, вовлечённые в наполнение и использование хранилища данных, начиная от систем-источников (source system), и заканчивая отдельными витринами данных (data mart) и аналитическими приложениями (analytical application). При правильно построенной архитектуре данные максимально быстро попадают из систем, в которых они создаются, к конечным пользователям. При этом инфраструктура хранилища данных (оборудование, программное обеспечение) используется наиболее оптмальным образом (отсутствуют пики и простои). Оптимизация хранилища данных с точки зрения архитектуры может включать перенос нагрузки из узких мест в более производительные и/или недозагруженные. Например, перенос части нагрузки с ETL-серверов на СУБД хранилища данных (ELT). Или, наоборот, разгрузка СУБД хранилища данных за счёт переноса нагрузки с СУБД на серверы OLAP.
Читать дальше »

Position/Title - Business Intelligence, Technical Architect
Department/Business Line - IB Ops, TMG & Fin IT

Position Overview

The Business Intelligence Technical Architect position will be responsible for the overall business intelligence technical architecture and product stack. The Technical Architect will work together with Delivery Managers to provide technical architecture solutions across all BI project engagements and infrastructure and product updates and capacity planning.

Role Description

As a technical architect, this role will entail technical design and architecture of BI solutions across BI Services Platform and close involvement in platform and project development as well as interaction with existing delivery managers in New York, London and Singapore, Product Vendors and the business users.
Читать дальше »

Ralph Kimball, Joe Caserta

Книга известного популяризатора технологий хранилищ данных Ральфа Кимбала рассказывает о том, как построить систему ETL для хранилища данных, построенного на основе многомерной модели данных. В книге рассматриваются все аспекты, связанные с ETL, включая планирование, архитектуру, структуры и потоки данных, очистку данных и мониторинг качества данных, процессы разработки и оптимизации, поддержку ETL в режиме производственной эксплуатации, управление метаданными, зоны ответственности и процессы, извлечение и загрузку данных в режиме реального времени.
Читать дальше »

Автор: Андрей Пивоваров
Дата публикации оригинала: 2008-12-17
Источник: Блог Андрея Пивоварова

Продолжение. Начало здесь.

LOCKDFN

Интересная особенность большинства объектов, которые вы создаете в AWM. Например, возьмем описание измерения PRODUCT:

>dsc product

DEFINE PRODUCT DIMENSION READONLY LOCKDFN TEXT

Можно увидеть слова LOCKDFN и READONLY.

Это значит, что теперь объекты, созданные в AWM нельзя менять при помощи DML. Ни структуру, ни содержимое. Использовать на чтение можно, менять нельзя. Более того, нельзя даже добавить новое значение эелемента измерения при помощи команды MAINTAIN.
Читать дальше »

Автор: Андрей Пивоваров
Дата публикации оригинала: 2008-12-16
Источник: Блог Андрея Пивоварова

Когда Дмитрий Волков предложил мне выступить на семинаре Database Options Details с рассказом про OLAP опцию в 11g, я сначала подумал – да о чем тут рассказывать? Между девятой и десятой версией было много различий. А между 10 и 11 вроде ничего особо не было. Ну, кроме Cube-Organized Materialized Views. Потом решил, что на семинаре будет масса людей, которые вообще с OLAP не работали, ни с какой версией, поэтому им, возможно, будет интересно узнать об OLAP вообще. Заодно при подготовке и посмотрю внимательнее, что там изменилось. Но оказалось, что изменений неожиданно много.
Читать дальше »

Автор: Константин Лисянский

25 марта в Москве в гостинице Novotel состоялась презентация новой версии продукта ведущего поставщика инструментов Business Intelligence - компании Microstrategy.

Организаторами мероприятия выступили компания S&T, которая представляет интересы Microstrategy в России, и компания Teradata, которая является глобальным технологическим партнёром Microstrategy.

Помимо вышеперечисленных компаний для доклада была приглашена компания М.Видео, которая является одним из клиентов, успешно внедривших у себя программный продукт Microstrategy.
Читать дальше »

27 марта в Москве в ресторане Дубинин прошла третья BI-сходка.

Похоже, что эта неформальная встреча профессионалов в области Business Intelligence (BI), общающихся на форуме SQL.RU, уже входит в традицию.

Предыдущая BI-сходка была проведена в прошлом году. С отчётом можно ознакомиться здесь.
Читать дальше »