Course detail

Data Warehousing in Oracle

FIT-IOWAcad. year: 2013/2014

Data warehousing concepts in Oracle, logical and physical model of a data warehouse, structures for efficient creation if data warehouses, process of extraction, transformation and loading, SQL constructions for data warehousing (aggregation, analysis, reporting, models), Oracle Warehouse Builder, efficiency of data warehouses, moving data between data warehouses.

Language of instruction

Czech

Number of ECTS credits

5

Mode of study

Not applicable.

Guarantor

Ing. Vladimír Bartík, Ph.D.

Department

Department of Information Systems (UIFS)

Learning outcomes of the course unit

Students learn the basic terms and principles of data warehousing and becomes acquainted with process of extraction, transformation and loading. Then, students get to know the Oracle environment for data warehousing and learn to use it for creating of real data warehouses. 

Students will be able to design a data warehouse and to create it in the Oracle tools. 

Prerequisites

Knowledge of relational databases and the SQL language. 

Co-requisites

Not applicable.

Planned learning activities and teaching methods

The course uses teaching methods in form of Lecture - 2 teaching hours per week, Computer exercise - 1 teaching hour per week, Projects - 1 teaching hour per week.

Assesment methods and criteria linked to learning outcomes

It is necessary to get at least 50 points from all ranked activities. 

Course curriculum

    Syllabus of lectures:
    1. Data warehousing concepts in Oracle 11g - basic terms: data warehouse, ETL, OLTP and OLAP databases, approaches of data warehouse creation, facts and dimensions.
    2. Logical and physical model of a data warehouse (1) - problem of data modeling in data warehousing, terms of business, logical a physical model.
    3. Logical and physical model of a data warehouse (2) - physical models of data warehouses (star schema, snowflake schema), facts and dimension characteristics, transformation of models.
    4. Structures for efficient creation of data warehouses - size estimation, data partitioning, indexing, optimization, parallelization, data security.
    5. Process of extraction, transformation and loading (1) - ETL process and its parts, tools for ETL process, data extraction: data sources selection, mapping, data extraction methods.
    6. Process of extraction, transformation and loading (2) - Data transformation: anomalies in data, problems of transformation and their solution, tools and techniques, data quality.
    7. Process of extraction, transformation and loading (3) - data loading: data transmission techniques, loading process definition, data loading techniques, post-processing.
    8. SQL constructions for data warehousing - aggregation in data warehouses, analytical queries in SQL, regular expressions in SQL.
    9. Oracle Warehouse Builder (1) - tool description and definition of steps of the ETL process.
    10. Oracle Warehouse Builder (2) - accessing various data sources, metadata management, data security.
    11. Efficiency of data warehouses - efficiency of ETL process, performance tuning, parameters setting, use of materialized views.
    12. Optimization in data warehouses - optimization at various levels, optimization of analytic queries.
    13. Support for data warehousing in the Oracle DBMS - various Oracle tools to maintain data warehouses.

    Syllabus of computer exercises:
    Computer exercise (2 hours per 2 weeks):
    1. Introduction: getting to know with laboratory and tool used during exercise, organization, introduction to data warehouse design. 
    2. Oracle Warehouse Builder - installation and configuration, creation of a project and definition of various data sources. 
    3. Definition of extraction, transformation and loading in Oracle Warehouse Builder - mapping of source and target data, various ETL operations. 
    4. Deploying and debugging of the data warehouse project, introduction into data warehouse administration. 
    5. Analytic SQL constructions, working with multidimensional data model and OLAP analysis of data warehouse contents. 
    6. Practical example including the whole process of data warehouse creation in Oracle Warehouse Builder.

    Syllabus - others, projects and individual work of students:
    The project includes design and creation of a data warehouse from a given OLTP database sample in Oracle Data Warehouse Builder, including the design of extraction, transformation and loading process and the analysis of data. 

Work placements

Not applicable.

Aims

The aim is to understand concepts of creating and using of data warehouses in the Oracle 11g environment; to become acquainted with tools and processes of data warehouse creation; to understand the ETL process from OLTP databases into a data warehouse; to learn analytic SQL constructions and usage of Oracle Warehouse Builder tool for definition of ETL process.

Specification of controlled education, way of implementation and compensation for absences

  • A project of creation a data warehouse in the Oracle 11g. 
  • Written test at the end of a semester. 

Recommended optional programme components

Not applicable.

Prerequisites and corequisites

Not applicable.

Basic literature

Griesemer, B.: Oracle Warehouse Builder 11g: Getting Started. Packt Publishing, 2009. Dokumentace k produktu Oracle Warehouse Builder 11g.

Recommended literature

Not applicable.

Classification of course in study plans

  • Programme IT-BC-3 Bachelor's

    branch BIT , 0 year of study, summer semester, elective

Type of course unit

 

Lecture

26 hod., optionally

Teacher / Lecturer

Ing. Vladimír Bartík, Ph.D.

Syllabus

  1. Koncepce datových skladů v prostředí Oracle 11g - základní pojmy: datový sklad, ETL, OLTP a OLAP databáze, přístupy k vytváření datových skladů, fakta a dimenze.
  2. Logický a fyzický model datového skladu (1) - problematika modelování dat v datových skladech, pojmy obchodní, logický a fyzický model.
  3. Logický a fyzický model datového skladu (2) - fyzické modely datového skladu (schéma hvězdy, sněhové vločky), charakteristiky tabulek faktů a dimenzí, transformace mezi jednotlivými modely.
  4. Struktury pro efektivní tvorbu datových skladů - nastavení velikosti datového skladu, dělení dat, indexování, optimalizace, paralelizace, bezpečnost dat.
  5. Proces extrakce, transformace a vložení dat (1) - proces ETL a jeho součásti, nástroje pro proces ETL, extrakce dat: výběr zdrojů dat, mapování, metody extrakce dat.
  6. Proces extrakce, transformace a vložení dat (2) - transformace dat: anomálie v datech, problémy transformace a jejich řešení, nástroje a techniky, zajištění kvality dat.
  7. Proces extrakce, transformace a vložení dat (3) - vložení dat: techniky pro přenos dat, definice procesu vložení, techniky vkládání dat, post-processing.
  8. SQL konstrukce pro datové sklady - agregační operace v datových skladech, analytické dotazy v SQL, využití regulárních výrazů v SQL.
  9. Prostředí Oracle Warehouse Builder (1) - popis nástroje a definice jednotlivých kroků celého ETL procesu.
  10. Prostředí Oracle Warehouse Builder (2) - přístup k různým datovým zdrojům, správa metadat, řízení bezpečnosti.
  11. Výkonnost datového skladu - výkonnost procesu ETL, ladění výkonnosti, nastavení parametrů, využití materializovaných pohledů.
  12. Optimalizace v datových skladech - optimalizace na různých úrovních, optimalizace analytických dotazů.
  13. Podpora pro datové sklady v SŘBD Oracle - seznámení s různými nástroji firmy Oracle pro práci s datovými sklady.

Exercise in computer lab

12 hod., optionally

Teacher / Lecturer

Ing. Vladimír Bartík, Ph.D.

Syllabus

Cvičení 1x za 14 dní v rozsahu 2 vyučovací hodiny.
1. Úvodní cvičení: seznámení s laboratoří a nástroji Oracle využívanými na cvičeních, organizační pokyny, úvod do návrhu datového skladu.
2. Prostředí Oracle Warehouse Builder - instalace a konfigurace, vytvoření projektu a definice zdrojů dat různých typů.
3. Definice procesu extrakce, transformace a vložení dat v prostředí Oracle Warehouse Builder - mapování zdrojových a cílových dat, jednotlivé ETL operace.
4. Nasazení a ladění projektu pro vytvoření datového skladu, úvod do administrace datového skladu.
5. Analytické SQL konstrukce, práce s multidimenzionálním modelem dat a OLAP analýza dat obsažených v datovém skladu.
6. Praktický příklad zahrnující celý proces vytvoření datového skladu v prostředí nástroje Oracle Warehouse Builder.

Project

14 hod., optionally

Teacher / Lecturer

Ing. Vladimír Bartík, Ph.D.