Business Intelligence Jan Weinschenker

Präsentation zum Thema: "Business Intelligence Jan Weinschenker"—  Präsentation transkript:

1 Business Intelligence Jan Weinschenker
Projekt Ferienclub Business Intelligence Jan Weinschenker

2 Agenda Ziele und Aufgaben BI-Architektur Datenmodelle
Extraktion, Transformation, Laden Vorgehen im Projekt Zusammenfassung und Ausblick Jan Weinschenker

3 Ziele und Aufgaben Business Intelligence im Ferienclub
Testdaten generieren Unsere Anwendungsfälle realisieren Testschema mit Kundendaten Appointments (Tracking) Jan Weinschenker

4 BI-Architektur Jan Weinschenker

5 Basisdatenbank Jan Weinschenker

6 Ausgangslage: PTT Jan Weinschenker

7 Extraktion und Transformation
Extraktion der Daten Aus Produktivsystem in den Arbeitsbereich Transformation der Daten In eine analyseoptimierte Form Jan Weinschenker

8 Laden der Daten … in die Basisdatenbank Dort endgültige Lagerung
Basis für Analysen Keine Änderungen mehr Jan Weinschenker

9 Verwendete Werkzeuge Arbeitsbereich und Basisdatenbank
BizGres DBMS (ein PostGreSQL-Fork) ETL: Enhydra Octopus Java-basiert Konfiguration über XML Datenbankzugriff per JDBC (kein Bulkload) Diverse JDBC-Treiber Jan Weinschenker

10 Verwendete Werkzeuge Eclipse-Plugins Fedora Linux Aqua Data Studio Ant
XMLBuddy QuantumDB Fedora Linux Aqua Data Studio Ant Jan Weinschenker

11 Vorgehen im Projekt Installation und Konfiguration der Arbeitsumgebung (MS I) Erzeugen von Testdaten Testdaten und Testdatenschema (MS II) Testdaten für PTT-Schema (MS III) Jan Weinschenker

12 Vorgehen im Projekt ETL-Jobs verfassen (XML, SQL)
Definition von Quell- und Zieldatenbank Quell- und Zielschema Kopier- und Transformationsvorgängen Fehlersuche und Debugging Eigenheiten von JDBC-Implementierungen Änderungen an Datenbankschemata Jan Weinschenker

13 Zusammenfassung und Ausblick
ETL ist Fummelkram Man kennt die Datenschemata aller Beteiligten Ich hätte gerne noch Ein besseres Cleanup der Quelldaten gemacht Eine SOA-Adminschnittstelle implementiert Jan Weinschenker

14 Fragen? Jan Weinschenker

15 Quellen BizGres DMBS Enhydra Octopus ETL-Tool
Enhydra Octopus ETL-Tool JTDS JDBC-Treiber (für MS SQLServer) PostgresQL JDBC-Treiber (für BizGres) Jan Weinschenker

16 Quellen XMLBuddy Eclipse Plugin QuantumDB Eclipse Plugin Fedora Linux
QuantumDB Eclipse Plugin Fedora Linux Aqua Data Studio Apache Ant Jan Weinschenker