Methoden der Datengewinnung

Präsentation zum Thema: "Methoden der Datengewinnung"—  Präsentation transkript:

1 Methoden der Datengewinnung
Datenbanken In der heutigen Wirtschaftspraxis dominant: Relationale Datenbanksysteme (RDBMS) Massendatenverwaltung in OLTP-Systemen (OnLine Transaction Processing) Deklarative DBMS-Sprache: SQL (Structured Query Language, früher auch SEQUEL: Structured English QUEry Language) Problem: in OLTP-Systemen werden Daten für die Massenverwaltung optimiert, nicht hingegen für die Abfragen (Joins) 11/10/2018

2 Methoden der Datengewinnung
Datawarehouse-Konzept ... Sammlung von EDV-Werkzeugen zur Gewinnun von entscheidungsrelevanten Informationen aus Daten ... bildet die Basis für PRÄSENTATIONEN (Grafiken, Berichte) und AUSWERTUNGEN (OLAP - OnLine Analytical Processing, Datamining) IDC-Studie aus 1996: durchschnittlicher ROI nach 3 Jahren eines Datawarehouses: 400% (bis zu 600% Spitze) Voraussetzungen: objektorientierte Software, Speicherung komplexer Daten und sehr umfangreicher Daten (VLDB) 11/10/2018

3 Methoden der Datengewinnung
Datawarehouse-Konzept Datenstrom: OLTP ===> Datawarehouse Mögliche Anwendungen: Customer Retention Customer Services Risk assessment and fraud detection Retrospektive Analyse vs. prospektive Analyse 11/10/2018

4 Methoden der Datengewinnung
OLAP (OnLine Analytical Processing) OLAP gliedert die Unternehmensdaten in mehrere logische Dimensionen (Umsatz je Region, Gewinn je Produkt, Kosten pro Kostenstelle, Marktanteil je Markt etc.) Eignet sich für Problemstellungen, die mit SQL und Spreadsheets nicht gelöst werden können Antwortzeit für eine typische Fragestellung sollte < 5 sec. liegen (unabhängig von der Größe der Datenbank) Die OLAP-Entwicklung wurde von betriebswirtschaftlichen Fragestellungen und nicht von den Datenbankherstellern vorangetrieben 11/10/2018

5 Methoden der Datengewinnung
OLAP (OnLine Analytical Processing) Typisches OLAP-Problem: automatisches Umrechnen von Gewinnen und Umsätzen in eine Gewinnspanne (Gewinn / Umsatz) bezogen auf unterschiedliche Variable (Produkt, Region, Vertriebskanal, Markt etc.) 1995: vier OLAP-Software-Hersteller gründen das OLAP-Council ( Anfang 1998: Microsoft gibt eigenen OLAP-Schnittstellen-Standard bekannt (OLE DB for OLAP, 11/10/2018

6 Methoden der Datengewinnung
OLAP (OnLine Analytical Processing) Die wichtigsten praktischen Voraussetzungen für OLAP-Produkte: Schneller Datenzugriff, schnelle Berechnungen, Ausdruckskraft der Berechnungsformeln, - anwenderfreundliche Benutzeroberflächen, - flexible Ansichten und Mehrbenutzerbetrieb Spreadsheets eignen sich praktisch nicht für OLAP-Anwendungen 11/10/2018

7 Methoden der Datengewinnung
OLAP (OnLine Analytical Processing) Darstellung höherdimensionaler Ansichten in OLAP-Software: Produkt: Schuhe Umsatz direkte indirekte Gesamt- Spanne Kosten Kosten kosten Jänner Februar März April Mai Juni Juli August September Oktober November Dezember 11/10/2018

8 Methoden der Datengewinnung
OLAP (OnLine Analytical Processing) Multidimensional Domain Structures (MDS): ... dienen zur Markierung mehrdimensionaler Zustände auf unterschiedlichen Skalen Wesentliches Merkmale von OLAP-Software: Zahlenverdichtung über Hierarchien hinweg 12 Regeln für OLAP von Codd (von TM/1 abgeschaut - OLAP-Benchmark) 11/10/2018

9 Methoden der Datengewinnung
Datamining ... ist die Automatisierung des Entdeckens von Information in großen Datenmengen andere Bezeichnung: Knowledge Discovery in Databases (KDD) ... wurde auch schon früher betrieben (z.B. Regressionsan-alysen), aber noch nicht so genannt! 2 unterschiedliche Anwendungen: supervised learning (classification studies) - unsupervised learning (clustering studies) KDD gilt zur Zeit als „strategisches Betriebsgeheimnis“! 11/10/2018

10 Methoden der Datengewinnung
Datamining Beginn des Datamining: „Reinigung“ der Daten Planung der Studie Auswahl eines Training- und eines Verifikations-Datenbestands Wichtigste Techniken: Entscheidungsbäume (Decision Trees) Genetische Algorithmen (Genetic Algorithms) Neuronale Netze (Neural Nets) 11/10/2018

11 Methoden der Datengewinnung
XML und XBRL XML: ein vom W3C-Konsortium beschlossener, vom Anwender frei definierbarer Sprachstandard. Beispiel: <!xml version=”1.0”!> <liste> <kunde> <name>Microsoft</name> <ort>München</ort> </kunde> </liste> 11/10/2018

12 Methoden der Datengewinnung
XML und XBRL Eigene Tags können in einer Document Type Definition festgelegt werden. XML-Serverdatenbanken sind bereits verfügbar. Diese Technologie besitzt das schnellste Wachstum und das größte Zukunftspotential im gesamten EDV- und Internet-Bereich! In Zukunft: weblications (Webpage = application) 11/10/2018

13 Methoden der Datengewinnung
Standard zum Datenaustausch von Bilanz-, Kontensalden-, Journal- und Belegdaten (existiert zur Zeit als draft, endgültige Version ab ): Wird als Standard-Datenformat in alle neuen MS-Produkte integriert. Ersatz für EDIFACT-Standard. 11/10/2018