MIRAKEL Die Klimadatenbank des DWD

Präsentation zum Thema: "MIRAKEL Die Klimadatenbank des DWD"—  Präsentation transkript:

1 MIRAKEL Die Klimadatenbank des DWD
Johannes Behrendt Deutscher Wetterdienst (DWD) Hamburg, March 26, 2002

2 Übersicht Eigenschaften der MIRAKEL Datenbank
Nationale Datenbasis Aspekte des Datenmodells Anwendungen Verbesserung des externen Datenbankzugriffs Interner und externer Datenbankzugriff Anforderungen an eine verbesserte Webschnittstelle (UNIDART)

3 Die MIRAKEL Datenbank Datenbasis Eigenschaften
Nationale Klimadaten Internationale Klimadatenzentren (GPCC, GCC) Globale SYNOP Daten (seit 2001) Eigenschaften Direkter Zugriff auf alle Daten in einer relationalen Datenbank (Zeitreihen und synoptische Sortierung) Eindeutige Identifizierung aller Stationen (global, national einschließlich der Stationsgeschichte)

4 Datenmodell Datenmodell für Daten SYNOP Klima Oberfläche Niederschlag
Stündl. Werte 10 Minuten-Werte M e t a d a t e n Aerologische Daten Erdbodentemperatur Wetterlagenklassifikation Phänologische Daten Tägliche Werte Monatswerte Langj. Mittel DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

5 Geschichte der Klimadaten im DWD
Geschichte der Datenbasis Status der Migration nach MIRAKEL Vollständige Migration des historischen Archivs außer: SYNOP-Daten vor 1979 Aerologische Daten vor 1998 Phänologische Daten, Strahlungsdaten DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

6 Anzahl der Stationen 28 essential SYNOP Stationen (ECOMET)
Globale Verteilung 28 essential SYNOP Stationen (ECOMET) Im DWD verfügbar ca 200 SYNOP Stationen (stündlich) ca 600 Klimastationen (täglich) ca 4000 Niederschlagsstationen (täglich) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

7

8 Eigenschaften des Datenmodells für die Daten
Identifikation aller Datensätze durch Fremdschlüssel zu den Metadaten Stations_id Messnetz_id Mess_datum (für Stationsgeschichte) Druck / Tiefe Luftdruck, Tiefe (teilweise) Messnetz Datenquelle Messnetz_id Beschreibung der Qualitätskontrollverfahren Qualitäts_niveau Beschreibung der Kodierung Struktur_version Datum/Zeit der Beobachtung Mess_datum Eindeutige Stationsnummer Stations_id

9 Mengengerüst der MIRAKEL-Datenbank
Anzahl der Tabellen 179 Anzahl der Tabellen mit Daten 50 Daten 55 Gb Indizes 65 Gb größte Tabelle 10 Gb Anzahl Zeilen in größter Tabelle 102 Mill Zeilen Zeilen pro Minute beim Retrieve 10-30 k Zeilen/Min DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

10 Anwendungen Import aktueller und historischer Klimadaten Qualitätssicherung Maskengesteuerter interaktiver Zugriff Internes Retrieval Web Anwendungen

11 QUERY_BUILDER / MS ACCESS
Anwendungs system old file formats NATIONAL DATA Reports GTS IMPORT OLM REPORTS FORMS WWW MIRAKEL DATABASE SQL MIRAKEL_RETRIEVE QUERY_BUILDER / MS ACCESS Data Service ad- hoc-queries old file formats DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

12 Internetzugang zu Klimadaten im DWD
KLIS: Das Klima Informations System Klimadaten online

13 Klimadaten im Internet
Selected maps Hamburg, Mar 2002 DKRZ Workshop, J. Behrendt

14 Metadaten im Internet Beschreibung der Datenkollektive
Beschreibung der Datenpolitik Aktuelle Stationsinformationen Stationsnummern Stationsname Koordinaten Stationshöhe Verfügbarkeit der Zeitreihen Zeitraum (für ein Datenkollektiv an einer Station) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

15 Geplante Weiterentwicklung
Vergrößerung der MIRAKEL- Datenbasis Zusätzliche Metadaten Verfügbarkeit von Zeitreihen, detailliertere historische Informationen Zusätzliche Klimadaten zusätzliche SYNOP und aerologische Daten Phänologische Daten Strahlungsdaten Historische globale Daten Verbesserung der Qualitätssicherung Verbesserung des Internetzugangs (UNIDART) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

16 National Climate Data Warehouses
GTS NMS internet application INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

17 International Climate Data Centres
NMS NMS NMS Data Centre Data Centre Data Centre internet application internet application internet application INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

18 Data Exchange Platform
NMS NMS NMS Integration Software UNIDART Virtual Climate Database Internet applications INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

19 Definition von Anforderungen an UNIDART
ECSN Workshop in Langen (Nov 12-13, 2001) UNIDART Workshop in Langen (Jan 28-30, 2002)

20 Anforderungsliste für UNIDART
Klimadaten Klimadaten von der Oberfläche und aus der freien Atmosphäre Zeitreihen monatliche und tägliche Werte Metadaten Verfügbarkeit Datenproduzent Daten- und Nutzerklassifikation (Zugriffsrechte) Stationsinformationen (auch historisch) Beschreibung der Elemente (einschließlich der Qualität) Nutzung von Metadatenstandards (CBS Empfehlungen) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002

21 Schlussbemerkung MIRAKEL ist optimiert für die interne Nutzung im DWD
UNIDART ist vorgesehen für einen besseren Webzugang DKRZ Workshop, J. Behrendt Hamburg, Mar 2002