MIRAKEL Die Klimadatenbank des DWD Johannes Behrendt Deutscher Wetterdienst (DWD) Hamburg, March 26, 2002
Übersicht Eigenschaften der MIRAKEL Datenbank Nationale Datenbasis Aspekte des Datenmodells Anwendungen Verbesserung des externen Datenbankzugriffs Interner und externer Datenbankzugriff Anforderungen an eine verbesserte Webschnittstelle (UNIDART)
Die MIRAKEL Datenbank Datenbasis Eigenschaften Nationale Klimadaten Internationale Klimadatenzentren (GPCC, GCC) Globale SYNOP Daten (seit 2001) Eigenschaften Direkter Zugriff auf alle Daten in einer relationalen Datenbank (Zeitreihen und synoptische Sortierung) Eindeutige Identifizierung aller Stationen (global, national einschließlich der Stationsgeschichte)
Datenmodell Datenmodell für Daten SYNOP Klima Oberfläche Niederschlag Stündl. Werte 10 Minuten-Werte M e t a d a t e n Aerologische Daten Erdbodentemperatur Wetterlagenklassifikation Phänologische Daten Tägliche Werte Monatswerte Langj. Mittel DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Geschichte der Klimadaten im DWD Geschichte der Datenbasis Status der Migration nach MIRAKEL Vollständige Migration des historischen Archivs außer: SYNOP-Daten vor 1979 Aerologische Daten vor 1998 Phänologische Daten, Strahlungsdaten DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Anzahl der Stationen 28 essential SYNOP Stationen (ECOMET) Globale Verteilung 28 essential SYNOP Stationen (ECOMET) Im DWD verfügbar ca 200 SYNOP Stationen (stündlich) ca 600 Klimastationen (täglich) ca 4000 Niederschlagsstationen (täglich) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Eigenschaften des Datenmodells für die Daten Identifikation aller Datensätze durch Fremdschlüssel zu den Metadaten Stations_id Messnetz_id Mess_datum (für Stationsgeschichte) Druck / Tiefe Luftdruck, Tiefe (teilweise) Messnetz Datenquelle Messnetz_id Beschreibung der Qualitätskontrollverfahren Qualitäts_niveau Beschreibung der Kodierung Struktur_version Datum/Zeit der Beobachtung Mess_datum Eindeutige Stationsnummer Stations_id
Mengengerüst der MIRAKEL-Datenbank Anzahl der Tabellen 179 Anzahl der Tabellen mit Daten 50 Daten 55 Gb Indizes 65 Gb größte Tabelle 10 Gb Anzahl Zeilen in größter Tabelle 102 Mill Zeilen Zeilen pro Minute beim Retrieve 10-30 k Zeilen/Min DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Anwendungen Import aktueller und historischer Klimadaten Qualitätssicherung Maskengesteuerter interaktiver Zugriff Internes Retrieval Web Anwendungen
QUERY_BUILDER / MS ACCESS Anwendungs system old file formats NATIONAL DATA Reports GTS IMPORT OLM REPORTS FORMS WWW MIRAKEL DATABASE SQL MIRAKEL_RETRIEVE QUERY_BUILDER / MS ACCESS Data Service ad- hoc-queries old file formats DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Internetzugang zu Klimadaten im DWD KLIS: Das Klima Informations System http://ww.dwd.de/research/klis Klimadaten online http://www.dwd.de/research/klis/daten/dat.htm
Klimadaten im Internet Selected maps Hamburg, Mar 2002 DKRZ Workshop, J. Behrendt
Metadaten im Internet Beschreibung der Datenkollektive Beschreibung der Datenpolitik Aktuelle Stationsinformationen Stationsnummern Stationsname Koordinaten Stationshöhe Verfügbarkeit der Zeitreihen Zeitraum (für ein Datenkollektiv an einer Station) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Geplante Weiterentwicklung Vergrößerung der MIRAKEL- Datenbasis Zusätzliche Metadaten Verfügbarkeit von Zeitreihen, detailliertere historische Informationen Zusätzliche Klimadaten zusätzliche SYNOP und aerologische Daten Phänologische Daten Strahlungsdaten Historische globale Daten Verbesserung der Qualitätssicherung Verbesserung des Internetzugangs (UNIDART) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
National Climate Data Warehouses GTS NMS internet application INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
International Climate Data Centres NMS NMS NMS Data Centre Data Centre Data Centre internet application internet application internet application INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Data Exchange Platform NMS NMS NMS Integration Software UNIDART Virtual Climate Database Internet applications INTERNET DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Definition von Anforderungen an UNIDART ECSN Workshop in Langen (Nov 12-13, 2001) http://www.dwd.de:8080/research/klis/internat/ecsn/ecsn_workshop12112001/index.htm UNIDART Workshop in Langen (Jan 28-30, 2002) http://www.dwd.de/UNIDART/Workshop/
Anforderungsliste für UNIDART Klimadaten Klimadaten von der Oberfläche und aus der freien Atmosphäre Zeitreihen monatliche und tägliche Werte Metadaten Verfügbarkeit Datenproduzent Daten- und Nutzerklassifikation (Zugriffsrechte) Stationsinformationen (auch historisch) Beschreibung der Elemente (einschließlich der Qualität) Nutzung von Metadatenstandards (CBS Empfehlungen) DKRZ Workshop, J. Behrendt Hamburg, Mar 2002
Schlussbemerkung MIRAKEL ist optimiert für die interne Nutzung im DWD UNIDART ist vorgesehen für einen besseren Webzugang DKRZ Workshop, J. Behrendt Hamburg, Mar 2002