ESGF-LTA-Diskussion

Stand: 16.04.2013

Festlegungen

  1. Alle replizierten und auf dem DKRZ Datenknoten publizierten Daten werden archiviert.
  2. Der DOI Prozess wird mit Daten in CERA Containern durchgeführt, d.h. nach der Archivierung (normaler DOI-Prozess).
  3. Die Quality-Ergebnisse sollen feingranular dokumentiert werden.

Todos

Generelles

Bereich: LTA

CMIP5: Die Bereitstellung von Metadaten schließt sich an die ESGF Publikation Replikaten bzw. Erstpublikation am DKRZ Datenknoten an. Die Archivierung der Daten in CERA erfolgt innerhalb des DOI-Prozesses nach SQA und TQA, d.h. vor der DOI-Zuweisung.

Anpassungen für CORDEX: Gruppen CERA und LTA/DOI

Bereitstellung Metadaten aus dem ESGF

CMIP5: über TDS2CERA: https://redmine.dkrz.de/collaboration/projects/datainfrastructure/wiki/Thredds2CIM

Bereitstellung Daten aus dem ESGF

CMIP5: Die Bereitstellung erfolgt über chmodData/archiveData innerhalb des DOI-Prozesses. https://redmine.dkrz.de/collaboration/projects/wdcc-internal/wiki/Other_Helping_Programmes

Bereich: Qualität

CMIP5: Derzeit ist dieser Bereich schnell und pragmatisch mit vielen schnellen Anpassungen an sich ändernde andere technische Komponenten entwickelt worden. Späte Erweiterungen sind die Publikation von CIM Quality Documents und das Einziehen der ESGF Dataset-Ebene gewesen. (Dokumentation: extern: http://cmip5qc.wdc-climate.de ; intern: https://redmine.dkrz.de/collaboration/projects/wdcc-internal/wiki )

QCDB / CERA2 Module

Bereitstellung des HDH-Tool-Outputs

CIM Quality Documents

Über die CIM Quality Documents werden Qualtiätsergebnisse sichtbar im ESGF. *Voraussetzung:* Es ist ein CIM Simulationsdokument aus dem CIM Questionnaire vorhanden

Annotation

Das ist ein neuer Bereich im Vergleich zu CMIP5.

Bereich: ESGF Anforderungen

Replikation

CMIP5: Dokumentation https://redmine.dkrz.de/collaboration/projects/cmip5-operation/wiki/CMIP5_Replication

Publikation

Bereich: DOI Process

CMIP5: Die TQA läuft auf ESGF Daten. Es werden cross-checks zwischen CERA2, QCDB, CIM Simulation Document, Thredds und Filesystem durchgeführt. Der Datenzugriff wird im ESGF auf Dataset- und Chunkebene auf allen drei CMIP5-Archivknoten getestet. Es erfolgt eine Dokumentation in QCDB und in Form eines CIM Quality Documents für das ESGF.

Folien

MadWiki: ESGF_LTA_Discussion (last edited 2013-04-16 09:22:02 by MartinaStockhause)