Stand der CMIP5 Replikation

Letzte Aufrufe:

cmesg_user:~(master)$ ps ux | grep esgdow

221060 20479 0.0 0.0 252676 23460 pts/5 Sl 12:05 0:00 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/bin/esgdownload --file /gpfs_20/home/cmesg_user/download-replicas/lists/todo.http.bcc.rcpx.20130207

21060 21733 0.0 0.0 182528 13604 pts/5 Sl 12:06 0:00 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/bin/esgdownload --file /gpfs_20/home/cmesg_user/download-replicas/lists/todo.http.bcc.amipx.20130207

cmesg_user:~(master)$ ps ux | grep Down

21060 6956 0.0 0.0 344560 32572 ? Sl Feb01 4:05 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/esgf/esgf-contrib/estani/python/Download.py --start-threads 3 --max-threads 10 -df /gpfs_20/home/cmesg_user/download-replicas/lists/todo.http.csiro.all.20130131

21060 12323 0.0 0.1 377912 54632 ? Sl Feb01 4:48 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/esgf/esgf-contrib/estani/python/Download.py --start-threads 3 --max-threads 10 -df /gpfs_20/home/cmesg_user/download-replicas/lists/todo.repo.ipsl.all.20130201

21060 20139 0.0 0.0 344148 17264 ? Sl Feb01 4:07 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/esgf/esgf-contrib/estani/python/Download.py --start-threads 3 --max-threads 10 -df /gpfs_20/home/cmesg_user/download-replicas/lists/todo.http.ichec.all.20130131

21060 27932 0.0 0.3 435168 111948 ? Sl Feb01 5:47 /usr/local/cdat/bin/python /gpfs_20/home/cmesg_user/esgf/esgf-contrib/estani/python/Download.py --start-threads 3 --max-threads 10 -df /gpfs_20/home/cmesg_user/download-replicas/lists/todo.http.cmcc.all.20130131

Archiv

Es sind archiviert worden (alle Institute, nur output1 Daten):

786 TByte in 1.414.079 Dateien

Archiviert bedeutet :

Anmerkung: die Daten sind alle dem User 'doi' übereignet, DOI Daten sind so ohne wietres nicht löschbar (immutable Bit gesetzt)

Vom Institut NCC liegen ca. 40 TByte in 52377 Dateien hier auf dem GPFS. Die Daten haben wie die MPI Daten einen DOI und dürfen daher nicht mehr geändert werden.

Werte aus der Replikations Datenbank:

BCC: 19 TByte in 18.334 Dateien

CMCC: 97 TByte in 143.602 Dateien

CNRM: 53 TByte in 148.643 Dateien

CSIRO: 40 TByte 66.314 Dateien

IPSL: 165 TByte in 97.949 Dateien

MIROC: 40 TByte in 87.360 Dateien

MOHC (bisher ohne decadal): 55 TByte in 194.884 Dateien

MRI: 41 TByte in 64.620 Dateien

NCAR (incl. NSF): 144 TByte in 133.400 Dateien

NOAA-GFDL: 35 TByte in 246.716 Dateien

Warteliste

Es sind in der Replikations Datenbank eingeladen und zum replizieren vorhanden:

592 TByte in 855.616 Dateien

Anmerkung: es sind dabei bisher keine Daten vom NOAA, NASA und LASG berücksichtigt

Die Daten sind teilweise schon hier werden in der DB aber noch als nicht archiviert geführt da noch keine Publikation gemacht wurde.

Liste der DS nach Institut:

BCC: 1335, 35 TByte in 33.257 Dateien

MRI: 1596, 108 TByte in 221.904 Dateien

MIROC:

IPSL: 689, 62 TByte in 38.353 Dateien

CNRM: 604, 17 TByte in 59.982 Dateien

NCAR(incl. NSF): 478, 59 TByte in 39.993 Dateien

MOHC (nur decadal): 807, 3 TByte in 9.271 Dateien

ICHEC: 863, 24 TByte in 24.972 Dateien

MadWiki: CERA Contents/CMIP5Replikation (last edited 2013-02-07 14:25:44 by HansRamthun)