The Data Information and Management System DIMS Wilhelm

The Data Information and Management System (DIMS) Wilhelm Wildegger, DLR, DFD Version 2007 -10 -15

Earth Observation from Space Data Acquisition Application Distribution Archiving Product Generation Calibration 2 Folie 2 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

En. MAP Support for Numerous Missions Tan. DEM-X Mission Examples National Missions European Missions International Missions Terra. SAR-X METOP ENVISAT Airborne Imaging Terra & Aqua CHAMP SRTM Product Examples 3 Folie 3 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

Specific and General Tasks User Information Services EOWEB® DIMS Product Library General tasks, common to all missions and sensors Order Management Inventory Archive Online/ Offline Delivery Data Information and Management System (DIMS) Multi-Mission System Production Control Specific tasks: Processing of data Processing Systems Atmospheric Radar Optical 4 Folie 4 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

DIMS Facility User Systems EOWEB® User Information Service DIMS Pickup Point Operating Tool UIS Loader/ Interface Ordering Control Online/Offline Product Library Short, Medium and Long Term Archiving Prod. Gen. & Delivery Production Control Monitoring & Alarm Ingestion System Pickup Point Processing System Post-Processing Data Flow Control Flow 5 Folie 5 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

DIMS, some numbers Today (Oberpfaffenhofen and Neustrelitz) ca. 50 processing systems connected to DIMS ca. 60. 000 product transfers per month ca. 100 product types ca. 1, 000 products ca. 6. 7 Mio. files ca. 200 TByte of data 6 Folie 6 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

New DIMS Hardware CAF Firewall Terra. SAR-X TVSP Proc. System DIMS FC Switch LX fiber links Primary Copy Robot Library High Availability Server Online/Offline Product Gen. & Delivery High Availability . . . Post Processing Server CD/ DVD Writing System Secondary Copy Robot Library (remote) Archive Server Tape SAN Disk SAN UIS Server Processing Systems FC Sw. Product Library / Inventory Server . . . FC Sw. DIMS Operations Server AIR OS Proc. System(s) Online/ Offline Product Gen. Server FC Sw. Terra/Aqua MODIS Proc. Systems Product Library Production Control Server Name/Web/ SW Service Production Control SRTM X-SAR Proc. Systems Sun Cluster Post Processing User Inform. Services SAN Storage System 25 TByte Ordering Control Server ERS-2 GOME L 2/L 3 Proc. System(s) FC Switch Ordering Control MSG Proc. System(s) . . . 8* LTO-3 13* 9940 B 2* LTO-2 AMU C-AF Production Network to DLR Backbone Switch 7 Folie 7 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

Hierarchical Storage Management 1 st Copy migrate stage write read 2 nd Copy (remote) Quantum AML-2 Disk Cache Online Nearline Quantum i 2000 2200 TByte archiving capacity, 10 TByte disk cache 8 Folie 8 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

New versus Old DIMS Hardware Archive Tape Drives and Media Type old primary copy Sony AIT-2 new primary copy old secondary copy Native Capacity Total Capacity of Robot Library Read / Write Connec. Speed tion 50 GByte ca. 6000 slots 300 TByte 5 MByte/s SCSI Sun / STK 9940 B 200 GByte ca. 10, 000 slots 2 PByte 30 MByte/s SAN DLT 7000 35 GByte ca. 1000 slots 35 TByte + off robot storage 3 MByte/s SCSI 400 GByte ca. 1000 slots 400 TByte up to 80 MByte/s SAN new secondary copy IBM LTO-3 9 Folie 9 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

10 Folie 10 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15

11 Folie 11 Institut für Methodik der Fernerkundung bzw. Deutsches Fernerkundungsdatenzentrum DFD, W. Wildegger 2007 -10 -15