30 Jahre DB2 30 Jahre Innovation Claus Weidenfeller - GAD

Transkript

1 30 Jahre DB2 30 Jahre Innovation Claus Weidenfeller - GAD

2 Die GAD: Der genossenschaftliche IT-Dienstleister IT-Beratungs- und Kompetenzcenter, Softwarehaus und Rechenzentrum für 430 Volksbanken & Raiffeisenbanken sowie Retailbanken im deutschsprachigen Raum WGZ BANK, DZ BANK, genossenschaftliche Verbundunternehmen

3 - eine Zeitreise der IT Agenda GAD im Rückblick Einbindung entsprechender Betriebssysteme in die GAD- Infrastruktur State of the Art - Hardware System/360 zur zec12 State of the Art - System-Software MFT zu z/os State of the Art - Database Systems Hierarchisches Datenmodell Relationales Datenmodell (Date und Codd) Transaktionsorientierte Datenverarbeitung Die Evolution der Systemsoftware bei der GAD im Allgemeinen Teilnahme an Beta Programmen (ESP, Early Support Program) MVS / zos IMS (DB/DC) DL/1 DB2 for z/os und andere Die Evolution der DB2 Systemsoftware Zusammenfassung

4 GAD im Rückblick die 60er Jahre 1963 Gründung der GAD eg Gesellschaft für automatische Datenverarbeitung eg Beginnende Evolution der Betriebssystemsoftware war Grundlage, um Massendatenverarbeitung zu gewährleisten IBM System /360 OS/MFT, 24-bit addressing (32-bit architecture) IBM System /360 OS/MVT

5 die Stapelverarbeitung oder das Batchzeitalter - GAD im Rückblick Zentralisierung der Datenverarbeitung Verarbeitungszwänge z. B. Belegleser Stapelverarbeitung Optimierung der Verarbeitung Parallelisierung der Stapelabläufe Tourenverarbeitung Systeminfrastruktur (S/360) Bandverarbeitung Lochkarten Daten sind sequentiell organisiert Assembler als Programmiersprache

6 1. Datenbanksystem auf einem Mainframe In April 1968 ICS was installed. The first "READY" message was displayed on an IBM 2740 typewriter terminal at the Rockwell Space Division at NASA in Downey California, on August 14, In 1969 ICS was renamed to Information Management System/360 (IMS/360) and became available to the IT world.

7 eine Zeitreise der IT, die 70er Die EDV in den frühen 70er ist batchorientiert Entwicklungen zu einer transaktionsorientierten Verarbeitung bekommen mehr Bedeutung GAD nutzt modernste Systeminfrastrukturen Die Nutzung des realen Speichers geht weg von einem statischen Model zu einem virtuellen Konzept IBM System/370 MVS - Betriebssystem Fixed Storage (partitioniert) hin zum Virtual-Storage (16MB) Multiple Virtual Storage Konzept Parallele Tasks Fault tolerant design (ESTAE) SuperVisorState (SVC) Multiprozessor System (2 mal 2 MB) 1. Maschine in Europa bei der GAD Tasks und Job-Spooling (JES) Messages HASP HoustenAutomaticSpoolingPriority System

8 eine Zeitreise der IT, die 70er Anfänge von einer transaktionsorientierten Verarbeitung unter Berücksichtigung von ersten Datenbankkonzepten Implementierung von IMS DB/DC Trennung von Daten und Eingabemedien Nutzung von hierarchischen Datenstrukturen Verarbeitung von parallelen unabhängigen Transaktionen Konkurrierende Batchverarbeitung IMS 1.2- Root Child1 Child20 Child21 Mehr Fokus auf Transaktionsverarbeítung (1978) BOSS Banken Online Service System IMS DB/DC erster Geldausgabeautomat

9 eine Zeitreise der IT, die 80er IBM System/370 (MVS/XA) IMS Extended Architecture (24 31 Bit, above the line) 2 GB Virtual Storage 3 GL Sprachen IMS V Online Change, Disk Logging IMS DB2 V 1.1 Announcement (1983) Releational Data Model Theorie - Date u. Codd The Father of DB2 - Don Haderle Query System SQL (DDL, DML, DCL) Concurrent Access to Data Application Programming Interface CAF, TSO, IMS, CICS DB2 Interactive (SPUFI) Large Prozessor Support Wandel von betriebssystemnahen und statischen, hin zu dynamischen und ergonomischeren Definitionen

10 eine Zeitreise der IT, die 80er IBM Almaden Research Lab, Silicon Valley Lab, Böblingen Lab

11 eine Zeitreise der IT, die 80er Hochverfügbarkeitsanforderungen mußten unterstützt werden SLA s (24x7) Tourenkonzept für IMS DBs wurde entwickelt und implementiert ( ) Mandantenkonzept Anpassungen in der Entwicklungs- und Produktionsplattform ## - Versionen von Programmen und IMS Artefakte entstanden JCL mußte neutralisiert werden Parallele Systeme IMS u. DB2 MQ IMS A Betriebskonzept NAV Routing KZZ K1A K1B K1C Übergreifend Touren

12 eine Zeitreise der IT, die 80er IMS DB/DC neue Version wurde GA IMS DB2 V1.3 Einführung (1987) DSN3$ATH, DSN3$SGN Erstes DB2 Projekt (Zeiterfassung) DB2 System ssnmmstr ssnmdbm1 ssnmirlm DB2 Language Interface V1 Connectivity (CAF, TSO, IMS) SQL Statement Informationen PLIST-Structure DB2 Log Lock s DB2 Buffer Pools DB2 Cat/Dir DB2 DBs DPROP/NR Einführung (IMS DB2)

13 eine Zeitreise der IT, die 80er GAD Bankgeschäft Erweiterte Anforderungen (Backend) GAA war Standard KAD Kontoauszugsdrucker Bildschirmtext (BTX) Einführung BB3 (BosBisy3) auf Basis IMS ( ) BB3 Informationssystem für Bankmitarbeiter auf Basis von DB2 (der MA konnte seine Query selbst definieren)

14 eine Zeitreise der IT, die 80er DB2 V2.1 (1988) DB2 V2.2 (1989) Referential Integrity Extended use of MVS/XA and ESA/390 Faster Sorting DB2 Governor to Limit CPU Resources (RLF) Audit Trail Capability Support for IBM C Language Support for VS Cobol II Release 3 DB2 Language Interface V 2 Trace Table Debugging

15 eine Zeitreise der IT, die 90er IBM System/390 (MVS/XA ESA/390) Hiperspace / Dataspace AR Access Register (Dataspace) ADMF (Asynchronous Data Mover Facility) //Sysplex Design (1994) IMS - n-way Datasharing IMS HW change from Bipolar to CMOS CMOS reduced power costs no water cooling space savings

16 eine Zeitreise der IT, die 90er IMS Extended Terminal Option (ETO) DB2 V Partition Independence Utility Improvements Data Compression Concurrent COPY ConnectivityEnhancements Multi-site Update of Distributed Data Basis DRDA Protokoll Query I/O Parallelismn Erweiterung der Bufferpools Hiperspace Support IMS

17 eine Zeitreise der IT, die 90er DB2 V Availability and Scalability DB2 data sharing for incremental processing growth and concurrent access to the same data at all times Locking enhancements and new indexes Client/Server Support (DDCS) Support for concurrents client threads Stored Procedures for improved client/server performance Usability improvements Outer join to retrieve unmatched rows Table check constraints for definition by users to enforce business rules

18 eine Zeitreise der IT, die 90er DB2 V Availability for Data Warehouse and Operational Applications Enhance complex queries Large Tables, up to a terabyte in size Online Reorg Support for TCP/IP connectivity Global temporary tables Enables use of object-oriented languages Table data in ASCII or EBCDIC CodePage SQL Enhancements CASE Statement

19 eine Zeitreise der IT, die 90er GAD - Ostern 1997 ZIS3 als erste Anwendung zu 99 % auf DB2 Basis RI 11 Level Verkürzung der Testaufwände VDS Konzept (Vertical Data Split) Logische Datensichten auf Tabellen Generationskonzept, Nutzung des DB2 Package Konzeptes IMS Shared Message Queue IMS Zusammenschluss mit der GFI (RZ Konsolidierung)

20 eine Zeitreise der IT, die 90er DB2 UDB for OS/390 V Capacity improvements 16 Terabyte tables More open datasets Object-Relational Extensions Performance and Availability improvements Rebalancing partitions Alter varying length columns Data Sharing enhancements Trigger support

21 eine Zeitreise der IT, die 2000er Die GAD setzt konsequent für alle neuen Anwendungen auf DB2. Nur in Ausnahmefällen werden IMS DBs weiterentwickelt. IMS - HALDBs Im Jahre 2000 geht das Internet Brokerage in Produktion. Auf Grund langjährige Zusammenarbeit wird im Jahre 2001 der Zusammenschluß mit der GRZ durchgeführt. Ein neues Zeitalter beginnt für die GAD. Der Startschuss für bank21 fällt. Ein Mandatengruppenkonzept entsteht für die Implementierung im DB2 Das Web-Zeitalter ist angebrochen. IMS

22 eine Zeitreise der IT, die 2000er z/os V bits architecture (16 exabytes) 3 Addressing mode supported 24, 31 and 64 AMODE Speciality Processor Crypto Processor IFL Integrated Facility for Linux zaap z Application Assist Processor USS Services (BPX) 31-bit addresing (MVS/XA) 24-bit addresing (MVS) 64-bit addresing (z/os) The Line The Bar 16 MB 2GB 16 EB Linux for System z Hipersockets GAD participates in Early Beta Programs

23 eine Zeitreise der IT, die 2000er DB2 UDB for OS/390 V Application enhancements Scrollable cursors SQL enhancements Row expressions Scalability enhancements Parallel load UNLOAD utility Availability enhancements Dynamic alter ZPARMs Cancel threads without rollback Accessibility enhancements JDBC and ODBC Extensibility enhancements XML extender UniCode

24 eine Zeitreise der IT, die 2000er z/os V1.5 / , ziip's execution environment accepts eligible work from z/os, which manages and directs the work between the general purpose processor and the ziip. IBM will not impose software charges on ziip capacity. ICF z/os LPAR WAS Application zaap TCP/IP HiperSockets DRDA z/os LPAR T4 Application not on System z Linux on System z LPAR Application TCP/IP IFL D R D A TCP/IP HiperSockets DB2 DRDA ziip WAS Application zaap T2 Application CP

25 eine Zeitreise der IT, die 2000er DB2 for z/os V Continuous availability Scalability and very large database Java and the web ziip Prozessoren (z Integrated Information Processor) Queries and data warehouse Star schema parallel queries Migrating and porting applications first ESP/QPP by GAD 3 DS Groups Big Batch DB2 Language Interface Enhancements

26 eine Zeitreise der IT, die 2000er DB2 for z/os V Reduce CPU time Improve business agility Service Oriented Architecture Application developers need Powerful new SQL Portability with SQL and DDL PureXML and XML interface to XML Data Native SQL Procedures (SQL/PL) DBAs needs Improve availability and performance Better web application & data warehouse function and performance 2008 next ESP/QPP started IMS Dynamic Resource Definition IMS

27 eine Zeitreise der IT, die 2000er Start des Projektes zu bank21 im Web 2009

28 eine Zeitreise der IT, die 2000er DB2 for z/os V / QPP Application Enablement purexml enhancements Last Committed reads Timestamp with timezone SQL improvements Temporal data (BI Temp) Dynamic Warehousing Many query optimization improvements Query parallelism improvments Advanced query accelaration Performance, Scalability, TCO More online schema changes Hash access to data Full 64-bit SQL runtime (5-10x move threads) Data compression on the fly Private protocol DRDA

29 eine Zeitreise der IT, die 2000er DB2 for z/os History

30 eine Zeitreise der IT DB2 Analytics Accelerator Up to 2000x faster while retaining single record lookup Eliminates costly query tuning Offloading Netezza technology

31 eine Zeitreise der IT Zusammenfassung z/os - Middleware z/os Transaction Monitors (TM) IMS TM - Information Management System Transaction Manager z/os Database Management System (DBMS) Hierarchical IMS DB, also called DL/I Relational DB2 Messaging oriented middleware (MOM) WebSphere MQ

32 eine Zeitreise der IT Zusammenfassung, Die GAD im Rückblick Durch die properitäre Integration von System Hardware, Betriebssystemsoftware und Subsystemen wie DB2 konnten die Marktanforderungen technisch gelöst werden. Touren- und Mandantengruppenkonzept bestehen weíterhin Entscheidend dazu hat DB2 als relationales Datenbanksystem beigetragen: SQL als Standardsprache Referentielle Integrität Datasharing Exploitation from 31 to 64 Bit (HW u. SW) DB2 Performance XML DB2 Language Interface

33 eine Zeitreise der IT Zusammenfassung, Die DB2 Datenbankwelt in Zahlen DB2 Objekte ~ 3,2 Millionen Total SQL-calls in allen DB2 Systemen ~ 10 Milliarden am Tag 46 datasharing groups mit 172 members 2- to 8-way datasharing

34 Wir sind ein starkes Netzwerk: Die GAD-Unternehmensgruppe

35 Ein herzliches Dankeschön für die Unterstützung an Michael Dewert IBM Jörg Bartel IBM Chart-Nr. 35