Oracle auf Solaris - Freude an Synergien

Transkript

1 Oracle auf Solaris - Freude an Synergien Michael Löbmann Senior Systemberater Sun Professional Service DOAG Regional

2 Was ist los am DB-Markt? Solaris 8 weit verbreitet Oracle 64-bit im Vormarsch Immer grössere SGA's Weniger Platten Viele unbekannte Features Altlasten

3 Um was geht's heute? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

4 Um was geht's nun? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

5 Big Picture... SQL DB-Cache DB-Blöcke Rollback-Buffer Redo-Buffer Serverprozess ARCH 2 2 DBWR LGWR 5 7 Datenbank 6 Redo-Log-Files Archivierte Redo-Log-Files

6 Im Anfang war die Frage... RAW sein oder nicht sein? UFS Cache Performancekiller Consistency Check notwendig Paging von Applikationspages UFS verursacht 2xLesen UFS writer Lock Code Pfad kürzer ohne OS Cache

7 Oracle und UFS O_DSYNC - systemcall Oracle öffnet damit alle Dateien Zwingt zum sofortigen synchronen Schreiben UNIX Buffer Features bei Write Write deferal+ Write coalescing UNIX Buffer kostet bei DSYNC-writes also extra Zeit Umweg bei writes + reads

8 UFS Direct I/O Seit Solaris 2.6 Umgeht den UNIX Buffer Cache Wichtig für LGWR Sammelt Redo Buffer Daten Kein Split in 8k Stückchen

9 Aktivierung von Direct I/O: init.ora parameter: Mit _ in Oracle 8, ohne _ in 9 _filesystemio_options=directio, dann alle Oracle Files Granularer mit Mount -o forcedirectio /dev/...

10 Wann macht UNIX Buffer Sinn? RAM knapp Vorwiegend Lesen Daten wiederverwendet Wenn viel cp, tar, ftp, da kein defered writes read pre-fetch

11 Performance Direct I/O

12 Multiblock Read Count Bei Full Table/Index Scans db_file_multiblock_read_count * block_size =< SSTIOMAX SSTIOMAX Oracle 7.3=128k, Oracle 8.x/ Oracle 9x = 1 MB

13 Extentplanung und MBRC 31 Reads 25 Reads

14 Im Anfang war die Frage... UFS Cache Performancekiller Consistency Check notwendig Paging von Applikationspages UFS verursacht 2xLesen UFS writer Lock Code Pfad kürzer ohne OS Cache

15 Warum Concurrent Direct I/O POSIX Standard: Single Writer Lock für jedes File. Wenn ein Schreibprozess stattfindet, dann muss der Read warten Oft Fehler: Wenige + grosse Files Concurrent Direct I/O: Erlaubt viele überlappende reads/writes auf das GLEICHE File zu machen. Auf Raw devices weiss Oracle, das nur Oracle unterwegs ist.

16 Concurrent Direct I/O Seit Solaris 8 Update 3 Transparent verfügbar

17 Im Anfang war die Frage... UFS Cache Performancekiller Consistency Check notwendig Paging von Applikationspages UFS verursacht 2xLesen UFS writer Lock Code Pfad kürzer ohne OS Cache

18 Altlast Paging Solaris 2.7 Priority Paging einschalten set priority paging = 1 Solaris 8 Priority Paging ausschalten

19 Im Anfang war die Frage... UFS Cache Performancekiller Consistency Check notwendig Paging von Applikationspages UFS verursacht 2xLesen UFS writer Lock Code Pfad kürzer ohne OS Cache

20 UFS File System Logging Seit Solaris 7, kein Default Analog zu Red-Logs Logging option in /etc/vfstab Mount -o remount logging Archive Log betroffen

21 UFS File System Logging

22 Um was geht's nun? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

23 Begriffsdefinition Zu einfach gemacht: Asynchron <> synchron Genauer: Asynchron: I/O-management via aiowrite.. <> Blocking I/O via write(2) oder pwrite (2) Synchron: Wie I/O durchgezogen wird, hier sofort (O_DSYNC-Basis) <> verzoegert (defered, z.b. durch FS-Flush)

24 Wie machts Oracle? So! Einfach gemacht: Asynchron <> synchron Genauer: Asynchron: I/O-management via aiowrite.. <> Blocking I/O via write(2) oder pwrite (2) Synchron: Wie I/O durchgezogen wird, hier sofort (O_DSYNC-Basis) <> verzoegert (defered, z.b. durch FS-Flush)

25 Fazit Man kann Oracle Datenbank I/O als Nicht AIO einstellen, man kann es aber nie nicht synchron machen.

26 Wie stelle ich in Oracle AIO ein? init.ora filesystemio_options=async (=default) disk_async_io=true

27 Mehrwert AIO DBWR überlappendes Schreiben bis zu 3072 writes möglich

28 Oracle mag's jedoch gerne raw! Lib AIO aioread() aiowrite() kaio() RAW UFS Err#48 ENOTSUP

29 Truss sieht Alles Read raw + File 28476/1: open("/dev/rdsk/c0t3d0s1", O_RDONLY) = /1: kaio(5, 0xFFFFFFE8, 0xFFFFFFFF, 0x , 0x , 0x , 0xEF7F4298) = /1: kaio(aioread, 3, 0x00020FF0, 1024, 0, 0xEFFFF9F4) = /1: kaio(aiowait, 0x ) = /1: kaio(aioread, 3, 0x00020FF0, 1024, 1024, 0xEFFFF9F4) = /1: kaio(aiowait, 0x ) = /1: kaio(aioread, 3, 0x00020FF0, 1024, 2048, 0xEFFFF9F4) = /1: kaio(aiowait, 0x ) = /1: open("/etc/passwd", O_RDONLY) = /1: kaio(5, 0xFFFFFFE8, 0xFFFFFFFF, 0x , 0x , 0x , 0xEF7F4298) = /1: kaio(aioread, 3, 0x00020FF0, 1024, 0, 0xEFFFF9FC) Err# /1: lwp_create(0xeffff628, 0, 0xEF781F44) = /3: lwp_create(0x , 0, 0x ) = /3: lwp_self() = /1: lwp_create(0xeffff628, 0, 0xEF778F44) = /4: lwp_create(0x , 0, 0x ) = /4: lwp_self() = /1: lwp_create(0xeffff628, 0, 0xEF6BAF44) = /5: lwp_create(0x , 0, 0x ) = /5: lwp_self() = /1: lwp_create(0xeffff628, 0, 0xEF6B1F44) = /6: lwp_create(0x , 0, 0x ) = /6: lwp_self() = /3: pread(3, " r o o t : x : 0 : 1 : 0".., 1024, 0) = /4: pread(3, " r y h a : x : : 1".., 1024, 1024) = /5: pread(3, " s 1 / j c a h i l l : /".., 1024, 2048) = /6: pread(3, " s h\n s f a x : x : 5 0".., 1024, 3072) = 115

30 Konsequenz AIO auf UFS Simuliert nur AIO ordinaere synchrone SC Threaded AIO Teure Context Switches LWP auf CPU gebunden/keine Performanceeinbusse (ca 5%)

31 Performancevergleich 1) KAIO auf RAW Devices/Quick I/O 2) AIO auf UFS/VxFS... 3) Synchrones IO mit x-dbwritern

32 Übersicht

33 Um was geht's nun? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

34 Relink 32-bit Oracle 32-bit Grenze Default Oracle < 2GB Default Solaris 3.75 GB aufbohren keine Hexerei

35 32-bit Oracle memory map

36 Beobachten... Check mit Ps -ef grep ora Pmap -x <oracle_pid> /usr/ccs/bin/nm -p -x $ORACLE_HOME/bin/oracle grep sgabeg

37 ...und ändern Ändern mit Shutdown instance cd $ORACLE_HOME/rdbms/lib Genksms -b 0x > ksms.s /usr/ccs/bin/make -f ins_rdbms.mk ksms.o /usr/ccs/bin/make -f ins_rdbms.mk ioracle

38 Um was geht's nun? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

39 64-bit Oracle Mehr Memory adressierbar sort_aera_size/hash_area_size Kein Vorteil bei < 3.75 GB Eher Nachteil Bei 64-bit Einsatz vin direct I/O

40 Um was geht's nun? I/O Filesystem allgemein Asynchrones I/O Memory Relink 32-bit Oracle Large Memory ISM+DISM

41 Oracle: Ab ins ISM! Default seit Oracle init.ora: use_ism=true SGA Shared Memory Segment ISM S0 SGA S1 <> ISM

42 Intimate Shared Memory - ISM Shared Memory References Shared - Translation Tables Virtuelle Adresse generiert Shared Segment Memory Pages Prozess 1 Prozess 2 Physikalische Memory Adressen Prozess 3 T T-Entries Translation Tables Pysikalisches Memory TLB Translation Tables

43 1. Vorteil : weniger Memory 400 Prozesse 2 Gbyte Shared Memory Segment 8 Byte k Pages 1 Prozess Pages * 8Byte = 2 MB 4 Byte 4 Byte Mit ISM: 2 MB, egal wieviele Prozesse Ohne ISM: 400 Prozesse * 2 MB = 800 MB Translation Table Pysikalisches Memory

44 2. Vorteil: Grössere Pagesizes 8K: kernel pointers 4 MB: 896 kernel pointers 3. Vorteil: Niemals rausgepaged Pages werden eingebrannt Kann auch nachteilig sein

45 Oracle auf Solaris - Freude an Synergien Michael Löbmann Senior Systemberater Sun Professional Service DOAG Regional