Nu we toch bezig zijn... Bram van der Vos

Transcriptie

1 Nu we toch bezig zijn... Bram van der Vos

2 Agenda Partitioning de concepten & mogelijkheden Encryptie Compressie beheer packs Diagnotisc Pack Tuning Pack Lifecyle Management Pack

3 Partitionering Business Redenen om te partitionen Groeiende hoeveelheid data (archives) Life Cycle Management Beheer(s)baarheid Performance Parallellisatie Situaties Veel data (>2G) Historische vs Actuele data Storage Tiering Data Skew Load en onderhoud uitdagingen

4 Wat is Partitionering Transparant naar SQL Transparant naar definities Transparant naar constraints Optimizer is partitioning aware

5 Partitionering Technieken Range Partitioning Interval Partitioning Hash Partitioning List Partitioning System Partitioning Composite Partitioning Range-(Range Hash List) Hash-(Range Hash List) List-(Range Hash List) Reference Partitioning Virtual Column based Partitioning Index Partitioning Local Global

6 Demo tabellen ORDERS: ORDER_ID NOT NULL ORDER_DATE NOT NULL ORDER_MODE CUSTOMER_ID NOT NULL ORDER_STATUS ORDER_TOTAL SALES_REP_ID PROMOTION_ID EMPLOYEES: EMPLOYEE_ID NOT NULL FIRST_NAME LAST_NAME NOT NULL NOT NULL PHONE_NUMBER HIRE_DATE NOT NULL JOB_ID NOT NULL SALARY COMMISSION_PCT MANAGER_ID DEPARTMENT_ID NUMBER(12) TIMESTAMP(6) WITH LOCAL TIME ZONE VARCHAR2(8) NUMBER(6) NUMBER(2) NUMBER(8,2) NUMBER(6) NUMBER(6) NUMBER(6) VARCHAR2(20) VACHAR2(25) VARCHAR2(20) VARCHAR2(20) DATE VARCHAR2(10) NUMBER(8,2) NUMBER(2,2) NUMBER(6) NUMBER(4)

7 Range Partitioning?? 1-jan-2013 %^#$&#* < 1-jan 2010 < 1-jan 2011 < 1-jan 2012 < 1-jan 2013

8 Interval Partitioning?? 1-jan-2013 %^#$&#* < 1-jan 2011 < 1-jan 2012 < 1-jan Jaar

9 List Partitioning ACCEPTED PROCESSING DELIVERED, CANCELED

10 Hash Partitioning

11 System Partitioning insert into my_table Partition <N>

12 Composite Partitioning Eerst de partitie bepalen Daarna de relevante subpartitie

13 Index Partitioning Local Partitioning Heeft de voorkeur Index volgt de tabel Dus ALTIJD 1-1 relatie Beperkingen index kolom vs partitie sleutel Global Partition Zelfstandige partitioning en onderhoud Soms noodzakelijk 1-1 relatie onwaarschijnlijk. Non Partitioned

14 Index Partitioning Local Global

15 Effecten Partitioning Partition Pruning Partition Wise Join Partition Wise Maintenance Partition exchange

16 Waar moet ik rekening mee houden? Kan je applicatie met de partitions door de deur Toegangspaden Data spreiding & betekenis Welke kolommen wijzigen Hoe doe ik mijn onderhoud De juiste partitionering vaststellen kost tijd Rules of thumb voor Range/Interval partitioning Hash Partitioning List Partitioning Composite

17 Compression Basic Backup Compression Key Compression (Index) Table Compression Basic OLTP Hybrid Columnar Compression Waarom Compression Bespaar op ruimte Bespaar op IOPS Bespaar op gets Winst: performance & ruimte Compression: geen 'gzip' maar transparante oplossing

18 Hoe werkt Compression Deduplication (per blok) Op basis van kolom waarden Moment afhankelijk van type compressie En wat is de impact voor mijn applicatie

19 Hoe werkt Compression Deduplication (per blok) Referentie naar een symbol table Moment afhankelijk van type compressie #X:29-NOV-00;#Y:9999;#Z:S 2190,13770,25-NOV-00,S,9999,23, ,15720,28-NOV-00,S,9999,25, ,120760,29-NOV-00,P,9999,44, ,4750,29-NOV-00,I,9999,11, ,46750,29-NOV-00,S,9999,19, ,13770,25-NOV-00,#Z,#Y,23, ,15720,28-NOV-00,#Z,#Y,25, ,120760,#X,P,#Y,44, ,4750,#X,I,#Y,11, ,46750,#X,#Z,#Y,19,1121

20 Compressie factor Vooraf inschatten mbv DBMS_COMPRESSION.GET_COMPRESSION_RATIO Erg afhankelijk van de data(spreiding) Table name MB VOOR Compress% BNK_TRX ,94 JRNL ,58 ACCNT_TRFR ,89 CNTDAT ,12 INT_L_LIN ,53 C_TRX ,33 AUD_TRL_DET ,32 UNIT_TRX ,88 ORD_DET ,07 ORD _ ,43

21 Enable Compression CREATE TABLE sales ( prod_id NUMBER NOT NULL, cust_id NUMBER NOT NULL,... ) PCTFREE 5 NOCOMPRESS PARTITION BY RANGE (time_id) (partition sales_20012 VALUES LESS THAN(TO_DATE(...)) COMPRESS BASIC, partition sales_2013 VALUES LESS THAN (MAXVALUE) COMPRESS FOR OLTP ); ALTER TABLE oe.orders COMPRESS FOR OLTP;

22

23 Index Key Compression manager_id dept_id lastname Taylor Taylor Tobias Tucker Tuvault Urman Vargas Vishney Vollman Walsh Weiss Whalen Zlotkey.

24 Niet Compressed Vollman Weiss Zlotkey Whalen Urman Tobias Taylor Vargas Walsh Tucker Tuvault Vishney Taylor Compressed Vollman,Weiss, Zlotkey, Whalen Urman, Tobias Taylor Vargas,Walsh, Tucker,Tuvault, Vishney Taylor

25 Encryption Data Security wordt steeds belangrijker Encrypted over het netwerk Encrypted in de backup Encrypted dataopslag Voordeel Transparant Authorized users

26 sqlnet.encryption_client=requested.. sqlnet.encryption_types_client=(rc4_40) sqlnet.encryption_server=accepted. sqlnet.encryption_types_server=(rc4_40).

27 rman> SET ENCRYPTION ON IDENTIFIED BY 'password' ONLY; Backup database; CONFIGURE ENCRYPTION FOR DATABASE OFF; # default CONFIGURE ENCRYPTION ALGORITHM 'AES128'; # default

28 Transparent Data Encryption Geen dbms_obfuscation_toolkit Wallet smith create table emp(name varchar, emp# number salary encrypt using 'AES256'); Data dictionary Smith 7903 ^**%$ Jones 7900 #^&U*&()

29 Managements Packs Oracle Diagnostics Pack Oracle Tuning Pack Life Cycle Management Pack Test Management Pack Real Application Testing SQL Performance Analyzer Database Replay Test Data Management Data Masking Pack Mask format libraries Mask definitions, Libraries & techniques Clone and Mask workflow

30 Cloud Control a.k.a Enterprise Manager Grid Control Managebility Standaard Interface Toegang tot veel leuks

31 Diagnostic Pack AWR, ASH & ADDM Automatic Database Diagnostic Monitor (ADDM) Active Session History (ASH) Performance monitoring Event notifications & Blackouts Monitoring templates Memory-access based performance monitoring

32 Tuning Pack SQL Access Advisor SQL Tuning Advisor Automatic SQL Tuning SQL Tuning Sets SQL Monitoring Reorganize objects

33 Life Cycle Management Pack Discovery and Inventory tracking Initial provisioning Configuration Management Compliance Management Site level Disaster Protection Automation

34 Samenvatting Oracle heeft nog wat nuttige mogelijkheden Slim gebruik kan problemen oplossen Of voorkomen