ORACLE AUTONOMOUS DATAWAREHOUSE CLOUD SERVICE FIRST IMPRESSIONS

Transcriptie

1

2 ORACLE AUTONOMOUS DATAWAREHOUSE CLOUD SERVICE FIRST IMPRESSIONS 20 september

3 AGENDA 18:00 18:45 Introductie (Ise Douwes) Autonomous Datawarehouse Cloud Service Opzet pilot 19:00 19:45 Demo Pilot (Peter Ribbers) Activatie en Provisioning ETL: Data laden en bijladen Connecteren Analyseren mbv DataVisualisatie Desktop Anayseren mbv Machine Learning Notebook 19:45 20:00 Lessons Learned en Q&A

4 Ise Douwes VOORSTELLEN Bestuurslid nloug, (SIG leader Public Cloud Users, Organisatie APEXworld) Cloud Architect Qlouded Business Devlopment Caesar Experts / Peter Ribbers Oracle Consultant / Scrummaster Caesar Experts Freelance docent BI Publisher Vijfhart IT Opleidingen p.ribbers@caesarexperts.nl

5 VOORSTELLEN Caesar Experts Onderdeel Caesar, 25 jaar jong, 250 man groot Consultancy & detachering Klanttevredenheid: minimaal 8+ Technologien Microsoft, Sharepoint, Azure, Sitecore, Sitefinity, Progress, Corticon, Oracle, OCI Andere bedrijven in groep Garansys: gegarandeerd beheer/softwareontwikkeling/taas Caesar Sharedflex/ Tenders / Overheid: broker functie Uniek Incubator eigen start-ups als showcase innovatieve technologie - Basanko, Buurtwelzijn, CateringAPP, Parkeerbeheer etc.. Permanente vernieuwing door jaarlijks veel HBO-ICT stagiaires (10 begonnen in sept)

6 AUTONOMOUS Gelanceerd zomer 2017 door Larry Ellison zelf : Oracle's Self-Driving Database Most Important Thing Company's Ever Done will change the profile of our company forever." HET Unique Selling Point / Onderscheid voor PaaS t.o.v. concurrenten (lees AWS) Aangekondigd als revolutie

7 Autonomous "self driving": Fully managed High Availability High Secure High Performance Zonder dat beheer nodig is: Self tuning Self patching Self backup Self Securing AUTONOMOUS

8 Uniek? Vergelijkbaar met wat ook wel Serverless Computing heet Revolutie of evolutie? AUTONOMOUS

9 Autonomous voordelen Zeer eenvoudig provisioning, activatie Geen technisch beheer nodig Snel (gebaseerd op Exadata en EE opties) Schaalbaar on the fly Te pauzeren: je betaalt alleen naar gebruik Uniek? Vergelijkbaar met wat ook wel Serverless Computing heet Revolutie of evolutie? AUTONOMOUS

10 AUTONOMOUS DATAWAREHOUSE Componenten: Oracle Database - geconfigureerd voor analytics - enterprise edition - opties o.a RAC/ advanced analytics (maar geen R) Browserbased SQL notebook - "ToaD" plus graphics - bewaren "analyse stories" en teamsharing SQL Developer voor development Service Management Console DataVisualisation Desktop

11 AUTONOMOUS DATAWAREHOUSE Beheer Oracle Cloud Management Console Oracle Service Management Console SQL developer (desktop) REST API s Jim Czuprynski s - Oracle DBA ACE - threeword summary of the new cloud software: No more knobs

12 AUTONOMOUS DATAWAREHOUSE Activatie Stop/Start Restore Schaling ADWC

13 AUTONOMOUS DATAWAREHOUSE Autonomous Beheer Backup s (Security) Patching Database en OS Indexing Encrypting data Statistics & Tuning (hints not allowed!) Configuration Updates Resource management connecties

14 AUTONOMOUS DATAWAREHOUSE Connecteren met ADWC database Communicatie encrypted over de lijn Naast username/password Wallet nodig Drie soort connecties - High - Medium - Low Bepaalt prioriteit queries en hoeveelheid toegewezen resources (afh van beschikbare aantal OCPU s ) bij teveel aanvragen vindt queing plaats, waarbij high connections voorrang krijgen

15 AUTONOMOUS DATAWAREHOUSE Zelf uit te voeren beheer Database users ML Notebook users Individuele (te) langlopende sessies beeindigen Authenticatie (wallet) ETL processen Op en afschalen & pauzeren

16 AUTONOMOUS DATAWAREHOUSE Opties ETL: extract, transform, load Laden/bijladen Via nieuwe DBMS-CLOUD package in ADWC (soort SQL Loader) uit cloud storage: Oracle Objectstorage, AWS S3, Azure SQL Developer Datapump Aanvullende Oracle tooling bijv golden gate Third party software Transformeren Bij bron In ADWC database zelf (PL/SQL) Via echte ETL tooling (zie boven)

17 AUTONOMOUS DATAWAREHOUSE Voorbeeld dataload Oracle Cloud object storage Oracle ADWC DB 3. Connectie via credentials DBMS_CLoud 2. Connectie via sqldeveloper (vanaf on premise locatie) 4. Laden tabellen 1. File upload vanaf on-premise locatie ADWC

18 Analyse mogelijkheden AUTONOMOUS DATAWAREHOUSE Doelgroep - Business analist - Data scientist Analyse - Via ML /SQL Notebook - Via DataVisualisation Desktop - Via Oracle Analytics Cloud of Data Visualisation Cloud of OBIEE - Via third party software

19 Diverse mogelijkheden voor benaderen en gebruiken AUTONOMOUS DATAWAREHOUSE Oracle ADWC DB Andere/third party BI app s Connectie via sqldeveloper (on prem) Oracle Data Visualization Desktop (on prem) Oracle SQL notebook (in browser) ADWC

20 AUTONOMOUS DATAWAREHOUSE ADWC ML SQL notebook Browser based incl onderdeel ADWC Snelle analyse Multi-user (delen analyses) Gebruik Advanced Analytics (nu nog zonder R) Gebruik van Oracle Machine learning features Target Users: data scientist ADWC

21 AUTONOMOUS DATAWAREHOUSE Oracle Data Visualization Desktop versie gratis te gebruiken bij ADWC Uitgebreide visualisaties Drag & drop UI Datastories & analyse te bewaren Meerdere databronnen te koppelen Target users: business analist ADWC

22 AUTONOMOUS DATAWAREHOUSE Pricing Gebaseerd op Storage (per Terrabyte per maand) en OCPU / uur OCPU= Oracle Core Processor Unit (1 OCPU ongeveer 2 vcpu bij AWS/AZURE) Pay as you go: betaling maandelijks achteraf Monthly flex: vooruitbetaling vaste hoeveelheid per maand - extra verbruik gefactureerd tegen Pay as you Go - niet verbruikte hoeveelheid vervalt (per maand) BYOL; Bring Your Own License - Cloud alleen IaaS tarief - jaarlijks support loopt door Cloud@Customer: - lease van hardware (3 jaar) - licenties voor software volgens bovenstaande prijzen PaaS4SaaS - prijs gekoppeld aan SaaS pricing model (veelal userbased)

23 Pricing AUTONOMOUS DATAWAREHOUSE PRICING ADWC

24 Pricing voorbeelden Scenario Startup Scaleup Enterprise Ad-hoc/Incidenteel Kantoortijden 24 * 7 Gebruik 8 per week 40 per week permanent Storage 1 TB 1 TB 2 TB Compute power 1 OCPU 2 OCPU 4 OCPU Prijs per maand AUTONOMOUS DATAWAREHOUSE Pay as you go 262,40 EUR 892,90 EUR 6.686,92 EUR Montly Flex - 595,28 EUR 4.458,04 EUR Zelf rekenen? Cloud Cost estimator: Zelfde Enterprise configuratie on-premises? 450K Eur aanschaf, plus 100K support/updates, exclusief installatie, configuratie & beheerkosten

25 Pilot Caesar Experts AUTONOMOUS DATAWAREHOUSE Doelstelling - techniek product leren kennen - (on)mogelijkheden product leren kennen plus kosten - basis voor Ready to go Anlytics: analytics omgeving in 1 maand - eat your own dog food: ervaring als klant met Oracle Cloud Uitgangspunten - geen trial/demo account maar echt account - data eigen start-ups gemengd aangevuld met externe data - alle processen mogelijkheden onderzoeken - delen kennis met derden

26 AUTONOMOUS DATAWAREHOUSE Pilot Caesar Experts Activiteiten tot nu toe uitgevoerd Aanschaf, activatie, provisioning Beheer: up/down scaling, pauzering restart, etc Laden Basanko data (IOT data Veevoer silo s), via objectstorage / dbms_cloud Laden KNMI meetdata meetstations, via objectstorage / dbms_cloud Connecteren SQL Developer, Aansluiten DataVisualisation Desktop en analyses MachineLearning Notebook Analyses

27 DEMO ACTIVATIE EN PROVISIONING DATA LADEN & BIJLADEN CONNECTEREN SQL DEVELOPER ANALYSEREN M.B.V. DATA VISUALISATIE TOOLING ANALYSEREN M.B.V. MACHINE LEARNING NOTEBOOK

28 LESSONS LEARNED Oracle Cloud = Management console niet altijd overzichtelijk en onderhevig aan veranderingen - autorisatiemogelijkheden management console: geen read toegang = Maintenance met downtime netjes aangekondigd maar niet te shedulen + alle acties in management console ook beschikbaar als REST api calls Autonomous eerder evolutie als revolutie = Verkocht als AI/Machine learning maar het is een doorontwikkeling van 20 jaar database technology + bespaart absoluut in systeem- en DBA beheer + tot nu toe zeer goede performance zonder tuning/indexen = geen zero beheer: enig beheer nodig

29 LESSONS LEARNED 1 ste versie - Nog niet 100% stabiel + Documentatie uitgebreid: - Support is slecht op de hoogte van ADWC + Cloud Customer Connect: Scaling en pauzering : + mogelijkheid tot kosten besparing - (nog) geen mogelijkheid sheduling - (nog) geen automatische stop en start Prijs : + in vergelijking met onpremise vergelijkbare stack: goedkoop = in vergelijking met ander cloud aanbieders: volgens Oracle 50% goedkoper AWS = niet voor MKB + prijs/kwaliteit verhouding goed

30 LESSONS LEARNED Beheer + veel taken vervallen / autonoom - resterende taken nog niet te beheren OEM of OMC Open en integratie met andere platformen + vele en meest gebruikte thirdparty datavisualisatie aan te sluiten + het is Oracle database - geen echter ETL tooling meegeleverd: DBMS cloud package is voor laden maar niet voor transformeren + Third party software nu al beschikbaar ook voor ETL processen VB

31 LESSONS LEARNED Datavisualisatie desktop + Goede functionaliteit = BI vaardighende vereist - stand alone, teamomgeving vereist extra aan te schaffen software: cloud service (Anaylitcs of Datavisualisation of onprem OBIEE Open en integratie met andere platformen + vele en meest gebruikte thirdparty datavisualisatie aan te sluiten + het is Oracle database + Third party software nu al beschikbaar ook voor ETL processen Machine learning notebook - handig voor expert user met SQL kennis die ad-hoc analyses wil uitvoeren & delen - Functionaliteit is (nog mager): Toad plus graphics - Machine learning is niet meer als Advanced analytics - Ontbreken R maakt het voor beoogde doelgroep datascientists onbruikbaar

32 Aansluiten Analytics Cloud NOG TE DOEN/ VERVOLG Uitzoeken ETL mogelijkheden voor regelmatig bijladen Aansluiten third party Analytics /datavisualisatie tooling Benchmarken met grote hoeveelheid data / complexe datamodellen Meerdere klant ervaringen

33 20 september