BLOG Red Hat Storage Masterclass Barcelona

Transcriptie

1 BLOG Red Hat Storage Masterclass Barcelona Door: Stefan van Oirschot, CTO Rhodix April 2016 Introductie Op 6 en 7 april 2016 vond de allereerste Red Hat Storage Masterclass plaats in Barcelona. Samen met zo'n 120 andere Red Hat partners uit Europa kwamen we bij elkaar om 2 dagen geïnformeerd te worden over de Red Hat Storage producten. Red Hat Storage Red Hat Storage is een Open-Source, Scale-out, Software Defined Storage oplossing. Het is een storageoplossing opgebouwd uit commodity/x86-servers met daarop een stuk storage software wat zorgt voor de functionaliteit. De totale oplossing is ontworpen om te kunnen falen. Beschikbaarheid en robuustheid worden geleverd door de intelligente software. De oplossing kent geen single point of failure en kent een vrijwel lineaire schaalbaarheid. De Red Hat Storage oplossing bestaat uit 2 producten: Gluster Storage en Ceph Storage. Beide hebben eigen focusgebieden, sterke punten en zwakke punten. Gluster Storage wordt primair ingezet voor File-georiënteerde workloads. Denk hierbij aan: Enterprise File Sharing Enterprise Virtualization Media Streaming Active Archives

2 Ceph staat in zijn kracht waar het Object en Block storage aangaat, zoals: Storage-laag voor OpenStack met integratie in de breedste zin Object Stores met S3 en Swift toegang (zoals Flickr) Heb je een storage vraagstuk en zoek je een oplossing die op deze manier (File, Block, Object) eenvoudig te kwalificeren is, dan heb je met Red Hat Storage een prima product.

3 Hier zit echter ook meteen één van de pijnpunten. Er is op dit moment (nog) geen managementlaag beschikbaar waarmee beide Red Hat Storage producten aangestuurd kunnen worden vanuit 1 interface. Positief punt is dat hier wel aan gewerkt wordt zoals zichtbaar op de afbeelding hieronder. Wanneer is dit nou interessant? Een ideale Red Hat Storage gebruiker ziet er als volgt: Iemand die aan de slag wil gaan met innovatieve, leading edge, technologische oplossingen ten behoeve van innovatie en kostenbesparing. Iemand met een helikopterview en dus geen mensen die vastzitten aan een bepaalde vendor (zoals EMC) en niet verder willen kijken.

4 Iemand die denkt in termen van scale-out, beschikbaarheid, software-defined, DevOps Iemand voor wie de termen OpenStack, Enterprise Virtualisatie en Enterprise Linux als muziek in de oren klinken. Klaar voor Red Hat Storage? Hieronder de top 9 signalen waaraan wij bij Rhodix een ideale Red Hat Storage klant aan herkennen: #1 - Systems/software mensen, bijvoorbeeld mensen die Linux kennen. #2 - Het bedrijf optimaliseert voor complexe workloads. DevOps is de lijm. Oplossing is dan bv. een container platform (met storage). #3 - Key workloads - Moderne workloads zijn vaak distributed. Deze moeten schaalbaar zijn. Kies dan een schaalbaar platform. #4 Huidige Red Hat gebruiker #5 Gebruikers die storage zien als een investering die aandacht nodig heeft. #6 - Sterke Linux kennis - Mensen met veel terminal schermen, dit zijn de Champions". #7 Gebruikers die bezig willen zijn met innovatieve oplossingen. Geen mensen die vastgeroest zitten. #8 - Gebruikers die vragen om een nieuwe omgeving waarbij een nieuw platform bouwen mogelijk is. #9 - Ceph and Gluster zijn het meest competitief op een schaalgrootte van petabytes. Met enkele terabytes is het niet interessant.

5 Rhodix over de 2 producten Ceph en Gluster De 2 producten; Gluster Storage en Ceph Storage gecombineerd bieden een totaalpakket aan features en functies. Al de enterprise storage functies zijn aanwezig van de laatste protocolondersteuning zoals NFS4.1 SMB3 API-support zoals S3 en Swift Volledige OpenStack integratie storage tiering mogelijkheden meerdere datacentra en ga zo maar door. Het Red Hat Storage "product" bestaat echter helaas uit 2 producten waardoor er wel een keuze gemaakt moet worden en daarbij op punten waarschijnlijk concessies gedaan gaan worden. Wat heb ik nou echt geleerd? De belangrijkste zaken die ik heb geleerd in mijn 2 dagen Barcelona hebben te maken met de aanpak. Hoe vlieg ik een storagevraag van de klant aan? Hoe ziet een eerste presentatie er uit? Welke vragen moet ik stellen om goed te weten waar ik de klant bij kan helpen? Hoe ontwerp ik verder een passende oplossing voor de klant? Wij bij Rhodix zijn er helemaal klaar voor om dit traject aan te gaan!

6 Een kijkje in de keuken van Rhodix De tweede dag van de Masterclass bestond grotendeels uit een hands-on opdracht. We kregen een anonieme klantcase waarmee we ervaring op konden doen met het beetpakken van een storage vraagstuk. Onze klantcase betrof JC Streaming Company zoals de naam al doet vermoeden - een mediabedrijf. Hieronder probeer ik kort, maar wel helder weer te geven wat onze Rhodix-aanpak zou zijn bij zo n soort klantvraag. Hiermee geef ik dus eigenlijk een kijkje in de keuken hoe wij als technische mensen zo n soort vraag aan zouden pakken. Spreekt dit aan? Dan kunnen wij een goede match zijn. De vraag van JC Streaming Company: "Wij zijn op zoek naar een Object Store voor onze medewerkers en 25PB aan data verdeeld over 4 datacentra en 2 landen voor het streamen van videobestanden van verschillende formaten." De omvang van de storage markt is enorm. Zo ook aantal beschikbare oplossingen en producten. Denken wij aan storage dan schiet er veel door ons hoofd, zoals: SAN, NAS, DAS, File, Block, Object, Hyperconverged, Hyperscale, All-Flash, Hybrid-storage, scale-up, scale-out, redundantie, flexibiliteit, JBOD, erasure-coded, snapshots, deduplication, compression, encryption, NFS, Cifs, FC, iscsi, S3, Swift, Cinder, Software Defined, OpenStack, Cloud, Backup & Recovery...en de lijst gaat maar door. Afhankelijk van de Red Hat kennis bij de klant, haar portfolio en de bekendheid met ons kunnen we het verhaal op een bepaald punt insteken. Betreft het een 1e presentatie en kennismaking met de wens voor een vervolgstap dan presenteren wij het volgende: De requirements - hebben wij het begrepen? Waarom Red Hat? - waarom wij als business partner denken dat Red Hat de geschikte oplossing biedt.

7 Voordelen - wat levert het op, waar staan we nu en wat kunnen we straks? Kostenbesparingen zijn hier belangrijk. 10%? 20%? 30%? De vervolgstappen - hoe ziet het vervolg er uit? Denk hierbij aan een Workshop en vervolgens bijvoorbeeld een Proof of Concept (PoC). De vraag van deze klant kan ingevuld worden met zowel Gluster Storage als Ceph Storage. Vanwege de specifieke Object Store wensen en de wens om één en ander via OpenStack te ontsluiten kiezen wij in dit geval voor Red Hat Ceph Storage als product. Hieronder 10 punten waar onze architect onder andere rekening mee houdt in zijn ontwerp. 1. Begin met de benodigde capaciteit niet met de beoogde capaciteit. Je kunt eenvoudig groeien! 2. Hardware architectuur is erg belangrijk. Flash is tegenwoordig ook inzetbaar en zorgt voor een enorme boost in performance. 3. Zorg voor voldoende systemen zodat je verstoringen goed kunt opvangen. 100 kleine servers is beter dan 30 grote servers. 4. Performance schattingen zijn mogelijk maar met een marge van +/- 20%. Let op bij het afgeven van getallen. 5. Erasure coding kan gebruikt worden voor Object Storage (Capaciteit x1.5), hou hier wel rekening met de beoogde performance. 6. Block Storage vereist minimaal 3x replicatie (Capaciteit x3.0), let op met de extra capaciteit die nodig is (75PB + overhead = ~79PB in dit geval). 7. De snelheid van de CPU van de storage nodes heeft een enorme invloed op de latency van de omgeving. 8. Voor elke Ceph OSD (1 of meer per disk) heb je tenminste 1 processor core van 1 GHz nodig. 9. Verder voor elke 1 TB aan opslag in je storageserver is het belangrijk om 1GB aan memory te reserveren. 10. Toegang dat het storage netwerk zal verlopen via het netwerk (Ethernet). Zorg voor voldoende bandbreedte voor onderlinge communicatie en ontsluiting naar de clients.

8 Conclusie Naast bovenstaande punten komt er natuurlijk nog veel meer kijken bij het ontwerpen van een oplossing. Ook de presentatie van zo n verhaal is altijd afhankelijk van de wensen en de specifieke situatie. Tijdens deze 2 daagse Red Hat Storage masterclass heb ik enorm veel kunnen leren en toepassen. Ik kijk dan ook op terug op een zeer geslaagde trip naar Barcelona en hoop dat we binnenkort een implementatie uit kunnen gaan voeren. De juiste kennis en bagage hebben we dik op orde! PS: alle slides van de Masterclass zijn te vinden op: Geschreven door: Stefan van Oirschot, CTO Rhodix Mijn collega Frank de Groodt, Technical Sales Rhodix, was ook aanwezig.