Erfahrungen eines Providers im Aufbau einer OpenStack Cloud. Deutsche OpenStack Tage Köln 2016 Frank Gemein & Christoph Streit ScaleUp Technologies

Transkript

1 Erfahrungen eines Providers im Aufbau einer OpenStack Cloud Deutsche OpenStack Tage Köln 2016 Frank Gemein & Christoph Streit ScaleUp Technologies

2 Einleitung Frank Gemein COO ScaleUp Technologies Christoph Streit Co-Founder & Technology Evangelist ScaleUp Gegründet 1998 von Gihan Behrmann und Christoph Streit in Hamburg Sitz: Hamburg, Germany Vier Rechenzentren in Deutschland (Hamburg + Berlin) Über 90% klassisches (non-cloud) Hosting

3 Die ScaleUp Cloud Story Gestartet als Projekt in 2009 Suche nach einer flexibleren Lösung für Hosting Neu-Erfindung des Geschäfts Utility Computing Cloud Computing Anforderung nach Flexibilität war getrieben von Startups

4 3Tera AppLogic Kleines Startup in southern California Vielleicht die erste richtige Cloud Platform Lösung Basiert auf XEN virtualization VISIO-like GUI um graphisch Server/Application Infrastructures zu designen Katalog von appliances/templates Später übernommen durch CA Technologies Discontinued in 2014/2015

5 AppLogic Screenshot

6 Unsere eigene Cloud Management Software Da wir ein multi-tenant Frontend für AppLogic brauchten haben wir ein eigenes gebaut Für Service Providers / Cloud Providers Basic support für OpenStack (based on Bexar; 2011) Vermarktung an andere AppLogic Provider weltweit Nicht genug Traction Fokus lag auf AppLogic (nicht OpenStack)

7 Gestartet mit: Cloud Storage Intent to offer a scalable cloud storage solution Initially a commercial stack was chosen here as well Hardware layout was based on the Backblaze storage pod design 1 Major issues with hard disks, which killed the project Faulty firmware Decision was made in 2013 to retry with OpenStack Swift 1)

8 Warum nicht schon 2011 OpenStack? Installation: a nightmare API unausgereift Durcheinander mit EC2 kompatibler API Fast nirgendwo in Produktion Wenig Unterstützung

9 Unsere Gründe für OpenStack Es ist Open Source Man kann vieles selber debuggen Großartige Community (trifft auf OpenSource im Allgemeinen auch zu) Proven track record in operating large scale (provider) infrastructures (at least Swift)

10 Swift Setup v1 Two hardware nodes running Proxmox VMs running Keystone, API, Loadbalancing Later on: Loadbalancer removed from Proxmox nodes Six storage nodes based on the Backblaze design Holding 45 HDDs each

11 Swift Setup v1.1

12 Swift Setup v1.2

13 Swift integration into OpenStack installation After building an additional OpenStack environment for NOVA we decided to integrate the two enviroments Step 1: Still using Keystone in the Swift setup Glance integration with regular user/client Step 2: Fully combining the two enviroments

14 Why Vanilla OpenStack Heterogeneous Hardware, different vendors, etc. ILO, idrac (multiple versions),... Juju + MaaS did not work for us Too much work to customize charms Basic Ubuntu install (trusty) with OpenStack Juno

15 OpenStack Setup

16 API Services Three different sets of API proxy servers Swift Public API Internal API (Admin Endpoint)

17 API Services

18 Details Block A

19 Networking Why bonding? Separate iscsi network Separate NICs Bonding/LACP + Jumbo frames Neutron Server Partly Active/active and partly Active/passive

20 Security Einbindung der OpenStack Umgebung in das bestehende Security Setup bei ScaleUp Nutzung der OpenStack Umgebung für interne Services (bspw. Customer Portal, Billing,...)

21 Unser Fokus in Sachen OpenStack 100% OpenStack Frontend: Horizon Dashboard API Zugriff Kombination mit Colocation und Dedicated Servern Ehrlichkeit Cloud (OpenStack) ist nicht immer die beste Lösung Giving back to the community

22 Fazit Upgrade to Liberty in progress First Step: Kilo (done) Later on to Mitaka Implementation of IPv6 Software defined networking challenge => bonding with LACP Special compute notes for VDI/Desktops (Windows) OpenStack as foundation for an integrated hosting platform? Baremetal Containers PaaS?

23 Vielen Dank! Blog: h(ps://scaleuptech.com/blog Follow us on Senden Sie uns eine E- Mail: Frank Gemein & Christoph Streit