Open Source Technologie Trends

Transkript

1 Open Source Technologie Trends Thomas Ludwig Uhl

2 Agenda Einführung OSB Alliance Die Deutsche Wolke Einführung in OpenStack

3 3 OSB Alliance e.v. im Überblick Gründung im März 2005 Mehr als 190 Mitglieder Anbieter (Hersteller und Dienstleister) / Anwender / Wissenschaftliche Partner Kontaktbüros in DACH und Nordamerika Ziele Business Development für Open Source Lösungen Verbesserung der Interoperabilität (basierend auf offenen Standards) Schaffung eines kompletten Open Source Lösungsstacks Working Groups: Office Interoperability Deutsche Wolke Marketing Public Affairs Education Mobility (in Gründung) Internationalisierung (geplant) Storage (geplant)

4 Was ist die Deutsche Wolke? Inspiriert durch Statements von Rene Obermann und Prof. Dr. Dr. h.c. mult. August-Wilhelm Scheer Initiative zum Aufbau einer föderalen Cloud-Infrastruktur in DACH Kooperation mehrerer OSB-Alliance Mitglieder Arbeitsprogramm: Umsetzung der Open Cloud Principles (Offene Standards) Integration von Software Produkten auf Open Source Basis Nutzung geografisch verteilter Rechenzentren Erarbeitung von OPEX Preismodellen Aufbau eines Channels für Reseller

5 Made in Germany ein hoher Qualitätsanspruch Hohe Qualität der Software-Komponenten: Open Source ermöglicht Transparenz in Entwicklung und Test Genutzte Komponenten sind seit vielen Jahren bei Kunden erprobt Hochwertige Hosting-Partner: Zertifizierte Rechnenzentren (ISO 27001) Standortübergreifende K-Fall-Vorsorge Durchgängige Service Level Agreements: Vertragsverhältnis wahlweise mit Software-Anbieter oder Hoster Ein definierter Vertragspartner für den Kunden Geschlossene Support-Kette (Hardware, Software, Hosting)

6 Deutsche Wolke: Partner agorum GmbH DMS/ECM Software Boston Deutschland GmbH Hardware B1 Systems GmbH IaaS Consulting Bytemine GmbH SaaS COMback GmbH Rechenzentrum Datenwerk GmbH Rechenzentrum Fujitsu Enabling Software Technology IaaS GRAU DATA AG Filesharing/Archiv Software Hallo Welt! GmbH Social Software Helium V ERP Systeme GmbH ERP Software Iisys Hof - Wissenschaftlicher Projektpartner Information Desire GmbH PM/CRM Software Jintelligence GmbH Rechenzentrum / HPC NETWAYS GmbH Monitoring noris networks AG Rechenzentrum OP5 GmbH - Monitoring OwnCloud GmbH Filesharing Software Q5 AG - Hardware RedHat Inc. IaaS / PaaS Software RisingTide Systems LLC SAN Storage SEP AG Backup Software SuSe GmbH IaaS Software Tarent GmbH Identity Management Teuto.net GmbH - Rechenzentrum Univention GmbH IaaS Software Zarafa GmbH Groupware Software LINBIT HA-Solution GmbH HA / Replikation

7 Topologie (Auszug) Frankfurt Bielefeld Neuenstadt Nürnberg Datenwerk teuto.net Fujitsu Noris Network JIntelligence Globalways ComBACK München Stuttgart JIntelligence Globalways Noris Network

8 Deutsche Wolke: Geschäftsmodell Unterschiedliche Ansätze für den Marktzugang: SaaS Provider Channel Partner IaaS Provider SaaS provider Channel Partner SaaS Provider Distribution Channel Partner IaaS Provider SaaS Provider Distribution Channel Partner Heute: Revenue Sharing zwischen Partnern Zukunft: Abrechnung auf Basis von API-Aufrufen Channel Partner Agorum DMS Projectile Project Management IaaS - compute & storage Distributions Partner Zarafa Groupware

9 9 The next big thing: APIs, APIs, APIs,... erstellt Verzeichnis Web-basierter APIs Die Zahl der APIs wir in den kommenden Jahren stark zunehmen

10 Anzahl der API Aufrufe Open Source Business Alliance 10

11 11 OSBA: Open Source Reference Stack (OSRS) Presentation Virtual Desktop Environment RedHat / Thinstuff / Univention Web-Portale QuinScape/AncudIT Application/ Service Middleware OS HV Storage ERP HeliumV Groupware OX / VIPcom Zarafa Web Meeting Struktur AG Database Postgres Filesharing OwnCloud Grau DataSpace Linux / Hypervisor SuSe / RedHat / debian (Credativ) / UCS (Univention) SAN RisingTide Systems CRM/PM Information Desire ITSM OTRS App-Server JBOSS DMS/ECM agorum Replication LINBIT BI Jasper Soft Jedox ESB Sopera MuleSoft PM Point Software Backup SEP Sesam PLM OSSworx OpenSaga QuinScape Mail- Archive Benno Archive GrauData Identity-Management (RedHat / Univention / Tarent) Monitoring Icinga/Nagios (Netways) Perimeter Security (Astaro) Hardware Boston Deutschland

12 12 Architektur der Deutsche Wolke GUI CRM/PM Information Desire API PaaS Web-Client QuinScape/Tarent GUI GUI GUI ERP HeliumV Grouware Zarafa DMS agorum API API API Enterprise Service Bus APP 1 APP 2 APP 3 APP 4 APP 5 APP 6 Mobile Client Rich Client Cloud API (RESTful) CLI Archive Grau Data API APP 7 APP 8 CLI/ GUI IaaS Univention/SuSe/RHAT API Accounting Billing

13 Was ist Open Stack? Open Source Software zur Implementierung von privaten und public clouds

14 Open Stack Eigenschaften / Komponenten Verwaltung von virtuellen Maschinen (Hypvisor unabhänig) Verwaltung von Blocklevel Storage (SAN) Verwaltung interner und öffentlicher Netzwerke Object Storage (VMs, Dateien) Mandatenfähige Architektur (Benutzer, Projekte, Quotas) Komponenten: Nova (Compute/Volume/Network) Glance (Image Service) Swift (Object Store) Keystone (Identity-Management) Horizon (Dashboard)

15 Veröffentlichungs Historie July 2010 Initiale Ankündigung October Austin Release April Cactus Release October Diablo Release April Essex Release October Folsom Release Juni 2013 Grizzly Release

16 Open Stack Überblick Source: Dell Open Source Business Alliance

17 Beziehung der Komponenten Source: Mirantis

18 Open Stack Topologie Source: Mirantis

19 Open Stack Architektur Source: Mirantis

20 Horizon Dashboard 1/2 Erweiterbare Web-Applikation für Administratoren und Anwender zur Kontrolle von: Compute Ressourcen Storage Ressourcen Netzwerk Ressourcen Ermöglicht einen Überblick über alle Cloud Komponenten und deren Status Verwaltung von Benutzern/Projekten Festlegung von Ressourcen- Beschränkungen Selfservice Portal für Anwender

21 Horizon Dashboard 2/2 Open Source Business Alliance

22 Keystone Identity Management Stellt Identitäts-, Token-, Katalog- und Policy-Services bereit: Festlegung zentralisiertet Policies über Benutzer- und Systemgrenzen hinweg Erzeugung von Benutzern und Mandaten Zugriffsrechte für Compute, Storage und Netzwerk Ressourcen Integration mit Verzeichnisdienst (LDAP) User Tenant Role Token Extras Rule has account credentials, is associated with one or more tenants unit of ownership in openstack, contains one or more users piece of metadata associated with many user-tenant pairs identifying credential associated with a user or user and tenant bucket of key-value metadata associated with a user-tenant pair describes a set of requirements for performing an action

23 Nova API RESTful API Web Service zur Interaktion mit Nova Die einzige erlaubte Art der Interaktion mit Nova Zustandslos vorbereitet für Hochverfügbarkeit Source: Mirantis

24 Nova Scheduler Komponente die festlegt, auf welchem Host die Anfrage ausgeführt werden soll: Provisionierung einer VM auf einem festgelegten Host Provisionierung von VMs eines Mandaten auf isolierten Hosts Provisionierung von Vms auf unterschiedlichen Hosts Provisionierung von VMs auf "Higher Density" Hosts Möglichkeit der Beeinflussung der Provisionierung über Filter, Kosten und Gewichtung Erfüllt nicht immer alle Anforderungen Framework erlaubt Definition von anwendungsspezifischen Schedulern Scheduler Chance Simple Filter Multi Description Picks a host that is up at random Picks a host that is up and has the fewest running instances Picks the best-suited host which satisfies selected filter A scheduler that holds multiple subschedulers

25 Nova Scheduler Filter Filter werden statisch konfiguriert Mehrere Filter sind möglich Benutzerspezifische Filter: Erbt von BaseHostFilter Klasse Überschreibt host_passes (self, host_state, filter_properties) Filter affinity availibility zone core ram json Description Same host or different host Least cost inside selected availability zone Least CPU core utilization Only return hosts with sufficient RAM Allows simple JSON based grammar. Can be used to build custom schedulers

26 Nova Compute Komponente zur Erzeugung und Terminierung von VMs via Hypervisor API Funktionalität ist nicht 100% identisch Exakter Ablauf hängt von der Implementierung des Treibers ab Die meisten Features werden für KVM entwickelt und getestet Source: Mirantis

27 Eigenschaften des Glance Services Erzeugung, Laden, Aktualisierung und Löschen von Boot-Images Suche von Images über Filter Name Container Format Disk format size_min, size_max Status Caching von Images Nutzt SQLite oder Dateisystem mit Extended Attributes zum Caching Prefetching von Images Schrumpfen von Images Löscht ungültige Cache Einträge

28 Architektur von Glance Open Source Business Alliance

29 Glance Image Formate Format raw vhd vmdk vdi iso qcow2 aki ari ami Descripton This is an unstructured disk image format This is the VHD disk format, a common disk format used by virtual machine monitors from VMWare, Xen, Microsoft, VirtualBox, and others Another common disk format supported by many common virtual machine monitors A disk format supported by VirtualBox virtual machine monitor and the QEMU emulator An archive format for the data contents of an optical disc (e.g. CDROM) A disk format supported by the QEMU emulator that can expand dynamically and supports Copy on Write This indicates what is stored in Glance is an Amazon kernel image This indicates what is stored in Glance is an Amazon ramdisk image This indicates what is stored in Glance is an Amazon machine image

30 Aufgaben von Nova Network Definition und Konfiguration von Netzwerken FlatManager FlatDHCPManager VlanManager Verwaltung von beweglichen IP-Adressen Verwaltung von Firewall Regeln

31 Nova Network: FlatManager Unterstützt nur ein einziges Netzwerk Keine Unterstützung für Erzeugung von Bridges oder VLANs Die Bridge muss auf allen Systemen manuell erzeugt werden Compute Host versucht Netzwerk Konfiguration zu injizieren /etc/network/interfaces Source: Mirantis

32 Nova Network: FlatDHCPManager Verbesserte Version des FlatManager Startet einen DHCP Server (dnsmasq) zur Ausgabe von IP Adressen Keine Injizierung einer Netzwerkkonfiguration in den Host Verwaltet Bridges Source: Mirantis

33 Nova Network: VlanManager Erzeugt ein Host-managed VLAN für jedes Projekt / Mandaten Benötigt einen Switch mit Support für VLAN Tagging (IEEE802.1Q) Jedes Projekt erhält ein eigenens Subnetz. VPN ist notwendig um eine VM via privater IP-Adresse zu erreichen Alle Instanzes eines Projektes werden in dasselbe VLAN gebridgt Separater DHCP Server (dnsmasq) läuft für jedes Subnetz Source: Mirantis

34 Weitere Projekte und Komponenten Quantum Implementierung einer Netzwerk Virtualisierunsschicht Integration mit OpenVswitch Cinder Verbesserte Verwaltung von Blocklevel-Storage Ersetzt nova-volume

35 Kontakt Thomas Ludwig Uhl Cel: Facebook: