Solaris 11 IPS - Erstellung und Verwaltung eigener SW-Pakete

Transkript

1 Solaris 11 IPS - Erstellung und Verwaltung eigener SW-Pakete Heiko Stein Senior Architekt etomer GmbH etomer GmbH / Folie 1

2 Agenda Motivation oder weshalb sollte man sich mit IPS beschäftigen? Kurzeinführung IPS Terminologien Aufbau IPS Paket Praktische Beispiele Erstellung eines IPS Repository Erstellung von IPS Paketen etomer GmbH / Folie 2

3 Motivation oder weshalb sollte man sich mit IPS beschäftigen? IPS ist der neue SW-Paketierungsmechanismus in Oracle Solaris 11 Für Virtualisierung und Automatisation ist einen versionierbarer, automatisierbarer und sicherer Softwareverteilmechanismus unumgänglich Integration in den mit Oracle Solaris 11 eingeführten Installationsmechanismus AI Erweiterung der AI-basierenden OS-Installation, um ein auf IPS basierendes automatisiertes Customizing des Betriebssystems bereits während der Installation vorzunehmen ( First-Boot-Service ) Für Entwickler zum Deployment der erstellten Software etomer GmbH / Folie 3

4 Kurzeinführung IPS (1) Das Image Packaging System (IPS) ist ein netzwerk-zentrisches Paketverwaltungssystem, das Softwarepakete in Repositories bereithält. Diese Pakete werden mit den Paketverwaltungstools aus diesen Repository heraus direkt installiert oder aktualisiert. (via http/https) Zusammen mit IPS werden eine Reihe von Tools zur Installation, Aktualisierung, Verwaltung und Verifikation von Paketen eingeführt. Zur Paketverwaltung wird am Client das pkg(1)-tool verwendet, für das ebenfalls GUI-Tools zur Verfügung stehen. Transparente Multi-Architektur Unterstützung Web-based Installer etomer GmbH / Folie 4

5 Kurzeinführung IPS (2) etomer GmbH / Folie 5

6 Terminologien (1) IPS Repository Ein Repository/Depot-Server ist eine Sammlung von IPS-Paketen Local z.b. file://install/repo_s11u1/repo HTTP z.b. Ein physikalisches System kann ein oder mehrere Repositories enthalten Ein Paket wird für die Installation ausgewählt und der aktuellste Stand dieses Paketes (insofern nicht anders angegeben) wird aus den zur Auswahl stehenden Repositories ausgewählt # pkgrepo get -s /install/repo_s11u1/repo SECTION PROPERTY VALUE publisher prefix solaris repository description This\ repository\ serves\ a\ copy\ of\ the\ Oracle\ Solaris\ 11.1\ Build\ 24b\ Package\ Repository. repository name Oracle\ Solaris\ 11.1\ Build\ 24b\ Package\ Repository repository version 4 etomer GmbH / Folie 6

7 Terminologien (2) Publisher Ein Publisher ist eine organisatorische Einheit (Ordnungsbegriff/Personen/Gruppen von Personen oder ein Unternehmen), welche IPS-Pakete veröffentlichen Defaultpublisher für Solaris 11 Distribution/SRU s -> solaris Ein Repository kann mehrere Publisher enthalten. Ebenso können mehrere Repositories denselben Publisher enthalten # pkg publisher PUBLISHER TYPE STATUS P LOCATION solaris origin online F file:///install/repo_s11u1/repo/ solaris origin online F etomer GmbH / Folie 7

8 Terminologien (3) IPS Image Ein Image ist ein Verzeichnis im System, wo Pakete und deren zugehörige Dateien, Verzeichnisse, Links und Abhängigkeiten installiert werden können. Full Image (Solaris) Zone Image Custom Image (Applicationserver) Custom Image (Applicationserver) Imagetypen Full Image (komplette Solaris Distribution) Zones Images Auf das Image der globalen Zone (parent image) verlinktes Image Custom Images, beispielsweise für den konsistenten Rollout eigener Softwareumgebungen etomer GmbH / Folie 8

9 Terminologien (4) IPS Paket IPS verwaltet Software in konsistenten Paketen Ein IPS-Paket ist ein Bundle aus Metadaten und installierbaren Objekten in einem definierten Format Ein IPS-Paket besteht aus einer Sammlung von Actions: Actions werden in dem Manifest eines Pakets beschrieben Actions werden für die Festlegung der Dateien und Verzeichnisse des Pakets verwendet Actions setzten Paket Attribute Definieren Abhängigkeiten von anderen Paketen Erstellen Benutzer und Gruppen Installation von Gerätetreibern Action Types file, directory, link, set, driver, depend, license, user, legacy, signature etomer GmbH / Folie 9

10 Terminologien (5) FMRI Jedes IPS-Paket wird durch einen Fault Management Resource Identifier (FMRI) repräsentiert. Der FMRI enthält beschreibende Informationen über das Paket: Publisher des Pakets Paket Name Versionsnummer Release Datum Beispiel: Schema pkg Publisher solaris Kategorie development Name swtool Version Component 1.0 Build 5.11 Final Creation Time(ISO-8601) T082311Z <- wird beim Import ins Repository erzeugt etomer GmbH / Folie 10

11 Aufbau IPS Paket (1) Zur Erstellung eines IPS Pakets, wird folgendes benötigt: Paket-Quellen(Content) Verzeichnisse Dateien Links Paket-Manifest (Metadaten) Lizenzinformationen Beschreibung Verzeichnislisten Dateilisten Abhängigkeiten etomer GmbH / Folie 11

12 Aufbau IPS Paket (2) Manifest Das Manifest enthält : Paketbeschreibung Classification Lizenzen Abhängigkeiten # pkg contents -m zip set name=pkg.fmri value=pkg://solaris/compress/zip@3.0, : t170611z set name=variant.arch value=i386 value=sparc set name=org.opensolaris.consolidation value=userland set name=pkg.description value="the Info-Zip (zip) compression utility" dir group=sys mode=0755 owner=root path=usr dir facet.doc.man=true group=bin mode=0755 owner=root path=usr/share/man file 68a5dd58add08121bb69fef0f760a178631bb833 chash=32d7fb7ec1d1e9ab224eab1d2f7780fad0a5aac1 elfarch=sparc elfbits=32 elfhash=335e09b2f32b3ff1a5117bd ea229406f group=bin mode=0555 owner=root path=usr/bin/zip pkg.csize= pkg.size= variant.arch=sparc etomer GmbH / Folie 12

13 Aufbau IPS Paket (3) Variants und Facets in IPS Paketen dienen zur Steuerung der bereits erwähnten Actions und bestimmen, ob eine Action während der Installation ausgeführt oder unterdrückt wird. Variants Steuerung der Installation eines Paketes unter bestimmten Bedienungen variant.arch sparc, i386 variant.opensolaris.zone global, nonglobal variant.debug.* true, false Facets Mechanismus zur Steuerung optionaler Paketbestandteile (locales, man pages, etc.) facet.locale.* true, false facet.doc.man true, false etomer GmbH / Folie 13

14 Aufbau IPS Paket (4) Actuators Actuators sind Tags an IPS Actions, über die eine spezielle Handlung bei Installation/Aktualisierung/Entfernen eines Paketes getriggert werden kann reboot-needed SMF-Actuators First-boot Service in AI Postinstall Script Dependencies Verbindliche Abhängigkeiten auf andere Pakete Typen Require, Require-any, Conditional, Group, Optional, Origin, Incorporate, Parent, Incorporate, Exclude etomer GmbH / Folie 14

15 Erstellung eines IPS Repository (1) Setup IPS Repository unter /install/repo_custom/repo # pkgrepo create /install/repo_custom/repo # pkgrepo -s /install/repo_custom/repo add-publisher custom # pkgrepo set -s /install/repo_custom/repo repository/description="custom Repository # pkgrepo set -s /install/repo_custom/repo repository/prefix="custom # pkgrepo get -s /install/repo_custom/repo SECTION PROPERTY VALUE publisher prefix custom repository description Custom\ Repository repository prefix custom repository version 4 etomer GmbH / Folie 15

16 Erstellung eines IPS Repository (2) Publisher lokal an System eintragen # pkg set-publisher -g /install/repo_custom/repo custom # pkg publisher PUBLISHER TYPE STATUS P LOCATION solaris origin online F file:///install/repo_s11u1/repo/ solaris origin online F custom origin online F file:///install/repo_custom/repo/ # pkg publisher custom Publisher: custom Alias: Origin URI: file:///install/repo_custom/repo/ SSL Key: None SSL Cert: None Client UUID: 7af932c6-2c28-11e2-b1d Catalog Updated: November 11, :46:51 PM Enabled: Yes etomer GmbH / Folie 16

17 Erstellung eines IPS Packages (1) wenns mal schnell Funktion Installation /usr/local/bin/app1.sh Adduser appusr + PW + Userhome # ls add.sh app1.sh # vi add.sh PKG_REPO="file:///install/repo_custom/repo/" export PKG_REPO eval `pkgsend open app1@1.0, ` pkgsend add set name=pkg.frmi value="pkg://custom/app1@1.0, " pkgsend add set name=pkg.description value="full Description of app1 functionality" pkgsend add set name=pkg.summary value= App1 package" pkgsend add set name=variant.arch value="i386" value="sparc pkgsend add file `pwd`/app1.sh mode=0755 owner=appusr group=other path=/usr/local/bin/app1.sh pkgsend add dir path=export/home/appusr group=other mode=0755 owner=appusr pkgsend add user gcos-field="app User" home-dir="/export/home/appusr" group=staff uid=1000 \ password="$5$s8ikn7gn$0y1gmzcpvlhlv65dbdb/appsddctm.khoakm2vzens/" username=appusr pkgsend close etomer GmbH / Folie 17

18 Erstellung eines IPS Packages (2) wenns mal schnell Einspielen der Quellen/Metadaten ins Repository Aktualisierung IPS Cache (!) Überprüfung #./add.sh PUBLISHED # pkg list -af app1 pkg list: no packages matching 'app1' known # pkg refresh --full custom # pkg list -af app1 NAME (PUBLISHER) VERSION IFO app # pkg info -r app1 Name: app1 Summary: App1 package Description: Full Description of app1 functionality... FMRI: pkg://custom/app1@1.0, : t060410z etomer GmbH / Folie 18

19 Erstellung IPS Packages generelle Vorgehensweise(1) 1.) Sourcetree # find app2 app2 app2/lib app2/lib/app2.libg.so1 app2/lib/app2.lib.so1 app2/bin app2/bin/app2.sh 2.) Initiales Manifest erstellen SMF Actuator für trigger.xml manuell einfügen (optional) # pkgsend generate app2 pkgfmt > app2.p5m.m # vi app2.p5m.m dir path=opt/app2 owner=root group=bin mode=0755 dir path=opt/app2/bin owner=root group=bin mode=0755 file opt/app2/bin/app2.sh path=opt/app2/bin/app2.sh owner=root group=bin mode=0755 dir path=opt/app2/lib owner=root group=bin mode=0755 file opt/app2/lib/app2.lib.so1 path=opt/app2/lib/app2.lib.so1 owner=root group=bin mode=0644 file opt/app2/lib/app2.libg.so1 path=opt/app2/lib/app2.libg.so1 owner=root group=bin mode=0644 file trigger.xml owner=root group=bin mode=0644file var/svc/manifest/system/trigger.xml \ restart_fmri=svc:/system/manifest-import:default path=var/svc/manifest/system/trigger.xml \ owner=root group=bin mode=0644 etomer GmbH / Folie 19

20 Erstellung IPS Packages generelle Vorgehensweise(1.1) 2.1) Erläuterung SMF Actuator restart_fmri=svc:/system/manifest-import:default SMF Manifest # cat trigger.xml <?xml version="1.0"?> <!DOCTYPE service_bundle SYSTEM "/usr/share/lib/xml/dtd/service_bundle.dtd.1"> <service_bundle type='manifest' name='trigger'> exec='/opt/app2/bin/app2.sh' </service_bundle> Exec-Methode # cat app2.sh logger -p "daemon.err" "Script via SMF-Actuator per Service svc:/system/trigger gestartet" # logger -p "daemon.err" "Script via SMF-Actuator per Service svc:/system/trigger beendet" # svccfg delete -f trigger & etomer GmbH / Folie 20

21 Erstellung IPS Packages generelle Vorgehensweise(2) 3.) Metadatenfile erzeugen Depencies auf pkg:/custom/app1 manuell einfügen (optional) # vi app2.mog set name=pkg.fmri value=pkg://custom/app2@1.0, set name=pkg.description value="full Description of app2 functionality" set name=pkg.summary value= App2 package" set name=variant.arch value="i386" value="sparc" set name=info.classification value=org.opensolaris.category.2008:applications/accessories depend fmri=pkg://custom/app1@1.0 type=require 4.) Initiales Manifest mit Metadatenfile mergen # pkgmogrify app2.p5m.m app2.mog pkgfmt > app2.p5m.mog etomer GmbH / Folie 21

22 Erstellung IPS Packages generelle Vorgehensweise(3) 5.) Packagedependencies überprüfen Automatische Erzeugung diverser Kontrollfiles # pkgdepend generate -md app2 app2.p5m.mog > app2.p5m.dep # pkgdepend resolve -m app2.p5m.dep # ls./app2*./app2.mog./app2.p5m.dep./app2.p5m.dep.res./app2.p5m.m./app2.p5m.mog./app2.p5m.ww 6.) Package final verifizieren # pkglint app2.p5m.dep.res 7.) Package in Repository einspielen # pkgsend -s /install/repo_custom/repo publish -d app2 app2.p5m.dep.res pkg://custom/app2@1.0, : t061750z PUBLISHED etomer GmbH / Folie 22

23 Erstellung IPS Packages Funktionstest Greifen die Dependencies? depend type=require # pkg list -af 'app*' NAME (PUBLISHER) VERSION IFO app app # pkg install app2 # pkg list -af 'app*' NAME (PUBLISHER) VERSION IFO app i-- app i-- Hat der Actuator gegriffen? restart_fmri=svc:/system/manifest-import:default # tail /var/adm/messages [ID daemon.error] Script via SMF-Actuator per Service svc:/system/trigger gestartet [ID daemon.error] Script via SMF-Actuator per Service svc:/system/trigger beendet etomer GmbH / Folie 23

24 Erstellung IPS Packages Update Einfache Variante über Erhöhung der Versionsnummer im Manifest name=pkg.frmi name=pkg.frmi Update Neu ins Manifest importieren # pkg list -af app1 NAME (PUBLISHER) VERSION IFO app app i-- # pkg install app1 # pkg list -af app1 NAME (PUBLISHER) VERSION IFO app i-- app etomer GmbH / Folie 24

25 Erstellung IPS Packages Hints (1) Hint: Reverse engineering # pkg contents -r app2 PATH opt/app2 opt/app2/bin opt/app2/bin/app2.sh opt/app2/lib opt/app2/lib/app2.lib.so1 opt/app2/lib/app2.libg.so1 var/svc/manifest/system/trigger.xml # pkg contents -mr app2 set name=pkg.fmri value=pkg://custom/app2@1.0, : t211200z set name=pkg.summary value="app2 package" set name=pkg.description value="full Description of app2 functionality" set name=info.classification value=org.opensolaris.category.2008:applications/accessories set name=variant.arch value=i386 value=sparc dir group=bin mode=0755 owner=root path=opt/app2 file a061a7139a cb2bf957415b91cab2c3f7b chash=d543f28bb17807cfa7a565b9a0193ba7358ab937 group=bin mode=0644 owner=root path=var/svc/manifest/system/trigger.xml pkg.csize=451 pkg.size=1092 restart_fmri=svc:/system/manifest-import:default set name=org.opensolaris.smf.fmri value=svc:/system/trigger:default value=svc:/system/trigger etomer GmbH / Folie 25

26 Erstellung IPS Packages Hints (2) Hint: Package in *.p5p Package Archive umwandeln Vergleichbar mit SysV Datastream Format # pkgrecv -s /install/repo_custom/repo -a -d app2.p5p app2 Retrieving packages for publisher custom... Retrieving and evaluating 1 package(s)... DOWNLOAD PKGS FILES XFER (MB) SPEED Completed 1/1 4/4 0.0/ k/s ARCHIVE FILES STORE (MB) app2.p5p 16/16 0.0/0.0 Hint: *.p5p ist ein Pax-Archiv # pax -vf app2.p5p USTAR format archive extended -rw-r--r-- 0 root root 330 Nov 20 22:05 pkg5.index.0.gz drwxr-xr-x 0 root root Nov 16 14:23 publisher drwxr-xr-x 0 root root Nov 20 22:05 publisher/custom drwxr-xr-x 0 root root Nov 20 22:05 publisher/custom/pkg drwxr-xr-x 0 root root Nov 20 22:05 publisher/custom/pkg/app2 -rw-r--r-- 0 root root 1631 Nov 20 22:05 publisher/custom/pkg/app2/1.0%2c %3a t210456z etomer GmbH / Folie 26

27 Erstellung IPS Packages Hints (3) Hint: Metadatenmanifest für Gruppendependencies Vergleichbar mit Solaris 10 Installcluster # more group-app.mog set name=pkg.fmri value=pkg://custom/group/all-app@2.1, set name=pkg.summary value="app1 and App2" set name=pkg.description value="bundle of great applications app1 and app2" set name=info.classification value="org.opensolaris.category.2008:meta Packages/Group Packages" set name=variant.arch value=sparc value=i386 set name=variant.opensolaris.zone value=global value=nonglobal depend fmri=/custom/app1@1.0 type=group depend fmri=/custom/app2@1.0 type=group Hint: Keine Prüfung der Paket Version bei Import ins Repository ( Timestamp ) # pkg list -afv app1 FMRI IFO pkg://custom/app1@1.0, : t145517z --- pkg://custom/app1@1.0, : t145513z --- pkg://custom/app1@1.0, : t145509z --- pkg://custom/app1@1.0, : t145504z --- pkg://custom/app1@1.0, : t132052z i-- etomer GmbH / Folie 27

28 Zusammenfassung Die Einführung von IPS als neues Packaging Formates in Oracle Solaris 11 führt zu einer neuen Form der automatisierten Installation Mit dieser neuen Installationsmethode werden viele Mechanismen klarer strukturiert und vereinfacht Einfache, als auch komplexe Softwarestrukturen können ausgerollt werden etomer GmbH / Folie 28

29 Quellen Application Packaging Developer's Guide Copying and Creating Oracle Solaris 11 Package Repositories etomer GmbH / Folie 29