Tobias Flohre / Dennis Schulte codecentric AG. Spring Batch Performance und Skalierbarkeit
|
|
- Erica Weber
- vor 7 Jahren
- Abrufe
Transkript
1 Tobias Flohre / Dennis Schulte Spring Batch Performance und Skalierbarkeit
2 Dennis Schulte blog.codecentric.de/author/dsc tel +49 (0) 1515 _ dennis.schulte@codecentric.de
3 Tobias Flohre blog.codecentric.de/en/author/tobias.flohre tel +49 (0)
4 AGENDA Grundlagen Spring Batch Vier Aussagen zu Performance im Batch Skalierungsstrategien
5 AGENDA Grundlagen Spring Batch Vier Aussagen zu Performance im Batch Skalierungsstrategien
6 WAS IST EIN BATCH? Traditionelles Batch-Pattern Read Process Write
7 SPRING BATCH Restart Skip Persistente Job-Metadaten Retry Automatisches Transaktionsmanagement Skalierungsfeatures
8 DOMAIN / KONFIGURATION / ABLAUF Job Step Item ItemReader ItemProcessor ItemWriter Chunk
9 DOMAIN / KONFIGURATION / ABLAUF Job wird als Spring-Konfiguration erstellt Domain Specific Language manifestiert sich in XML- Namespace Zentrale Elemente job step tasklet chunk reader processor writer commit-interval <job id="myjob" > <step id="mystep" > <tasklet> <chunk reader="myreader" processor="myprocessor" writer="mywriter" commit-interval="1" /> </tasklet> </step> </job>
10 DOMAIN / KONFIGURATION / ABLAUF Reader, Processor und Writer implementieren bestimmte Interfaces ItemReader<T> T read() ItemProcessor<I,O> O process(i item) ItemWriter<T> void write(list<? extends T> items) Spring Batch bietet für sehr viele Use Cases Implementierungen an Lesen/Schreiben aus/in eine Datenbank Lesen/Schreiben aus/in ein Flat-File Lesen/Schreiben aus/in ein XML-File Lesen/Schreiben aus/in eine JMS-Queue Lesen/Schreiben mit JPA und viele mehr
11 DOMAIN / KONFIGURATION / ABLAUF item == null completionpolicy fulfilled Begin Step 1 true list of items For each item list of items false Open transaction ItemReader Item read() ItemProcessor process(item) ItemWriter write(list<item>) Commit transaction item == null false 2 true Finish Step
12 DOMAIN / KONFIGURATION / ABLAUF Inkasso Kraftfahrt Job * Step Inkasso Kraftfahrt am * JobInstance JobParameters Inkasso Kraftfahrt am erster Versuch * JobExecution * StepExecution
13 DOMAIN / KONFIGURATION / ABLAUF Infrastrukturkomponenten JobLauncher PlatformTransaction Manager JobRepository
14 AGENDA Grundlagen Spring Batch Vier Aussagen zu Performance im Batch Skalierungsstrategien
15 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 1 Kenne EVA Eingabe Verarbeitung Ausgabe
16 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 1 <job id= step-job"> <step id= xml-einlesen >...</step> <step id= xml-verarbeiten >...</step> <step id= xml-schreiben >...</step> </job>
17 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 1 <job id= eva-job"> </job> <step id= xml-step"> </step> <tasklet> </tasklet> <chunk reader= xml-einlesen processor= xml-verarbeiten" writer= xml-schreiben />
18 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 1 ExecutionContext ist kein Datenspeicher für Nutzdaten, sondern: Zählerstände Steuerdaten Problem: HeapSize Processor und Writer sollten stateless sein Parallelisierung
19 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 2 Kenne Deine nicht-funktionalen Anforderungen
20 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 2 Mengengerüste Zu erreichender Durchsatz Was läuft parallel? Minimiere den Aufwand!
21 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 3 Kenne Deine Persistenzschicht
22 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 3 Datenlokalität Art des DB-Zugriffs JDBC ORM Transaktionsgröße (commit-interval)
23 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 4 Zahlen sind besser als Vermutungen
24 VIER THESEN ZU PERFORMANCE IM BATCH Aussage 4 Messen, Messen, Messen! Wiederholbarkeit Immer nur einen Parameter ändern Immer im Blick: CPU, Speicher, Datenquellen Ergebnisse protokollieren Testdaten Stetiger Verbesserungsprozess Randsysteme abdecken Tools verwenden Profiling lokal Application Performance Management tools
25 AGENDA Grundlagen Spring Batch Vier Aussagen zu Performance im Batch Skalierungsstrategien
26 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
27 SKALIERUNGSSTRATEGIEN Woher kommen die Threads? java.util.concurrent.executor ThreadPoolExecutor <task:executor id="taskexecutor" pool-size="5"/> ApplicationServer verwalten eigene Threadpools
28 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
29 MULTI-THREADED STEP <job id="multithreadedstepjob"> <step id="step"> <tasklet task-executor="taskexecutor" throttle-limit="4"> <chunk reader="reader" processor="processor" writer="writer" commit-interval="3" /> </tasklet> </step> </job> <task:executor id="taskexecutor" pool-size="5"/>
30 MULTI-THREADED STEP Threadsafe Begin Step 1 For each item Open transaction ItemReader Item read() ItemProcessor process(item) ItemWriter write(list<item>) Commit transaction 2 File vs. DB vs. JMS Finish Step
31 MULTI-THREADED STEP + Hoch skalierbar + Einfach zu konfigurieren - Alle Komponenten müssen thread-safe sein
32 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
33 ASYNCITEMPROCESSOR -> ASYNCITEMWRITER Thread 1 process(item) Thread 2 ItemReader Async ItemProcessor process(item) Async ItemWriter Thread 3 process(item)
34 ASYNCITEMPROCESSOR -> ASYNCITEMWRITER AsyncItemProcessor and AsyncItemWriter Java Concurrency API Future FutureTask Sehr einfach zu konfigurieren Optimal für aufwändige process-schritte Anreicherung von Daten über langsame APIs Komplexe Berechnungen
35 ASYNCITEMPROCESSOR -> ASYNCITEMWRITER <bean id="processor" class="org.sfw.batch.integration.async.asyncitemprocessor"> <property name="delegate" ref="delegateprocessor"/> <property name="taskexecutor" ref="taskexecutor"/> </bean> <bean id="writer" class="org.sfw.batch.integration.async.asyncitemwriter"> </bean> <property name="delegate" ref="delegatewriter"/> <task:executor id="taskexecutor" pool-size="5"/> Achtung: commit-interval > 1
36 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
37 PARALLEL STEPS databasejob Thread 1 Thread 2 importtablepartner importtablevertrag loadtablepartner loadtablevertrag
38 PARALLEL STEPS <job id="importjob"> <split id="splitstep" task-executor="taskexecutor"> <flow> <step id="partnerstep"> <tasklet ref="partnertasklet"/> </step> </flow> <flow> <step id="vertragstep"> <tasklet ref="vertragtasklet"/> </step> </flow> </split> </job>
39 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
40 PARTITIONING Partitioner Name Kategorie Tobias A Dennis A Frank A Daniel B Ben B Max B Christian C Dirk C Thomas C
41 PARTITIONING Partitioner Name Kategorie Tobias A Dennis A Frank A Daniel B Ben B Max B Christian C Dirk C Thomas C File 1 File 2 File 3
42 PARTITIONING Partitioner Name Kategorie Tobias A Dennis A Frank A Daniel B Ben B Max B Christian C Dirk C Thomas C File 1 File 2 File 3
43 PARTITIONING Partitioner erzeugt Partitionen PartitionHandler verteilt Partitionen an Worker Lokaler Prozess (TaskExecutor) Spring Remoting JMS Hadoop YARN
44 PARTITIONING Begin Step For each item Open transaction ItemReader Item read() ItemProcessor process(item) ItemWriter write(list<item>) Commit transaction false For each item Partitioner Open transaction ItemReader Item read() ItemProcessor process(item) For each item ItemWriter write(list<item>) Commit transaction false Finish Step Open transaction ItemReader Item read() ItemProcessor process(item) ItemWriter write(list<item>) Commit transaction false
45 PARTITIONING <job id="flatfilepartitioningjob"> <step id="partitionedstep" > <partition step="flatfilepartitioningstep" partitioner="partitioner"> <handler task-executor="taskexecutor" /> </partition> </step> </job> <bean id="partitioner" class="org.sfw...support.multiresourcepartitioner"> </bean> <property name="resources" value="file:src/test/resources/*.csv" />
46 PARTITIONING + Hoch skalierbar + Kein Bottleneck beim ItemReader + Datenlokalität - Struktur der Input Daten muss bekannt sein
47 SKALIERUNGSSTRATEGIEN Multi-threaded Step AsyncItemProcessor -> AsyncItemWriter Parallel Steps Partitioning Remote Chunking
48 REMOTE CHUNKING Master Slave Node 1 Step 1 Chunk Processor ItemWriter ItemReader ChunkProvider Chunk Processor Slave Node 2 ItemWriter
49 REMOTE CHUNKING Begin Step 1 Commit transaction Open transaction For each item Open transaction ItemReader Item read() JMS ItemProcessor process(item) ItemWriter write(list<item>) Commit transaction JMS 2 Finish Step
50 REMOTE CHUNKING + Hoch skalierbar + Struktur der Input Daten muss bekannt sein - Ggf. Bottleneck beim ItemReader - Transaktionale Middleware - Alle Items werden serialisiert
51 FRAGEN? Dennis Schulte / Tobias Flohre Merscheider Straße Solingen tobias.flohre@codecentric.de dennis.schulte@codecentric.de blog.codecentric.de
Dennis Schulte / Tobias Flohre codecentric AG. Enterprise Java Batch mit Spring
Dennis Schulte / Tobias Flohre Enterprise Java Batch mit Spring Dennis Schulte Düsseldorf @denschu www.github.com/denschu blog.codecentric.de/author/dsc tel +49 (0) 1515 _ 288 2395 dennis.schulte@codecentric.de
Mehr3. Juli 2014, IBM Client Center Ehningen
3. Juli 2014, IBM Client Center Ehningen Burkhard Seck 44 Jahre alt Seit 1999 bei Tricept Detmold Head of Java Solutions Technisch und fachlich meist unterwegs im Banking- und Finance-Umfeld burkhard.seck@tricept.de
MehrJava Batch Der Standard für's Stapeln
Java Batch Der Standard für's Stapeln Berlin Expert Days 18.09.2015 Dirk Weil, GEDOPLAN GmbH Dirk Weil GEDOPLAN GmbH, Bielefeld GEDOPLAN IT Consulting Konzeption und Realisierung von IT-Lösungen GEDOPLAN
MehrBulk Web-Crawler mit Spring Batch
Bulk Web-Crawler mit Spring Batch Anforderung - funktional Wir wollen automatisiert Überprüfung, ob bestimmte Produkte (Bücher) in einem Online-Shop gelistet sind. Site Produkt Status AMAZON_DE 0815 FOUND
MehrBackend as a Service: Neues Geschäftsfeld für die Cloud 64. NoSQL mit Cassandra. Skalierungssieger auf der ganzen Linie 48
Backend as a Service: Neues Geschäftsfeld für die Cloud 64 Java Mag 11.2013 magazin Java Architekturen Web Agile www.javamagazin.de Tomcat 8 Erste Rauchzeichen der neuen Version 14 NoSQL mit Cassandra
MehrSkalierbare Webanwendungen
Skalierbare Webanwendungen Thomas Bachmann Lead Software Architect & CIO Mambu GmbH Twitter: @thobach Anwendungsbeispiel Hohe Nichtfunktionale Anforderungen Sicherheit Vertraulichkeit Integrität Verfügbarkeit
MehrJava-Batch Der neue Standard in Java EE 7
Treffpunkt Semicolon Java-Batch Der neue Standard in Java EE 7 Thomas Much 22.10.2013 Über... Thomas Much Dipl.-Inform. (Universität Karlsruhe (TH)) Berater, Architekt, Entwickler, Coach (seit 1990) Trainer
MehrJava-Batch JSR-352. Der neue Standard in Java EE 7 13.05.2014. Thomas Much
Java-Batch JSR-352 Der neue Standard in Java EE 7 13.05.2014 Thomas Much Über... Thomas Much Dipl.-Inform. (Universität Karlsruhe (TH)) Berater, Architekt, Entwickler, Coach (seit 1990) Trainer für Workshops
MehrWorkshop Java Webentwicklung Einführung in Hibernate. Ulrich Stärk
Workshop Java Webentwicklung Einführung in Hibernate Ulrich Stärk Ablauf Montag bis Donnerstag 09:00 Uhr s.t. Beginn, bis ca. 17:00 Uhr 1 Stunde Mittagspause Donnerstag Experiment Aufzeichnung der Programmiertätigkeit
MehrQuery Result Caching. Optimierung des Datenbankzugriffs
Query Result Caching Optimierung des Datenbankzugriffs Andreas Hubmer 19.11.2012 Inhalt Problemstellung Tabellen-Cache DBProxy Objekt-Cache 1 st -/2 nd -Level Cache Query Cache 2 Problemstellung Application-
MehrBuild Management Tool?
Build Management Tool? Funktionen Dependency Management Kompiliert den Sourcecode in Binaries Führt automatisierte Tests aus Installiert Software oder Lädt sie in Repositories Erstellt eine Dokumentation
MehrWebentwicklung mit Vaadin 7. Theoretische und praktische Einführung in Vaadin 7. Christian Dresen, Michael Gerdes, Sergej Schumilo
Webentwicklung mit Vaadin 7 Theoretische und praktische Einführung in Vaadin 7 Christian Dresen, Michael Gerdes, Sergej Schumilo Agenda Allgemeines Architektur Client-Side Server-Side Vaadin UI Components
MehrBatch-Frameworks in Java: Architektur und Implementierungen Stuttgart, 17. Juli 2014, Martin Burkhardt
Batch-Frameworks in Java: Architektur und Implementierungen Stuttgart, 17. Juli 2014, Martin Burkhardt Vorstellung Martin Burkhardt, Dipl.-Ing. (FH) Technische Informatik (FHTE) Consulting, Technologie,
MehrKapitel 14. Objekt-relationales Mapping (ORM) mit Hibernate bzw. Java Persistance API (JPA) Prof. Dr. Wolfgang Weber Vorlesung Datenbanken
Kapitel 14 Objekt-relationales Mapping (ORM) mit Hibernate bzw. Java Persistance API (JPA) 1 Wozu Objekt-relationales Mapping? - Problematik - Business-Schicht OO-Klassen Unvereinbarkeit der Paradigmen
MehrTwitter & GitHub: romanroe
ReactiveX mit RxJava Roman Roelofsen - WK GmbH / thecodecampus Twitter & GitHub: romanroe Über mich Alpha Geek, Entwickler, Trainer WK GmbH - The Web Engineers Individualsoftware thecodecampus Schulungsanbieter
MehrPersistenz. Ralf Gitzel
Persistenz Ralf Gitzel ralf_gitzel@hotmail.de 1 Themenübersicht Ralf Gitzel ralf_gitzel@hotmail.de 2 Übersicht Grundkonzepte Entity Beans Meine erste Entity Entity-Manager Lernziele Übungsaufgabe 3 Grundkonzepte
MehrVerteilte Systeme. Nebenläufigkeit. Prof. Dr. Oliver Haase
Verteilte Systeme Nebenläufigkeit Prof. Dr. Oliver Haase 1 Arten der Nebenläufigkeit 1-Prozessor(kern)-System quasiparallele Ausführung erhöht Interaktivität durch Umschalten zwischen Threads kann Parallelitätsgrad
MehrDie Magie von MBeans und JMX. DOAG 2014 Andreas Chatziantoniou - Foxglove-IT BV
Die Magie von MBeans und JMX DOAG 2014 Andreas Chatziantoniou - Foxglove-IT BV Bio Andreas Chatziantoniou Freelance Oracle Fusion Middleware Consultant 16 Jahre Oracle Erfahrung/26 Jahre IT (Unix/C) Oracle
MehrOmnichannel Automation mit elastischer Skalierung
Omnichannel Automation mit elastischer Skalierung Stefan Dix GMC Software Technology GmbH 27. April 2017 1 Doxnet Education Day in Frankfurt Agenda Wer ist GMC? Was macht GMC Inspire? Dokumente in der
MehrSchneller als Hadoop?
Schneller als Hadoop? Einführung in Spark Cluster Computing 19.11.2013 Dirk Reinemann 1 Agenda 1. Einführung 2. Motivation 3. Infrastruktur 4. Performance 5. Ausblick 19.11.2013 Dirk Reinemann 2 EINFÜHRUNG
MehrBuild Management Tool?
Build Management Tool? Funktionen Dependency Management Kompiliert den Sourcecode in Binaries Führt automatisierte Tests aus Installiert Software oder Lädt sie in Repositories Erstellt eine Dokumentation
MehrLimitations and Potentials of modern BPM Systems for High-Performance Shadow Processing in Business Processes of Digital Companies
Limitations and Potentials of modern BPM Systems for High-Performance Shadow Processing in Business Processes of Digital Companies Martin Schmollinger, Jürgen Krauß Hochschule Reutlingen, Alteburgstraße
MehrBuild Management Tool
Build Management Tool Build-Prozess? Source Code 3rd Party libraries Veröffentlichung Download all 3rd Party libs by hand Compile your sources: javac -sourcepath./src1;./src2 Byte Code -cp lib1.jar;lib2.jar
MehrContent Management in der Cloud mit JCR und Oracle. Dominic Weiser, 21.11.2012
Content Management in der Cloud mit JCR und Oracle Dominic Weiser, 21.11.2012 Agenda Einleitung Motivation DMS JCR Jackrabbit Persistenzschicht Fazit 2 3 Einleitung Motivation Dokumente in der Cloud Speichern
MehrAnalyse und praktischer Vergleich von neuen Access- Layer-Technologien in modernen Webanwendungen unter Java. Oliver Kalz
Analyse und praktischer Vergleich von neuen Access- Layer-Technologien in modernen Webanwendungen unter Java Oliver Kalz Agenda Grundlagen Objektpersistenz Objektrelationales Mapping Performance Fazit
MehrUnsere Vorträge auf der DOAG 2015
Unsere Vorträge auf der DOAG 2015 Dienstag Virtual Reality Analytics 12:00-12:45 Uhr Raum Oslo, Ebene 2 Jörg Osarek SQL Developer Lassen Sie sich anstecken! 12:00-12:45 Uhr Raum Sydney, Ebene 1 Sabine
MehrHandbuch für die Erweiterbarkeit
Handbuch für die Erweiterbarkeit Inhalt Pakete für die Erweiterbarkeit... 2 Actions... 2 Items... 2 Itemset... 2 Die UseCaseNewAction... 3 Eigene Shapes... 4 Der Shape Container... 5 User Objects... 6
MehrDatenbankpraktikum, Gruppe F. JPA mit Hibernate. Alexander Stautner, Harald Zauner, Sascha Schreier
JPA mit Hibernate Alexander Stautner, Harald Zauner, Sascha Schreier Agenda Objektrelationales Mapping JPA / Hibernate Demo # 2 Objektrelationales Mapping Objektorientierte Welt Objekte Objektidentität
MehrWeblogic 12.2 und DB 12.2 das perfekte Duo
Gemeinsam mehr erreichen. Weblogic 12.2 und DB 12.2 das perfekte Duo Matthias Fuchs, Andreas Chatziantoniou Vorstellung > Esentri > Matthias Fuchs > Oracle Partner Spezialized SOA > Ettlingen, Nürnberg
MehrAgenda. Anwendungsfälle. Integration in Java
Florian Hopf @fhopf Agenda Anwendungsfälle Integration in Java Agenda Vorbereitung Installation # download archive wget https://download.elastic.co/ elasticsearch/elasticsearch/elasticsearch-1.7.1.zip
MehrDirk Reinemann Working Student Sales Consulting
JDeveloper 12c in 30 Minutes Dirk Reinemann Working Student Sales Consulting Program Agenda 1. Integrated Development Environment 2. Java Development 3. Web Development 4. Team Development 5. Application
MehrRemote Method Invocation
Remote Method Invocation spezielle Technik aus dem Java-Umfeld Ausführung der Methoden auf einem entfernten Rechner Analogon zum RPC (Remote Procedure Call) Zweck: Objekte in verschiedenen Java-VM s Aufruf
Mehr<Insert Picture Here> Performance Tests in der Praxis am Beispiel von Oracle BPM/BPEL
Performance Tests in der Praxis am Beispiel von Oracle BPM/BPEL Alexander Fox Senior Berater Agenda Dauer ca. 45 Minuten Begriffsbestimmung Software-Tests
Mehr!! Waldemar Reger Köln,
Analyse und Evaluierung von Parameterabhängigkeiten anhand der Laufzeit von MapReduce-Jobs zur Konzeptionierung von Hadoop-Clustern Waldemar Reger Köln, 23.07.2014 Agenda 1. Hadoop Grundlagen 2. Cluster
MehrIUG DRESDEN ERSTELLUNG VON ROBUSTEN NATURAL SERVICES Software AG. All rights reserved. For internal use only
IUG DRESDEN ERSTELLUNG VON ROBUSTEN NATURAL SERVICES 2016 Software AG. All rights reserved. For internal use only DIGITAL BUSINESS APPLICATIONS DRIVE THE DIGITAL BUSINESS Partner Lieferanten Kunden SaaS
MehrMICRO-BATCH-SERVICES MIT SPRING BOOT
MICRO-BATCH-SERVICES MIT SPRING BOOT Ein Praxisbericht Tobias Flohre Düsseldorf @TobiasFlohre www.github.com/tobiasflohre blog.codecentric.de/en/author/tobias.flohre tobias.flohre@codecentric.de www.codecentric.de
MehrSoftwareentwicklung mit Enterprise JAVA Beans
Softwareentwicklung mit Enterprise JAVA Beans Java Enterprise Edition - Überblick Was ist J2EE Java EE? Zunächst mal: Eine Menge von Spezifikationen und Regeln. April 1997: SUN initiiert die Entwicklung
MehrEntwicklung von Web-Anwendungen auf JAVA EE Basis
Entwicklung von Web-Anwendungen auf JAVA EE Basis Java Enterprise Edition - Überblick Prof. Dr. Bernhard Schiefer Inhalt der Veranstaltung Überblick Java EE JDBC, JPA, JNDI Servlets, Java Server Pages
MehrKarlsruhe Institute of Technology Die Kooperation von Forschungszentrum Karlsruhe GmbH und Universität Karlsruhe (TH)
Combining Cloud and Grid with a User Interface Jie Tao Karlsruhe Institute of Technology jie.tao@kit.edu Die Kooperation von Outline Motivation The g-eclipse Project Extending gg-eclipse for a Cloud Framework
MehrNext generation open source BPM JBoss jbpm 4. Java Forum Stuttgart 02.07.2009 bernd.ruecker@camunda.com
Next generation open source BPM JBoss jbpm 4 Java Forum Stuttgart 02.07.2009 bernd.ruecker@camunda.com Bernd Rücker / bernd.ruecker@camunda.com / 2 Guten Morgen Berater, Trainer, Coach Softwareentwickler
MehrMicrosoft Windows PowerShell v3.0/4.0
Microsoft Windows PowerShell v3.0/4.0 Dauer: 4 Tage Kursnummer: GKPS Überblick: Die PowerShell ist bereits ein integraler Bestandteil der aktuellen Windows Systeme und wird von verschieden Servern wie
MehrEtablierung serviceorientierter Architekturen mit Web Services
Etablierung serviceorientierter Architekturen mit Web Services Vorlesung im (Entwicklung von Serviceangeboten) 1 Agenda Einsatzbereiche von Web Service basierten Angeboten Übersicht zur Java-System Application
MehrKostenoptimierte Cloud-Administration mit Solaris Container Technologie
Kostenoptimierte Cloud-Administration mit Solaris Container Technologie Joachim M. Dietsch Principal Sales Consultant Global Elite Accounts Agenda Virtualisierungs-Technologien System
MehrVon der Datenbank zum LDAP-Server schnell und einfach mit Oracle Virtual Directory. DOAG Konferenz Nürnberg
Von der Datenbank zum LDAP-Server schnell und einfach mit Oracle Virtual Directory DOAG 2014 - Konferenz Nürnberg 18.-20.11.2014 Rechenzentrum der RUB Hans-Ulrich.Beres@rub.de Suvad.Sahovic@oracle.com
MehrMyCoRe > V1.0: Technische Weiterentwicklung
MyCoRe > V1.0: Technische Weiterentwicklung Frank Lützenkirchen, Kathleen Krebs Folie 1 Kontrollflüsse bisher Kontrollflüsse sind im MyCoRe Kern oder der darauf basierenden Applikation fix und explizit
MehrTipps & Tricks. Neues, Nützliches und Praktisches. Christian Dahmen con terra GmbH
Tipps & Tricks Neues, Nützliches und Praktisches Christian Dahmen con terra GmbH 1 Qualitätssicherung von Geodaten Qualitätssicherung von Geodaten Mit FME lassen sich einfache und komplexe Prüfroutinen
MehrVersionierung und Dateistruktur
Versionierung und Dateistruktur Tobias Strohmeyer Berlin, 15.09.2015 Agenda 1. Einordnung in ITSM 2. Varianten für die Versionierung 3. Integration von Subversion 4. Nutzung bei der Entwicklung 5. Dateistruktur
MehrJBoss 7 als Plattform für hochverfügbare Anwendungen
JBoss 7 als Plattform für hochverfügbare Anwendungen Orientierungspunkt 04/2013 24.05.2013, OIO Dirk Weil, GEDOPLAN GmbH Dirk Weil GEDOPLAN GmbH, Bielefeld Java EE seit 1998 Konzeption und Realisierung
MehrWebLogic Server im Zusammenspiel mit Real Application Cluster
WebLogic Server im Zusammenspiel mit Real Application Cluster Michael Bräuer Leitender Systemberater Sylvie Lübeck Leitende Systemberaterin ORACLE Deutschland B.V. & Co. KG The following is intended to
MehrCALUMMA ETL Tool Benutzerhandbuch
Benutzerhandbuch 2 Inhaltsverzeichnis Teil I Einleitung 3 Teil II Spoon Basics 4 Teil III CALUMMA Steps 9 1 Master... Data Importer 10 2 Data... Importer 11 3 Enumeration... Mapping 12 4 Hierarchie-Mapping...
MehrBig Data in der Praxis
Jonas Freiknecht Big Data in der Praxis Lösungen mit Hadoop, HBase und Hive Daten speichern, aufbereiten, visualisieren HANSER Vorwort XI 1 Einleitung 1 2 Big-Data 7 2.1 Historische Entstehung 8 2.2 Big-Data
MehrRene Böing, Alexander Kuhn, Marc Wilmes Einführung in Spring und Hibernate
1 von 43 Rene Böing, Alexander Kuhn, Marc Wilmes Einführung in Spring und Hibernate 27.11.11 Agenda Einleitung Ist-Zustand Bookstore Was ist Hibernate? Wie funktioniert Hibernate? Was ist Spring? Architektur
MehrZend PHP Cloud Application Platform
Zend PHP Cloud Application Platform Jan Burkl System Engineer All rights reserved. Zend Technologies, Inc. Zend PHP Cloud App Platform Ist das ein neues Produkt? Nein! Es ist eine neue(re) Art des Arbeitens.
MehrArchitektur im Kontext der Cloud: Patterns und Best Practices 62. Logging. Auswirkung moderner Architektur auf den Betrieb 32
Architektur im Kontext der Cloud: Patterns und Best Practices 62 JAVA Mag Sonderdruck 11.2014 magazin Java Architekturen Web www.javamagazin.de Apache DeltaSpike Portabilität und Community 16 Der Rest
MehrVon der Datenbank zum LDAP-Server schnell und einfach mit Oracle Virtual Directory. DOAG Konferenz Nürnberg
Von der Datenbank zum LDAP-Server schnell und einfach mit Oracle Virtual Directory DOAG 2016 - Konferenz Nürnberg 15.-17.11.2016 IT.SERVICES der RUB Hans-Ulrich.Beres@ruhr-uni-bochum.de Suvad.Sahovic@oracle.com
MehrIm Vergleich: Hochverfügbarkeitslösungen für die MySQL -Datenbank
Im Vergleich: Hochverfügbarkeitslösungen für die MySQL -Datenbank Ralf Gebhardt SkySQL Ab Vävarsvägen 11 02630 Esbo Finland Schlüsselworte MySQL, MariaDB, Hochverfügbarkeit, Replikation, MHA, DRBD, HA,
MehrSoftware EMEA Performance Tour Berlin, Germany June
Software EMEA Performance Tour 2013 Berlin, Germany 17-19 June HP Service Virtualization Virtuelle Services im Software Entwicklungs-Lebenszyklus Udo Blank Bernd Schindelasch 19. Juni, 2013 Presales Consultant
MehrDB2 unter Linux for zseries als Server für VSE-Anwendungen
DB2 unter Linux for zseries als Server für VSE-Anwendungen IBM Software Group Torsten Röber GSE Frühjahrstagung, April 2006, Dresden Agenda DRDA with DB2 VM/VSE Overview Performance-Aspekte Anwendungsprogrammierung
MehrANALYTICS, RISK MANAGEMENT & FINANCE ARCHITECTURE. NoSQL Datenbanksysteme Übersicht, Abgrenzung & Charakteristik
ARFA ANALYTICS, RISK MANAGEMENT & FINANCE ARCHITECTURE NoSQL Datenbanksysteme Übersicht, Abgrenzung & Charakteristik Ralf Leipner Domain Architect Analytics, Risk Management & Finance 33. Berner Architekten
MehrErfahrungen mit TimesTen 7.0
Erfahrungen mit TimesTen 7.0 Bianca Stolz & Christian Kühne Systemberater Oracle Agenda TimesTen im Markt Das Konzept von TimesTen TimesTen Architektur Funktionen TimesTen in der
MehrJDO Java Data Objects
JDO Java Data Objects Ralf Degner, Chief Consultant Ralf.Degner@poet.de Agenda POET Motivation Geschichte Einführung Architekturen FastObjects POET Gegründet 1993 Zwei Produktlinien esupplier Solutions:
MehrSODA. Die Datenbank als Document Store. Rainer Willems. Master Principal Sales Consultant Oracle Deutschland B.V. & Co. KG
SODA Die Datenbank als Document Store Rainer Willems Master Principal Sales Consultant Oracle Deutschland B.V. & Co. KG vs No Anforderungskonflikte Agile Entwicklung Häufige Schema-Änderungen Relationales
MehrÜbersicht Streams nach Liste Produkte/Themen
Stream Datenbank: DB Oracle 9i bis 12c In-Memory Datenbanken Enterprise Manager Appliances EXADATA RAC DataGuard Upgrades, Konsolidierungen Implementationen Administration / Monitoring Performance Tuning
MehrCAS genesisworld Web Performance und Skalierbarkeit Tübingen
CAS genesisworld Web Performance und Skalierbarkeit 19.09.2017 Tübingen Agenda 01 02 03 04 05 Was ist Performance? Optimierung der Performance durch Konfiguration Skalierung was ist zu beachten? Lastverteilung
MehrMigration der Datenbankzugriffsschnittstelle in Client-/Server-Systemen
Migration der Datenbankzugriffsschnittstelle in Client-/Server-Systemen Christian Böhmer, isys Software GmbH Björn Grimm, Hochschule München 1 Migration der Datenbankzugriffsschnittstelle in Client-/Server-Systemen
MehrAnalyse und Modellierung von Informationssystemen
Analyse und Modellierung von Informationssystemen Dr. Klaus Höppner Hochschule Darmstadt Wintersemester 2014/15 1 / 24 2 / 24 Das Singleton Im einfachsten Fall wird ein Singleton über ein statisches Attribut
MehrModularisierung und Inversion of Control mit Spring done right
Modularisierung und Inversion of Control mit Spring done right Fabian Knittel, David Burkhart andrena objects ag Entwicklertag Karlsruhe, 21. Mai 2014 1 Modularisierung https://www.flickr.com/photos/juhansonin/4734829999/
MehrSchedulingund Thread-Ausführer
Schedulingund Thread-Ausführer Scheduling Ein Scheduler arbeitet Programmstücke nach einer festen Zeitspanne oder zu einer fixen Zeitpunkt wiederholt oder einmal ab. Notwendigkeiten für Scheduling sind
MehrDeep Dive in WebLogic Server und Multi- Tenancy
überraschend mehr Möglichkeiten! Deep Dive in WebLogic Server 12.2.2.1 und Multi- Tenancy Mohammad Esad-Djou, Solution Architect Borys Neselovskyi, Solution Architect OPITZ CONSULTING 2016 Agenda 1 2 3
MehrHochverfügbarkeit mit MySQL: Eine Kartographie der Lösungen
Erkan Yanar (linsenraum.de) Hochverfügbarkeit mit MySQL: Eine Kartographie der Lösungen 20. November DOAG 2012 20121 / 24 Hochverfügbarkeit mit MySQL: Eine Kartographie der Lösungen DOAG 2012 Erkan Yanar
MehrOutsourcing von Big Data //
White Paper // Stefan Rutte Szenario Ein Handelsunternehmen besitzt ein Datawarehouse mit all seinen Produkten, Filialen, Kunden- und Transaktionsdaten. Während sich die Produkt-, Filial- und Kundendaten
MehrDie IBM Netezza Architektur für fortgeschrittene Analysen
Michael Sebald IT Architect Netezza Die IBM Netezza Architektur für fortgeschrittene Analysen 2011 IBM Corporation Was ist das Problem aller Data Warehouse Lösungen? I / O Transaktionaler und analytischer
MehrLDAP-Server ganz einfach mit Oracle Virtual Directory. DOAG Konferenz Nürnberg
LDAP-Server ganz einfach mit Oracle Virtual Directory DOAG 2017 - Konferenz Nürnberg 21.-23.11.2017 IT.SERVICES der RUB Hans-Ulrich.Beres@ruhr-uni-bochum.de Agenda Ausgangslage und Anforderungen Lösung
MehrDiplomarbeit: Open Source Rapid Web Development Frameworks - Eine Untersuchung der Skalierungsstrategien
Diplomarbeit: Open Source Rapid Web Development Frameworks - Eine Untersuchung der Skalierungsstrategien Ergebnispräsentation Kolloquium Ralf Geschke FOM Köln 27.04.2009 Gliederung Einleitung Vorgehensweise
MehrImplementation of a Framework Component for Processing Tasks within Threads on the Application Level
Implementation of a Framework Component for Processing Tasks within Threads on the Application Level Deutsches Krebsforschungszentrum, for Processing Task within Threads on the Application Level Motivation
MehrJavaaktuell. Java ist vielseitig. ijug. Praxis. Wissen. Networking. Das Magazin für Entwickler Aus der Community für die Community
04-2016 Winter www. ijug.eu Praxis. Wissen. Networking. Das Magazin für Entwickler Aus der Community für die Community Java ist vielseitig Javaaktuell 4 191978 304903 04 D: 4,90 EUR A: 5,60 EUR CH: 9,80
MehrPolyglot Persistence und NoSQL
Polyglot Persistence und NoSQL Mehr Flexibilität, mehr Komplexität!? Stefan Kühnlein Solution Architekt OPITZ CONSULTING GmbH Nürnberg, 18.11.2014 OPITZ CONSULTING GmbH 2014 Seite 1 Agenda 1. Rückblick
MehrOracle Fusion Middleware 11g
Oracle Fusion Middleware 11g Erfahrungen bei der Migration von Oracle BPEL PM 10.1.x auf 11g Danilo Schmiedel, Berater OPITZ CONSULTING Berlin GmbH Nürnberg, 17.11.2009 OPITZ CONSULTING GmbH 2009 Seite
MehrLösen Sie (fast) alle ihre Probleme mit Oracle Advanced Queuing. Performance Lastverteilung
Lösen Sie (fast) alle ihre Probleme mit Oracle Advanced Queuing Matthias Schulz Schulz IT Services GmbH Nürnberg Schlüsselworte Oracle Datenbank; Oracle Advanced Queuing; AQ; Messaging; IT-Probleme; Lösungen;
MehrObjektrelationales Mapping mit EclipseLink und Spring. Stefan Scheidt OPITZ CONSULTING GmbH
Objektrelationales Mapping mit EclipseLink und Spring Stefan Scheidt OPITZ CONSULTING GmbH Ihr Referent Stefan Scheidt Senior Architekt bei der OPITZ CONSULTING GmbH Seit über 10 Jahren im Oracle- und
MehrMOC 50466A: Windows Azure-Lösungen mit Microsoft Visual Studio 2010
MOC 50466A: Windows Azure-Lösungen mit Microsoft Visual Studio 2010 Kompakt-Intensiv-Training Diese Schulung bereitet Sie optimal auf die MOC-Zertifzierung vor. Windows Azure ist das Microsoft-Betriebssystem
MehrS3 your Datacenter. Software Defined Object Storage. Die kostengünstige und skalierbare Lösung für Ihre unstrukturierten Daten
S3 your Datacenter Software Defined Object Storage Die kostengünstige und skalierbare Lösung für Ihre unstrukturierten Daten Unstrukturierte Daten explodieren Volume in Exabytes Sensors & Devices Social
MehrOracle Data Integrator Ein Überblick
Oracle Data Integrator Ein Überblick Uwe Barz Christoph Jansen Hamburg, 15.04.2008 Basel Baden Bern Lausanne Zürich Düsseldorf Frankfurt/M. Freiburg i. Br. Hamburg München Stuttgart Wien Agenda Überblick
MehrProjektgruppe. Thomas Kühne. Komponentenbasiertes Software Engineering mit OSGi
Projektgruppe Thomas Kühne Komponentenbasiertes Software Engineering mit OSGi Anforderungen der PG IDSE an ein Komponenten- Client Nativer Client Web Client Alternativen IDSE Nutzer Szenario Pipe IDSE
MehrRelationales Datenbankpraktikum
Relationales Datenbankpraktikum Dr. A. Groß, M.Junghanns, V. Christen, Z. Sehili Aufgabe 3 Agenda Überblick zur Aufgabenstellung Hibernate Verwendung des Hibernate- Mapping und HQL innerhalb einer Konsolenapplikation
MehrDemo Kino: Der Herr der Wolken Die Gefährten
Demo Kino: Der Herr der Wolken Die Gefährten Gemeinsame orchestriert: Database und Java Cloud Service Marcus Schröder Manuel Hoßfeld Oracle Deutschland B.V. & Co KG Copyright 2016, Oracle and/or its affiliates.
MehrSkalierbare Webanwendungen mit Python und Google App Engine
Skalierbare Webanwendungen mit Python und Google App Engine Oliver Albers 03. Juli 2008 1/32 Einführung Worum geht es? Pro und Contra Technik Genereller Aufbau Anwendungskonfiguration Verarbeitung von
MehrConnection Pooling. Was ist das?? Unter Connection Pooling versteht man generell die Wiederverwendung physischer Datenbankverbindungen.
Connection Pooling Was ist das?? Unter Connection Pooling versteht man generell die Wiederverwendung physischer Datenbankverbindungen. Wo wird es eingesetzt?? Connection Pooling wird vor allem in Verbindung
MehrBig Data: Apache Hadoop Grundlagen
Seminarunterlage Version: 1.07 Version 1.07 vom 5. September 2018 Dieses Dokument wird durch die veröffentlicht.. Alle Rechte vorbehalten. Alle Produkt- und Dienstleistungs-Bezeichnungen sind Warenzeichen
MehrSE2-10-Entwurfsmuster-2 15
Architektur und Skalierbarkeit SE2-10-Entwurfsmuster-2 15 Skalierbarkeit Skalierbarkeit bedeutet die Anpassung einer Software an wachsende Last: Interaktionsfrequenz Nutzerzahl Anpassung durch Hinzufügen
Mehropenarchitectureware
openarchitectureware Enrico Schnepel EAS, FHTW-Berlin 07.06.2007 2007 (CC by-nc-sa 2.0 Germany) Enrico Schnepel ( EAS, FHTW-Berlin ) openarchitectureware 07.06.2007 1 / 26 Gliederung 1 Einleitung 2 Begriffsdefinitionen
MehrJava WebApps und Services in der Oracle Cloud
Java WebApps und Services in der Oracle Cloud Andreas Koop enpit consulting OHG 33106 Paderborn Schlüsselworte Oracle Cloud, WebApp, Service, Erfahrungsbericht Einleitung Mit den Oracle Cloud Services
MehrHA Architekturen mit MySQL
HA Architekturen mit MySQL DOAG SIG Database MySQL, Hannover, 19. May 2011 Oli Sennhauser Senior MySQL Consultant, FromDual GmbH oli.sennhauser@fromdual.com http://www.fromdual.com www.fromdual.com 1 FromDual
MehrValidiert das RTF-Template auf syntaktische Fehler und gibt Hinweis auf Zeilennummer in der RTF-Datei. der eingebetteten XML-Daten
Troubleshooting für BI Publisher Reports Jürgen Menge Oracle Deutschland B.V. & Co. KG München Schlüsselworte Oracle BI Publisher, Diagnose, Performance, Logging, Debugging, Auditing, Monitoring. Einleitung
MehrPostgreSQL in großen Installationen
PostgreSQL in großen Installationen Cybertec Schönig & Schönig GmbH Hans-Jürgen Schönig Wieso PostgreSQL? - Die fortschrittlichste Open Source Database - Lizenzpolitik: wirkliche Freiheit - Stabilität,
MehrBIG DATA IM RETAIL-SEKTOR AM BEISPIEL KASSENBONDATEN BUSINESS ANALYTICS DAY
BIG DATA IM RETAIL-SEKTOR AM BEISPIEL KASSENBONDATEN BUSINESS ANALYTICS DAY 08.03.2017 REWE Systems GmbH Jonas Freiknecht inovex GmbH Bernhard Schäfer AGENDA 1 / Vorstellung REWE Systems GmbH und inovex
MehrOracle9i Designer. Rainer Willems. Page 1. Leitender Systemberater Server Technology Competence Center Frankfurt Oracle Deutschland GmbH
Oracle9i Designer Rainer Willems Leitender Systemberater Server Technology Competence Center Frankfurt Oracle Deutschland GmbH Page 1 1 Agenda 9i Designer & 9i SCM in 9i DS Design Server Generierung &
MehrArbeitskreis Blockchain Arbeitsgruppe Technik
Arbeitskreis Blockchain Arbeitsgruppe Technik AUSTRIAPRO Dr. Christian Baumann 29.5.2018 1 Agenda Übersicht AK Blockchain AG Technik Einsatz von BC Eigenschaften Stärken/Schwächen Sinn/Unsinn BC-Lab Übersicht
Mehr