Auswirkungen von Big Data auf den Arbeitsmarkt für IT-Fachkräfte Ergebnisse einer explorativen Stellenanzeigenanalyse

Transkript

1 Auswirkungen von Big Data auf den Arbeitsmarkt für IT-Fachkräfte Ergebnisse einer explorativen Stellenanzeigenanalyse Prof. Dr. Frank Bensberg Gandalf Buscher

2 Agenda Motivation Forschungsdesign Ergebnisse Schlussfolgerungen 2

3 Motivation Gartner s 2014 Hype Cycle for Emerging Technologies Evolution von IT-Zukunftsthemen IoT Big Data Data Science Cloud Computing Neue Kompetenzen HR-Management Kompetenzmanagement Personalentwicklung Personalbeschaffung 3

4 Motivation Quelle: Bundesagentur für Arbeit (Hrsg) (2011) Systematik und Verzeichnisse der KldB

5 Forschungsdesign Quelle: Bensberg, F., Buscher, G. (2016), Job Mining als Analyseinstrument des Human-Resource-Managements, in: HMD Praxis der Wirtschaftsinformatik. 5

6 Forschungsdesign Stellenanzeigen aus öffentlichen Job-Portalen JobServe LinkedIn Bundesagentur für Arbeit Monster StepStone ZEIT ONLINE XING Stellenmarkt NRW Stand März

7 Forschungsdesign 7 Amazon.com Inc Microsoft Corp SAP SE Accenture PLC Bundesverwaltungsamt Vodafone Group PLC IBM ThyssenKrupp AG Siemens AG Daimler AG Deutsche Bank AG Continental AG Volkswagen AG Deutsche Telekom AG Apple Inc Allianz SE Bayer AG Deutsche Post AG Adidas AG Henkel AG & Co KGaA Salesforce.com inc Google Inc Cap Gemini SA Bayerische Motoren Werke AG Fresenius SE & Co KGaA Atos SE Merck KGaA Telefonica SA Infineon Technologies AG BASF SE Deutsche Lufthansa AG Linde AG E.ON SE Orange SA Hutchison Telecommunications Commerzbank AG Drillisch AG Cisco Systems Inc RWE AG Deutsche Boerse AG HeidelbergCement AG Beiersdorf AG Liberty Global PLC K+S AG Sopra Steria Group LANXESS AG Muenchener Rueckversicherung Adesso AG Stand März 2016 Stellenanzeigen aus Unternehmensportalen

8 Forschungsdesign Rohdaten 8 [ ] Key Qualifications: Proficiency in MapReduce development and experience with Hadoop or other data processing technologies required Knowledge of Hadoop-related technologies such as MapReduce, Azkaban, Hive, Pig, Spark and Splunk Strong object-oriented design skills, coupled with a deep knowledge of data structures and algorithms Deep knowledge of statistics, machine learning and data mining required Experience conducting A/B tests and generating relevant statistics, hypothesis testing is a plus Experience modeling user behavior data profiling, segmentation, understanding is a plus [ ]

9 Forschungsdesign Selektierte Datenbasis 11-monatiger Zeithorizont (Juni 2014 bis April 2015) Selektionskriterium Schlagwort big data, data science/scientist, smart data oder fast data in der Stellenbezeichnung oder der Stellenbeschreibung vorhanden Selektionsergebnis n= englischsprachige Stellenanzeigen als Analysekorpus 9

10 Forschungsdesign Methodenset Explorativer, korpusgetriebener Forschungsansatz (corpus-driven) Einsatz lexikometrischer Verfahren Frequenzanalyse Korrelationsanalyse Teilkorpusanalyse Kookkurenzanalyse Werkzeuge IBM Watson Explorer Content Analytics, AntConc 10

11 Big Data-Berufsbilder im Überblick Analyse der Stellenbezeichnungen (Jobtitel) 72% der Stellenbezeichnungen von IKT- Unternehmen entfallen auf fünf Kernberufsbilder Big Data Developer Data Scientist Big Data Architekt Data Analyst Data Engineer Zentrale Berufsfelder Big Data Spezielle Berufsbilder Big Data Technology Researcher Data Quality Manager Data Services Developer Data Visualization Engineer Decision Scientist (SAP) (Amazon) (Microsoft) (BigR.io) (Microsoft) 11

12 Kompetenzprofil Big Data Architect Konzepte modellgestützte Planung, Design und Realisierung von Datenarchitekturen auf Grundlage des Hadoop-Technologiestapels Sprachen Big Data Business Intelligence ETL Data Warehouse Reporting Relational Databases Data Modeling Data Management Open Source Data Quality Hadoop Hive HBase Pig MapReduce Linux Teradata Cassandra Informatica Amazon Web Services 0% 20% 40% 60% 80% 100% Produkte 0% 10% 20% 30% 40% 50% 60% 70% SQL Java NoSQL Python PERL R PHP Ruby C++ C Java Enterprise Communication Skills Working Experience Analytical Skill Engagement Organizational Skill Team Skills Social Competence Creativity Motivation Willingness to learn 0% 10% 20% 30% 40% 50% Soft Skills 0% 5% 10% 15% 20% 25% 30% 12

13 Kompetenzprofil Big Data Developer Konzepte Begleitung des Softwareentwicklungsprozesses für Big Data-Plattformen (mit Java / Hadoop) Sprachen Big Data ETL Data Warehouse Web Service Test Driven Development Business Intelligence Open Source Scrum Relational Databases Machine Learning Hadoop Hive MapReduce Pig Cassandra Spring MongoDB HBase Spark Amazon Web Services 0% 20% 40% 60% 80% 100% 120% Produkte 0% 10% 20% 30% 40% 50% 60% 70% Java SQL NoSQL Python JavaScript PHP Scala C C++ HTML 0% 10% 20% 30% 40% 50% 60% 70% Communication Skills Working Experience Team Skills Analytical Skill Social Competence Engagement Endurance Creativity Ambition Organizational Skill Soft Skills 0% 5% 10% 15% 20% 13

14 Kompetenzprofil Data Scientist Big Data Machine Learning Data Mining Predictive Analytics Data Analysis Business Intelligence Natural Language Processing Relational Databases Data Visualization Reporting Hadoop SAS Hive Pig SPSS MapReduce Spark HBase Tableau Excel Konzepte 0% 20% 40% 60% 80% 100% Produkte 0% 10% 20% 30% 40% 50% 60% 70% Python SQL R Java MATLAB C++ NoSQL PERL Scala C# Communication Skills Working Experience Team Skills Analytical Skill Engagement Creativity Social Competence Personal Responsibility Motivation Willingness to Learn Konstruktion, Evaluation und Anwendung von Prognosemodellen auf Grundlage maschineller Lernverfahren und multipler Datenquellen Sprachen 0% 10% 20% 30% 40% 50% 60% Soft Skills 0% 5% 10% 15% 20% 25% 30% 35% 40% 14

15 Kompetenzprofil Data Analyst Big Data Reporting Relational Databases Data Exploration Software Engineering Data Analysis Business Intelligence ETL Data Warehouse Data Mining Konzepte 0% 20% 40% 60% 80% 100% 120% SQL Python R Java NoSQL C++ PERL VBA C# Ruby Statistische Analyse multidimensionaler Datenbestände zur fachlichen Unterstützung betrieblicher Entscheidungsprozesse Sprachen 0% 20% 40% 60% 80% 100% Produkte 0% 10% 20% 30% 40% 50% 60% 70% Excel SAS Hadoop Tableau Hive SPSS Teradata MS SQL microstrategy Amazon Web Services Soft Skills 0% 10% 20% 30% 40% 50% 60% Communication Skills Working Experience Analytical Skill Creativity Motivation Engagement Social Competence Team Skills Willingness to Learn Organizational Skill 15

16 Kompetenzprofil Data Engineer Big Data ETL Data Warehouse Machine Learning Reporting Business Intelligence Relational Databases Data Mining Data Modeling Predictive Analytics Hadoop Hive Pig MapReduce HBase Amazon Web Services Cassandra Spark MongoDB Solr Konzepte 0% 20% 40% 60% 80% 100% 120% Produkte 0% 10% 20% 30% 40% 50% 60% 70% 80% SQL Java Python NoSQL C++ Scala Shell PERL C# JavaScript Sprachen 0% 10% 20% 30% 40% 50% 60% 70% Communication Skills Working Experience Analytical Skill Creativity Engagement Team Skills Social Competence Willingness to Learn Organizational Skill Ambition Design und in der Implementierung von ETL-Workflows (Data Pipelines) zur Akquisition und Analyse strukturierter und unstrukturierter Daten Soft Skills 0% 5% 10% 15% 20% 25% 30% 16

17 Schlussfolgerungen Big Data hat zur Entwicklung neuer Berufsbilder für IT-Fachkräfte geführt Gestaltung von Big Data-Lösungen = Big Data Architect, Big Data Developer Nutzung von Big Data-Lösungen = Data Scientist, Data Analyst, Data Engineer Nutzen der Kompetenzprofile als Informationsgrundlage für Unternehmen zum betrieblichen Kompetenzmanagement Hochschulen zur Gestaltung von Aus- und Weiterbildungsangeboten Grenzen der Forschungsergebnisse Datenqualitätsprobleme (Duplikate, Job-Spamming) inhaltliche Qualität der Stellenanzeigen 17

18 Vielen Dank für Ihre Aufmerksamkeit! Geo.-Verteilung Informatik-Jobs von 6/ /2016 (n=293k) 18