- As Senior Consultant Apache Kafka & Distributed Data Systems you will be responsible for the design, architecture, administration, and deployment of customized and advanced event streaming platforms based on Apache Kafka, current industry standards, and using the latest tools and methods.
- You are in close contact with your customer and are responsible for the preparation, planning, migration, control, monitoring and implementation of highly scalable Apache Kafka event streaming platforms or Distributed Data Systems projects and for comprehensive customer consulting on the current state of these technologies.
- As a Senior Consultant for Big Data Management and Stream Processing, your goal is to lead the design and implementation of architectures for streaming platforms and stream processing use cases using open source and cloud tools.
- Completed studies or comparable training with a technical background
- Sound experience and knowledge in Java
- Solid experience with Apache Kafka or similar large-scale enterprise distributed data systems with various distributed technologies e.g. Apache Kafka , Spark, CockroachDB, HDFS, Hive, etc.
- Experience in software development and automation to run big data systems
- Experience with developing and implementing complex solutions for Big Data and Data Analytics applications
- Experience in system deployment and container technology with building, managing, deploying, and release managing Docker containers and container images based on Docker, OpenShift, and/or Kubernetes
- Experience in developing resilient scalable distributed systems and microservices architecture
- Experience with various distributed technologies (e.g. Kafka , Spark, CockroachDB, HDFS, Hive, etc.)
- Experience with stream processing frameworks (e.g. Kafka Streams , Spark Streaming, Flink, Storm)
- Experience with Continuous Integration / Continuous Delivery (CI/CD) using Jenkins, Maven, Automake, Make, Grunt, Rake, Ant, GIT, Subversion, Artefactory, and Nexus.
- Understanding of SDLC processes (Agile, DevOps), Cloud Operations and Support (ITIL) Service Delivery
- Knowledge in authentication mechanism with OAuth, knowledge of Vert.x and Spring Boot
- Experience in SQL Azure and in AWS development
- Experience with DevOps transformation and cloud migration to one of AWS, Azure, Google Cloud Platform, and/or Hybrid/Private Cloud; as well as cloud-native end-to-end solutions, especially their key building blocks, workload types, migration patterns, and tools
- Experience with monitoring tools and logging systems such as NewRelic, ELK, Splunk, Prometheus, and Graylag
- Ability to communicate technical ideas in a business-friendly language
- Interest in modern organizational structure and an agile working environment (SCRUM)
- Customer-oriented and enjoy working in an international environment in German and English
-
Data Engineer
vor 1 Woche
ORDIX Cologne, DeutschlandIhre Aufgaben · Sie analysieren, konzipieren und entwickeln Data Pipelines auf Basis moderner Big Data und Streaming-Technologien (Hadoop, Hive, Kafka, Spark, Cloud) · Sie arbeiten eng mit den Fachabteilungen/Product Ownern unserer Kunden zusammen und planen und realisieren anspr ...
-
Spezialist Anwendungsintegration
vor 4 Tagen
AOK Systems Bonn, Deutschland**Spezialist Anwendungsintegration (m/w/d) Technische Qualitätssicherung**: · - Bonn, Frankfurt- ab sofort- Vollzeit- unbefristet**G**estalten. **K**reieren. **V**erbinden.**: · Wir sind Pulsgeber, Wegbereiter und Innovationsschmiede für die Digitalisierung im Gesundheitsmarkt. U ...
-
Data Warehouse
vor 1 Woche
viadee Unternehmensberatung Cologne, DeutschlandLena Groß ist seit 2016 als IT-Beraterin für die viadee tätig. Auf dem Weg zur Expertin kann sie Neues ausprobieren und Themen mit anderen vorantreiben. Du suchst ein Unternehmen, das Dich in Deiner Potenzialentfaltung zu 100 Prozent unterstützt? Komm zu uns. · Wir sind eine IT-U ...
-
Java Backend Entwickler, Remote und Köln
vor 6 Tagen
emagine Consulting Cologne, DeutschlandWir, die emagine GmbH, suchen zum nächstmöglichen Zeitpunkt einen Senior Java Backend Entwickler im Bereich Masterdata & Integration (CMMI) für eine technologische Modernisierung und Eigenentwicklung von Lösung Templates für Produkte des Category Managements im Bereich Handel. · ...
-
Azure Big Data Architect
vor 2 Tagen
DHL Bonn, DeutschlandDO YOU WANT TO WORK & LEARN ON STATE-OF-THE-ART TECHNOLOGY IN A TEAM WITH STRONG ENGINEERING KNOWLEDGE AND ENJOY THE BENEFITS OF A COPORATE ENVIRONMENT? · JOIN OUR TEAM IN BONN, BERLIN, PRAGUE, CHENNAI, CYBERJAYA OR FULLY REMOTE IN GERMANY, CZECH REPUBLIC OR INDIA FOR A FULL-TIME ...
-
Data Engineer
vor 1 Woche
Lufthansa Technik AG Cologne, Deutschland Ganztags or NebenberuflichTasks · We're looking for someone to join our team of data engineers, developing new data pipelines and scaling the existing ones for a growing number of customers and use cases. · We're using technologies like Python, Terraform, Kubernetes and Pub/Sub to run event-based data pi ...
-
Java Software Entwickler
vor 6 Tagen
SEVEN PRINCIPLES Cologne, DeutschlandDas erwartet dich · : Als erfahrene:r Entwickler:in übernimmst du in unseren agilen Projektteams eine tragende Rolle und realisierst moderne Softwarelösungen als Berater:in bei unseren Kund:innen vor Ort, im Homeoffice oder bei uns im Büro · Dabei unterstützt du bei der Auswahl g ...
-
Software Engineer
vor 18 Minuten
Zurich Insurance Company Cologne, DeutschlandBist du bereit, Versicherung neu zu denken? · Um die Wünsche unserer Kunden besser und schneller zu erfüllen, gehen wir neue Wege, denken Versicherung neu und arbeiten agil. Nicht nur in den Entwicklerteams. Unsere neue Unternehmenskultur schenkt dafür allen in jeder Hinsicht me ...
-
Architektin in Teilzeit oder Vollzeit
vor 4 Tagen
DKV Mobility Ratingen, DeutschlandWir bieten Dir zahlreiche Möglichkeiten, in einem dynamischen und agilen Umfeld die Mobilität von morgen mitzugestalten. Werde Teil unseres vielfältigen, engagierten und einzigartigen Teams · Du arbeitest am ganzheitlichen DevOps Konzept bezüglich Architektur, Betrieb und dessen ...
-
Administrator Middleware
vor 3 Tagen
operational services GmbH & Co. KG Neuss, Deutschland GanztagsADMINISTRATOR MIDDLEWARE (m/w/d) · KENNZIFFER: · 2024014BE · STANDORT(E): · Frankfurt am Main, Berlin, Dresden, Hamburg, München, Nürnberg, Senftenberg, Wolfsburg, Zwickau · OS · Operational services (OS) ist einer der führenden ICT Service Provider im deutschen Markt und gilt al ...
-
Spezialist Anwendungsintegration
vor 1 Woche
AOK Systems Bonn, DeutschlandGestalten. Kreieren. Verbinden. · Wir sind Pulsgeber, Wegbereiter und Innovationsschmiede für die Digitalisierung im Gesundheitsmarkt. Und wir brauchen Dich · Deine Aufgaben · Installation, Betrieb und Wartung von produktiven Containerumgebungen auf Basis von z.B. Docker EE, Open ...
-
Cloud Architect
vor 1 Woche
DKV Mobility Ratingen, DeutschlandJob-ID: req2322 · Deine Aufgabe bei DKV Mobility? Als Teil einer führenden europäischen B2B Plattform für On-the-Road Paymentlösungen, arbeitest Du in einem spannenden Umfeld. Unsere Aufgaben definieren sich durch unseren Purpose: To drive the transition towards an efficient and ...
-
consultant data engineering
vor 4 Tagen
QUNIS GmbH Düsseldorf, DeutschlandWIR SUCHEN DICH ALS ... · CONSULTANT DATA ENGINEERING (M/W/D) FÜR DATENINTEGRATIONS- UND TRANSFORMATIONSPROZESSE · Zum nächstmöglichen Zeitpunkt in der DACH-Region, idealerweise auf Senior-Level. Bist Du da noch nicht, entwickeln wir Dich gerne gemeinsam dahin · DAS ERWARTET DICH ...
-
Head of Cloud Applications
vor 1 Woche
Personalberatung Rochus Mummert Remscheid, DeutschlandUnser Mandant ist ein Weltmarktführer im Bereich der Versorgungstechnik. Das wirtschaftlich sehr erfolgreiche Unternehmen erzielt mit knapp Mitarbeitenden ein Umsatzvolumen von rund 2,7 Mrd. € im Jahr. Mithilfe einer vorausschauenden, konsequent umgesetzten Strategie und innovati ...
-
Senior Developer
vor 1 Tag
Helaba Düsseldorf, Deutschland UnbefristetIhre Aufgaben · Sie entwickeln anspruchsvolle IT-Lösungen in einem agilen Team · Sie übernehmen Aufgaben bei der Neu- und Weiterentwicklung von Applikationen im Zahlungsverkehr · Zu Ihren Aufgaben gehört die Programmierung und Implementierung von anspruchsvollen JAVA-Softwarel ...
-
Leiter:in Ausbildung
vor 1 Woche
Personalberatung Rochus Mummert Remscheid, DeutschlandUnser Mandant ist ein Weltmarktführer im Bereich der Versorgungstechnik. Das wirtschaftlich sehr erfolgreiche Unternehmen erzielt mit knapp 15.Mithilfe einer vorausschauenden, konsequent umgesetzten Strategie und innovativen Produktionsprozessen entwickelt sich der Konzern kontin ...
-
auteega Gmbh Düsseldorf, DeutschlandUnser Mandant ist eine international tätige Geschäfts- und Förderbank. Mit über 5000 Mitarbeitern betreut das Unternehmen an 17 Standorten im In- und Ausland seine Kunden. Dabei bietet das Institut sowohl privatwirtschaftlichen Unternehmen wie auch anderen Banken und institution ...
-
Senior Backend Developer
vor 1 Woche
Qvest Digital AG Bonn, Deutschland CDIDu genießt guten Teamspirit und bist gerne up to date, was neue Technologien, Frameworks und Co. angeht? Als Teamplayer fällt es Dir leicht, Dich in ein bestehendes oder auch neues Team zu integrieren und es durch Deine Expertise zu vervollständigen? Dann werden wir alles dafür t ...
-
Data Engineer
vor 5 Tagen
Collaboration Betters The World GmbH Bonn, Deutschland CDIWillkommen bei CBTW Wir sind ein innovatives Team mit über 3.000 Mitarbeitern in 21 Ländern und führend in den Bereichen Strategie & Governance, Software-Engineering, Datenanalyse & KI und mehr. · Als Mitglied unseres Teams bei CBTW arbeitest Du in einem inspirierenden Umfeld an ...
-
Head of Cloud Applications
vor 6 Tagen
Rochus Mummert digital GmbH Remscheid, Deutschland EmployeeUnser Mandant ist ein Weltmarktführer im Bereich der Versorgungstechnik. Das wirtschaftlich sehr erfolgreiche Unternehmen erzielt mit knapp Mitarbeitenden ein Umsatzvolumen von rund 2,7 Mrd. € im Jahr. Mithilfe einer vorausschauenden, konsequent umgesetzten Strategie und innovati ...
Senior Consultant Apache Kafka - Cologne, Deutschland - beON consult
Beschreibung
Responsibilities
Qualifications
