- Create highly scalable and fault tolerant technical designs working with team members (up to 5 people).
- Develop and implement data pipelines that extracts, transforms and loads data into an information product that helps to inform the organization in reaching strategic goals.
- Write highquality code, conduct and participate in code reviews, and follow strong engineering principles and standards.
- Research the technical feasibility of new ideas and actively suggest technology improvements.
- Quickly develop a thorough understanding of the product, architecting the system and shipping production ready code.
- Write maintainable code that can scale fast.
- Support and contribute to our amazing work culture.
- Deep experience & understanding of object-oriented design, design patterns, micro services architecture, data structure, algorithms and their complexities, systems architecture.
- Skilled in writing and automating tests for your code.
- Proven working experience with cloud platforms
- Working experience with OLTP databases, specifically MySQL, understands day to day challenges related to query execution and optimization ( indexing, cascading).
- Working experience with big data aggregation frameworks (spark)
- Experience with streaming platforms like kafka and rabbitMQ.
- Experience working in an agile environment.
- Experience with C++ or any front-end framework is a plus.
- Excellent verbal and written communication skills in English.
- 5+ years of experience with writing code in scala.
- Experience with Python, Spark, Airflow
- Experience with Scala testing frameworks.
- Understanding of data-warehousing and data-modeling techniques
- Proven experience with writing code for spark data processing.
- Familiarity with various OLAP data stores (Druid, Clickhouse etc) and their insights.
- Experience with at least one columnar OLAP databases.
- Familiarity with industry-standard analytics and visualization tools.
-
Data Engineer
vor 4 Wochen
inovex Berlin, DeutschlandGender, Herkunft etc. sind keine Bewertungskriterien für uns. Hauptsache, du bist genauso technologiebegeistert wie wir. · Informationen · Teilzeit oder Vollzeit · Standorte: Karlsruhe, Köln, München, Hamburg, Berlin, Stuttgart, Pforzheim, Erlangen · Mobiles Arbeiten · Start flex ...
-
Data Engineer
vor 2 Tagen
Deutscher Landwirtschaftsverlag GmbH Berlin, Deutschland· Data Engineer (m/w/d) bei Deutscher Landwirtschaftsverlag GmbH | softgarden · View job here Data Engineer (m/w/d) · Vollzeit · Friedrichstraße 115, 10117 Berlin, Deutschland · Remote · Mit Berufserfahrung · Ihre Benefits · Flexible Arbeitszeiten · Mobiles Arbeiten in Deutschla ...
-
Data Engineer
vor 1 Woche
AOK-Bundesverband eGbR Berlin, DeutschlandWillkommen beim Bundesverband der Gesundheitskasse – einer starken Gemeinschaft aus vielen unterschiedlichen Menschen Unsere individuellen Stärken setzen wir zusammen dafür ein, dass unsere Versicherten gesund bleiben und werden. Dabei entwickeln wir uns persönlich immer weiter u ...
-
Data Engineer
vor 4 Tagen
Wackler Personal-Service GmbH - Berlin - Ost Berlin, DeutschlandImagetext / Arbeitgebervorstellung · DEIN JOB. DEIN LEBEN. WIR BRINGEN ES ZUSAMMEN. · Wir begleiten Sie auf dem Weg zu Ihrem Traumjob. Ihre Ziele und Wünsche behalten wir dabei stets im Blick. Bei Wackler Personal-Service stehen Sie mit Ihrer individuellen Situation im Mittelpunk ...
-
Data Engineer
vor 3 Wochen
Würth Elektronik eiSos GmbH & Co. KG Berlin, Deutschland Voll/NebenberuflichData Engineer (m/w/d) · Würth Elektronik eiSos GmbH & Co. KG · Berlin · Bochum · Homeoffice · München · Waldenburg · Berufserfahrung (Junior Level) · Berufserfahrung · Voll/Teilzeit · Digitalisierung? IT-Strategien für die Zukunft · Die Würth Elektronik Gruppe mit über Mitarbei ...
-
Data Engineer
vor 4 Wochen
AOK-Bundesverband Berlin, DeutschlandAufgaben, durch die Sie weiterkommen · Als Data Engineer / Data Architect sind Sie verantwortlich für die Betreuung und Weiterentwicklung von Produkten zur Analyse von GKV-Leistungsdaten für das AOK-System und die Öffentlichkeit. · Dafür entwickeln Sie Prozesse, bei denen GKV-Le ...
-
Data Engineer
vor 4 Wochen
Bikeleasing-Service GmbH & Co. KG Berlin, Deutschland CDIDeine Aufgaben · Der Bikeleasing-Service wächst und damit auch der Bedarf an zuverlässigen Daten, um das Unternehmen effektiv zu steuern. Um unseren Erfolgskurs auch für die Zukunft auf ein stabiles Fundament zu stellen, bauen wir zurzeit unseren Technologie-Bereich um, so dass D ...
-
Data Engineer
vor 3 Wochen
Startup Insider GmbH Berlin, Deutschland GanztagsEinleitung · Du bist Tech-begeistert und hast Interesse, ein erfolgreiches und wachsendes Startup mitzugestalten? Du bist clever, sympathisch, kommunikativ und möchtest mit uns gemeinsam die Welt aus den Angeln heben? Du bist bereit, Dich einzubringen und Dich jeden Tag weiterzue ...
-
Data Engineer
vor 1 Woche
netgo GmbH Berlin, DeutschlandWerde auch du "part of netgo group" - einem der größten IT-Dienstleister Deutschlands. Über 1.150 Mitarbeiter*innen an zahlreichen Standorten in ganz Deutschland erwarten dich als neues Teammitglied. Du legst Wert auf einen modernen Arbeitsplatz, ein familienfreundliches Umfeld u ...
-
Data Engineer
vor 3 Wochen
AOK-Bundesverband eGbR Berlin, DeutschlandWillkommen beim Bundesverband der Gesundheitskasse – einer starken Gemeinschaft aus vielen unterschiedlichen Menschen Unsere individuellen Stärken setzen wir zusammen dafür ein, dass unsere Versicherten gesund bleiben und werden. Dabei entwickeln wir uns persönlich immer weiter u ...
-
Data Engineer
vor 3 Wochen
Smartclip Berlin, DeutschlandLocation: Hamburg, Berlin, Köln, Düsseldorf, Gütersloh, München oder Remote · Über smartclip · smartclip ist die Adtech-Entwicklungseinheit der RTL Group – Europas führender Free-TV Sendergruppe. Unsere proprietäre Werbetechnologie ist auf die spezifischen Bedürfnisse von euro ...
-
Data Engineer
vor 4 Wochen
Legalhero GmbH Berlin, Deutschland GanztagsWas dich erwartet · Konzeption, Design und Implementierung von Datenarchitekturen und Datenpipelines zur Unterstützung von Produktfunktionen und Datenanalysen · Identifikation von Datenquellen, -anforderungen und -problemen und Entwicklung von Lösungen zur Datenintegration und -v ...
-
Data Engineer
vor 3 Wochen
Collaboration Betters The World GmbH Berlin, Deutschland CDIWillkommen bei CBTW Wir sind ein innovatives Team mit über 3.000 Mitarbeitern in 21 Ländern und führend in den Bereichen Strategie & Governance, Software-Engineering, Datenanalyse & KI und mehr. · Als Mitglied unseres Teams bei CBTW arbeitest Du in einem inspirierenden Umfeld an ...
-
Data Engineer
vor 3 Wochen
Enertrag AG Berlin, DeutschlandDeine Aufgaben · Analyse, Strukturierung und Bewertung von Daten im Hinblick auf ihre Verwertbarkeit · Design und Implementierung von Datenpipelines zur effizienten Datenverarbeitung · Unterstützung von Initiativen zur Datenintegrität und Normalisierung · Analyse und Bewertung v ...
-
Data Engineer
vor 3 Wochen
Tagesspiegel Berlin, Deutschland GanztagsDas sind Deine Aufgaben: · Produktreife Implementierung & Optimierung bestehender ETL Prozesse und Web-Services · Anbindung neuer Datenquellen an unser Data Warehouse · Analyse, Architektur und Umsetzung von Anforderungen in Data Warehouse und Big-Data Projekten · Kollaboratives ...
-
data engineer
vor 3 Wochen
Cluster Reply Berlin, DeutschlandKundenberatung in der Microsoft Azure-basierten Lösungsentwicklung im Bereich IoT · Agile Erstellung und Umsetzung hochwertiger Algorithmen und Microservices in der Cloud (Microsoft Azure) · Übernahme von Entwicklungs-, Test-, Deployment- und Konfigurationsaufgaben · Erstellu ...
-
Data Engineer
vor 3 Wochen
AOK-Bundesverband eGbR Berlin, DeutschlandData Engineer / Data Architect (m/w/d) Wissenschaftliches Institut der AOKÜbersichtWillkommen beim Bundesverband der Gesundheitskasse – einer starken Gemeinschaft aus vielen unterschiedlichen Menschen Arbeitgeber: AOK-Bundesverband Bewerbungsfrist: Fachgebiet: Wissenschaftliches ...
-
Data Engineer
vor 2 Wochen
Akkodis Berlin, DeutschlandFür ein Projekt unseres Kunden, einem renommierten Unternehmen der IT-Branche, suchen wir Verstärkung für unser Team - ab sofort. · DEINE AUFGABEN · Analyse und Darstellung von Daten im Bereich Innovation und Forschung · Optimierung und Erweiterung unserer Date-Warehouses · Konze ...
-
Data Engineer
vor 3 Wochen
BRL Risk Consulting GmbH & Co. KG Berlin, DeutschlandWir im Bereich Risk Advisory Services sind ein interdisziplinäres Team, das sich leidenschaftlich dafür einsetzt, unsere weltweit tätigen Kunden bei der Identifikation, Steuerung und Vermeidung potenzieller Risiken in allen Geschäftsbereichen zu unterstützen. Dabei betrachten wir ...
-
Data Engineer
vor 4 Wochen
Q CELLS Berlin, DeutschlandSetzt neue Energie frei - Dein Einsatz: · Du bist verantwortlich für die Konzeption, Realisierung und Wartung einer innovativen Datenplattform, die als Schlüsselkomponente im Energiehandel und Portfoliomanagement dient · Entwicklung und Programmierung von Algorithmen zur Automat ...
Senior Big Data Engineer - Berlin, Deutschland - Digital Turbine
Beschreibung
About the Role:
General:
Big Data related :