Data Engineer: Big Data & Streaming (Kafka, Hadoop)
WorksHub
Softwareentwicklung Du verfügst über Know-How in der Softwareentwicklung mit Java, Scala oder Python und hast erste Erfahrungen mit Buildtools und CI/CD Pipelines, wie z. B. Maven, Sbt, Git oder Gradle gesammelt. Umfeld Du hast auch Kenntnisse im Umgang mit anderen Tools und Technologien des Softwareentwicklungskosystems (Hadoop, Kafka, ...) Weitere Kenntnisse Darüber hinaus verfügst du über Kenntnisse in der Softwareentwicklung und bist vertraut mit... #J-18808-Ljbffr
Vacancy posted 9 hours ago
Similar jobs that could be interesting for youBased on the Data Engineer: Big Data & Streaming (Kafka, Hadoop) in New Bremen, OH vacancy
- ...This is a job in Data Engineering. Qualifications Work experience of at least 5 years in Data Engineering. Requirements... ...as Python, Java, or Scala ) and experience with Big Data technologies (such as Hadoop, Spark, or Kafka). In-depth knowledge of batch and real-time data....Big dataWork experience placement
- ...gestaltest anspruchsvolle Data-Plattformen und... ...Datenpipelines (Batch & Streaming) in Cloud-Umgebungen und... ...Berufserfahrung im Data Engineering gesammelt, idealerweise... ...Governance. Data-Tooling: Bei Big Data und Streaming Tools wie Apache Spark und Kafka, bei...Big data
- ...As a Data Engineer , you’ll design, build, and maintain the data pipelines... ...to support both batch and streaming workloads. Collaborate with ML... ...Databricks, Spark, or equivalent big-data frameworks. Experience... ...with streaming frameworks (Kafka, Spark Structured Streaming,...Big dataRemote workFlexible hours
- ...Strategie & Governance, Software-Engineering, Datenanalyse & KI und mehr.... ...B. Medallion Architecture , Data Lakehouse ) Entwicklung und... ...von Datenpipelines (Batch & Streaming) mit Kafka , Spark/Databricks und Cloud... ...-Plattformen . Know-how in Big Data Architekturen (Data...Big dataSummer workRemote workFlexible hours
- ...implement, and maintain ETL data pipelines at scale... ...using scalable processing, streaming, and dataset curation... ...emerging data engineering technologies and best practices... ...with Java or Scala for big data frameworks... ...data technologies (Spark, Kafka, Airflow) and NoSQL databases...Big data
- ...Senior Data Engineer (all genders) Germany, UnitedKingdom Posted 8 months ago This is a job posted by our partner Jooble Tech stack Kafka Data Engineer batch Big Data Python Spark Data Engineering Java Hadoop Scala Below is a snippet of the job description. To read the...Big dataFull timeWork experience placementRemote workVisa sponsorship
- ...mitzugestalten? Stellenbeschreibung Du entwirfst Big Data Strategien und setzt diese bei unseren... ...implementierst du Batch- und Streaming Verfahren im Rahmen von modernen Datenmanagement... ...und -kuratierung wie beispielsweise Kafka, Postgres, Oracle oder Spark Idealerweise...Big dataFlexible hours
- ...Data Engineer / Scientist (m/w/d) Germany, UnitedKingdom Posted 9 months ago Tech stack SQL Hadoop Big Data Spark Data Engineer PySpark Python Voraussetzungen: Abgeschlossenes Master-Studium oder Promotion in Mathematik, Informatik, Physik oder ähnliche Datenwissenschaften...Big data
- Werde Teil des Teams Data Engineer (M/W/D) Als Data Engineer implementierst du Data Pipelines, um Datenquellen anzubinden... ...(z.B. die Google Cloud Platform) sowie Big Data-Technologien (z.B. Apache Airflow, Apache Kafka und Snowflake). Du unterstützt im gesamten Entwicklungsprozess...Big dataHome office
- ...Kundenprojekte repräsentiere conet als Data Engineering Expert auf Fachkonferenzen, in Bewerbungsgespr... ...Erfahrung und großes Interesse an Big Data, Backend und/oder DevOps Themen. Relevante... ...Apache Spark / Databricks, Apache Kafka, Apache Airflow, relationale und nichtrelationale...Big dataRemote work
- ...seeking a highly skilled and motivated Senior DevOps‑ & Data Platform Engineer (d/m/w) to join our Data Analytics Team in Freiburg.... ...languages. Nice‑to‑have experience with ML‑Ops and Big Data technologies like Hadoop. Understanding of agile methodologies, especially Scrum...Big dataWork at officeRemote workFlexible hours
- DSV-Gruppe is hiring a Data Engineer / Scientist to work in Germany or the United Kingdom. The ideal candidate will... ...extensive knowledge of Python, Spark/PySpark, Hadoop, and SQL. This role involves working with Big Data technologies and presenting results effectively...Big data
- ...Data Engineer - BI (w/m/d) Germany, United Kingdom Posted 9 months ago Tech stack Data Engineer Git Tools Python Qualifikationen Erfahrung im Umgang mit großen Datenmengen unter Einsatz von Big-Data-Tools wie Impala oder Trino sowie angrenzenden Technologien wie Python...Big dataFull time
- ...Brunel sucht einen Data Engineer (m/w/d) in Deutschland. Sie sind verantwortlich für die Entwicklung und Analyse von Daten, sowie die Anwendung von APIs in großen Systemen. Erforderlich sind fortgeschrittene Kenntnisse in Python und Java und eine Ausbildung in Informatik...Big data
- ...Digitium sucht einen Data Engineer (M/W/D), der Data Pipelines implementiert, um Datenquellen zu verarbeiten und für Analytics vorzubereiten... ...Bevorzugt werden Bewerber mit mindestens 2 Jahren Erfahrung mit Big Data-Technologien und Deutschkenntnissen auf C1-Niveau. #J-1880...Big data
- Du besitzt umfangreiche Programmiererfahrung in mindestens einer dieser Sprachen: Python, Java, Scala Bereich Cloud Computing in Azure, AWS oder GCP Gute Deutschkenntnisse (ab B2 Niveau) sowie Englischkenntnisse runden dein Profil ab Zusätzliche Informationen Weiterbildung...Big data
- GMX, WEB.DE & mail.com is looking for a Data Engineer - BI (w/m/d) to join their team. The ideal candidate will have experience with large datasets and big data tools such as Impala or Trino. The role requires strong analytical skills, business affinity, and proficiency...Big dataFull time
- Big Data Engineer (Java) (f/m/d) Germany, UnitedKingdom Posted 9 months ago Tech Stack Big Data Java Python Responsibilities & Qualifications Several years of experience developing in both Java and Python. Significant experience with developing and maintaining distributed...Big dataFull time
- ...The Role As a Senior Data Engineer , you will drive the end-to-end development of our core data... ...focus on high‑throughput, real‑time streaming. Driving Spec‑Driven Development (SDD) using... .... Deep technical expertise with Kafka (including Producers, Consumers, and Stream...Remote workFlexible hours
- ...oder Frankfurt am Main ! Deine Aufgaben Data und AI sind Dein zu Hause? Des Weiteren gestaltet... ...folgt: Konzeptionierung und Aufbau von Big Data/ Analytics Plattformen Auswahl von... ...Koordination Aktive Teilnahme an der Engineering Community im Unternehmen Dein Profil...Big dataWork at office
- ...experienced and solution-oriented Senior Data Engineer to join a strategic client project... ...business and technical teams. Implement streaming and batch data flows to support real-time... ...Familiarity with real-time data pipelines (e.g., Kafka, Flink, or similar) and AI initiatives....Permanent employmentFull timeImmediate start
- ...CONET Technologies AG sucht einen Data Engineering Expert in Bonn, Berlin, Garching bei München oder Remote. Als Teil eines engagierten Teams... ...mit, idealerweise mit Python oder Java, und haben Interesse an Big Data. Sehr gute Deutsch- und Englischkenntnisse sind...Big dataRemote work
- ...optional? Du möchtest von erfahrenen Engineers lernen und gleichzeitig eigene Ideen... ...du bei uns richtig! Die Aufgaben Als Data Engineer baust du die Datenpipelines... ...von Legacy-ERP-Systemen Erfahrung mit Streaming-Technologien (Kafka, Kinesis) Container-Kenntnisse (...
- ...produktionsreife Lösungen, die echten Mehrwert schaffen. Als Senior Data Engineer (all genders) gestaltest Du bei uns datengetriebene Lö... ...ähige Datenplattform zu betreiben. Du integrierst Streaming-Komponenten wie Kafka und MSK und sorgst dafür, dass Echtzeitdaten effizient...Remote work
€64.8k - €74.4k per year
...applications and next steps. Our partner is looking for a Data Engineer, Product based in Germany. This role sits at the core... ...with Databricks is a plus. Experience with streaming technologies (e.g., Kafka, Flink), feature stores, or ML data workflows is highly...Remote workFlexible hours$58 per hour
...contributors may: Design original computational data science problems that simulate real-world... ..., statistical analysis, feature engineering, predictive modeling, and insight extraction... ...deployment considerations) Incorporate big data processing scenarios requiring...Big dataHourly payPermanent employmentTemporary workPart timeFreelance10 hours per week- ...tirelessly to transform intricate data into actionable strategies,... ...at the intersection of data engineering, backend engineering, and... ...build, and evolve batch and streaming data pipelines that power refinery... .... Nice to have Exposure to Kafka, Spark, or streaming architectures...
- ...designing and implementing data architectures, with... ...mentorship to data engineers and other team... ..., Google Cloud) and big data technologies (e.g., Hadoop, Spark). Strong knowledge... ...Good knowledge of stream and batch processing... ...Flink, Apache Kafka Good knowledge of log...Big data
- ...Intelligence / Machine Learning Engineer Wir suchen einen Artificial... ...im Umgang mit Big Data und Artificial Intelligence,... ...in Tensorflow, scala, Phyton, Hadoop, MATLAB und/oder R, sowie in... ...(z. B. Hadoop, Spark, Hive, Kafka, Storm). Erfahrung mit agilen...Big data
- ...today. About the role Are you excited to build data solutions that power impactful Data & AI initiatives? As a Data Engineer, you’ll work on developing and improving data... ...Azure Data Services, Databricks, Apache Spark, Kafka, Flink, SQL, Python, Scala, Java, CI/CD...Start working today
Do you want to receive more vacancies?
Subscribe and receive similar vacancies to Data Engineer: Big Data & Streaming (Kafka, Hadoop). Be the first to apply!
Related searches
- remote data engineer New Bremen, OH
- entry level big data engineer New Bremen, OH
- big data devops engineer New Bremen, OH
- data engineer New Bremen, OH
- software data engineer New Bremen, OH
- big data cloud engineer New Bremen, OH
- junior big data engineer New Bremen, OH
- sr information security engineer New Bremen, OH
- director data engineering New Bremen, OH
- data visualization developer New Bremen, OH

