Data Engineer (m/w/d)

Permanent employee, Full-time · Hamburg, Berlin

Deine Mission

Du wirst Teil unseres Tech & Data Teams, wo du in einer unterstützenden und kooperativen Umgebung an der Gestaltung und Implementierung von Datenlösungen arbeitest, von Datenpipelines bis hin zu Echtzeit-Analysen.

Zu deinen täglichen Aufgaben gehören:

Du wirst mit ML-Ingenieuren, Entwicklern und Lösungsarchitekten unseres Teams zusammenarbeiten.
Du analysierst und dokumentierst die funktionalen und technischen Anforderungen, die von den Datenpipelines und Persistenzmechanismen erfüllt werden müssen.
Du arbeitest mit ML-Ingenieuren und Analysten zusammen, um ihre Datenanforderungen zu verstehen und ihnen saubere, zuverlässige und leicht zugängliche Daten für Analysen und Modellierungen zur Verfügung zu stellen.
Du arbeitest eng mit unseren Kunden, Entwicklern und Lösungsarchitekten zusammen, um SaaS/PaaS-Systeme gemäß den Anforderungen zu konfigurieren.
Du entwirfst und implementierst skalierbare und effiziente Datenpipelines, um Daten aus verschiedenen Quellen zu extrahieren, zu transformieren und in SaaS-Dienste, Data Warehouses oder Data Lakes zu laden.
Du optimierst die Datenspeicherung und -abfrage durch Entwurf und Implementierung geeigneter Datenbankschemata, Indizes und Partitionierungsstrategien.
Du stellst die Datenqualität, -konsistenz und -integrität sicher, indem du Prozesse zur Datenvalidierung, -bereinigung und -anreicherung implementierst.
Du überwachst und behebst Probleme in Datenpipelines, um Probleme im Zusammenhang mit Leistung, Datengenauigkeit oder Systemausfällen zu identifizieren und zu lösen.
Du implementierst Datensicherheitsmaßnahmen und Zugriffskontrollen, um sensible Informationen zu schützen und Datenschutzbestimmungen einzuhalten.
Du erstellst und pflegst Dokumentationen für Datenpipelines, Schemata und Integrationsprozesse, um den Wissensaustausch zu erleichtern und reibungslose Übergaben zu gewährleisten.
Du nimmst an Code-Reviews, Tests und Bereitstellungsprozessen teil, um die Qualität und Zuverlässigkeit der Data-Engineering-Lösungen sicherzustellen.

Das bringst du mit

Kenntnisse in Python und ein solides Verständnis von Bibliotheken wie pandas, numpy, matplotlib, seaborn oder anderen.
Erfahrung im Entwerfen und Implementieren von ETL-Prozessen (Extract, Transform, Load) mit Python und Tools wie Luigi, Apache Airflow oder anderen.
Fähigkeiten im Problemlösen und analytischen Denken.
Ausgezeichnete Kommunikationsfähigkeiten für eine effektive Zusammenarbeit mit funktionsübergreifenden Teams, einschließlich nicht-technischer Stakeholder.
Entweder einen Abschluss in Informatik oder einem verwandten Fachgebiet oder gleichwertige praktische Erfahrung von mindestens 3 Jahren in diesem Bereich. Wir schätzen vielfältige Bildungs- und Karrierewege.
Du bist wohnhaft in Deutschland

Idealerweise bringst du noch Erfahrungen in einigen der folgenden Bereiche mit:

Verständnis von Datenpipeline-Orchestrierung und -Planung.
Kenntnisse über Datenqualitätsprinzipien und -techniken.
Bewusstsein für Datenschutzbestimmungen (DSGVO) und deren Auswirkungen auf das Data Engineering.
Kenntnisse in SQL für das Abfragen und Manipulieren relationaler Datenbanken.
Vertrautheit mit NoSQL-Datenbanken wie MongoDB oder Cassandra und deren Python-Konnektoren.
Erfahrung mit Cloud-Plattformen wie Amazon Web Services (AWS), Google Cloud Platform (GCP) oder Microsoft Azure.
Vertrautheit mit RESTful APIs und Python-Bibliotheken für API-Integration, wie requests oder Flask.
Bereitschaft, neue Technologien und Tools im sich schnell entwickelnden Bereich des Data Engineering zu erlernen und anzuwenden.
Vertrautheit mit Python-basierten Machine-Learning-Bibliotheken wie scikit-learn oder TensorFlow.
Fähigkeit, Visualisierungen und Dashboards mit Tools wie Tableau, Power BI oder ähnlichen zu erstellen, um analytische Erkenntnisse zu präsentieren und Entscheidungsprozesse zu unterstützen.
Erfahrung in der Entwicklung von Analyselösungen durch Implementierung von Algorithmen zur Ableitung von Erkenntnissen aus Daten.

Das bringen wir mit

Work-Life Harmonie: Arbeite flexibel, im Hamburger oder Berliner Office.
Knowledge is King: Du nimmst regelmäßig an Workshops & Trainings teil und unser E-Day ist einmal im Monat festes Programm.
Social Benefits: Wir bezuschussen deine HVV-ProfiCard (DeutschlandTicket) und deine Mitgliedschaft bei Urban Sports Club, Betriebliche Altersvorsorge, regelmäßige Events und Veranstaltungen und vieles mehr.
Dogs in our Offices: Vierbeiner sind herzlich willkommen.

Das Team

Du arbeitest in einer unkomplizierten und kooperativen Umgebung, gemeinsam mit den Digital-Größen Deutschlands. Die Expertise unserer Berater ermöglicht dir Einblicke in die aktuellsten Entwicklungen und Trends der Digitalbranche. Dich erwartet ein starkes Wachstum und ein ambitioniert getriebenes Umfeld. Ab Tag eins kannst du dich voll mit einbringen und einen echten Mehrwert für den weiteren Erfolg von Etribes leisten.

Wir können uns jeden Tag aufs Neue für unsere Arbeit begeistern und lieben was wir tun. Etribes ist am Kern der Zeit und hat Großes vor. Möchtest du ein Teil von der Erfolgsgeschichte werden? Dann freuen wir uns auf deine Bewerbung.

Apply for this job

Über uns

Etribes Connect ist eine perfekte Kombination aus Unternehmensberatung mit Fokus auf Digitalisierung und führender Digital-Agentur für Enterprise E-Commerce. Wir bieten eine einzigartige Kombination aus Consulting-Erfahrung, Digital-Expertise und einem unternehmerisch geprägten Mindset. Durch die Gründer, Partner:innen und Mitarbeiter:innen wurden in den vergangenen Jahren insgesamt mehr als 100 digitale Geschäftsmodelle erfolgreich aufgebaut.
Hier erfährst Du mehr: Etribes

Your mission

You will join our Tech & Data Team, where you'll work on designing and implementing data solutions, from data pipelines to real-time analytics, in a supportive and collaborative environment.

Your daily work will include the following tasks:

You will be collaborating with ML engineers, developers and solution architects of our team.
You will analyze and document the functional and technical requirements that need to be fulfilled by the data pipelines and persistence mechanisms
Collaborate with ML engineers and analysts to understand their data requirements and provide them with clean, reliable, and easily accessible data for analysis and modeling.
You will work closely with our customers, developers, and solution architects to configure SaaS/PaaS systems according to requirements.
Design and implement scalable and efficient data pipelines to extract, transform, and load data from various sources into SaaS services, data warehouses, or data lakes.
Optimize data storage and retrieval by designing and implementing appropriate database schemas, indexes, and partitioning strategies.
Ensure data quality, consistency, and integrity by implementing data validation, cleansing, and enrichment processes.
Monitor and troubleshoot data pipelines to identify and resolve issues related to performance, data accuracy, or system failures.
Implement data security measures and access controls to protect sensitive information and comply with data privacy regulations.
Create and maintain documentation for data pipelines, schemas, and integration processes to facilitate knowledge sharing and ensure smooth handovers.
Participate in code reviews, testing, and deployment processes to ensure the quality and reliability of data engineering solutions.

Requirements

Proficiency in Python and a solid understanding of libraries like pandas, numpy, matplotlib, seaborn, or others.
Experience in designing and implementing ETL (Extract, Transform, Load) processes using Python and tools like Luigi, Apache Airflow, or others.
Skills in problem-solving and analytical thinking.
Excellent communication skills for effective collaboration with cross-functional teams, including non-technical stakeholders.
Either a degree in computer science or a related field, or equivalent practical experience of at least 3 years in this area. We value diverse educational and career backgrounds.

What else would be nice:

Understanding of data pipeline orchestration and scheduling.
Knowledge of data quality principles and techniques.
Awareness of data privacy regulations (GDPR) and its impact on data engineering.
Proficiency in SQL for querying and manipulating relational databases.
Familiarity with NoSQL databases, such as MongoDB or Cassandra, and their Python connectors.
Experience with cloud platforms like Amazon Web Services (AWS), Google Cloud Platform (GCP), or Microsoft Azure.
Familiarity with RESTful APIs and Python libraries for API integration, such as requests or Flask.
Eagerness to learn and adapt to new technologies and tools in the rapidly evolving field of data engineering.
Familiarity with Python-based machine learning libraries, such as scikit-learn or TensorFlow.
Ability to create visualizations and dashboards using tools like Tableau, Power BI, or similar to present analytical findings and support decision-making processes.
Experience in developing analytics solutions by implementing algorithms to derive insights from data.

Our features

Work-life harmony: Work flexibly, in the Hamburg or Berlin office.
Knowledge is king: You regularly take part in workshops and training sessions and our E-Day is a fixed programme once a month.
Social benefits: We subsidise your HVV-ProfiCard (DeutschlandTicket) and your membership of Urban Sports Club, company pension scheme, regular events and functions and many more.
Dogs in our Offices: Four-legged friends are very welcome.

The team

You'll work in a straightforward and cooperative environment, alongside Germany's digital giants. The expertise of our consultants provides you with insights into the latest developments and trends in the digital industry. You can expect strong growth and an ambitiously driven environment. From day one, you can fully contribute and add real value to Etribes' continued success.

We are excited about our work every day anew and love what we do. Etribes is at the pulse of time and has big plans. Do you want to be part of this success story? Then we look forward to receiving your application.

Apply for this job

About us

Etribes Connect is a perfect combination of a consulting firm focused on digitalization and a leading digital agency for enterprise e-commerce. We offer a unique combination of consulting experience, digital expertise and an entrepreneurial mindset. The company's founders, partners and employees have successfully developed more than 200 digital business models in recent years.

Apply for this job

Your application

Thank you for considering a career at Etribes Connect GmbH. Please fill out the following form. In case you are experiencing problems with the document upload, mail your documents to karriere@etribes.de.