Big Data Engineer (Spark)

synvert

WER IST SYNVERT A GLOBALLOGIC COMPANY? Wir sind ein innovatives IT-Beratungsunternehmen mit Fokus auf Big-Data-Projekte. Unsere Kunden stammen aus den verschiedensten Branchen, z.B. Automobil, Finanzen, Einzelhandel und Versicherungen. Unser Ziel ist es, datenbasierte (Produkt-)Innovationen für unsere Kunden zu entwickeln, indem wir komplexe Daten integrieren, analysieren, verarbeiten und optimieren; eine Idee von der Entwicklung bis zur Produktion zu bringen und letztendlich einen maximalen Mehrwert für den Kunden sicherzustellen. Unser Team ist hochkompetent, agil, international und bildet das Herz von synvert. Wir garantieren unseren Teammitgliedern Flexibilität und Eigenverantwortung und freuen uns darauf, dich kennenzulernen! DEINE AUFGABEN * Als Teil unseres Teams „Data Integration & Solution Engineering“ bist du für die Bereiche Datenmodellierung, Big-Data-Architekturen sowie Cloud-Infrastrukturen zuständig * Design, Weiterentwicklung und Performance von Daten-Plattformen sind dein Steckenpferd * Gestaltung der Architektur, Aufbau von Pipelines sowie die Integration und Bereitstellung datengetriebener Lösungen * Etablierung moderner Engineering-Standards (z.B. CI/CD, Infrastructure as Code, Containerisierung) * Enge Zusammenarbeit mit Kund*innen und funktionsübergreifenden Projektteams: Übersetzung von Anforderungen und Businessprozessen in technische Lösungen, Durchführung von Workshops sowie Mentoring von Junior*innen WAS ERWARTEN WIR VON DIR? Tech-Stack: Im Beratungsumfeld ist die Antwort nicht selten „kommt drauf an“, denn der genaue Technologie-Stack hängt vom konkreten Projekt und Kunden ab. Wir denken nicht in einem festgelegten Methoden- und Technologie-Stack, sondern suchen zunächst für ein Problem die beste Lösung. Übergreifend setzen wir in allen Projekten moderne Technologien ein, dazu gehören unter anderem: AWS, Google Cloud und Azure, Python, git, SQL, Spark, Beam, Snowflake, dbt, CI/CD Tools, Docker und IaC (Terraform). Du. Wir. Passt, wenn: Bevor du weiterliest, hier folgt unser Wunsch-Profil. Du musst nicht bereits alles mitbringen. Alles, was du jetzt noch nicht kannst, wirst du bei uns lernen. * Mehrjährige Erfahrung im Bereich Data Engineering, idealerweise im Beratungsumfeld und sehr gute Kenntnisse in Python * Fundierte Erfahrung mit mindestens einer Public-Cloud-Plattform (AWS, Google Cloud oder Azure) und Praxiserfahrung mit Big-Data-Frameworks wie Apache Spark und Apache Beam * Kenntnisse in Software Engineering Methoden (CI/CD, TDD, agile Entwicklung), Containerisierung (Docker) und Infrastructure as Code (Terraform) * Die Fähigkeit, komplexe Themen auf Deutsch und Englisch für alle verständlich und nachvollziehbar zu erklären * Analytisches Denkvermögen, eigenständige und lösungsorientierte Arbeitsweise WAS DU ERWARTEN KANNST Agile company Culture and the Best Team * Werde Teil eines internationalen, ambitionierten Teams, das großen Wert auf Ownership, Qualität und Zusammenarbeit legt. * Ein strukturiertes Onboarding sorgt dafür, dass du schnell im Team und in unseren Projekten ankommst. * Firmenevents wie Sommer- und Weihnachtsfeiern sowie regelmäßige After-Work-Treffen bieten Raum für Austausch auch außerhalb der Projekte. Continuous Development * Du erhältst ein jährliches Weiterbildungsbudget inklusive Trainingstagen, um deine fachliche und persönliche Entwicklung gezielt voranzutreiben. * Über unsere Weiterbildungsplattform mit Live-Trainings kannst du Skills in Bereichen wie Kommunikation, Präsentation, Führung, mentale Gesundheit oder Selbstorganisation ausbauen. * Du arbeitest in anspruchsvollen Projekten, die dir Raum geben, Verantwortung zu übernehmen und deine Expertise kontinuierlich weiterzuentwickeln. Dabei arbeitest du mit modernen Technologien und gestaltest Lösungen für komplexe Kundenanforderungen. * In unseren Teams arbeiten erfahrene Expert*innen mit unterschiedlichen Spezialisierungen eng zusammen. Der regelmäßige Austausch, etwa in unseren Communities of Practice oder im Projektalltag, sorgt dafür, dass Wissen aktiv geteilt und gemeinsam weiterentwickelt wird. * Regelmäßige Performance Reviews, kontinuierliches Feedback und eine jährliche Gehaltsüberprüfung sorgen für transparente Entwicklungsperspektiven. Working Model * Flexibilität ist uns genauso wichtig wie dir - bei Arbeitszeit, Arbeitsort und der Gestaltung deines Arbeitsalltags. Other Benefits * Wir bezuschussen deine Urban Sports Club-Mitgliedschaft, damit du flexibel an vielen Standorten trainieren kannst. * Unsere Mitarbeitenden wissen am besten, wer zu uns passt. Für erfolgreiche Empfehlungen zahlen wir daher einen Referral Bonus. * Das angegebene Gehaltsband gilt für die ausgeschriebene Senior-Level-Position. Bewerbende auf Mid- oder Principal-Level werden entsprechend ihrer Erfahrung in separaten Gehaltsbändern eingeordnet. HIRING PROCESS 1. Kennelerngespräch - 30 Minuten 2. Technical Interview - 2 Stunden 3. Probeaufgabe - Nach deinem Zeitplan 4. Vorstellung der Probeaufgabe & Team-Treffen im Büro

Artefact

What you will be doing: Key responsibilities As a Data Engineer Intern, your role will encompass: ● Supporting to conduct ambitious projects in the transformation of clients through data ● Collaborating with the consulting and data team to provide comprehensive services to clients ● Using your technical abilities to assist in the transformation of clients’ marketing department Among your responsibilities as a Data Engineer Intern, you will be responsible for: ● Help securing delivery on projects with Data Engineer ● Communicating the success of projects among the company ● Working closely with your Consulting counterpart to build and maintain strong relationships with your clients and best understand their needs ● Ensuring that your solutions are bringing values to the client problematic ● Being a good team player, knowing your role and responsibility in the global ambition ● Caring for the happiness of the team, ensuring work is delivered to a high standard and providing feedback and mentoring Being a great tech person ● Demonstrating the skill and credibility required to ensure the success of our clients’ initiatives ● Researching and developing new technical approaches to address problems efficiently ● Sharing best practices and contributing to Artefact’s institutional knowledge ● Embodying Artefact’s values and inspiring others to do the same ● Experience working with Big Data technologies such as Hadoop, Spark, Kafka... ● Delivering Data Lake / Big Data projects including (data ingestion, machine learning model application, code deployment) ● Being able to adapt your solutions and approaches to technical environment (security, access, tools)   Qualifications :Education and Experience ● Bachelor’s degree in Software Engineering, Computer Engineering, or related fields ● Solid knowledge of computer science, data processing and data architecture ● Intellectual curiosity and excellent problem-solving skills, including the ability to structure and prioritise an approach for maximum impact ● Skills in Python, Linux, SQL, Spark, Hive ● BigQuery/ Redshift, Devops and Javascript is a plus

Elliptic

Do you want to help define the future of blockchain intelligence? Are you passionate about data, distributed systems, and delivering impact at scale? Are you looking for a values‑driven company that invests in its people and gives you the autonomy to shape critical systems? We’re looking for a Senior Software Engineer to join Elliptic’s Product‑Engineering organisation, focusing on data engineering solutions that power our analytics and intelligence products. As a senior member of the team, you will drive the technical direction of our data platform, ensuring it continues to meet the growing demands of blockchain analysis. Challenges include building a blockchain‑agnostic solution that scales globally, processing large batch and streaming datasets, and solving complex data processing problems that give our customers deep insights into the flow of value across the crypto ecosystem. The impact you will have: Our data and intelligence platform sits at the heart of everything we do. As a senior engineer, you will design and implement data systems that serve as the backbone of all Elliptic products. You will collaborate across blockchain, intelligence and product teams to deliver innovative features and scalable architectures that help the world fight financial crime and increase transparency in the crypto space. You will also mentor engineers, champion best practices, and influence cross‑team decisions that shape how Elliptic processes and delivers blockchain intelligence data. What you will do: * Architect, design, and implement large‑scale distributed data systems and pipelines. * Contribute to technical decision‑making across batch and streaming data solutions. * Collaborate with engineers, product managers, data scientists, and intelligence analysts to build customer‑focused products. * Explore and integrate new technologies (e.g. data orchestration or cloud‑native tools) to optimise performance and scalability. * Take shared ownership of data systems, from design to deployment and ongoing improvement and support. * Perform thoughtful peer reviews that raise code quality and share best practices across the team. * Contribute to platform‑wide initiatives that improve reliability, observability, and cost efficiency. * Help shape the technical roadmap for data engineering across Elliptic. Tech environment: Scala | Spark | Databricks | AWS | Airflow | Kubernetes | Terraform | Functional Programming We value depth in any modern data ecosystem. If you’re strong in equivalent technologies and excited to learn Scala, we’ll support you in the transition. You will thrive here if you: * Enjoy end‑to‑end ownership, from architecture design to coaching others through delivery. * Strive for engineering excellence and scalable, sustainable systems. * Use data and experimentation to guide decisions. * Communicate openly and collaborate across teams. * Support and coach less‑experienced engineers. * Believe every challenge is an opportunity to simplify and innovate together. What we are looking for: * Ability to design, build, and maintain distributed data systems in a cloud‑based environment. * Hands‑on experience with big data frameworks such as Spark or Databricks (or a willingness to learn). * Knowledge of cloud infrastructure (AWS, GCP, or Azure). * Judgement to balance scalability, performance, and maintainability. * Experience or interest in functional programming, data modelling, workflow orchestration, or AI‑driven tools. If you don’t meet every criterion but are excited about this role, we encourage you to apply. Bonus Points for: * Experience in stream processing frameworks and event‑driven architecture. * Hands‑on experience with Infrastructure as Code (Terraform, CloudFormation). * Experience working in containerised environments (Docker, Kubernetes). * Interest in crypto and blockchain technologies. JOB BENEFITS > How we work: * Hybrid working and the option to work from almost anywhere for up to 90 days per year * £500 Remote working budget to set up your home office space > Learning & Development: * $1,000 Learning & Development budget to use on anything (agreed with your manager) that contributes to your growth and development > Vacation/ Leave: * Holidays: 25 days of annual leave + bank holidays * An extra day for your birthday * Enhanced parental leave: we provide eligible employees, regardless of gender or whether they become a parent by birth or adoption, 16 weeks fully-paid leave and leave. > Benefits: * Private Health Insurance - we use Vitality! * Full access to Spill Mental Health Support * Life Assurance: we hope you will never need this - but our cover is for 4 times your salary to your beneficiaries * Cycle to Work Scheme We know Diversity and Inclusion is much deeper than just hiring, but it’s important for us to mention it here. We welcome and embrace individuals of all backgrounds and identities at Elliptic, and this is an ongoing priority for us. We know incredible people don’t all think in the same way. We want to be challenged every day. We believe our diverse team of individuals underpins this by bringing creative thinking and innovation to Elliptic every day. We are committed to creating a diverse, inclusive and equitable workplace, so we welcome applications from everyone, even if you may not think you fit all of the requirements of our roles. We foster an environment of psychological safety, where everyone feels comfortable to bring their whole self to work.