Job Requisition ID #
26WD99219
26WD99219, Senior Software Developer (Data & Backend Development)
French translation to follow!/Traduction française à suivre!
Position Overview
The reporting team is looking for an experienced Sr. Software Developer. You will be reporting to the Engineering Manager of Reporting Team. You will develop software solutions for complex ETL data pipelines and scalable APIs. You will work with Product Managers, Infrastructure, Business Operations, Quality Assurance and other team members to ensure that data is accessible, reliable, and well-structured for reporting.
Responsibilities
Data Pipeline Development
Develop data pipelines to extract, transform, and load (ETL) data from multiple sources into a centralized data repository
Improve and refine data pipelines for efficiency, reliability, and scalability
Monitor and troubleshoot data pipeline issues and ensure data integrity
We use Python, Airflow, Snowflake, Hive, MySQL, Kinesis, Kafka and AWS (Amazon Web Services)
API Development
Develop RESTful APIs & microservices to support multiple operations
Follow best practices for security, scaling, cost effectiveness and testing
Create unit and integration tests
Contribute to documentation on use of the APIs
Problem Solving
Team Collaboration
Performance Optimization
Test and Quality Assurance
Stay up to date with the latest data engineering technologies, and best practices
Recommend new technologies for data engineering improvements
Security and Compliance
Minimum Qualifications
7+ years of software development experience at multiple capacities
2+ years of experience in big data technologies (we use Airflow, EMR/Spark, Snowflake, Hadoop/Hive)
Experience with data streaming (we use Kinesis/Kafka)
Proficiency in programming languages (we use Python, Java/Scala)
Experience building RESTful APIs and microservices
Experience with relational databases (we use MySQL, PostgreSQL)
Background on cloud technologies. (we use AWS, S3/EBS, Lambda, EKS, CloudWatch)
Familiarity with observability platforms (we use Splunk, Datadog)
Have sound knowledge of design patterns and methodologies across multiple platforms
Knowledge and support of modern development practices, such as Agile and Open-Source technologies
Excellent debugging skills
Preferred Qualifications
Bachelor's in computer science or equivalent
Certifications (optional)
AWS Certified Developer - Associate
26WD99219, Développeur logiciel senior (Développement de données et backend)
Présentation du poste
L'équipe Reporting recherche un développeur logiciel senior expérimenté. Vous serez rattaché au responsable technique de l'équipe Reporting. Vous serez chargé de développer des solutions logicielles pour des pipelines de données ETL complexes et des API évolutives. Vous travaillerez en collaboration avec les chefs de produit, les équipes Infrastructure, Opérations commerciales, Assurance qualité et d'autres membres de l'équipe afin de garantir que les données sont accessibles, fiables et bien structurées pour le reporting.
Responsabilités
Développement de pipelines de données
- Développer des pipelines de données pour extraire, transformer et charger (ETL) des données provenant de multiples sources vers un référentiel de données centralisé
- Améliorer et affiner les pipelines de données pour en optimiser l'efficacité, la fiabilité et l'évolutivité
- Surveiller et résoudre les problèmes liés aux pipelines de données et garantir l'intégrité des données
- Nous utilisons Python, Airflow, Snowflake, Hive, MySQL, Kinesis, Kafka et AWS (Amazon Web Services)
Développement d'API
- Développer des API RESTful et des microservices pour prendre en charge de multiples opérations
- Respecter les meilleures pratiques en matière de sécurité, d'évolutivité, de rentabilité et de tests
- Créer des tests unitaires et d'intégration
- Contribuer à la documentation relative à l'utilisation des API
Résolution de problèmes
- Résoudre les problèmes techniques et les bugs dans les applications
- Identifier les goulots d'étranglement en termes de performances et améliorer le code et les bases de données
Collaboration au sein de l'équipe
- Collaborer avec les ingénieurs, les analystes, les équipes interfonctionnelles et les partenaires pour comprendre les besoins en matière de données et fournir des informations pertinentes
Optimisation des performances
- Améliorer les performances de traitement et de requête des données pour la récupération et l?