Senior Software Developer (Data & Backend Development)
Autodesk, Inc.
Job Description
Job Requisition ID: 26WD99219 Position Overview Senior Software Developer (Data & Backend Development) â French translation to follow. The reporting team is looking for an experienced Sr. Software Developer.
You will report to the Engineering Manager of the Reporting Team and develop software solutions for complex ETL data pipelines and scalable APIs. You will work with Product Managers, Infrastructure, Business Operations, Quality Assurance, and other team members to ensure that data is accessible, reliable, and wellâstructured for reporting. Responsibilities Data Pipeline Development Develop data pipelines to extract, transform, and load (ETL) data from multiple sources into a centralized data repository.
Improve and refine data pipelines for efficiency, reliability, and scalability. Monitor and troubleshoot data pipeline issues and ensure data integrity. Use Python, Airflow, Snowflake, Hive, MySQL, Kinesis, Kafka, and AWS.
API Development Develop RESTful APIs and microservices to support multiple operations. Follow best practices for security, scaling, cost effectiveness, and testing. Create unit and integration tests.
Contribute to documentation on use of the APIs. Problem Solving Resolve technical issues and bugs in applications. Identify performance bottlenecks and improve code and databases.
Team Collaboration Collaborate with engineers, analysts, crossâfunctional teams, and partners to understand data requirements and deliver relevant insights. Performance Optimization Improve data processing and query performance for data retrieval and analytics. Code Review and Documentation Perform code review and provide constructive feedback within ethical boundaries.
Test and Quality Assurance Stay up to date with the latest data engineering technologies and best practices. Recommend new technologies for data engineering improvements. Security and Compliance Ensure data security by implementing access controls, encryption, and compliance with data privacy regulations.
Minimum Qualifications 7+ years of software development experience at multiple capacities. 2+ years of experience in big data technologies (Airflow, EMR/Spark, Snowflake, Hadoop/Hive). Experience with data streaming (Kinesis/Kafka). Proficiency in programming languages (Python, Java/Scala).
Experience building RESTful APIs and microservices. Experience with relational databases (MySQL, PostgreSQL). Background on cloud technologies (AWS, S3/EBS, Lambda, EKS, CloudWatch).
Familiarity with observability platforms (Splunk, Datadog). Sound knowledge of design patterns and methodologies across multiple platforms. Knowledge and support of modern development practices, such as Agile and OpenâSource technologies.
Excellent debugging skills. Preferred Qualifications Bachelor's in computer science or equivalent. AWS Certified Developer â Associate (optional).
PrĂ©sentation du poste DĂ©veloppeur logiciel senior (DĂ©veloppement de donnĂ©es et backend) â L'Ă©quipe Reporting recherche un dĂ©veloppeur logiciel senior expĂ©rimentĂ©. Vous serez rattachĂ© au responsable technique de l'Ă©quipe Reporting et chargĂ© de dĂ©velopper des solutions logicielles pour des pipelines de donnĂ©es ETL complexes et des API Ă©volutives. Vous travaillerez en collaboration avec les chefs de produit, les Ă©quipes Infrastructure, OpĂ©rations commerciales, Assurance qualitĂ© et d'autres membres de l'Ă©quipe afin de garantir que les donnĂ©es sont accessibles, fiables et bien structurĂ©es pour le reporting.
Responsabilités Développement de pipelines de données Développer des pipelines de données pour extraire, transformer et charger (ETL) des données provenant de multiples sources vers un répertoire de données centralisé. Améliorer et affiner les pipelines de données pour en optimiser l'efficacité, la fiabilité et l'évolutivité. Surveiller et résoudre les problÚmes liés aux pipelines de données et garantir l'intégrité des données.
Utiliser Python, Airflow, Snowflake, Hive, MySQL, Kinesis, Kafka et AWS. Développement d'API Développer des API RESTful et des microservices pour prendre en charge de multiples opérations. Respecter les meilleures pratiques en matiÚre de sécurité, d'évolutivité, de rentabilité et de tests.
Créer des tests unitaires et d'intégration. Contribuer à la documentation relative à l'utilisation des API. Résolution de problÚmes Résoudre les problÚmes techniques et les bugs dans les applications.
Identifier les goulots d'Ă©tranglement en termes de performances et amĂ©liorer le code et les bases de donnĂ©es. Collaboration au sein de l'Ă©quipe Collaborer avec les ingĂ©nieurs, les analystes, les Ă©quipes interfonctionnelles et les partenaires pour comprendre les besoins en matiĂšre de donnĂ©es et fournir des informations pertinentes. Optimisation des performances AmĂ©liorer les performances de traitement et de requĂȘte des donnĂ©es pour la rĂ©cupĂ©ration et lâanalyse.
Révision du code et documentation Effectuer la révision du code et fournir des commentaires constructifs dans le respect des limites éthiques. Tests et assurance qualité Se tenir au courant des derniÚres technologies d'ingénierie des données et des meilleures pratiques. Recommander de nouvelles technologies pour améliorer l'ingénierie des données.
Surveillance et conformitĂ© Garantie la sĂ©curitĂ© des donnĂ©es en mettant en Ćuvre des contrĂŽles d'accĂšs et le chiffrement, et se conformer aux rĂ©glementations en matiĂšre de confidentialitĂ© des donnĂ©es. Qualifications minimales Plus de 7 ans d'expĂ©rience en dĂ©veloppement logiciel Ă divers postes. Plus de 2 ans d'expĂ©rience dans les technologies Big Data (Airflow, EMR/Spark, Snowflake, Hadoop/Hive).
Expérience en streaming de données (Kinesis/Kafka). Maßtrise des langages de programmation (Python, Java/Scala). Expérience dans la création d'API RESTful et de microservices.
Expérience avec les bases de données relationnelles (MySQL, PostgreSQL). Connaissances en technologies cloud (AWS, S3/EBS, Lambda, EKS, CloudWatch). Connaissance des plateformes d'observabilité (Splunk, Datadog).
Solides connaissances des modÚles de conception et des méthodologies sur plusieurs plateformes. Connaissance et adhésion aux pratiques de développement modernes, telles que les technologies Agile et Open Source. Excellentes compétences en débogage.
Qualifications souhaitĂ©es Licence en informatique ou Ă©quivalent. Certifications facultatives (par ex., AWS Certified Developer â Associate). #J-18808-Ljbffr