Base Career helps you apply smarter for this job.
Key skills for this role
Position Overview As an Applied AI Developer – Agent Evaluation on the Fusion Platform Services team within Product Development and Manufacturing Solutions (PDMS), you'll be part of a team of technologists dedicated to creating cutting-edge AI and generative AI solutions that enhance developer productivity and experience. You'll work closely with AI engineers, software architects, and product engineering teams to build, deploy, and rigorously evaluate intelligent agentic systems while developing MCP (Model Context Protocol)-based tooling that integrates seamlessly with IDEs such as VS Code and Cursor.
Skip the repetitive application forms
Install the Base Career Chrome Extension and autofill job applications across major job boards with your profile.
Trusted by over 500,000 job seekers on Base Career
More from this employer
Bengaluru, IND
, GBR
, GBR
, GBR
, GBR
Bengaluru, IND
Pune, IND
Pune, IND
Bengaluru, IND
En tant que Développeur IA Appliquée – Évaluation d'Agents IA au sein de l'équipe Fusion Platform Services de Product Development and Manufacturing Solutions (PDMS), vous rejoindrez une équipe de technologues dédiée à la création de solutions d'intelligence artificielle et d'IA générative de pointe visant à améliorer la productivité et l'expérience des développeurs. Vous collaborerez étroitement avec des ingénieurs IA, des architectes logiciels et des équipes de développement produit afin de concevoir, déployer et évaluer rigoureusement des systèmes d'IA agentiques, tout en développant des outils basés sur le Model Context Protocol (MCP) intégrés à des environnements tels que VS Code et Cursor.
Développer et orchestrer des systèmes d'IA multi-agents pour la génération automatique de tests, leur exécution et l'optimisation des workflows de développement à l'aide de frameworks tels que LangGraph, AutoGen ou l'Anthropic Agent SDK (Claude Code).
Concevoir et mettre en œuvre des workflows agentiques permettant à plusieurs agents IA de piloter de manière autonome l'automatisation des tests (UI, API, intégration et système), depuis la génération des cas de test jusqu'à l'évaluation des résultats, tout en assurant une intégration fluide avec les outils de développement existants et les services compatibles MCP.
Développer des frameworks d'évaluation et des suites de benchmarks pour les systèmes agentiques, notamment afin de comparer les performances des agents IA à des solutions commerciales ou spécialisées, à l'aide d'outils tels qu'AgentBench et Langfuse.
Évaluer et optimiser les serveurs MCP ainsi que les intégrations d'outils au sein des pipelines agentiques en mesurant la latence, la précision, la fidélité du contexte et le taux de réussite des tâches de bout en bout.
Welcome to Autodesk! Amazing things are created every day with our software – from the greenest buildings and cleanest cars to the smartest factories and biggest hit movies. We help innovators turn their ideas into reality, transforming not only how things are made, but what can be made.
We take great pride in our culture here at Autodesk – it’s at the core of everything we do. Our culture guides the way we work and treat each other, informs how we connect with customers and partners, and defines how we show up in the world.
When you’re an Autodesker, you can do meaningful work that helps build a better world designed and made for all. Ready to shape the world and your future? Join us!
This role may require in-person onboarding and/or in-person ID verification.
Please search for open jobs and apply internally (not on this external site).
Global provider of software for design, engineering, and manufacturing.
Visit company websiteJobs and hiring trendsCAD 99000-145200 yearly / year
Full-time
Mid
Onsite
Apply faster on company sites with our extension.