Please submit your CV in English and indicate your level of English proficiency.
Mindrift connects specialists with project-based AI opportunities for leading tech companies, focused on testing, evaluating, and improving AI systems. Participation is project-based, not permanent employment.What this opportunity involves:
We're building a dataset to evaluate AI coding agents - how well a model handles real-world developer tasks.
You'll create challenging tasks and evaluation criteria within realistic simulated environments:
What this is NOT:
What we look for:
Why this is hard:
Frontier models are already good at coding. Creating a task that genuinely challenges the best models is non-trivial. You need to deeply understand where models fail and what scenarios reveal the difference between a good and a bad solution. Tasks have many valid solutions - writing tests that accept all correct solutions and reject incorrect ones is harder than it sounds.
How it works
Apply → Pass qualification(s) → Join a project → Complete tasks → Get paidEffort estimate
Tasks for this project are estimated to take 30 hours to complete, depending on complexity. This is an estimate and not a schedule requirement; you choose when and how to work. Tasks must be submitted by the deadline and meet the listed acceptance criteria to be accepted.
Compensation:
Up to $200/hr equivalent, depending on level and pace. Tasks are estimated at ~30 hours each; you set your own schedule.
Senior Python Engineer - AI Coding Agent Evaluation (Freelance) • Lyon, Auvergne-Rhône-Alpes, FR
Exakis Nelite, entité du groupe strongMagellan Partners /strong, est le strong1er partenaire pure-player Microsoft /strongindépendant en France avec l’ambition de devenir le premier partenaire Eur... Voir plus
Join the Future of Digital Tech with Kolomolo.As a global supplier of IT services and digital modernization solutions, we help businesses embrace cutting-edge technology to optimize their operation... Voir plus
Bienvenue chez MIGSO-PCUBED, leader mondial du conseil en Management de Projets, Programmes, Portefeuilles, et Change Management.Nous sommes devenus le partenaire de confiance des marques les plus ... Voir plus
Architecte de données dirigera des projets majeurs, recueillera les besoins, modélisera le Data Warehouse et pilotera les Data Engineers avec une approche orientée IA et Snowflake. Voir plus
Intégrée au pôle Numérique du Groupe E’nergys, notre filiale Agora Calycé est une entreprise qui propose des solutions d’hébergement informatique, d’optimisation des systèmes numériques, de migrati... Voir plus
A consulting firm in financial services is seeking a Senior Business Analyst specialized in Energy Trading to support AI-driven technology implementations.The role involves acting as a liaison betw... Voir plus
Senior Data Scientist - IA Générative F/H /h3 pAgence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation d... Voir plus
Bandai Namco Entertainment Europe is a leading global publisher, developer and distributor of entertainment content for platforms including, but not limited to, all major video game consoles and PC... Voir plus
Overview /h3pAu sein de l'équipe Data (département Engineering) et en interaction avec les équipes Product (dont rd), DevOps, QA et Delivery, votre rôle sera de contribuer au développement techniqu... Voir plus
Une entreprise innovante en IT à Lyon recherche un Développeur Full Stack Java/Angular avec au moins 3 ans d’expérience.Vous serez en charge de l’analyse des besoins, du développement d'application... Voir plus
Be among the first 25 applicants /p pGet AI-powered advice on this job and more exclusive features.About ARCHIMED /h3 pWith offices in the US, Europe and Asia, ARCHIMED is a leading investment firm... Voir plus
Une entreprise de services numériques basée à Lyon recherche un développeur Java et Angular.Le candidat idéal doit avoir au moins 3 ans d'expérience dans le développement applicatif, maîtriser Java... Voir plus
Nous recherchons un DevOps sachant gérer des infrastructures Microsoft pour une mission long terme sur Lyon en France.Nous nous occupons des procédures administratives et de l'organisation du voyag... Voir plus
Nous recherchons un(e) bArchitecte Data Snowflake /b passionné(e) et expérimenté(e) pour rejoindre notre équipe de professionnels dédiés à l’architecture et à l’optimisation des données.Vous rejoin... Voir plus
Novencia accompagne ses clients dans leurs projets de transformation Data et IA afin de valoriser leur patrimoine data et améliorer la prise de décision.Nos équipes interviennent sur toute la chaîn... Voir plus
EDF France recherche un Développeur Fullstack confirmé pour Cyclife Digital Solutions à Lyon.Vous allez participer à l'analyse des besoins métiers et à la rédaction des spécifications techniques.Vo... Voir plus
Nous recherchons un DevOps sachant gérer des infrastructures Microsoft pour une mission long terme sur Lyon en France.Nous nous occupons des procédures administratives et de l'organisation du voyag... Voir plus
TRAVAILLER CHEZ ALTECA Chez Alteca le management de proximité, le bien-être et l'évolution de nos collaborateurs sont des priorités qui nous permettent, chaque jour, de proposer la meilleure ex... Voir plus
){kind=logo}
