You're seeing this page as if you were . The main menu is still yours, though. Exit from immersion
Colin D.CD

Colin D.

Senior AI Product Manager | LLMOps - RAG - Evals

€820/day
Paris, FR
8-15 years

Average response time: 1 hour

About Colin

đź‘‹ Bonjour et bienvenue !
Senior AI Product Manager (10+ ans), je suis spécialisé LLMOps / LLM / RAG / Evals : je transforme des idées GenAI en produits fiables en production.

Ce que je propose :
🎯 Cadrage Produit GenAI
  • DĂ©finir le bon use case, la valeur, le MVP, les mĂ©triques (adoption, qualitĂ©, coĂ»t/latence).
  • Vibe coding prototypes : prototyper vite → tester avec utilisateurs → itĂ©rer (idĂ©al pour sĂ©curiser une dĂ©cision avant d’investir lourdement).
  • RĂ©aliser la stratĂ©gie Go-to-market : product/market fit, messaging, alignement Produit/Tech/GTM, plan de lancement.
⚙️ Industrialisation LLMOps (RAG – Evals – Monitoring)
  • RAG & orchestration (agents, scoring, embeddings / vector search)
  • Evals/QA (rubrics, jeux de tests, dĂ©tection d’hallucinations)
  • Monitoring/guardrails (observability/tracing, brand voice, sĂ©curitĂ©, fallbacks)

📊 Exemples de résultats
  • RĂ©sultats business : 360k visiteurs/an • x5 meetings
  • Scoring evals : -98% de bruit (shortlist 2500 → 50)
  • Hallucination rate evals : < 2% après optimisation contexte/prompt engineering + guardrails

🤝 Je travaille principalement en remote, avec possibilité d’être présent ponctuellement sur site.
📩 Contactez-moi pour en discuter - réponse rapide garantie.
  • French

    Native or bilingual

  • English

    Native or bilingual

  • German

    Native or bilingual

Can work on-site
Paris (up to 50km), Bordeaux (up to 50km)

Experience

  • LUNA NOVA
    Senior Consultant GenAI (LLMOps, RAG, Evals) | AI Agents & Automation
    DIGITAL AND IT
    April 2025 - Today (1 year and 2 months)
    Paris, France
    RĂ´le : GenAI Product & Go-to-Market Consultant (LLMOps, RAG, IA, ML)
    Positionnement : Transformer des POC GenAI en produits fiables en production (qualité mesurée, risques maîtrisés, adoption)

    Contexte

    En tant que Product Manager Senior et expert LLM/RAG, j’aide des PME, agences digitales et startups B2B SaaS à transformer des idées GenAI en produits adoptés (fiables en prod, mesurables, orientés résultats).

    Missions / responsabilités
    • Cadrage produit & valeur : cible, use cases, proposition de valeur, packaging et pricing pour un premier produit GenAI
    • Lean discovery : interviews / tests terrain pour valider le workflow utilisateur et Ă©viter de builder “dans le noir”
    • Roadmap & MVP : scope focalisĂ©, critères de succès, instrumentation minimale (activation, adoption, qualitĂ©, coĂ»t).
    • LLMOps & fiabilitĂ© : mise en place de pratiques Evals / QA / monitoring pour rendre le système mesurable et amĂ©liorable
    • Alignement delivery & GTM : synchronisation fondateurs/tech/sales-marketing sur prioritĂ©s, jalons et boucle feedback.
    • DĂ©finition de rubrics qualitĂ© (pertinence, factualitĂ©, style/brand voice, sĂ©curitĂ©)
    • Mise en place de jeux de tests (golden set), scĂ©narios edge cases, critères d’acceptation
    • StratĂ©gies anti-hallucinations (RAG, citations/sources, refus contrĂ´lĂ©s)
    • Monitoring en prod : suivi qualitĂ©, latence, coĂ»t, taux d’erreur, dĂ©rives (drift)
    • Guardrails : politiques de contenu, contraintes ton/brand voice, filtres, fallbacks et escalade humaine
    Approche
    • Scope : 1 cible + 1 job-to-be-done + 1 mĂ©trique de succès
    • Design : workflow + architecture (RAG / agentic) + risques
    • Evals : rubrics + dataset + tests automatisĂ©s (prĂ©-prod)
    • Prod : monitoring + alerting + boucle feedback (post-prod)
    • ItĂ©ration : optimisation qualitĂ© ↔ coĂ»t ↔ latence + adoption

    Mots-clés
    GenAI • LLMOps • RAG • Evals • LLM evaluation • Monitoring • Observability • Guardrails • QA anti-hallucinations • Agents IA • Product strategy • Go-to-market • Discovery • MVP
    LLMOps intelligence artificielle Product management Product Market Fit Retrieval-Augmented Generation (RAG)
  • Site Bunch
    Product Owner IA / GenAI
    TELECOMMUNICATIONS
    February 2023 - March 2025 (2 years and 1 month)
    Bordeaux, France
    RĂ´le : Product Owner (Produit + Ops)
    Produit : plateforme “usine-à-sites” no-code pour créer et piloter des réseaux de sites web à grande échelle
    Cibles : agences marketing local & réseau, franchises, groupes, agences SEO / content

    Contexte
    CMS propriétaire en SaaS, administration intuitive no-code. Fonctionnalités réseau puissantes (mutualisation, partage, gestion multi-clients) pour industrialiser la production de sites et de contenu local.

    Vision produit IA
    Optimisation automatique du contenu pour un meilleur SEO (on-page + maillage)

    Responsabilités
    • StratĂ©gie produit & roadmap : dĂ©finition de la vision, arbitrages, priorisation, cadrage MVP/itĂ©rations.
    • Pilotage delivery & opĂ©rations : mise en place des process de suivi, rituels, outils, et gestion de la qualitĂ©.
    • Estimation & planification : Extreme Quotation, suivi d’avancement, gestion des dĂ©pendances.
    • Management : Ă©quipe ~25 personnes (5 en direct : PO, CTO, UX… + 20 indirects : dev, designers, intĂ©grateurs, consultants).
    • Recrutement : constitution d’une Ă©quipe de 15 consultants en dĂ©veloppement.
    • Performance & KPI : pilotage burndown, QA, retours utilisateurs, fiabilitĂ© et satisfaction.
    Environnement / stack
    • Process : Scrum, TDD, Gherkin
    • Architecture : API + microservices, single codebase, multi-client, Angular / .NET
    • DB : PostgreSQL, Redis
    • Infra : GitLab, Docker, Kubernetes, Traefik
    • Cloud : Google Cloud, OVH Cloud, Cloudinary
    • Outils : GitLab, Miro, Figma, Discord
    • Tests : LambdaTest, Ghost Inspector
    Mots-clés
    CPO • Product Ownership • SaaS • No-code • Plateforme • Multi-tenant / multi-client • Agile/Scrum • KPI • Delivery • Microservices • Kubernetes • Angular/.NET • LLM
    Product management intelligence artificielle Agile Project Management LLM LLMOps

Recommendations

Be the first to recommend Colin

Help this freelancer shine by sharing your experience working together.

These freelancer profiles also match your criteria

AgathaA

Agatha Frydrych

Backend Java Software Engineer

4.7

(3)

2

BaptisteB

Baptiste Duhen

Fullstack developer

4.6

(4)

5

AmedA

Amed Hamou

Senior Lead Developer

4

(2)

7

AudreyA

Audrey Champion

Web developer

4.3

(3)

4

Skill set

Categories