Disponible · Remote

Pier-Rick Lamontagne

Évaluateur IA & Spécialiste Red-Team · QA Conversationnel

12 ans d'audit qualité, appliqués aux systèmes d'IA. Bilingue FR/EN.

Voir les projets Me contacter

Profil

Professionnel de l'assurance qualité avec plus de 12 ans d'expérience à évaluer des comportements d'agents, concevoir des rubriques et encadrer la performance d'équipes, une expertise que j'applique aujourd'hui aux systèmes d'IA. Expérimenté dans l'identification de modes d'échec, d'incohérences dans les sorties et de lacunes de politique dans des environnements complexes et à fort volume. Praticien des outils d'IA générative (Claude, Gemini, Google AI Studio, Claude Code), des concepts de red-teaming, du prompt engineering et de l'infrastructure LLM auto-hébergée, incluant la conception de pipelines IA de bout en bout (texte, voix, image, vidéo) pour des projets personnels. Bilingue FR/EN, rigoureux par nature, motivé à rendre les systèmes d'IA plus sûrs et fiables.

Projets

Outil QA · IA

Évaluateur QA pour chatbots IA

Application web Flask pour évaluer des conversations de chatbot IA contre une grille qualité structurée de 15 critères. Système de score pondéré sur 100, règle d'échec automatique pour la sécurité, export CSV et rapport HTML. Interface bilingue FR/EN.

PythonFlaskSQLiteJinja2
  • 15 critères : ouverture, plan technique, soft skills, fermeture & sécurité
  • File d'attente multi-conversations + saisie par coller ou CSV
  • Rapport HTML exportable avec scores détaillés par critère
  • Règle de sécurité : score nul automatique en cas d'échec
Outil TTRPG · Full-Stack

Gestionnaire de campagnes TTRPG

Application full-stack de référence pour la gestion de campagnes de jeu de rôle sur table. Navigateur de 303+ aventures avec galerie de cartes, bestiaire complet, gestionnaire de PNJ et de rencontres. Déployé sous Docker avec domaine personnalisé.

ReactTypeScriptNode.jsPostgreSQLDocker
  • 303+ aventures navigables avec galerie de 1 093 cartes interactives
  • Bestiaire de 887 créatures + 1 390 PNJs avec filtres avancés et recherche plein texte
  • Base de données de 1 785 sorts et 3 755 équipements
  • API REST Express + PostgreSQL, déployé en Docker sur serveur home-lab
Pipeline IA · QA Vocal/Audio

Pipeline Mountain Inn Stories

Pipeline Python automatisé qui transforme des nouvelles du domaine public (Lovecraft, Poe, Chesterton) en vidéos narrées : synthèse vocale, génération d'images contextuelles par IA, mixage audio ambiant et montage vidéo. Bibliothèque de 84 histoires, bilingue FR/EN.

PythonGoogle Cloud TTSGeminiFFmpeg
  • Orchestration multi-étapes : sélection, TTS, extraction de lieux, génération d'images, montage
  • QA audio/conversationnel : révision de la narration TTS pour prosodie, prononciation et rythme, et du script source pour cohérence narrative avant synthèse
  • Contrôle qualité sur les sorties IA à chaque étape (cohérence visuelle, timing, mixage)
  • Génération automatique d'extraits courts (shorts) pour la distributoin
Loisir · Robotique

Garex, un robot de jardin fait maison

Robot explorateur de jardin conçu à partir de pièces récupérées (tableau de bord, jouet RC, moteurs Lego Technic) et de pièces imprimées en 3D. Châssis en extrusion V-slot, suspension inspirée des crawlers RC avec joints universels, contrôleur récupéré d'une carte mère d'imprimante 3D.

Impression 3DBlenderTinkercadÉlectronique
  • Suspension indépendante sur les quatre roues avec double joint universel par roue
  • Récupération et réutilisation de composants électroniques (moteurs, caméra, contrôleur)
  • Journal de construction complet avec itérations CAO et impasses documentées

Compétences

Évaluation IA

  • Test de prompts & cohérence des sorties
  • Conception de rubriques d'évaluation
  • Identification de modes d'échec
  • Détection de lacunes de politique

Red-Teaming

  • Prompting adversarial
  • Reconnaissance de patterns de jailbreak
  • Sondage de cas limites
  • Évaluation sécurité & alignement

Méthodologie QA

  • ITIL · Frameworks d'audit
  • CSAT / KPI / FCR / AHT / NPS
  • Rubriques structurées & sessions de calibration

Outils IA & Technique

  • Claude · Gemini CLI · Google AI Studio
  • Ollama · LM Studio · Prompt Engineering
  • Linux · Docker · Home Assistant
  • Power BI · Verint · Remedy ITSM

Expérience

2023 – 2025 CGI

Coordonnateur AQ & Support à la formation

  • Évaluation d'interactions d'agents contre des rubriques qualité, identification de patterns d'erreur récurrents et de lacunes de conformité.
  • Conception de frameworks de feedback structurés pour calibrer la performance à travers des équipes distribuées.
  • Documentation de scénarios d'échec et de cas limites pour guider l'amélioration des processus.
2013 – 2023 CGI

Coach Qualité & Formateur interne

  • Audits QA systématiques sur des centaines d'interactions par cycle avec calibration d'équipe.
  • Identification et documentation de patterns comportementaux, mauvaises applications de politique et cas limites.
  • Développement de rubriques et critères d'évaluation depuis zéro, adaptés à l'évolution des produits et politiques.
2008 – 2009 Nordia Québec

Formateur associé certifié

  • Formation d'intégration pour nouveaux agents en centre de contact.

Contact

Ouvert aux opportunités remote et contractuelles. Disponible immédiatement.

pierrick.lamontagne@atelierlamontagne.ca 581-235-2366 github.com/Bardicus-Kilgore