Data scientist audit h/f

Vous recherchez un stage en Data et vous avez un intérêt pour le domaine bancaire ? Alors cette offre est faite pour vous !

L’Inspection Générale (IGE) est la fonction en charge de la fonction d’audit interne (troisième ligne de défense) qui effectue des contrôles périodiques.

L’audit donne aux dirigeants de CACIB et à son Conseil d’Administration une opinion indépendante sur le fonctionnement du Groupe et son contrôle interne à partir de l’évaluation de la fiabilité des informations de toutes natures, de la maîtrise des risques, de la conformité des opérations et du respect des lois, règlementations et procédures.

Concrètement vos missions seront les suivantes :

Vous réaliserez deux types de missions au sein de l’équipe Méthodes et Support. La première axée sur la recherche et la seconde orientée vers la science des données.

1. Prédiction des recommandations susceptibles d’être en retard - En tant que data scientist vous serez amené à définir une stratégie de modélisation du risque de retard d’une recommandation:

• Identifier et le cas échéant construire les facteurs de risque potentiellement intéressants pour expliquer le retard dans le traitement des recommandations ;
• A l’appui d’outils internes et au besoin en les adaptant, mener des analyses exploratoires des principales variables de de l’étude ;
• Effectuer une sélection de variables pour identifier les causes et expliquer les facteurs du retard dans le traitement des recommandations ;
• Développer et déployer différents modèles prédictifs permettant d’anticiper l’entrée au statut « en retard » des recommandations émises par IGE ;
• Définir, implémenter et analyser les valeurs de mesure de performance de ces modèles ;
• Evaluer l’apport des méthodes d’explicabilité (Shapley values etc.) sur le modèle retenu ;
• Proposer une méthode de backtesting du modèle retenu.

2. Concevoir une stratégie d’analyse des risques des grands modèles de langage (LLM) :

• A partir de votre connaissance des modèles LLM, d’une revue de la littérature et d’une stratégie stress-testing, identifier et documenter les limites méthodologiques et opérationnelles de ce type de modèle ;
• Mener des recherches sur l'auditabilité des grands modèles de langage (LLMs), identifier les meilleures stratégies et les documenter ;
• Implémenter ces méthodologies pour comparer et analyser les sorties des LLM avec leur documentation source (poids du modèle), les prompts des utilisateurs et les éventuels documents soumis par les utilisateurs ;
• Proposer une stratégie d’analyse des causes des déviations du modèle, par exemple à l’appui d’algorithmes

Rejoindre Crédit Agricole CIB, c’est profiter d’une communauté importante de jeunes, évoluer sur un campus moderne offrant de nombreux services (boulangerie, salle de sport, etc.), bénéficier d’un suivi RH (matinée d’accueil, suivi régulier, etc.) et d’opportunités en alternance, VIE, CDD et CDI.