Spécialiste du Fine-Tuning Azure AI Foundry

Ce qu'il fait

Cette compétence transforme un agent en spécialiste du fine-tuning de modèles au sein de l'écosystème Azure AI Foundry. Elle fournit un cadre complet pour l'ensemble du pipeline d'apprentissage automatique, garantissant que l'ajustement du modèle est basé sur les données et scientifiquement validé.

Quand l'utiliser

Utilisez cette compétence lorsqu'un utilisateur souhaite améliorer les performances d'un modèle sur une tâche spécifique, distiller les connaissances d'un modèle enseignant plus large vers un modèle étudiant plus petit, ou implémenter l'apprentissage par renforcement à partir du feedback humain (RLHF) via SFT, DPO ou RFT.

Ce qui est inclus

• Scripts : Une suite robuste d'outils Python pour l'orchestration autonome (auto_finetune.py, auto_rft.py), la génération de jeux de données, la validation (validate_sft.py) et l'évaluation des modèles.
• Références : Des guides détaillés sur le réglage des hyperparamètres, les formats de déploiement, la gestion des coûts et la prévention du reward-hacking.
• Instructions : Des flux de travail étape par étape pour la génération de données synthétiques, l'expérimentation itérative et le diagnostic des mauvais résultats d'entraînement.

Agents compatibles

Conçu pour les agents à haute capacité disposant d'environnements d'exécution Python et d'un accès à l'Azure CLI, tels que ceux intégrés à Azure AI Foundry ou aux harnais de développement professionnels.