Packager les modèles financiers dans des conteneurs

Une image conteneur peut regrouper un modèle financier avec son temps d’exécution et ses dépendances. Cette approche vous aide à reproduire les exécutions et à déplacer la même version d’application testée entre les environnements de développement et de calcul batch.

Utilisez Exécuter des applications conteneur sur Azure Batch pour la configuration actuelle du pool et des tâches. Appliquez les pratiques suivantes à une image de simulation financière.

Définir la frontière de l’image

Incluez les éléments suivants dans l’image :

  • L’exécutable ou script du modèle versionné.
  • Bibliothèques d’exécution et paquets de systèmes d’exploitation.
  • Une interface stable en ligne de commande pour les identifiants d’entrée, de sortie et de partition.
  • Commandes d’état ou de version que les opérateurs peuvent utiliser à des fins de diagnostic.

Conservez les données de portefeuille, les données de marché, les identifiants et les manifestes d’exécution hors de l’image. Livrez les entrées via un stockage protégé et persistez les résultats après chaque tâche.

Conçu pour des exécutions reproductibles

  1. Épingle l’image de base et les versions du package que tu testes.
  2. Enregistrez le résumé de l’image dans le manifeste d'exécution.
  3. Exécutez l’image localement sur un petit jeu de données connu.
  4. Vérifiez que le conteneur écrit les résultats et les diagnostics sur les chemins que la tâche Batch peut télécharger.
  5. Scannez l’image pour détecter des vulnérabilités avant de la déployer.

Stockez des images privées dans Azure Container Registry. Attribuez une identité managée attribuée par l’utilisateur au pool Batch et ne lui accordez que l’accès au registre et au stockage que les tâches requièrent.

Configurez le pool Batch et les tâches

Créez le pool avec une image conteneur et un agent de nœud pris en charge. Définissez les paramètres du conteneur, la ligne de commande, les fichiers de ressources et les fichiers de sortie de chaque tâche. Utilisez des balises d’image immuables ou des condensats pour les déploiements en production plutôt qu’une balise mutable latest.

Si le modèle utilise des GPU, choisissez une image pool compatible GPU qui prend en compte les conteneurs et l’exécution du modèle. Validez la compatibilité des pilotes et du framework en suivant : utilisez les tailles de machines virtuelles compatibles GPU dans un pool Batch.

Valider avant de passer à l’échelle

Exécutez d’abord une partition. Confirmez la version du modèle, la version d’entrée, le schéma de sortie, le code de sortie et les journaux de diagnostic. Ensuite, augmentez le nombre de tâches et de nœuds tout en surveillant le débit de stockage et le temps d’extraction d’images.

Pour maîtriser les coûts, combinez l’autoscale avec des nœuds dédiés ou des nœuds Spot selon la date limite d’exécution et la tolérance aux interruptions. Mettez le pool à zéro ou supprimez-le à la fin de la partie.

Étapes suivantes