overview
Aperçu des Instances AWS Inferentia2
Les instances AWS Inferentia2 (Inf2) sont spécialement conçues pour l'inférence de haute performance en intelligence artificielle générative, facilitant le déploiement de modèles linguistiques extrêmement vastes. Grâce à des capacités avancées et une architecture optimisée, ces instances propulsent votre application vers de nouveaux sommets.
- Fournit jusqu'à 2,3 pétaflops de puissance de calcul.
- 384 Go de mémoire d'accélérateur pour gérer des charges de travail importantes.
- Intégration transparente avec le SDK AWS Neuron pour les principaux frameworks de ML.