overview
Qu'est-ce que Vertex AI Triton ?
Vertex AI Triton propose une solution robuste pour le déploiement de modèles d'IA grâce aux points de terminaison Triton hébergés par Google. Il fournit l'infrastructure nécessaire pour gérer vos charges de travail en IA de manière efficace, garantissant un débit élevé et une latence faible.
- Service géré qui prend en charge le déploiement de modèles d'IA haute performance.
- Utilise le serveur d'inférence Triton d'NVIDIA pour un déploiement optimisé.
- Compatible avec plusieurs frameworks, y compris TensorFlow et PyTorch.
