- Avancé
- Exploitation
Où on le retrouve dans les vrais systèmes
-
Passerelle NAT
Une surprise classique sur la facture cloud : chaque gigaoctet qui sort par la NAT est facturé en plus du prix horaire. Les endpoints privés vers les services cloud évitent une grande partie de ce trafic.
En production : AWS NAT Gateway, Azure NAT Gateway, Cloud NAT
-
Service d'inférence de modèles
Chaque requête prend des dizaines à des centaines de millisecondes de GPU : quelques centaines de requêtes par seconde demandent déjà plusieurs GPU coûteux. Regrouper les requêtes, mettre les réponses en cache et choisir le bon accélérateur changent la facture d'un ordre de grandeur.
En production : NVIDIA Triton, vLLM, Amazon SageMaker endpoints, Google Vertex AI, KServe
-
Endpoint privé
Le trafic vers le stockage, les files ou les API partenaires reste sur la dorsale du fournisseur au lieu de traverser Internet par une passerelle NAT : plus sûr, et souvent bien moins cher au gigaoctet.
En production : AWS PrivateLink, Azure Private Link, Google Private Service Connect, VPC gateway endpoints
Regarde-le casser, puis répare-le
Construis une architecture, envoie-lui une journée de trafic et de pannes, et comprends pourquoi elle tient ou cède. Gratuit pour commencer.