Faire tourner Qwen 3.6 27B sur Serveur H200 SXM
Qwen 3.6 27B compte 27 milliards de paramètres. Serveur H200 SXM offre 1 128 Go de mémoire HBM3e, 8 GPU. Cette page confronte les deux.
Quelle mémoire Qwen 3.6 27B demande-t-il ?
Les poids occupent le nombre de paramètres multiplié par la taille du format, plus une marge d’exécution de 15 % pour les activations et les tampons. Le cache d’attention s’ajoute par-dessus : il croît avec la longueur du contexte et avec le nombre de requêtes simultanées, donc il se dimensionne au cas par cas.
| Format | Poids en mémoire | Sur cette machine | Ce que le format coûte |
|---|---|---|---|
| FP16 | 62,1 Go | tient | pleine précision, référence de qualité |
| FP8 | 31,0 Go | tient | perte négligeable sur la plupart des tâches |
| NVFP4 | 15,5 Go | tient | format Blackwell, calcul FP4 natif |
| Q4 | 15,5 Go | tient | quantification par blocs, large support |
Que reste-t-il pour servir des requêtes ?
Qwen 3.6 27B tient largement sur Serveur H200 SXM. En FP16, ses poids occupent environ 62,1 Go sur les 1 128 Go disponibles, soit 1 066 Go laissés au cache d’attention et à la concurrence. La marge disponible décide du nombre de requêtes simultanées et de la longueur de contexte tenable. Une marge inférieure au quart de la mémoire contraint à limiter le contexte ou la concurrence.
Serveur H200 SXM se situe entre 350 à 500 k€, prix indicatifs et non contractuels. La machine vise le segment GE.
Où faire tourner Qwen 3.6 27B autrement ?
- Qwen 3.6 27B sur DGX Spark
- Qwen 3.6 27B sur Mac Studio Ultra
- Qwen 3.6 27B sur DGX Station
- Qwen 3.6 27B sur Serveur RTX PRO 6000
- Qwen 3.6 27B sur B200 SXM
Voir aussi la fiche Qwen 3.6 27B et la fiche Serveur H200 SXM.
Quelle mémoire faut-il pour Qwen 3.6 27B ?
En FP16, les poids occupent environ 62,1 Go, marge d’exécution comprise. Le cache d’attention s’ajoute et dépend du contexte.
Qwen 3.6 27B tient-il sur Serveur H200 SXM ?
Qwen 3.6 27B tient largement sur Serveur H200 SXM. En FP16, ses poids occupent environ 62,1 Go sur les 1 128 Go disponibles, soit 1 066 Go laissés au cache d’attention et à la concurrence.
Methode
Les nombres de paramètres et les mémoires proviennent des fiches du site. L’empreinte est calculée, elle n’est pas mesurée : un relevé sur machine peut s’en écarter selon le moteur et le format exact des poids. Les prix sont indicatifs et non contractuels.