Company AI Server
Un vrai serveur GPU : 4-8 cartes, alimentation redondante, gestion BMC et reseau rapide, pour une entreprise qui a depasse la workstation.
Environ ~80 Md de paramètres en fp16, ~160 Md en 8-bit, ou ~295 Md en quantization 4-bit.
- GPU4× NVIDIA L40Smemory: 48 GB GDDR6 ECC · bandwidth: 864 GB/s · interface: PCIe 4.0 x16$36,000Voir le prix ↗
- CPUAMD EPYC 9354cores: 32 · threads: 64 · clock: 3.8 GHz boost$3,200Voir le prix ↗
- Carte mèreSupermicro H13SSL-N (SP5, EPYC 9004)chipset: SoC · memory: 12 x DDR5 RDIMM ECC, up to 3 TB · pcie: 8 x PCIe 5.0 x16 (slots + MCIO fan-out)$850Voir le prix ↗
- RAMSamsung 512 GB (8x64) DDR5-4800 ECC RDIMMcapacity: 512 GB (8 x 64) · type: DDR5-4800 RDIMM · ecc: ECC$2,550Voir le prix ↗
- StockageKioxia CD8-R 3.84 TB U.2 NVMecapacity: 3.84 TB · bus: PCIe 4.0 U.2 · read: 7000 MB/s$620Voir le prix ↗Sabrent Rocket 4 Plus 8 TB NVMecapacity: 8 TB · bus: PCIe 4.0 NVMe · read: 7100 MB/s$700Voir le prix ↗
- AlimentationFSP CRPS 2+2 redundant, 4000 W usablecapacity: 4000 W usable (2+2 hot-swap) · rating: 80+ Platinum · standard: CRPS redundant$1,400Voir le prix ↗
- RefroidissementGeneric 4U high-static-pressure fan wall + shroudstype: rack forced-air · dissipation: chassis-wide · noise: loud (data-center)$220Voir le prix ↗
- RéseauNVIDIA ConnectX-6 Dx 100GbEspeed: 100 GbE · ports: 2 (QSFP56) · bus: PCIe 4.0 x16$650Voir le prix ↗MikroTik CRS309 8x 10GbE SFP+ switchports: 8 x SFP+ 10 GbE + 1 GbE · throughput: non-blocking · form factor: desktop / 1U$280Voir le prix ↗
- OnduleurEaton 9PX 3000 RT (online double-conversion, 2U)capacity: 3000 VA / 2700 W · topology: online double-conversion · runtime: ~7 min at full load$1,600Voir le prix ↗
- ChassisSupermicro 4U 8-GPU server chassis (CRPS, fan wall)form factor: 4U rack · gpu slots: 8 dual-slot passive · power: 2+2 CRPS redundant$3,200Voir le prix ↗
Les prix composants sont sourcés à la main et datés (vérifiés le 2026-09-16), pas scrapés. Confirme sur le site du vendeur avant d'acheter.
- · Quatre L40S : 192 Go de VRAM, refroidies passivement par le mur de ventilateurs du chassis - la densite et le flux d'air autour desquels un vrai serveur est concu.
- · EPYC 9354 donne 128 lignes PCIe 5.0 et 12 canaux memoire : tout le serveur a de la bande passante, pas seulement les GPU.
- · 512 Go de memoire ECC gardent les gros modeles et leur KV cache adressables hors VRAM au besoin.
- · Alimentation CRPS redondante et BMC (IPMI / Redfish) : power-cycle a distance, telemetrie de sante, PSU hot-swap - la difference entre un serveur et un gros PC.
- · Une carte 100 GbE est la pour le jour ou ceci devient le noeud un d'un cluster.
- + 192 Go de VRAM, maintenable et monitore
- + Alimentation redondante, gestion a distance
- + Marge jusqu'a 8 GPU dans le meme chassis
- − Bruyant - une salle dediee avec climatisation n'est pas optionnelle
- − Toujours un seul noeud : une dispo niveau cluster en demande au moins deux
- − Le L40S n'a pas de NVLink - l'entrainement de gros modeles veut des cartes SXM
Quatre A6000 : memes 192 Go, refroidissement blower, environ moitie du cout GPU.
Quatre RTX 6000 Ada : 192 Go avec le meilleur debit par carte hors SXM datacenter.
Sur 36 mois, à la conso de cette config et au tarif cloud live de son GPU.
- Matériel
- $51,270
- Électricité
- $4,221
- Coût total de possession
- $55,491
- Équivalent cloud, mensuel
- $2,289/mo
- Équivalent cloud, total
- $82,388
- Seuil de rentabilité
- 24 mois
- · Les besoins de haute disponibilité gardent en général une capacité cloud en réserve même quand posséder a du sens - l'hybride couvre les deux.
- · Sur 36 mois, posséder économise environ 26897 $ par rapport à l'équivalent cloud.
Les liens « Acheter sur Amazon » sont affiliés - en tant que Partenaire Amazon, Obolith touche une commission sur les achats éligibles.