Serveurs & accélérateurs

Des plateformes professionnelles à forte densité de calcul pour l’inférence IA locale en rack ou en datacenter

4 machines32 à 512 Go de mémoire1399 à 1399 de budgetjusqu'à 28 tok/s mesurés (Serveur CPU-only AMD EPYC 9004 (ex. EPYC 9334))

Les serveurs et accélérateurs regroupent des systèmes dédiés à l’inférence IA en datacenter ou en rack professionnel. Leur forte densité de calcul, leur capacité mémoire élevée et leur conception orientée vers les charges soutenues les distinguent des ordinateurs personnels. Cette catégorie couvre aussi bien des serveurs CPU que des accélérateurs spécialisés et des configurations réunissant plusieurs GPU.

Le catalogue rassemble quatre machines signées AMD, Tenstorrent et tiny corp, avec une mémoire allant de 32 à 512 Go selon le modèle et un budget débutant autour de 1 399. Cette amplitude permet d’envisager des modèles et des contextes de tailles très différentes, depuis un accélérateur dédié jusqu’à une tinybox équipée de quatre RTX 5090. Les configurations CPU-only EPYC et Threadripper PRO privilégient une importante mémoire système, tandis que le serveur AMD EPYC 9004 atteint le meilleur débit de génération mesuré de la catégorie, à 28 tok/s.

MachineGéné. 8BMémoireBande passanteTDPPrix
Workstation CPU-only AMD Threadripper PRO (512 Go)n.d.512 Go204 Go/s280 Wn.d.
Serveur CPU-only AMD EPYC 9004 (ex. EPYC 9334)28 tok/s384 Go461 Go/s210 Wn.d.
tinygrad tinybox green v2 (4× RTX 5090)n.d.128 Go1 792 Go/s2 800 Wn.d.
Tenstorrent Blackhole p150an.d.32 Go512 Go/s300 W1 399 $