OpenAI a présenté Ultrafast, un niveau de service de son API pour GPT-5.6 Sol qui s’appuie sur l’infrastructure d’inférence de Cerebras Systems. Les deux entreprises annoncent jusqu’à 750 tokens de sortie par seconde, soit jusqu’à 14 fois le traitement Standard. Ce chiffre est un maximum annoncé : il ne garantit ni une latence de bout en bout 14 fois plus faible, ni un débit constant dans toutes les conditions.

Ultrafast est un niveau de service, pas un nouveau modèle

La distinction est importante. Ultrafast ne remplace pas GPT-5.6 Sol et ne constitue pas un modèle supplémentaire : c’est une manière différente de fournir ce modèle via l’API OpenAI. Le service vise surtout les applications où chaque seconde compte : réponse aux incidents, assistance vocale, programmation, commerce, recherche financière, sécurité et expérimentation interactive.

OpenAI a commencé par un aperçu limité réservé à certains clients de son API. Le lancement décrit donc un service destiné aux équipes qui intègrent des modèles dans leurs propres produits et flux de travail, pas une nouvelle option générale dans ChatGPT.

DimensionGPT-5.6 Sol avec UltrafastConséquence pratique
NatureNiveau de service de l’API OpenAIIl ne s’agit pas d’un nouveau modèle
Modèle serviGPT-5.6 SolLes capacités du modèle et la vitesse de fourniture sont deux sujets distincts
Débit annoncéJusqu’à 750 tokens de sortie par secondeUn maximum de génération, pas une mesure universelle du temps total d’une tâche
Comparaison annoncéeJusqu’à 14 fois le traitement StandardLa comparaison porte sur le traitement Standard, dans le cadre présenté par OpenAI
AccèsAperçu limité pour certains clients de l’API OpenAIPas de déploiement général dans ChatGPT
InfrastructureCerebras Systems et son architecture Wafer-Scale EngineLe matériel d’inférence est fourni par Cerebras Systems

Ce que signifie vraiment « 750 tokens par seconde »

Un token est une unité de texte traitée par un modèle : un mot, une partie de mot ou un signe de ponctuation. Dire qu’un système peut produire jusqu’à 750 tokens par seconde renseigne donc sur son débit de génération. C’est spectaculaire pour l’affichage progressif d’une réponse, mais ce n’est pas toute l’histoire.

Le temps réellement perçu par l’utilisateur dépend aussi de la réception de la requête, du démarrage de la génération, des éventuels appels à des outils, de la longueur du contexte et du traitement effectué après la réponse. Le débit maximal ne permet pas, à lui seul, de connaître la latence de bout en bout, la latence au 95e percentile sous charge, le comportement avec plusieurs requêtes simultanées ou le coût d’une tâche terminée.

Autrement dit, une réponse peut s’afficher très vite sans que chaque workflow complet soit automatiquement 14 fois plus rapide. Pour une application vocale ou un agent interactif, le gain peut être particulièrement visible parce que les échanges s’enchaînent plus naturellement. Pour une tâche qui attend plusieurs outils ou manipule un long contexte, le débit de sortie n’est qu’une pièce du puzzle.

Cerebras rapporte également un gain de 5,6 fois sur GDP-Val et un temps de 11 heures et 11 minutes pour les 2 500 questions de Humanity’s Last Exam avec GPT-5.6 Sol Ultrafast. Ces résultats sont des benchmarks communiqués par l’entreprise : ils donnent un ordre de grandeur de sa présentation, mais ne constituent pas une évaluation indépendante des performances en production.

Pourquoi Cerebras est au cœur du dispositif

Cerebras fournit l’infrastructure d’inférence, c’est-à-dire les machines qui exécutent le modèle lorsqu’une application lui envoie une requête. Son approche Wafer-Scale Engine rassemble une grande quantité de calcul et de mémoire sur une architecture à l’échelle d’une tranche de silicium.

Cerebras indique que la puce utilisée dans cette architecture dispose de 44 Go de SRAM et que les poids du modèle restent sur la puce. Cette mémoire très proche des unités de calcul est présentée comme un élément permettant de réduire les échanges de données pendant l’inférence. Elle explique pourquoi l’architecture est pertinente pour un service qui cherche à réduire la latence, mais elle ne transforme pas automatiquement chaque chiffre annoncé en résultat indépendant.

Le point essentiel pour les développeurs est donc le suivant : OpenAI conserve la responsabilité du service GPT-5.6 Sol, tandis que Cerebras apporte l’infrastructure spécialisée qui l’exécute dans Ultrafast. C’est une évolution de la chaîne de fourniture du modèle, pas une modification annoncée de son identité.

Les usages que la faible latence peut transformer

Voir la démonstration officielle d’OpenAI : interface Ultrafast, analyse d’incident et refactorisation de code

Une génération plus rapide devient intéressante dès qu’un humain attend plusieurs allers-retours avec un agent. OpenAI cite notamment la réponse aux incidents, le support vocal, le code, le commerce, la recherche financière et les expériences interactives synchrones.

Dans sa démonstration officielle, OpenAI montre une interface qui suit une enquête de sécurité avec des journaux, des métriques et des opérations sur des fichiers, puis une séquence de refactorisation de code. L’interface affiche notamment un indicateur « 5.6 Sol Ultra ». Un membre de l’équipe explique qu’un flux de collecte, de tri, de normalisation et de contextualisation des données, qui prenait auparavant une à deux heures dans cette démonstration, s’effectue en environ 10 à 15 minutes avec Ultrafast.

Cette séquence illustre bien l’intérêt du service : maintenir une boucle d’interaction rapide pendant qu’un agent analyse des informations et modifie du code. Elle reste toutefois une démonstration officielle, pas un benchmark indépendant de production. Elle ne permet pas non plus de conclure qu’Ultrafast remplace la supervision humaine dans une réponse à incident.

Pour la recherche financière, la faible latence peut rendre une interface plus interactive. Elle ne suffit pas à établir une adéquation avec le trading haute fréquence : la connectivité aux places de marché, le déterminisme, les contraintes opérationnelles et les exigences réglementaires sont des questions distinctes qui ne sont pas couvertes par cette annonce.

Aperçu limité, prix et disponibilité

Ultrafast est actuellement décrit comme un aperçu limité pour certains clients de l’API OpenAI. Aucun prix public dédié à Ultrafast ni aucune date de disponibilité générale n’est annoncé dans les informations publiées avec le lancement. Les tarifs habituels de l’API ne doivent donc pas être considérés comme le prix d’Ultrafast.

Pour une équipe qui envisage ce niveau de service, les questions décisives restent très concrètes : quel sera le coût par tâche complète, quel débit sera disponible sous charge, quelles limites de contexte et de concurrence s’appliqueront, et comment les performances évolueront-elles lorsque l’accès s’élargira ? Le chiffre de 750 tokens par seconde attire l’œil, mais ces paramètres détermineront la valeur réelle du service.

Ce qu’il faut retenir

Ultrafast est une proposition ciblée pour les applications où l’attente casse l’expérience : voix, agents interactifs, programmation et opérations sensibles au temps. Son architecture Cerebras donne une explication technique cohérente au positionnement de faible latence, tandis que les chiffres publiés restent des maximums et des résultats présentés par les entreprises concernées.

Pour le grand public, le message est plus simple : Ultrafast n’est pas une nouvelle fonction générale de ChatGPT. Pour les développeurs ayant accès à l’API, c’est un aperçu limité qui pourrait changer la fluidité de certains produits. La prochaine étape importante ne sera pas un chiffre plus impressionnant, mais la publication de conditions d’accès, de tarifs et de mesures de performance en situation réelle.