Se espera que GPT-5.6 Sol funcione hasta 14 veces más rápido
Ultrarrápido es una nueva variante de procesamiento actualmente disponible en la API de OpenAI. Según la empresa, GPT-5.6 Sol en este modo puede ser hasta 14 veces más rápido que con el procesamiento estándar. Se trata de un cambio importante, porque hasta ahora conseguir un tiempo de respuesta muy corto implicaba muchas veces optar por un modelo más pequeño o más especializado.
OpenAI quiere abordar el problema de otra manera. En lugar de renunciar a un modelo más avanzado por la velocidad, la empresa está intentando combine altas capacidades con latencias muy bajas. La empresa es responsable de la parte técnica de Ultrafast. Cerebrasque proporciona la infraestructura para lograr los objetivos declarados. 750 tokens de salida por segundo.
Esto puede ser lo más importante. donde la respuesta de la IA debe aparecer casi de inmediato. OpenAI apunta, entre otros, al servicio al cliente, el análisis financiero, el comercio, la seguridad y el trabajo de los programadores.
Se supone que la IA debe reaccionar mientras el problema persiste
Un ejemplo es respondiendo a los fracasos. Cuando el sistema deja de funcionar, Ultrafast puede analizar rápidamente registros, seguimientos de aplicaciones, cambios de código recientes e información proporcionada por los ingenieros. entonces tal vez ayudar a encontrar la causa probable y preparar una solución si la interrupción continúa.
Se puede utilizar un mecanismo similar en investigación financiera y seguridad. El modelo puede analizar datos cambiantes, evaluar transacciones o buscar comportamientos sospechosos sin largas esperas para obtener el resultado.
Un rendimiento más rápido también importa en control de voz. La IA puede resolver problemas más complejos durante una conversación en curso, incluso si requiere varios pasos y sistemas diferentes. En el comercio, por otro lado, el modelo puede responder preguntas sobre productos, verificar disponibilidad y ayudar con problemas de compra antes de que el cliente abandone la transacción.
OpenAI también comprueba Ultrafast en casa
La empresa también está probando el nuevo modo en sus propios equipos. Uno de los usos es análisis de incidentesdonde la IA lo ayuda a recopilar información rápidamente, verificar registros y determinar los próximos pasos. Ultrafast también se utiliza en trabajos de investigación para buscar fuentes, analizar datos y resumir información de diversas herramientas.
OpenAI señala un cambio más. Un experimento que antes se realizaba de noche puede, gracias a un procesamiento mucho más rápido, convertirse en parte del trabajo interactivo durante el día.. Puede analizar los resultados, modificar las suposiciones e inmediatamente realizar otra prueba.
Sin embargo, en esta etapa Ultrafast no es un servicio disponible para todos. GPT-5.6 Sol impactado en este modo a un grupo limitado de clientes como parte de un programa de prueba. OpenAI tiene la intención de ampliar gradualmente el acceso a medida que aumentan las capacidades de la infraestructura de Cerebras.