overview
¿Qué es General Compute?
General Compute es una plataforma de nube de inferencia de IA desarrollada por General Compute que permite a agentes de IA autónomos y desarrolladores implementar modelos de IA con inferencia ultrarrápida y de baja latencia. Utiliza aceleradores de IA (ASICs) diseñados específicamente para lograr tiempos de respuesta significativamente más rápidos y un mayor throughput en comparación con los sistemas tradicionales basados en GPU. La plataforma está diseñada específicamente para cargas de trabajo de IA que exigen tiempos de respuesta ultrarrápidos, proporcionando una API compatible con OpenAI para una integración perfecta. General Compute opera con aceleradores de IA diseñados específicamente, incluyendo el silicio de flujo de datos SambaNova SN40 y SN50, optimizados para ejecutar modelos de IA entrenados de manera eficiente.