OpenAI sustituye su backend de Git por Pando y dice que la latencia de los push en su monorrepo cayó casi cinco veces
Los ingenieros de OpenAI dicen que el sistema sirve ya cerca de un petabyte de datos de Git al día, mientras el crecimiento impulsado por agentes llevará los commits trimestrales del monorrepo a superar a final de año en más de un 2.400% los de principios de 2024; la fiabilidad había caído por debajo del 90%.
Por qué importa
Los agentes de programación generan muchos más commits, ramas y descargas que los equipos humanos, y OpenAI dice que su alojamiento de Git no podía con esa carga en su monorrepo principal. Pando, descrito en un artículo de ingeniería de Aaron Friel, Taylor Blau y Ted Nyman, gestiona cada rama de forma independiente y deja de generar packfiles a medida para cada cliente, a lo que el equipo atribuye la mejora. El texto ofrece una rara visión de la presión que los agentes de IA ejercen sobre la infraestructura de un laboratorio puntero. Habrá que ver si OpenAI libera Pando o si otros grandes equipos lo imitan.
Datos clave
- Latencia de push reducida casi cinco veces (alrededor del 80%, según @OpenAIDevs)
- Sirve cerca de un petabyte de datos de Git al día
- Commits trimestrales del monorrepo: más de un 2.400% sobre el primer trimestre de 2024 a final de año
- La fiabilidad había caído por debajo del 90% antes de Pando
- Gestiona cada rama de forma independiente; sin packfiles a medida por cliente