Según el informe de OpenAI, los resultados abarcaron ocho campos e incluyeron pruebas, contraejemplos y cotas mejoradas :
OpenAI no se basó únicamente en el resultado del modelo. Cada resultado fue acompañado de un certificado de prueba formal Lean 4, un archivo de prueba verificable por computadora que cualquier lector puede verificar de forma independiente en una computadora portátil . Lean es un asistente de pruebas que comprueba cada paso lógico desde los axiomas hasta la conclusión, detectando lagunas, errores de tipo e inconsistencias . OpenAI publicó todos los archivos Lean públicamente en GitHub, y el recuento de "sorry" del repositorio, que indica pasos no probados, es cero para las diez pruebas .
Sin embargo, varios comentaristas señalaron que la verificación formal tiene límites importantes: Lean puede confirmar que una declaración formal se sigue de sus definiciones formales, pero no puede certificar que un resumen de comunicado de prensa refleje con precisión el teorema formal, que las definiciones formales coincidan con el problema previsto por la comunidad matemática, o que la novedad y el encuadre histórico del resultado sean correctos . Los expertos aún deben auditar la fidelidad de las declaraciones, las definiciones, las reducciones y el puente entre lo informal y lo formal .
OpenAI reveló que el costo total de cómputo para generar las diez soluciones fue de aproximadamente 2.000 dólares en costos de tokens según la tarifa de la API Sol . Esta cifra es un precio equivalente a la API solo para los tokens de búsqueda de soluciones; excluye los intentos fallidos, las ejecuciones de exploración paralela y el cómputo interno gastado en la búsqueda antes de llegar a un certificado . En comparación, el estipendio anual de un solo estudiante de doctorado en matemáticas en una universidad de primer nivel puede superar los 50.000 dólares, lo que convierte a la eficiencia de costos en el aspecto más sorprendente del anuncio para muchos observadores .
La comunidad matemática y los investigadores de IA han planteado varios puntos de precaución: