Hace más de 10 años descubrimos que el entrenamiento de los modelos de lenguaje escala. Es decir, cuanto más poder de cómputo utilizamos para su entrenamiento, más inteligente es el modelo. Desde entonces, llevamos multiplicando ese poder de cómputo por 4.6 cada año y los modelos han evolucionado en igual medida hasta llegar donde estamos ahora. Para ese entrenamiento hemos utilizado datos estructurados en su gran mayoría. Etiquetados por seres humanos, preprocesados y ordenados
Vivimos en un momento histórico marcado por una paradoja fascinante y desafiante a partes iguales: el crecimiento exponencial de la Inteligencia Artificial. Sin embargo, nuestra mente, moldeada durante milenios de evolución, se resiste a comprender intuitivamente estos procesos explosivos. Esta incapacidad genera una incertidumbre que afecta nuestras predicciones, decisiones empresariales y la sociedad en su conjunto. La IA se desarrolla actualmente a una tasa de crecimiento asombrosa: cada año la potencia computacional requerida para entrenar modelos punteros se multiplica por aproximadamente 4,6.