La Arquitectura OaK: Desbloqueando la superinteligencia abierta y general a través de la experiencia

En esta visionaria charla, Rich Sutton presenta la Arquitectura OaK, un intento de abordar los desafíos centrales de la IA y una propuesta hacia la superinteligencia a partir de la experiencia. OaK se diferencia de modelos no experienciales como los LLM, postulando que el camino hacia una IA fuerte reside en el aprendizaje por refuerzo y en la superación de algoritmos de aprendizaje inadecuados. Sus principios fundamentales son ser general de dominio (sin conocimiento predefinido del mundo), experiencial (aprendiendo exclusivamente en tiempo de ejecución, no en una fase de entrenamiento especial) y abierta en su sofisticación para formar cualquier concepto o abstracción necesaria. La arquitectura permite que el agente, operando bajo una "perspectiva de mundo grande", genere sus propios subproblemas y abstracciones a partir de características percibidas, aprendiendo a través de 'opciones' (políticas de comportamiento con criterios de terminación) y construyendo modelos de alto nivel para la planificación. OaK es una búsqueda de una comprensión conceptual de la mente que propone un ciclo virtuoso de descubrimiento de características, subproblemas y modelos, que, aunque aún enfrenta desafíos clave en el aprendizaje continuo y la generación de características, ofrece una visión plausible para una superinteligencia ilimitada que crece enteramente de la interacción con el mundo en tiempo real.https://www.youtube.com/watch?v=gEbbGyNkR2U