# ARPO: La IA que revoluciona el uso de herramientas en LLMs con mitad de Costo y máxima eficiencia

Episodio de [En la mente de la máquina](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina).

- Publicado: 8 de agosto de 2025
- Duración: 6 min
- Página: https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/8650627-arpo-la-ia-que-revoluciona-el-uso-de-herramientas-en-llms-con-mitad-de-costo-y

## Sobre este episodio

Descubre ARPO (Agentic Reinforced Policy Optimization), un innovador algoritmo de aprendizaje reforzado diseñado para entrenar agentes basados en Modelos de Lenguaje Grandes (LLMs) en tareas de razonamiento multi-turno. Este video te revelará cómo ARPO aborda la alta incertidumbre (entropía de tokens) que experimentan los LLMs inmediatamente después de interactuar con herramientas externas. Gracias a su mecanismo de "rollout" adaptativo basado en entropía y la estimación de atribución de ventaja, ARPO equilibra la exploración global y a nivel de paso, fomentando un comportamiento de uso de herramientas más diverso y eficaz. Prepárate para ver cómo ARPO no solo supera consistentemente a los algoritmos de RL tradicionales en 13 exigentes "benchmarks" de razonamiento computacional, de conocimiento y de búsqueda profunda, sino que lo logra utilizando ¡solo la mitad del presupuesto de llamadas a herramientas requerido por otros métodos! Una solución escalable que potencia la inteligencia agéntica en entornos dinámicos.https://arxiv.org/pdf/2507.19849

Anterior: [¡La IA que SIMULA 10,000 VIDAS humanas para desvelar el futuro de la sociedad!](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/8650632-la-ia-que-simula-10000-vidas-humanas-para-desvelar-el-futuro-de-la-sociedad)
Siguiente: [Alucinaciones en LLM: La verdad incómoda de la IA y cómo navegarla](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/8650628-alucinaciones-en-llm-la-verdad-incomoda-de-la-ia-y-como-navegarla)

## Últimos episodios de En la mente de la máquina

- [¡Así Detectan IA Robada! Cuenca de Marcas de Agua y Detección de Modelos LLM Destilados](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/147029776-asi-detectan-ia-robada-cuenca-de-marcas-de-agua-y-deteccion-de-modelos-llm) · 31 de octubre de 2026 · 10 min
- [¡Google Presenta Gemini 4 Carbon! La IA Revolucionaria en Ciberseguridad y Código](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/147013300-google-presenta-gemini-4-carbon-la-ia-revolucionaria-en-ciberseguridad-y-codigo) · 29 de octubre de 2026 · 18 min
- [¿La IA Reemplazará a los Ingenieros? El Benchmark PLE de Google Revela la Verdad](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/147002129-la-ia-reemplazara-a-los-ingenieros-el-benchmark-ple-de-google-revela-la-verdad) · 28 de octubre de 2026 · 18 min
- [¡La Revolución de la IA! NCP-ArchPreview: Modelo Latente 2x Más Rápido](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/146978939-la-revolucion-de-la-ia-ncp-archpreview-modelo-latente-2x-mas-rapido) · 26 de octubre de 2026 · 29 min
- [¿Puede una IA Tener Conciencia Real? El Revelador Marco de Google DeepMind](https://escuchario.semeescucha.es/podcast/en-la-mente-de-la-maquina/episodio/146968013-puede-una-ia-tener-conciencia-real-el-revelador-marco-de-google-deepmind) · 25 de octubre de 2026 · 25 min