Escudo de la República de Colombia

Ciencia & Tecnología

IA aprende más rápido un videojuego con niveles graduales de dificultad

Un jugador controlado con inteligencia artificial (IA) al que se le va incrementando la dificultad en cada videojuego aprende más rápido que cuando se trata de enseñarle con el máximo nivel de dificultad desde el inicio.

Bogotá D. C., 23 de noviembre de 2020Agencia de Noticias UN-

La IA se usa en sistemas robóticos que operan plantas de producción o detección de fraude en operaciones bancarias.

LA IA puede aprender más rápido a jugar un videojuego si se usan currículos de aprendizaje durante su entrenamiento.

Los currículos que tuvieron el mejor desempeño redujeron el tiempo de entrenamiento desde un 15 % hasta un 40%.

El magíster Sáenz diseñó 24 currículos, cada uno variando diferentes parámetros del partido a distintas velocidades.

Los resultados obtenidos también se podrían aplicar a otros ámbitos como la robótica, la ciberseguridad y la conducción autónoma.

Así lo determinó una investigación reciente que muestra cómo el aprendizaje por currículos, o métodos, puede reducir el tiempo de aprendizaje de un agente inteligente –que en esencia es un algoritmo de IA diseñado para ejecutar una tarea específica– en un videojuego.

En el estudio, realizado por Rigoberto Sáenz Imbacuán, magíster en Ingeniería de Sistemas y Computación de la Universidad Nacional de Colombia (UNAL), con la dirección del profesor Jorge Eliécer Camargo Mendoza, doctor en la misma área, se plantea cómo un agente inteligente potencialmente puede aprender más rápido a jugar un videojuego si se usan currículos de aprendizaje durante su entrenamiento. Estos currículos son un conjunto de parámetros que determinan como varía la dificultad del juego en el tiempo.

En los experimentos entrenaron al agente para que aprendiera un videojuego de minifútbol de dos jugadores usando un currículo en particular, durante 100 millones de partidos que fueron simulados usando el motor de videojuegos Unity.

En los currículos de mejor desempeño, el agente aprendió de manera óptima solo con 60 o 70 millones de partidos. En cada uno, el agente inteligente, representado como un cubo azul en el videojuego, competía con un adversario rojo; el campo de fútbol tenía barreras que evitaban que la pelota saliera del campo y facilitaba el entrenamiento.

El agente podía ver su entorno mediante rayos de detección lanzados continuamente en diferentes direcciones y que detectan todos los elementos presentes en el campo, incluyendo los adversarios, el balón, las barreras y los arcos.

El investigador diseñó 24 currículos variando en cada uno parámetros del partido a distintas velocidades, con el fin de determinar cuáles tenían mejor efecto en los tiempos de entrenamiento.

Cada currículo se puede interpretar como distintas formas de darle una ventaja al jugador. “Al inicio de un partido, para guiar el proceso de aprendizaje del jugador, puedo reducir la velocidad de movimiento de los adversarios dándole una ventaja significativa y permitiéndole aprender rápidamente a perseguir la pelota y empujarla al arco contrario. Cuando aprende a marcar goles aumento la velocidad de los adversarios, con el fin de que este aprenda a esquivarlos y siga anotando goles”, detalla el magíster Sáenz.

El escenario de la IA

La inteligencia artificial es cada vez más usada en diferentes ámbitos, incluyendo sistemas robóticos que operan plantas de producción, detección de fraude en operaciones bancarias, y análisis y segmentación de compradores a partir de información de sus compras pasadas.

Usualmente, para que un jugador controlado por IA aprenda a jugar un videojuego, por ejemplo de baloncesto, se ponen todos los adversarios en el campo de juego desde el inicio y se le indica: “muévase, actúe”, y según sus acciones se le da una recompensa o un castigo.

Si hace una cesta se le recompensa, si los adversarios la hacen se le castiga. En este escenario es muy difícil que el jugador aprenda de manera rápida y efectiva, ya que desde el inicio existe una clara desventaja y recibirá muchas cestas en contra. Eventualmente aprenderá a evitar que le hagan puntos, y luego aprenderá a hacerlos, pero será necesario que juegue cientos y miles de millones de partidos para aprenderlo.

“La hipótesis de nuestro trabajo es que este proceso de dificultad incremental es más efectivo, en términos de la velocidad de aprendizaje”, asegura el investigador.

Los currículos que tuvieron el mejor desempeño exhibieron características comunes y redujeron el tiempo de entrenamiento desde un 15 hasta un 40 % en el mejor de los casos.

Si se tiene en cuenta que el tiempo de entrenamiento de un agente inteligente usualmente toma varias semanas, o incluso meses, la reducción resulta significativa.

Este tipo de entrenamientos se suelen ejecutar en servicios de computación en la nube que pueden resultar costosos, por lo que una reducción de tiempos de entrenamiento también se traduce en una disminución de costos.

Si bien la aplicación principal de los resultados de esta investigación es el desarrollo de NPC (Non-player character), que son los jugadores autónomos contra los que un jugador humano debe competir dentro de un videojuego, los resultados también se podrían aplicar a otros ámbitos como la robótica, la ciberseguridad y la conducción autónoma.

(Por: fin/SRB/MLA/LOF
)
N.° 256

Otras noticias

Modelo 3D de una estructura aislada y de una estructura tradicional. Foto: Sergio González.

Ciencia & Tecnología

abril 13 de 2021

Aisladores sísmicos, una buena opción para edificaciones en Colombia

Con la instalación de estos dispositivos, que minimizan el impacto de un...

Expresar las emociones en juegos de rol, como en el cine, les brinda a los niños capacidades para entender otras formas de ver el mundo. Fotos: Unimedios.

Artes & Culturas

abril 13 de 2021

Cine también forma a los niños a partir del juego

Las historias de ficción no se quedarían solo allí, sino que servirían para...

El estudio de las lluvias permite anticipar emergencias. Foto: Alcaldía de Medellín.

Ciudad & Territorio

abril 13 de 2021

Monitoreo de lluvias ayuda a prevenir emergencias en el río Medellín

Estudios desarrollados por investigadores de la Universidad Nacional de...

Las empresas deben incluir el riesgo biológico dentro de sus matrices de riesgo. Fotos: archivo Unimedios.

Economía & Organizaciones

abril 13 de 2021

Riesgo biológico se debe incluir en gestión de las empresas

Mantener un flujo de caja y contar con reservas económicas para momentos de...

Las plantas hiperacumuladoras se pueden usar para recuperar suelos degradados y para hacer extracción minera. Foto: Yordi Bustos.

Medioambiente

abril 13 de 2021

Plantas hiperacumuladoras reducirían contaminación por minería

El 98 % de las plantas que tienen la capacidad de acumular y tolerar...

Los asistentes de voz se utilizan en los hogares para ejecutar tareas como encender luces o para suministrar información. Foto: Frederic J. BROWN / AFP.

Ciencia & Tecnología

abril 12 de 2021

Técnica mejora privacidad de mensajes para asistentes de voz

Una red de sensores de micrófonos parecidos a los que tienen asistentes de voz...

El Congreso tendrá 30 simposios, 169 ponencias y más de 350 de personas de la comunidad universitaria. Fotos: Unimedios.

Educación

abril 12 de 2021

UNAL “aprende” de su reforma académica

Desde 2019 la Universidad Nacional de Colombia (UNAL) desarrolla una evaluación...

La especie <i>Cryptotaenia japonica Hassk</i> se registra por primera vez en Colombia. Fotos: Jairo Peña y Andrés Fonseca.

Medioambiente

abril 12 de 2021

Planta asiática, identificada por primera vez en Colombia

Con sus hojas ternadas, márgenes irregulares como sierras, pétalos blancos, y...

La profesora Dolly Montoya Castaño, rectora de la UNAL, durante el acto de apertura del Congreso Nacional de Educación y Pedagogía. Fotos: Unimedios.

Educación

abril 12 de 2021

Re-humanizar la academia, una necesidad urgente

¿Cómo te sientes? ¿cómo te encuentras? ¿estás bien? ¿qué aprendiste para tu...

La ciudadela CaliDA se proyecta como un modelo de barrio sostenible en Cali. Foto: Alcaldía de Cali.

Ciudad & Territorio

abril 12 de 2021

Drenajes sostenibles evitarían inundaciones en barrio de Cali

Mediante techos o cubiertas verdes y pavimentos porosos, que forman parte de...