Buone implementazioni dell'apprendimento rinforzato?

Question

Per un progetto ai-class ho bisogno di implementare un algoritmo di apprendimento di rinforzo che batte un semplice gioco di tetris. Il gioco è scritto in Java e abbiamo il codice sorgente. Conosco le basi della teoria dell'apprendimento rinforzato, ma mi chiedevo se qualcuno nella comunità SO avesse esperienza pratica con questo tipo di cose.

1. Quali sarebbero le letture consigliate per un'implementazione dell'apprendimento rinforzato in un gioco tetris?
2. Ci sono dei buoni progetti open source che realizzano cose simili che varrebbe la pena di verificare?

Modifica: più sono specifici meglio è, ma le risorse generali sull'argomento sono benvenute.

Follow up:

pensato che sarebbe stato bello se ho postato un follow-up.

Ecco la soluzione (codice e correzione) che ho trovato per eventuali futuri studenti :).

Paper/Code

Answer 1

Date un'occhiata ai 2009 RL-competition. Uno dei domini del problema è un tetris game. C'è stato un problema di tetris anche l'anno prima. Ecco lo 52-page final report del quinto finalista di quell'anno, che contiene molti dettagli su come ha funzionato l'agente.

Answer 2

Il Heaton Research ebook è abbastanza bravo a spiegare i concetti di reti neurali (con codice). Il capitolo 4 è dedicato all'apprendimento automatico e ai vari metodi di allenamento per le tue reti. C'è una libreria scaricabile e esempi di applicazioni da guardare.

Answer 3

Ecco un buon libro sul tema:

Machine Learning and Data Mining: Introduction to Principles and Algorithms
di Igor Kononenko, Matjaz Kukar (giugno 2007)

prendere anche uno sguardo a questi progetti open source:

• Maja Machine Learning Framework
• PIQLE
• Elsy
• The Robotics Primer Workbook

Answer 4

TD-Gammon, gnubackgammon o qualsiasi altro progetto simile sono stati massicci successi nei giochi.

Sutton & Il libro di Barto "Apprendimento rinforzato: un'introduzione" ha anche altri Case Studies.

Answer 5

Questo non è specifico per l'apprendimento rinforzato, ma Stanford ha una grande serie di conferenze su machine learning on Youtube e iTunes.

Il collegamento è alla prima lezione che impiega circa 30 minuti per immergersi nel contenuto.

Answer 6

Burlap è una recente libreria Java che fornisce implementazioni di molti comuni algoritmi di apprendimento di rinforzo, nonché alcuni ambienti e strumenti utili.