Clase Magistral: Miercoles 9:30AM – 11:20PM
Horario de atencion: Miercoles 12:00-PM – 1:00PM
Programa: Modelos de interacciones sociales (2024 – II)
Presentaciones
Semana/ Sesión/Modalidad |
Tema |
Referencias |
32/1 |
No hay clase |
|
33/2 [V] |
Bandidos multiarmados |
[SB]: Capitulos 1, 2. |
34/3 [V] |
Bandidos multiarmados combinatorios |
|
35/4 [P] |
Aplicaciones |
|
36/5 [V] |
Thompson Sampling I |
[TS]: Capitulos 1, 2, 3, 4. |
37/6 [P] |
Thompson Sampling II |
[TS]: Capitulos 6, 7. |
38/7 [V] |
Aplicaciones Economía Digital Otras Aplicaciones |
The Surprising Power of Online Experiments: Prevention of Overly-Powerful Agents and Promotion of Innovation |
39/8 [P] |
Procesos de Decisión de Markov |
[SB]: Capitulo 3. |
40 |
Semana de receso |
|
41/9 [P] |
Programación Dinámica |
[SB]: Capitulo 4. Presentación (nueva version) |
42/10 [V] |
Montecarlo |
[SB]: Capitulo 5. |
43/11 [P] |
Temporal Difference |
[SB]: Capitulo 6. |
44/12 [V] |
Presentaciones Estudiantes |
|
45/13 [P] |
Aplicaciones |
|
46/14 [V] |
Aplicaciones |
|
47/15 [P] |
Bootstrapping |
[SB]: Capitulo 7. |
Guía Trabajo Final
Una forma de evaluar el valor y riesgo de una propuesta de investigacion es seguir el Catecismo de Heilmeier
Un buen articulo en este curso debe tener un estructura como esta:
- Introducción: el problema y su relevancia, revisión de la literatura y contribución especifica del artículo en el contexto de esta literatura.
- Descripción de los datos.
- El modelo (si lo hay) y ojala algún resultado teórico (si se puede, no es fundamental).
- El algoritmo utilizado (si se utiliza algun algoritmo especifico para analizar la red).
- Aplicación a por lo menos dos cosas: (1) Datos sintéticos (opcional) y (2) Una base de datos del mundo real.
- Conclusiones
El estándar de edición de las publicaciones académicas es Latex. Para instalar este sistema de edición recomiendo:
- Descargar Latex de https://www.latex-project.org/
- Descargar un editor de Latex. Texstudio es muy bueno: https://www.texstudio.org/
- Este template puede ser bueno para comenzar a modificar: KDD Template Example
Guía de la Presenetacion de la Propuesta del Trabajo Final
Esta guia esta bien alineada con la guia del trabajo final.
- Describir bien el problema y su relevancia.
- Hacer una revisión de la literatura y explicar cómo creen que con su proyecto pueden contribuir a la solución del problema y a la literatura.
- Descripción de las fuentes de datos y ojalá algo de estadísticas descriptivas. Hacer un análisis preliminar de la pertinencia de los datos para resolver el problema y en lo posible de la calidad de la información.
- Explicar bremente cual es el plan para resolver el problema (algorítmos, plan de validación, etc.) y responder si los datos y el plan son en principio apropiados,
- Cuáles son los resultados esperados?
Lecturas
[SB] Sutton, R. S., & Barto, A. G. (2018). Reinforcement learning: An introduction. MIT press. https://www.andrew.cmu.edu/course/10-703/textbook/BartoSutton.pdf
[TS] Daniel J. Russo, Benjamin Van Roy, Abbas Kazerouni, Ian Osband, and Zheng Wen. 2018. A Tutorial on Thompson Sampling. Found. Trends Mach. Learn. 11, 1 (Jul 2018), 1–96. https://web.stanford.edu/~bvr/pubs/TS_Tutorial.pdf
[R] Modelling underreported spatio-temporal crime events: https://journals.plos.org/plosone/article?id=10.1371/journal.pone.0287776