0:00:00.100,0:00:02.050 ♪ (música) ♪ 0:00:03.620,0:00:05.700 - [Narradora] Bienvenidos[br]a Nobel Conversations. 0:00:07.000,0:00:08.521 En este episodio,[br]Josh Angrist y Guido Imbens 0:00:08.521,0:00:09.282 están con Isaiah Andrews[br]para discutir y discrepar 0:00:09.282,0:00:09.662 sobre el papel[br]del aprendizaje automático 0:00:09.662,0:00:10.043 en la econometría aplicada. 0:00:10.043,0:00:11.859 - [Isaiah] Entonces, por supuesto[br]que hay muchos temas 0:00:11.859,0:00:12.767 en los que ustedes están muy de acuerdo,[br]pero me gustaría pasar a uno 0:00:12.767,0:00:13.675 en el que tal vez[br]tengan algunas discrepancias. 0:00:13.675,0:00:15.127 Me gustaría escuchar[br]algunas de sus opiniones 0:00:15.127,0:00:15.853 sobre el aprendizaje automático 0:00:15.853,0:00:16.580 y el papel que está desempeñando[br]y va a desempeñar en la economía. 0:00:17.897,0:00:18.833 - [Guido] He consultado algunos datos[br]como el propietario----------------------. 0:00:18.833,0:00:19.301 Vemos que no hay[br]ningún documento publicado allí. 0:00:19.301,0:00:19.535 Se hizo un experimento[br]sobre algún algoritmo de búsqueda 0:00:19.535,0:00:19.652 y la cuestión era... 0:00:19.652,0:00:19.710 se trataba de clasificar cosas[br]y cambiar la clasificación. 0:00:19.710,0:00:19.739 Y estaba más o menos claro[br]que iba a haber mucha heterogeneidad. 0:00:19.739,0:00:19.754 Si buscas, digamos, una foto de Britney Spears -- 0:00:19.754,0:00:19.761 realmente no importa dónde la clasifiques-----------------------------------[br]porque vas a encontrar lo que estás buscando, 0:00:19.761,0:00:19.765 ya sea que la pongas en la primera,[br]segunda o tercera posición del ranking. 0:00:19.765,0:00:19.767 Pero si estás buscando[br]el mejor libro de econometría, 0:00:19.767,0:00:19.768 si pones tu libro en primer lugar[br]o en el décimo, 0:00:19.768,0:00:19.768 eso va a suponer una gran diferencia 0:00:19.768,0:00:19.768 en la frecuencia[br]con la que la gente va a hacer clic en él. 0:00:19.768,0:00:19.769 Así que ahí... 0:00:22.313,0:00:23.276 [Josh] ¿Por qué necesito[br]el aprendizaje automático para descubrir eso? 0:00:23.276,0:00:24.240 Parece que --porque puedo descubrirlo simplemente.----------------------- 0:00:24.240,0:00:24.984 - [Guido] En general -- 0:00:24.984,0:00:25.356 - [Josh] Había un montón de posibles... 0:00:25.356,0:00:25.542 - Quieres pensar en que hay un montón de características de los artículos, 0:00:25.542,0:00:25.635 que quieres entender lo que impulsa la heterogeneidad en el efecto de -- 0:00:25.635,0:00:25.681 - Pero solo estás prediciendo. 0:00:25.681,0:00:25.704 En cierto sentido, estás resolviendo[br]un problema de marketing. 0:00:25.704,0:00:25.716 - No, es un efecto causal, 0:00:25.716,0:00:25.722 - Es causal, pero no tiene contenido científico. 0:00:25.722,0:00:25.725 Piensa en... 0:00:25.725,0:00:25.726 - No, pero hay cosas similares[br]en el ámbito médico. 0:00:25.726,0:00:25.727 Si haces un experimento, 0:00:25.727,0:00:25.727 puedes estar muy interesado[br]en si el tratamiento funciona 0:00:25.727,0:00:25.727 para algunos grupos o no. 0:00:25.727,0:00:25.727 Y tienes un montón[br]de características individuales, 0:00:25.727,0:00:25.727 y quieres buscar sistemáticamente... 0:00:25.727,0:00:25.727 - Sí. Soy escéptico sobre esa... 0:00:25.727,0:00:25.727 esa especie de idea de que hay[br]un efecto causal personal 0:00:25.727,0:00:25.727 que me debería importar 0:00:25.727,0:00:25.727 y que el aprendizaje automático[br]puede descubrirlo de alguna manera que sea útil. 0:00:25.727,0:00:25.727 Así que piensa en -- 0:00:25.727,0:00:25.727 he hecho[br]un montón de trabajo en las escuelas, 0:00:25.727,0:00:25.727 ir a, digamos, una escuela charter,------------------------------------------------- 0:00:25.727,0:00:25.727 una escuela privada financiada[br]con fondos públicos, 0:00:25.727,0:00:25.727 efectivamente, que es libre de estructurar[br]su propio plan de estudios para el contexto allí. 0:00:25.727,0:00:25.727 Algunos tipos de escuelas chárter[br]generan espectaculares ganancias de rendimiento 0:00:25.727,0:00:25.727 y en el conjunto de datos[br]que produce ese resultado, 0:00:25.727,0:00:25.727 tengo un montón de covariables. 0:00:25.727,0:00:25.727 Así que tengo las puntuaciones de referencia 0:00:25.727,0:00:25.727 y tengo los antecedentes familiares, 0:00:25.727,0:00:25.727 la educación de los padres,[br]el sexo del niño, la raza del niño. 0:00:25.727,0:00:25.727 Y, bueno, en cuanto reúno[br]media docena de ellas, 0:00:25.727,0:00:25.727 tengo un espacio de muy alta dimensión. 0:00:25.727,0:00:25.727 Definitivamente me interesan[br]las características del curso 0:00:25.727,0:00:25.727 de ese efecto del tratamiento, 0:00:25.727,0:00:25.727 como por ejemplo si es mejor para las personas[br]que provienen de familias con menores ingresos. 0:00:25.727,0:00:25.727 Me cuesta creer que haya una aplicación para la versión de muy alta dimensión de eso, 0:00:25.727,0:00:25.727 en la que descubrí[br]que para los niños no blancos 0:00:25.727,0:00:25.727 que tienen ingresos familiares altos 0:00:25.727,0:00:25.727 pero puntuaciones de referencia en el tercer cuartil 0:00:25.727,0:00:25.728 y que solo fueron a la escuela pública[br]en el tercer grado pero no en el sexto. 0:00:25.728,0:00:26.305 Así que eso es lo que produce[br]ese análisis de alta dimensión. 0:00:26.305,0:00:26.883 Es una declaración condicional[br]muy elaborada. 0:00:30.200,0:00:33.352 Hay dos cosas que están mal,[br]en mi opinión. 0:00:33.352,0:00:34.251 En primer lugar, no lo veo como... 0:00:34.251,0:00:34.700 no puedo imaginar[br]por qué es procesable. 0:00:34.700,0:00:34.925 No sé por qué querrías actuar sobre ello. 0:00:34.925,0:00:35.037 Y también sé que hay algún modelo alternativo que encaja casi igual, que lo invierte todo. 0:00:35.037,0:00:35.093 Porque el aprendizaje automático 0:00:35.093,0:00:35.121 no me dice que este es realmente[br]el predictor que importa -- 0:00:35.121,0:00:35.150 sólo me dice que este es un buen predictor. 0:00:36.122,0:00:37.140 Así que creo que hay algo diferente[br]en el contexto de las ciencias sociales. 0:00:37.140,0:00:37.649 - [Guido] Creo que las aplicaciones[br]de las ciencias sociales 0:00:37.649,0:00:37.904 de las que hablas[br]son aquellas en las que, creo, 0:00:37.904,0:00:38.031 no hay una gran cantidad de heterogeneidad[br]en los efectos. 0:00:38.031,0:00:38.095 - [Josh] Bueno, podría haberla[br]si me permites llenar ese espacio. 0:00:38.095,0:00:38.127 - No... ni siquiera entonces. 0:00:38.127,0:00:38.143 Creo que para muchas de esas intervenciones, 0:00:38.143,0:00:38.151 se espera que el efecto sea del mismo signo para todos. 0:00:38.151,0:00:38.155 Puede haber pequeñas diferencias[br]en la magnitud, pero no es... 0:00:38.155,0:00:38.157 Para muchas de estas defensas educativas[br]- son buenas para todos. 0:00:38.157,0:00:38.158 No es que sean malas para algunas personas[br]y buenas para otras 0:00:38.158,0:00:38.159 y eso es una especie ------------------------------------------------------------------------------------------------------------------------------------. 0:00:38.159,0:00:38.829 Pero puede haber[br]algo de variación en la magnitud, 0:00:38.829,0:00:39.164 pero se necesitarían conjuntos de datos[br]muy, muy grandes para encontrarlos. 0:00:39.164,0:00:39.332 Estoy de acuerdo en que, en esos casos,[br]probablemente no serían muy procesables de todos modos. 0:00:39.332,0:00:39.416 Pero creo que hay muchos otros escenarios[br]donde hay mucha más heterogeneidad. 0:00:39.416,0:00:39.458 - Bueno, estoy abierto a esa posibilidad 0:00:39.458,0:00:39.479 y creo que el ejemplo que has dado[br]es esencialmente un ejemplo de marketing. 0:00:39.479,0:00:39.489 - No, esos tienen implicaciones para ello[br]y esa es la organización, 0:00:39.489,0:00:39.494 si tienes que preocuparte por la... 0:00:39.494,0:00:39.497 - Bueno, necesito ver ese documento. 0:00:39.497,0:00:39.498 - Así que, la sensación que tengo es que... 0:00:39.498,0:00:39.499 - Todavía no estamos de acuerdo en algo. 0:00:39.499,0:00:39.499 - Sí. 0:00:39.499,0:00:39.499 - No hemos convergido en todo. 0:00:39.499,0:00:39.499 - Tengo esa sensación. [risas] 0:00:39.499,0:00:39.499 - En realidad, hemos divergido[br]en esto porque esto no estaba para discutir. 0:00:39.499,0:00:39.499 [risas] 0:00:39.499,0:00:39.499 - ¿Se está calentando un poco aquí? 0:00:39.499,0:00:39.499 - ------------------------------------------------------es bueno. 0:00:39.499,0:00:39.499 La sensación que tengo es, Josh, 0:00:39.499,0:00:39.499 que no estás diciendo[br]que estás seguro de que no hay manera de que haya una aplicación en la que estas cosas sean útiles. 0:00:39.499,0:00:39.499 Estás diciendo[br]que no estás convencido 0:00:39.499,0:00:39.499 de las aplicaciones existentes[br]hasta la fecha. 0:00:39.499,0:00:39.499 - Es justo. 0:00:39.499,0:00:39.499 - Estoy muy seguro. 0:00:39.499,0:00:39.499 [risas] 0:00:39.499,0:00:39.499 - En este caso. 0:00:39.499,0:00:39.499 - Creo que Josh tiene un punto que incluso en los casos de predicción donde muchos de los métodos de aprendizaje de la máquina realmente brillan es donde hay un montón de heterogeneidad. 0:00:39.499,0:00:39.499 - No te importan mucho los detalles,[br]¿verdad? 0:00:39.499,0:00:39.499 - [Guido] Sí. 0:00:39.499,0:00:39.499 - No tiene un ángulo de política o algo así. 0:00:39.499,0:00:39.500 0:00:39.700,0:00:41.327 0:00:42.901,0:00:45.600 0:00:45.900,0:00:47.290 0:00:48.400,0:00:50.610 0:00:52.161,0:00:56.282 0:00:57.831,0:01:00.617 0:01:00.617,0:01:02.493 0:01:02.493,0:01:05.500 0:01:06.200,0:01:07.867 0:01:07.867,0:01:09.920 0:01:10.100,0:01:12.500 0:01:13.300,0:01:16.430 0:01:16.430,0:01:18.100 0:01:18.600,0:01:20.979 0:01:21.829,0:01:23.417 0:01:23.417,0:01:27.119 0:01:27.119,0:01:29.195 0:01:29.195,0:01:30.435 0:01:30.435,0:01:32.100 0:01:32.100,0:01:35.045 0:01:35.490,0:01:37.280 0:01:37.610,0:01:41.682 0:01:42.177,0:01:43.427 0:01:43.427,0:01:45.008 0:01:45.008,0:01:47.665 0:01:47.665,0:01:49.381 0:01:49.381,0:01:51.911 0:01:51.911,0:01:53.141 0:01:53.657,0:01:57.300 0:01:58.000,0:02:01.300 0:02:01.300,0:02:03.900 0:02:03.900,0:02:06.143 0:02:06.143,0:02:08.000 0:02:08.000,0:02:09.500 0:02:09.500,0:02:12.603 0:02:12.603,0:02:14.000 0:02:14.000,0:02:15.740 0:02:15.740,0:02:17.259 0:02:17.259,0:02:20.045 0:02:20.045,0:02:22.336 0:02:22.336,0:02:24.428 0:02:25.225,0:02:27.392 0:02:27.392,0:02:29.399 0:02:29.399,0:02:31.369 0:02:31.369,0:02:33.703 0:02:33.703,0:02:36.400 0:02:36.400,0:02:37.800 0:02:37.800,0:02:41.353 0:02:41.353,0:02:43.207 0:02:43.576,0:02:45.800 0:02:45.800,0:02:49.795 0:02:49.795,0:02:51.900 0:02:52.300,0:02:55.199 0:02:55.199,0:02:56.457 0:02:56.457,0:02:58.741 0:02:58.741,0:03:02.046 0:03:02.600,0:03:05.760 0:03:07.273,0:03:09.872 0:03:09.872,0:03:12.406 0:03:12.406,0:03:14.971 0:03:14.971,0:03:17.800 0:03:18.166,0:03:21.785 0:03:21.785,0:03:23.000 0:03:23.000,0:03:25.796 0:03:25.800,0:03:28.100 0:03:28.300,0:03:30.605 0:03:30.605,0:03:31.797 0:03:31.797,0:03:34.000 0:03:34.600,0:03:36.600 0:03:36.600,0:03:39.455 0:03:39.455,0:03:41.200 0:03:41.800,0:03:43.398 0:03:43.398,0:03:45.350 0:03:45.350,0:03:48.582 0:03:48.582,0:03:50.965 0:03:51.486,0:03:54.870 0:03:54.870,0:03:57.586 0:03:57.940,0:04:00.186 0:04:00.186,0:04:01.633 0:04:01.633,0:04:02.735 0:04:03.400,0:04:08.100 0:04:09.777,0:04:11.544 0:04:11.544,0:04:13.466 0:04:13.466,0:04:15.740 0:04:15.740,0:04:18.614 0:04:18.614,0:04:22.765 0:04:24.367,0:04:27.600 0:04:28.200,0:04:30.232 0:04:30.232,0:04:31.700 0:04:34.169,0:04:36.034 0:04:36.034,0:04:37.600 0:04:37.600,0:04:39.100 0:04:39.100,0:04:40.900 0:04:40.900,0:04:44.011 0:04:44.011,0:04:46.955 0:04:47.906,0:04:49.078 0:04:49.078,0:04:51.400 0:04:51.700,0:04:53.800 0:04:54.100,0:04:56.600 0:04:57.250,0:04:59.102 0:04:59.102,0:05:04.918 0:05:06.315,0:05:09.656 0:05:09.656,0:05:11.069 0:05:12.252,0:05:14.330 0:05:15.469,0:05:17.900 0:05:18.400,0:05:21.072 0:05:21.467,0:05:23.996 0:05:23.996,0:05:25.440 0:05:25.440,0:05:27.200 0:05:27.200,0:05:28.679 0:05:28.679,0:05:30.833 0:05:30.833,0:05:32.334 0:05:33.057,0:05:34.771 0:05:35.820,0:05:38.147 0:05:38.147,0:05:41.187 0:05:41.187,0:05:43.119 0:05:43.119,0:05:45.347 0:05:45.347,0:05:47.028 0:05:47.028,0:05:49.487 0:05:49.917,0:05:52.022 0:05:52.022,0:05:53.704 0:05:54.156,0:05:55.189 0:05:55.189,0:05:56.555 0:05:56.555,0:06:00.452 0:06:01.639,0:06:04.519 0:06:04.519,0:06:06.738 0:06:07.300,0:06:10.769 0:06:10.769,0:06:11.836 0:06:11.836,0:06:15.000 0:06:15.200,0:06:18.232 0:06:18.795,0:06:20.090 0:06:20.090,0:06:24.000 0:06:24.400,0:06:28.183 0:06:28.183,0:06:30.383 0:06:30.383,0:06:32.100 0:06:32.100,0:06:34.700 0:06:37.166,0:06:39.416 0:06:39.697,0:06:41.950 0:06:41.950,0:06:44.930 0:06:44.930,0:06:46.180 0:06:46.180,0:06:47.956 0:06:47.956,0:06:49.227 0:06:49.227,0:06:50.700 0:06:51.600,0:06:55.488 0:06:56.100,0:06:58.121 0:06:58.121,0:07:00.100 0:07:00.100,0:07:01.900 0:07:02.100,0:07:04.900 0:07:05.300,0:07:08.921 0:07:08.921,0:07:11.787 0:07:12.410,0:07:14.975 0:07:15.925,0:07:17.561 0:07:17.561,0:07:21.700 0:07:21.930,0:07:23.020 0:07:23.020,0:07:24.600 0:07:24.600,0:07:25.912 0:07:25.912,0:07:28.100 0:07:28.100,0:07:29.807 0:07:29.807,0:07:30.908 0:07:30.908,0:07:32.660 0:07:32.660,0:07:34.182 0:07:34.700,0:07:36.947 0:07:36.947,0:07:39.350 0:07:41.354,0:07:43.288 0:07:43.288,0:07:46.112 0:07:46.112,0:07:47.941 0:07:47.941,0:07:51.415 0:07:51.415,0:07:54.003 0:07:54.003,0:07:55.636 0:07:55.636,0:07:57.612 0:07:57.612,0:07:59.579 0:08:00.900,0:08:03.527 0:08:03.527,0:08:06.916 0:08:06.916,0:08:09.453 0:08:09.453,0:08:12.200 0:08:12.400,0:08:19.208 0:08:20.700,0:08:23.734 0:08:23.734,0:08:25.700 0:08:27.351,0:08:31.600 0:08:31.800,0:08:37.133 0:08:37.133,0:08:40.948 0:08:41.500,0:08:42.697 0:08:42.697,0:08:45.300 0:08:45.300,0:08:47.664 0:08:47.664,0:08:49.610 0:08:49.610,0:08:51.300 0:08:51.300,0:08:53.700 0:08:54.100,0:08:57.782 0:08:57.782,0:09:00.269 0:09:00.269,0:09:03.375 0:09:04.400,0:09:06.531 0:09:06.531,0:09:08.200 0:09:08.200,0:09:10.000 0:09:10.900,0:09:12.804 0:09:12.804,0:09:14.501 0:09:14.501,0:09:16.853 0:09:17.384,0:09:19.933 0:09:19.933,0:09:23.000 0:09:23.300,0:09:25.839 0:09:25.839,0:09:29.292 0:09:29.292,0:09:32.200 0:09:32.944,0:09:35.113 0:09:35.113,0:09:37.600 0:09:38.708,0:09:40.825 0:09:40.825,0:09:42.600 0:09:42.900,0:09:46.807 0:09:49.173,0:09:51.100 0:09:51.944,0:09:55.096 0:09:55.096,0:09:57.100 0:09:57.400,0:09:59.100 0:09:59.300,0:10:01.096 0:10:02.900,0:10:06.435 0:10:06.435,0:10:09.424 0:10:10.206,0:10:11.842 0:10:12.591,0:10:14.033 0:10:14.403,0:10:15.907 0:10:15.907,0:10:17.289 0:10:17.289,0:10:18.410 0:10:18.410,0:10:20.001 0:10:20.001,0:10:22.054 0:10:22.700,0:10:26.823 0:10:27.555,0:10:29.500 0:10:29.800,0:10:31.028 0:10:31.591,0:10:34.926 0:10:35.315,0:10:37.151 0:10:38.761,0:10:42.664 0:10:42.664,0:10:46.560 0:10:48.800,0:10:53.289 0:10:53.289,0:10:55.700 0:10:56.300,0:10:59.420 0:11:00.873,0:11:02.055 0:11:02.900,0:11:06.420 0:11:06.420,0:11:09.040 0:11:09.040,0:11:11.600 0:11:11.900,0:11:13.453 0:11:13.808,0:11:18.500 0:11:18.800,0:11:20.885 0:11:20.885,0:11:23.600 0:11:24.000,0:11:26.800 0:11:26.800,0:11:28.950 0:11:28.950,0:11:31.210 0:11:31.210,0:11:32.580 0:11:32.580,0:11:34.684 0:11:34.684,0:11:35.736 0:11:35.736,0:11:37.000 0:11:37.300,0:11:39.100 0:11:39.100,0:11:41.051 0:11:41.051,0:11:42.557 0:11:42.557,0:11:44.449 0:11:44.449,0:11:45.871 0:11:45.871,0:11:47.141 0:11:47.141,0:11:51.250 0:11:51.250,0:11:52.394 0:11:52.394,0:11:54.500 0:11:54.900,0:11:57.608 0:11:57.608,0:11:59.782 0:11:59.782,0:12:04.234 0:12:04.234,0:12:06.270 0:12:06.786,0:12:09.864 0:12:09.864,0:12:11.200 0:12:12.944,0:12:14.934 0:12:14.934,0:12:18.400 0:12:20.189,0:12:23.656 0:12:24.700,0:12:27.830 0:12:27.830,0:12:29.622 0:12:29.622,0:12:31.163 0:12:31.163,0:12:34.000 0:12:34.900,0:12:36.529 0:12:36.529,0:12:40.013 0:12:40.582,0:12:42.632 0:12:42.632,0:12:43.887 0:12:43.887,0:12:46.073 0:12:46.073,0:12:49.100 0:12:49.800,0:12:52.105 0:12:52.105,0:12:53.573 0:12:53.573,0:12:57.500 0:12:58.600,0:13:00.159 0:13:00.159,0:13:03.209 0:13:03.209,0:13:06.090 0:13:06.549,0:13:08.351 0:13:08.351,0:13:10.979 0:13:11.198,0:13:13.548 0:13:13.548,0:13:16.850 0:13:16.850,0:13:19.821 0:13:19.821,0:13:23.870 0:13:24.424,0:13:27.057 0:13:27.218,0:13:30.132 0:13:30.132,0:13:31.829 0:13:31.829,0:13:33.486 0:13:33.486,0:13:35.229 0:13:35.229,0:13:37.189 0:13:37.189,0:13:38.300 0:13:38.300,0:13:41.267 0:13:41.267,0:13:43.261 0:13:43.261,0:13:46.465 0:13:48.657,0:13:51.200 0:13:51.600,0:13:54.187 0:13:54.187,0:13:56.804 0:13:56.804,0:13:58.207 0:13:58.207,0:13:59.220 0:13:59.220,0:14:00.679 0:14:00.679,0:14:01.944 0:14:02.520,0:14:03.963 0:14:03.963,0:14:06.659 0:14:06.659,0:14:08.000 0:14:08.000,0:14:11.000 0:14:11.000,0:14:12.395 0:14:12.395,0:14:13.867 0:14:13.867,0:14:15.914 0:14:15.914,0:14:17.280 0:14:17.280,0:14:18.305 0:14:18.305,0:14:21.028 0:14:21.500,0:14:24.425 0:14:24.698,0:14:26.556 0:14:26.556,0:14:27.968 0:14:27.968,0:14:30.233 0:14:30.233,0:14:32.489 0:14:32.489,0:14:34.942 0:14:34.942,0:14:36.440 0:14:36.440,0:14:40.900 0:14:40.900,0:14:42.200 0:14:42.200,0:14:47.209 0:14:47.209,0:14:49.900 0:14:51.000,0:14:52.602 0:14:52.602,0:14:55.410 0:14:55.410,0:14:57.828 0:14:57.828,0:14:59.463 0:14:59.463,0:15:02.100 0:15:02.100,0:15:03.800 0:15:03.800,0:15:08.418 0:15:08.418,0:15:09.519 0:15:09.519,0:15:13.185 0:15:13.185,0:15:14.502 0:15:15.700,0:15:18.200 0:15:19.700,0:15:21.984 0:15:21.984,0:15:23.137 0:15:23.137,0:15:25.135 0:15:25.805,0:15:28.860 0:15:29.500,0:15:31.900 0:15:32.200,0:15:34.140 0:15:34.140,0:15:37.507 0:15:38.100,0:15:43.874 0:15:44.300,0:15:46.700 0:15:47.300,0:15:50.642 0:15:50.642,0:15:53.900 0:15:53.900,0:15:56.600 0:15:56.600,0:15:58.600 0:15:59.000,0:16:02.026 0:16:02.026,0:16:06.648 0:16:06.648,0:16:08.328 0:16:08.328,0:16:11.300 0:16:11.300,0:16:12.819 0:16:12.819,0:16:14.753 0:16:14.753,0:16:18.191 0:16:18.191,0:16:20.400 0:16:20.950,0:16:22.394 0:16:22.500,0:16:24.999 0:16:24.999,0:16:26.212 0:16:26.425,0:16:27.993 0:16:27.993,0:16:33.200 0:16:34.100,0:16:35.710 0:16:35.920,0:16:37.148 0:16:37.148,0:16:40.066 0:16:40.066,0:16:43.316 0:16:43.316,0:16:45.100 0:16:45.100,0:16:46.392 0:16:46.392,0:16:49.700 0:16:50.000,0:16:52.020 0:16:52.020,0:16:53.526 0:16:53.526,0:16:55.184 0:16:55.184,0:16:57.400 0:16:57.976,0:17:00.350 0:17:00.350,0:17:03.102 0:17:03.102,0:17:05.671 0:17:05.671,0:17:08.610 0:17:08.610,0:17:09.811 0:17:09.811,0:17:12.000 0:17:12.400,0:17:15.309 0:17:15.309,0:17:17.292 0:17:17.292,0:17:19.100 0:17:19.500,0:17:21.849 0:17:21.849,0:17:23.155 0:17:23.155,0:17:25.063 0:17:25.063,0:17:27.100 0:17:27.872,0:17:29.965 0:17:29.965,0:17:32.400 0:17:32.400,0:17:35.100 0:17:35.100,0:17:36.625 0:17:36.625,0:17:40.573 0:17:40.573,0:17:43.620 0:17:43.620,0:17:45.797 0:17:45.797,0:17:47.733 0:17:47.733,0:17:50.100 0:17:50.100,0:17:52.983 0:17:52.983,0:17:55.700 0:17:55.700,0:17:58.000 0:17:58.000,0:18:01.229 0:18:01.229,0:18:03.300 0:18:03.600,0:18:05.985 0:18:05.985,0:18:07.668 0:18:07.668,0:18:10.694 0:18:10.694,0:18:12.800 0:18:13.000,0:18:16.780 0:18:16.780,0:18:18.517 0:18:18.517,0:18:20.938 0:18:20.938,0:18:22.139 0:18:22.139,0:18:27.309 0:18:27.309,0:18:28.676 0:18:28.900,0:18:30.492 0:18:30.492,0:18:33.782 0:18:33.782,0:18:35.228 0:18:35.529,0:18:39.500 0:18:39.500,0:18:41.824 0:18:41.824,0:18:44.000 0:18:44.000,0:18:47.065 0:18:47.065,0:18:48.800 0:18:49.000,0:18:52.964 0:18:53.504,0:18:56.000 0:18:56.300,0:18:58.791 0:18:58.791,0:19:01.200 0:19:01.500,0:19:02.649 0:19:02.649,0:19:06.300 0:19:06.500,0:19:08.181 0:19:08.181,0:19:09.779 0:19:09.779,0:19:11.489 0:19:11.489,0:19:12.741 0:19:12.741,0:19:14.274 0:19:14.274,0:19:17.067 0:19:17.067,0:19:20.148 0:19:20.349,0:19:21.388 0:19:21.388,0:19:23.673 0:19:23.673,0:19:25.801 0:19:25.801,0:19:28.603 0:19:29.900,0:19:32.704 0:19:32.704,0:19:35.816 0:19:35.816,0:19:37.500 0:19:37.500,0:19:40.223 0:19:40.223,0:19:41.388 0:19:41.388,0:19:43.090 0:19:43.090,0:19:45.394 0:19:45.394,0:19:46.630 0:19:47.100,0:19:49.300 0:19:49.300,0:19:52.932 0:19:52.932,0:19:54.414 0:19:54.414,0:19:56.400 0:19:57.000,0:20:00.297 0:20:00.297,0:20:03.539 0:20:03.539,0:20:06.100 0:20:06.600,0:20:08.720 0:20:08.720,0:20:10.174 0:20:10.174,0:20:11.633 0:20:12.926,0:20:14.419 0:20:14.419,0:20:16.833 0:20:16.833,0:20:18.012 0:20:18.012,0:20:20.500 0:20:20.500,0:20:23.100 0:20:23.600,0:20:26.569 0:20:26.569,0:20:28.550 0:20:28.550,0:20:30.535