WEBVTT 00:00:00.820 --> 00:00:05.136 Roy Price é um homem de quem a maioria de vocês provavelmente nunca ouviu falar, 00:00:05.136 --> 00:00:07.656 embora ele possa ter sido responsável NOTE Paragraph 00:00:07.656 --> 00:00:13.976 por 22 minutos um tanto medíocres da sua vida em 19 de Abril de 2013. 00:00:14.560 --> 00:00:17.776 Pode também ter sido responsável pelos 22 minutos muito divertidos, 00:00:17.776 --> 00:00:20.000 mas não para muitos de vocês. 00:00:20.000 --> 00:00:21.920 E tudo isso está ligado a uma decisão 00:00:21.920 --> 00:00:23.874 que Roy teve de tomar há cerca de 3 anos. NOTE Paragraph 00:00:23.874 --> 00:00:28.780 Então vejam, Roy Price é um executivo sênior na Amazon Studios, 00:00:28.780 --> 00:00:31.850 que é a companhia de produção de TV da Amazon. 00:00:31.850 --> 00:00:35.130 Ele tem 47 anos, é magro, seu cabelo é arrepiado, 00:00:35.130 --> 00:00:39.960 descreve a si próprio no Twitter com "filmes, TV, tecnologia, tacos." 00:00:41.760 --> 00:00:45.160 E Roy Price tem um emprego de muita responsabilidade, porque é seu dever 00:00:45.160 --> 00:00:49.276 escolher os programas, o conteúdo original que a Amazon produzirá. 00:00:49.280 --> 00:00:51.656 E claro que esse é um campo muito competitivo. 00:00:51.656 --> 00:00:54.406 Digo, já existem tantas séries por aí 00:00:54.406 --> 00:00:56.606 que Roy não pode escolher qualquer série. 00:00:56.606 --> 00:01:00.766 Ele tem que encontrar séries que são muito, muito boas. 00:01:00.766 --> 00:01:03.586 Então, em outras palavras, ele tem de encontrar séries 00:01:03.586 --> 00:01:06.006 que estão bem na ponta direita desta curva aqui. NOTE Paragraph 00:01:06.006 --> 00:01:08.676 Esta curva aqui é a distribuição da classificação 00:01:08.676 --> 00:01:13.010 de cerca de 2,5 mil programas de TV no website IMDB, 00:01:13.010 --> 00:01:15.966 e a pontuação vai de um a dez, 00:01:15.966 --> 00:01:18.976 e a altura aqui mostra quantas séries obtiveram esta pontuação. 00:01:19.646 --> 00:01:23.676 Então se a sua série obtém uma nota nove ou maior, é uma vencedora. 00:01:23.680 --> 00:01:25.556 Uma série entre as 2% melhores. 00:01:25.556 --> 00:01:29.456 São séries como "Breaking Bad", "Game of Thrones", "The Wire"... 00:01:29.456 --> 00:01:31.756 então todas essas séries são viciantes. 00:01:31.760 --> 00:01:34.866 após ter assistido a uma temporada, seu cérebro está assim tipo: 00:01:34.866 --> 00:01:37.046 "Onde eu posso conseguir mais episódios?" 00:01:37.046 --> 00:01:38.240 Esse tipo de série. 00:01:38.920 --> 00:01:41.446 No lado esquerdo, apenas para esclarecer, aqui, 00:01:41.446 --> 00:01:44.580 você tem uma série chamada "Criancinhas e Tiaras" NOTE Paragraph 00:01:44.580 --> 00:01:47.356 (Risos) NOTE Paragraph 00:01:47.356 --> 00:01:48.886 o que deve te dizer o suficiente 00:01:48.886 --> 00:01:51.071 sobre o que se passa naquela ponta da curva. NOTE Paragraph 00:01:51.855 --> 00:01:55.286 Roy Price não está preocupado em entrar naquela ponta esquerda da curva, 00:01:55.286 --> 00:01:58.210 porque eu acho que você teria de ser muito inteligente 00:01:58.210 --> 00:01:59.976 para bater "Criancinhas e Tiaras." 00:01:59.976 --> 00:02:03.936 Então a parte que ele está preocupado é este pico do meio da curva aqui, 00:02:03.936 --> 00:02:05.756 o pico da TV mediana, 00:02:05.760 --> 00:02:08.656 aqueles programas que não são nem muito bons nem muito ruins, 00:02:08.656 --> 00:02:10.270 não empolgam para valer. 00:02:10.270 --> 00:02:14.626 Ele precisa ter certeza que está na extremidade a direita. NOTE Paragraph 00:02:15.200 --> 00:02:16.836 Então a pressão está presente, 00:02:16.836 --> 00:02:19.006 e é também a primeira vez 00:02:19.006 --> 00:02:21.216 que a Amazon está fazendo algo assim 00:02:21.216 --> 00:02:24.520 e Roy Price não quer se arriscar. 00:02:24.520 --> 00:02:27.010 Ele quer criar um sucesso. 00:02:27.010 --> 00:02:28.876 Ele precisa de um sucesso garantido, 00:02:28.876 --> 00:02:31.466 e então o que ele faz é realizar uma competição. NOTE Paragraph 00:02:31.466 --> 00:02:34.606 Ele coleta um punhado de ideias para séries 00:02:34.606 --> 00:02:36.936 e dessas ideias, por meio de uma avaliação, 00:02:36.936 --> 00:02:40.736 são selecionadas oito candidatas, 00:02:41.040 --> 00:02:44.276 e faz apenas o primeiro episódio de cada uma dessas séries 00:02:44.276 --> 00:02:47.456 e os coloca on-line de graça para qualquer um assistir. 00:02:47.456 --> 00:02:49.726 Quando a Amazon está dando coisas de graça 00:02:49.726 --> 00:02:51.286 você vai pegá-las, certo? 00:02:51.286 --> 00:02:55.906 Então milhões de pessoas estão assistindo àqueles episódios. NOTE Paragraph 00:02:56.440 --> 00:02:59.686 O que eles não percebem é que, enquanto assistem às séries, 00:02:59.686 --> 00:03:01.996 na verdade, eles estão sendo observados. 00:03:02.000 --> 00:03:04.300 Observados por Roy Price e sua equipe, 00:03:04.300 --> 00:03:05.786 que gravam tudo. 00:03:05.786 --> 00:03:09.186 Gravam quando alguém aperta o “play”, quando alguém pressiona o “pause”, 00:03:09.186 --> 00:03:11.726 que partes pulam, que parte assistem novamente. 00:03:11.726 --> 00:03:13.960 Assim coletam milhões de dados específicos 00:03:13.960 --> 00:03:16.080 porque querem ter aqueles dados 00:03:16.080 --> 00:03:18.846 para então decidir qual série devem produzir. 00:03:18.846 --> 00:03:21.046 E com certeza, eles colhem todos os dados 00:03:21.046 --> 00:03:23.656 fazem o processamento dos dados e uma resposta surge, 00:03:23.656 --> 00:03:24.876 e a resposta é: 00:03:24.880 --> 00:03:30.116 "Amazon deve fazer uma comédia em série sobre quatro senadores Republicanos." 00:03:30.440 --> 00:03:31.716 Produziram essa série. NOTE Paragraph 00:03:31.716 --> 00:03:33.840 Alguém sabe o nome da série? 00:03:34.720 --> 00:03:36.006 Público: "Alpha House." 00:03:36.006 --> 00:03:37.526 Isto! "Alpha House", 00:03:37.526 --> 00:03:41.580 mas parece que não muitos de vocês aqui se lembram dessa série, na verdade, 00:03:41.580 --> 00:03:43.450 porque ela não ficou tão boa. 00:03:43.450 --> 00:03:45.370 É na verdade apenas uma série mediana, 00:03:45.370 --> 00:03:50.016 literalmente mediana pois a média desta curva aqui é 7,4 pontos, 00:03:50.016 --> 00:03:52.410 e "Alpha House" fica em 7,5, 00:03:52.410 --> 00:03:54.486 portanto um pouquinho acima da média, 00:03:54.486 --> 00:03:57.400 mas certamente não o que Roy Price e sua equipe almejavam. 00:03:58.320 --> 00:04:01.196 Enquanto isso, porém, e mais ou menos ao mesmo tempo 00:04:01.200 --> 00:04:02.796 em outra empresa, 00:04:02.800 --> 00:04:07.010 outro executivo conseguiu produzir uma série de sucesso usando análise de dados, 00:04:07.010 --> 00:04:08.366 e seu nome é Ted, 00:04:08.640 --> 00:04:12.086 Ted Sarandos, que é o Diretor de Conteúdo da Netflix, 00:04:12.086 --> 00:04:14.200 e assim como Roy, está na constante missão 00:04:14.200 --> 00:04:15.766 de encontrar uma grande série, 00:04:15.766 --> 00:04:17.776 e ele usa dados também para fazer isso, 00:04:17.790 --> 00:04:19.845 mas o faz de um jeito um pouco diferente. 00:04:19.845 --> 00:04:23.606 Em vez de realizar uma competição, o que ele fez, com sua equipe, claro, 00:04:23.606 --> 00:04:27.156 foi examinar todos os dados que já tinham sobre os usuários do Netflix 00:04:27.160 --> 00:04:29.110 a nota que o público deu a suas séries, 00:04:29.110 --> 00:04:31.996 o registro de audição, de quais séries o público gosta etc. 00:04:32.000 --> 00:04:33.936 E usam esses dados para descobrir 00:04:33.936 --> 00:04:36.556 todos os detalhes sobre a audiência: 00:04:36.560 --> 00:04:38.066 de que tipos de séries gostam, 00:04:38.066 --> 00:04:40.166 que tipos de produtores, que tipos de atores. 00:04:40.166 --> 00:04:42.306 Ao juntarem todas essas partes, 00:04:42.760 --> 00:04:44.410 deram um salto de fé, 00:04:45.190 --> 00:04:46.576 e decidiram licenciar 00:04:46.576 --> 00:04:49.056 não uma comédia em série sobre quatro senadores 00:04:49.056 --> 00:04:51.920 mas uma série dramática sobre um único senador. 00:04:52.760 --> 00:04:54.476 Vocês conhecem a série? NOTE Paragraph 00:04:54.476 --> 00:04:55.756 (Risos) NOTE Paragraph 00:04:55.760 --> 00:04:59.536 Sim, "House of Cards", e Netflix, claro, acertou em cheio com essa série, 00:04:59.536 --> 00:05:01.686 ao menos pelas duas primeiras temporadas. NOTE Paragraph 00:05:01.686 --> 00:05:04.746 (Risos) (Aplausos) NOTE Paragraph 00:05:05.696 --> 00:05:08.876 "House of Cards" obtém uma pontuação de 9,1 nesta curva, 00:05:08.880 --> 00:05:12.086 logo ela está exatamente onde eles queriam que ela estivesse. NOTE Paragraph 00:05:12.086 --> 00:05:14.460 Agora, a questão, claro, é: o que aconteceu aqui? 00:05:14.460 --> 00:05:17.216 Há duas empresas muito competitivas que dominam os dados. 00:05:17.216 --> 00:05:20.096 Elas conectam todos esses milhões de dados específicos. 00:05:20.096 --> 00:05:22.486 E então isso funciona muito bem para uma delas, 00:05:22.486 --> 00:05:24.376 e não funciona para a outra. 00:05:24.376 --> 00:05:25.626 Por quê? 00:05:25.626 --> 00:05:29.086 Pois pela lógica isso deveria funcionar o tempo todo. 00:05:29.086 --> 00:05:31.566 Digo, se estão coletando milhões de dados específicos 00:05:31.566 --> 00:05:33.326 sobre uma decisão que irão tomar, 00:05:33.326 --> 00:05:35.966 e deveriam estar aptos a tomar uma decisão muito boa. 00:05:35.966 --> 00:05:38.196 Podem se valer de 200 anos de estatísticas. 00:05:38.200 --> 00:05:41.256 Vocês estão detalhando isso com computadores muito poderosos. 00:05:41.256 --> 00:05:44.760 O mínimo que se pode esperar é uma boa programação de TV, certo? NOTE Paragraph 00:05:45.880 --> 00:05:48.600 E se análise de dados não funciona assim, 00:05:49.520 --> 00:05:51.576 então a coisa fica um pouco assustadora, 00:05:51.576 --> 00:05:55.446 pois vivemos numa época em que estamos nos voltando aos dados mais e mais 00:05:55.446 --> 00:05:59.920 para tomar decisões muito sérias que vão muito além de programas de TV. 00:06:00.760 --> 00:06:03.770 Alguém aqui conhece a companhia Multi-Health Systems? 00:06:05.080 --> 00:06:06.786 Ninguém. Ok, isso na verdade é bom. 00:06:06.786 --> 00:06:10.016 Multi-Health Systems é uma empresa de softwares, 00:06:10.016 --> 00:06:12.836 e espero que ninguém nesta sala 00:06:12.840 --> 00:06:16.046 jamais entre em contato com esse software, 00:06:16.046 --> 00:06:18.226 pois se entrar, significa estar na prisão. NOTE Paragraph 00:06:18.226 --> 00:06:19.376 (Risos) NOTE Paragraph 00:06:19.376 --> 00:06:22.916 Se alguém aqui nos EUA está na prisão e solicita liberdade condicional, 00:06:22.920 --> 00:06:27.200 então é muito provável que o software de análise de dados dessa empresa 00:06:27.200 --> 00:06:30.886 será usado para determinar se pode conceder a sua liberdade condicional. 00:06:30.886 --> 00:06:33.496 É o mesmo princípio com a Amazon e Netflix, 00:06:33.496 --> 00:06:38.090 mas agora, em vez de decidir se uma série será boa ou ruim, 00:06:38.090 --> 00:06:40.586 vocês decidirão se uma pessoa será boa ou má. 00:06:41.040 --> 00:06:46.576 E um programa de TV medíocre, de 22 minutos, pode ser muito ruim; 00:06:46.576 --> 00:06:49.200 mais anos na prisão, porém, pode ser ainda pior. NOTE Paragraph 00:06:50.360 --> 00:06:54.546 E, infelizmente, há algumas evidências de que esta análise de dados, 00:06:54.546 --> 00:06:58.166 apesar de ter muitos dados, nem sempre produz resultados ótimos. 00:06:58.610 --> 00:07:01.512 Isso não ocorre porque uma empresa como a Multi-Health Systems 00:07:01.512 --> 00:07:03.128 não sabe o que fazer com os dados. 00:07:03.128 --> 00:07:05.506 Até as empresas que dominam esta análise erram. 00:07:05.506 --> 00:07:07.880 Sim, mesmo a Google erra às vezes. NOTE Paragraph 00:07:08.680 --> 00:07:13.206 Em 2009, a Google anunciou que eles eram capazes, com análise de dados, 00:07:13.206 --> 00:07:17.386 predizer surtos de gripe influenza, o sórdido tipo de gripe, 00:07:17.386 --> 00:07:21.156 fazendo análise de dados sobre as buscas no Google. 00:07:21.160 --> 00:07:25.020 E funcionou muito bem fez um estardalhaço na mídia, 00:07:25.020 --> 00:07:27.170 incluindo o auge do sucesso científico: 00:07:27.170 --> 00:07:29.296 uma publicação na revista "Nature". 00:07:29.680 --> 00:07:33.290 Isso funcionou muito bem, ano após ano, após ano, 00:07:33.290 --> 00:07:34.606 até que em um ano, falhou. 00:07:35.000 --> 00:07:37.286 E ninguém podia dizer exatamente o porquê. 00:07:37.286 --> 00:07:39.006 Apenas não funcionou aquele ano, 00:07:39.006 --> 00:07:40.860 e claro que novamente virou notícia, 00:07:40.860 --> 00:07:42.606 tendo até uma retratação 00:07:42.606 --> 00:07:45.440 de uma publicação da revista "Nature". 00:07:46.480 --> 00:07:49.790 Então mesmo as líderes na análise de dados, Amazon e Google, 00:07:49.790 --> 00:07:51.746 às vezes erram. 00:07:52.630 --> 00:07:54.976 E apesar de todas aquelas falhas, 00:07:54.976 --> 00:07:58.816 os dados estão rapidamente se incorporando nas tomadas de decisão da vida real 00:07:58.820 --> 00:08:00.686 no trabalho, 00:08:00.686 --> 00:08:02.536 no cumprimento das leis, 00:08:02.536 --> 00:08:03.720 na medicina. 00:08:04.400 --> 00:08:07.736 Logo deveríamos levar em conta que a análise de dados está ajudando. NOTE Paragraph 00:08:07.740 --> 00:08:10.926 Agora, pessoalmente tenho visto muito desse esforço com os dados, 00:08:10.926 --> 00:08:12.906 pois trabalho com genética computacional, 00:08:12.920 --> 00:08:15.476 que é também um campo no qual muita gente inteligente 00:08:15.476 --> 00:08:19.106 usa inimagináveis quantidades de dados para tomar decisões muito importantes 00:08:19.120 --> 00:08:22.680 como decidir sobre uma terapia contra o câncer ou desenvolver uma droga. 00:08:23.520 --> 00:08:25.926 E ao longo dos anos, tenho notado um tipo de padrão 00:08:25.926 --> 00:08:28.406 ou tipo de regra, se quiserem, sobre a diferença 00:08:28.406 --> 00:08:31.436 entre tomadas de decisão bem-sucedidas pelo análise de dados 00:08:31.436 --> 00:08:32.766 e decisões mal-sucedidas, 00:08:32.766 --> 00:08:36.640 e acho que este é um padrão que vale a pena compartilhar, e que funciona assim. NOTE Paragraph 00:08:38.380 --> 00:08:40.459 Quando estiverem resolvendo um problema, 00:08:40.459 --> 00:08:42.536 vocês no fundo farão duas coisas. 00:08:42.536 --> 00:08:45.730 A primeira é que você dividem esse problema em suas menores partes 00:08:45.730 --> 00:08:48.296 para que consigam analisar os detalhes em profundidade, 00:08:48.296 --> 00:08:50.010 e daí vocês fazem a segunda parte. 00:08:50.010 --> 00:08:52.610 Vocês juntam novamente todas as partes 00:08:52.610 --> 00:08:54.300 para chegar a uma conclusão. 00:08:54.300 --> 00:08:56.630 E às vezes vocês têm de fazer isso novamente, 00:08:56.630 --> 00:08:58.390 mas são sempre aquelas duas coisas: 00:08:58.390 --> 00:09:00.720 dividir e remontar novamente. NOTE Paragraph 00:09:02.420 --> 00:09:06.800 E agora a parte crucial é que o dados e a análise 00:09:06.800 --> 00:09:09.330 são apenas bons para a primeira parte. 00:09:09.330 --> 00:09:11.816 Dados e análise de dados, não importa quão poderosos, 00:09:11.816 --> 00:09:15.766 podem apenas ajudá-los a dividir um problema e entender suas partes. 00:09:16.080 --> 00:09:19.520 Eles não são adequados para colocar essas partes juntas novamente 00:09:19.520 --> 00:09:21.556 e assim chegar a uma conclusão. 00:09:21.556 --> 00:09:24.230 Todos nós temos uma ferramenta que pode fazer isso: 00:09:24.230 --> 00:09:25.606 é nosso cérebro. 00:09:25.606 --> 00:09:27.536 Se há algo no qual um cérebro é bom, 00:09:27.550 --> 00:09:29.640 é juntar pequenas partes novamente, 00:09:29.640 --> 00:09:31.906 mesmo quando se tem informação incompleta, 00:09:31.906 --> 00:09:33.430 e chegar uma boa conclusão, 00:09:33.430 --> 00:09:36.400 especialmente se é o cérebro de um expert. NOTE Paragraph 00:09:36.400 --> 00:09:39.176 Acredito que é por isso que a Netflix foi tão bem-sucedida, 00:09:39.176 --> 00:09:42.480 porque usaram dados e cérebros onde cada um se encaixa no processo. 00:09:42.480 --> 00:09:46.296 Primeiro eles usam dados para entender vários aspectos de sua audiência, 00:09:46.296 --> 00:09:49.640 que de outra forma não teriam sido capazes de entender em profundidade. 00:09:49.640 --> 00:09:52.310 Mas a decisão de pegar todas essas pequenas partes 00:09:52.310 --> 00:09:55.480 e juntá-las novamente e fazer uma série como "House of Cards", 00:09:55.480 --> 00:09:56.900 isso não estava nos dados. 00:09:56.900 --> 00:10:01.090 Ted Sarandos e sua equipe tomaram a decisão de licenciar essa série, 00:10:01.090 --> 00:10:02.975 o que também significou, a propósito, 00:10:02.975 --> 00:10:06.240 que eles estavam correndo um grande risco pessoal com aquela decisão. 00:10:06.240 --> 00:10:08.990 E na Amazon, fizeram isso da forma errada. 00:10:08.990 --> 00:10:11.730 Usaram dados o tempo todo para guiar a tomada de decisão, 00:10:11.730 --> 00:10:14.300 primeiro ao fazerem a competição de ideias para a TV 00:10:14.300 --> 00:10:18.020 depois quando selecionaram "Alpha House" para fazer como série. 00:10:18.500 --> 00:10:20.926 O que, claro, foi uma decisão segura para eles, 00:10:20.926 --> 00:10:23.360 pois poderiam sempre apontar para os dados, dizendo: 00:10:23.360 --> 00:10:24.990 "Isso é o que os dados nos dizem". 00:10:24.990 --> 00:10:29.360 Mas isso não levou ao resultado excepcional que estavam esperando. NOTE Paragraph 00:10:30.120 --> 00:10:34.990 Então os dados são, claro, uma ferramenta muito útil para tomar melhores decisões 00:10:34.990 --> 00:10:37.546 mas eu acredito que as coisas deem errado 00:10:37.546 --> 00:10:40.126 quando as estatísticas começam a guiar essas decisões. 00:10:40.126 --> 00:10:43.800 Não importa quão poderosos sejam, dados são apenas uma ferramenta, 00:10:43.800 --> 00:10:47.306 e para manter isso em mente, eu achei esse dispositivo aqui muito útil. 00:10:47.306 --> 00:10:48.526 Muitos de vocês vão... NOTE Paragraph 00:10:48.526 --> 00:10:49.736 (Risos) NOTE Paragraph 00:10:49.740 --> 00:10:51.006 Antes de existirem dados, 00:10:51.006 --> 00:10:53.710 era este o aparelho de decisão usado. NOTE Paragraph 00:10:53.710 --> 00:10:55.166 (Risos) NOTE Paragraph 00:10:55.166 --> 00:10:56.536 Muitos reconhecerão isso. 00:10:56.536 --> 00:10:58.513 Este brinquedo é chamado de Bola 8 Mágica 00:10:58.513 --> 00:10:59.726 e é realmente incrível, 00:10:59.726 --> 00:11:02.370 pois se têm que tomar uma decisão, um sim ou não, 00:11:02.370 --> 00:11:05.996 vocês só precisam chacoalhar a bola e aí recebem uma resposta 00:11:06.400 --> 00:11:09.210 "Muito provavelmente", bem aqui nesta janela, em tempo real. 00:11:09.210 --> 00:11:11.300 Estarei com ela lá fora para demonstrações. NOTE Paragraph 00:11:11.300 --> 00:11:12.636 (Risos) NOTE Paragraph 00:11:12.636 --> 00:11:16.160 O fato é que, obviamente, tomei algumas decisões na minha vida 00:11:16.160 --> 00:11:19.050 que, olhando para trás, deveria ter apenas ouvido a bola. 00:11:19.050 --> 00:11:22.420 Mas, sabem, se vocês têm os dados disponíveis, 00:11:22.420 --> 00:11:25.576 vão querer substituir isto por algo muito mais sofisticado, 00:11:25.576 --> 00:11:28.836 como análise estatística para tomar uma decisão melhor. 00:11:29.200 --> 00:11:31.876 Mas isso não muda a configuração básica. 00:11:31.876 --> 00:11:34.990 Portanto "a bola" pode ficar mais e mais esperta, 00:11:34.990 --> 00:11:37.886 mas acredito que ainda cabe a nós tomar decisões 00:11:37.886 --> 00:11:40.926 se quisermos alcançar algo extraordinário, 00:11:40.926 --> 00:11:42.626 na extremidade direita desta curva. 00:11:44.510 --> 00:11:47.416 E acho que é uma mensagem muito encorajadora, na verdade, 00:11:48.136 --> 00:11:51.320 que mesmo em vista de enormes quantidades de dados, 00:11:51.320 --> 00:11:55.526 ainda é vantajoso tomarmos decisões, 00:11:55.526 --> 00:11:58.216 sermos especialistas no que fazemos 00:11:58.216 --> 00:12:00.336 e correr os riscos. 00:12:00.336 --> 00:12:03.126 Porque no fim, não são os dados, 00:12:03.126 --> 00:12:07.080 mas os riscos, que colocarão vocês na extremidade direita da curva. NOTE Paragraph 00:12:07.840 --> 00:12:08.910 Muito obrigado. NOTE Paragraph 00:12:08.910 --> 00:12:12.760 (Aplausos)