< Return to Video

Daha iyi işlere imza atmak için insan ve yapay zekâ nasıl birlikte çalışabilir

  • 0:01 - 0:03
    Size bir çelişkiden bahsedeyim.
  • 0:04 - 0:06
    Son 10 yıldır
  • 0:06 - 0:10
    pek çok şirket daha az bürokratik olmaya,
  • 0:10 - 0:13
    merkezi kuralları
    ve prosedürleri azaltmaya,
  • 0:13 - 0:16
    yerel takımlarını daha verimli kılmak
    için özerkliklerini artırmaya çalışıyor.
  • 0:16 - 0:21
    Fakat şimdilerde yapay zekâyı dayatıyorlar
  • 0:21 - 0:23
    ve bu havalı teknolojinin
  • 0:23 - 0:27
    onları hiç olmadığı kadar bürokratik
    hale getireceğini fark etmiyorlar.
  • 0:27 - 0:29
    Neden mi?
  • 0:29 - 0:32
    Çünkü yapay zekâ tıpkı
    bürokrasi gibi işler.
  • 0:32 - 0:35
    Bürokrasinin özü
  • 0:35 - 0:39
    insani yargılar yerine kural
    ve prosedürleri gözetmektir.
  • 0:40 - 0:44
    Yapay zekâ sadece kurallara dayalıdır.
  • 0:44 - 0:47
    Çoğu, geçmiş verilerden
    çıkarılan kurallardır
  • 0:47 - 0:49
    fakat yalnızca kurallar.
  • 0:49 - 0:53
    İnsani yargılar işin içine katılmadığında,
  • 0:53 - 0:57
    yapay zekâ, bürokrasinin
    yeni ve korkunç bir şeklini getirecektir.
  • 0:57 - 1:01
    Yapay zekânın kurallar yoluyla,
    insan kontrolü olmadan
  • 1:01 - 1:05
    her geçen gün daha fazla
    kritik kararlar almasını
  • 1:05 - 1:07
    "algokrasi" olarak tanımlıyorum.
  • 1:08 - 1:10
    Burada bir risk var mı?
  • 1:11 - 1:12
    Evet var.
  • 1:12 - 1:15
    800 yapay zekâ uzmanından oluşan
    bir gruba liderlik ediyorum.
  • 1:15 - 1:19
    Dünyadaki büyük şirketler için
  • 1:19 - 1:21
    100'ün üzerinde yapay zeka
    çözümünü hayata geçiriyoruz.
  • 1:21 - 1:27
    Geçmişten gelen bürokratlar gibi davranan
    birçok kurumsal yönetici ile tanışıyorum.
  • 1:28 - 1:33
    Maliyetli, eski kafalı insanları
    döngülerden çıkartıp
  • 1:33 - 1:37
    kararların alınmasını
    sadece yapay zekâdan bekliyorlar.
  • 1:37 - 1:42
    Bunu "sıfır-insan zihniyeti"
    olarak adlandırıyorum.
  • 1:42 - 1:44
    Kulağa neden bu kadar cezbedici geliyor?
  • 1:45 - 1:50
    Çünkü diğer istikamet olan
    "insan artı yapay zekâ"
  • 1:50 - 1:53
    uzun, maliyetli ve zor.
  • 1:53 - 1:56
    İş ekipleri, teknoloji ekipleri,
    ve veri bilimi ekiplerinin
  • 1:56 - 2:00
    insan ve yapay zekânın birlikte
    en iyi nasıl çalışacağını tasarlamaları
  • 2:00 - 2:04
    aylarca sürecek çalışmalar gerektirir.
  • 2:04 - 2:08
    Uzun, maliyetli ve zor.
  • 2:08 - 2:10
    Fakat ödülü çok büyük.
  • 2:10 - 2:14
    BCG ve MIT'nin yeni bir anketine göre
  • 2:14 - 2:18
    dünyadaki şirketlerin yüzde 18'i
  • 2:18 - 2:20
    yapay zekâya öncülük edip
  • 2:20 - 2:23
    onun sayesinde para kazanıyorlar.
  • 2:23 - 2:29
    Bu şirketler yapay zekâ
    girişimlerinin yüzde 80'ini
  • 2:29 - 2:31
    verimliliğe, büyümeye
  • 2:31 - 2:33
    ve daha iyi kararlar almaya odaklamıştır.
  • 2:33 - 2:36
    Maliyetleri azaltmak için insanların
    yerine yapay zekâyı koymaya değil.
  • 2:38 - 2:41
    Peki insanları döngüde tutmak
    neden önemli?
  • 2:42 - 2:47
    Çünkü yapay zeka yalnız bırakıldığında,
    fazlasıyla aptalca şeyler yapabilir.
  • 2:47 - 2:51
    Bazen, bu tweet'teki gibi,
    sonuçları olmayan şeyler yapar.
  • 2:51 - 2:53
    "Sevgili Amazon,
  • 2:53 - 2:54
    bir tuvalet kapağı aldım.
  • 2:54 - 2:56
    İhtiyaçtan, istekten değil.
  • 2:56 - 2:57
    Koleksiyonunu yapmıyorum.
  • 2:57 - 3:00
    Tuvalet kapağı bağımlısı değilim.
  • 3:00 - 3:02
    Her ne kadar cezbedici
    e-postalar atsanız da
  • 3:02 - 3:03
    şöyle düşünmeyeceğim:
  • 3:03 - 3:07
    "Peki o zaman, kendimi bir
    tuvalet kapağı daha alarak şımartayım."
  • 3:07 - 3:08
    (Kahkahalar)
  • 3:08 - 3:12
    Bazen ise, şu tweet'teki gibi
    daha fazla sonuçları olur:
  • 3:13 - 3:15
    "Annemin küllerinin olduğu
    vazo konusunda
  • 3:15 - 3:17
    bana da aynı şey oldu.
  • 3:17 - 3:18
    (Kahkahalar)
  • 3:18 - 3:20
    "Ölümünden aylar sonra,
  • 3:20 - 3:21
    Amazon'dan şöyle mesajlar aldım:
  • 3:21 - 3:23
    "Eğer bunu beğendiyseniz."
  • 3:23 - 3:25
    (Kahkahalar)
  • 3:25 - 3:28
    Bazen daha kötü sonuçları da olur.
  • 3:28 - 3:33
    Öğrencilerin üniversite başvurularını
    reddeden bir yapay zekâ robotu ele alalım.
  • 3:33 - 3:34
    Peki neden?
  • 3:34 - 3:36
    Çünkü geçmiş verilerden
  • 3:36 - 3:40
    dersi geçecek ve kalacak öğrencilerin
    karakteristiklerini "öğrendi".
  • 3:40 - 3:42
    Bazıları not ortalaması
    gibi bariz olsa da,
  • 3:42 - 3:47
    geçmişte, belli bir posta kodundaki
    öğrencilerin hepsi dersten kalsaydı
  • 3:47 - 3:51
    yapay zekânın bunu bir
    kural haline getirecek
  • 3:51 - 3:55
    ve bu posta kodundaki
    tüm öğrencileri eleyecekti
  • 3:55 - 3:59
    ve bu kuralın yanlış olduğunu kimsenin
    kanıtlamasına fırsat vermeyecekti.
  • 4:00 - 4:02
    Kimse tüm kuralları kontrol edemez.
  • 4:02 - 4:06
    Çünkü gelişmiş bir yapay zekâ
    sürekli bir öğrenme durumundadır.
  • 4:06 - 4:09
    İnsanlar odanın dışında tutulduğunda,
  • 4:09 - 4:12
    algokratik kabus gerçeğe dönüşür.
  • 4:12 - 4:15
    Bu öğrenciyi reddetmekten kim sorumlu?
  • 4:15 - 4:17
    Hiç kimse, yapay zekâ yaptı.
  • 4:17 - 4:19
    Peki bu adil mi? Evet.
  • 4:19 - 4:22
    Aynı objektif kurallar kümesi
    herkese uygulandı.
  • 4:22 - 4:26
    Yanlış posta kodundaki bu parlak çocuğu
    tekrar değerlendirebilir miyiz?
  • 4:27 - 4:30
    Hayır, algoritmalar
    fikirlerini değiştiremez.
  • 4:31 - 4:33
    Burada bir seçim yapmalıyız.
  • 4:34 - 4:36
    Algokrasi ile devam etmek
  • 4:36 - 4:39
    ya da "İnsan artı yapay zekâ"
    yolundan gitmek.
  • 4:39 - 4:41
    Bunu yapmamız için
  • 4:41 - 4:44
    öncelikle teknolojiyi düşünmekten vazgeçip
  • 4:44 - 4:48
    gizli formülü uygulamaya
    başlamamız gerekir.
  • 4:49 - 4:51
    "İnsan artı yapay zekâ"yı uygulamamız için
  • 4:51 - 4:54
    çabanın yüzde 10'unu
    algoritmaları kodlamaya
  • 4:54 - 4:57
    yüzde 20'sini teknolojiyi
    algoritmaların etrafında inşa etmeye,
  • 4:57 - 5:01
    veri toplamaya, arayüz inşa etmeye,
    eski sistemlere entegre etmeye ayıralım.
  • 5:01 - 5:04
    Fakat yüzde 70'ini,
    yani çabanın büyük bir kısmını
  • 5:04 - 5:09
    yapay zekâyı insanlar ve süreçlerle
    birlikte dokumaya harcayarak
  • 5:09 - 5:11
    gerçek neticeyi en yükseğe çıkartabiliriz.
  • 5:12 - 5:17
    Yüzde 70'lik kısımdan feragat edildiğinde,
    yapay zekâ başarısız olur.
  • 5:17 - 5:20
    Bunun maliyeti şu kadar küçük olabilir,
  • 5:20 - 5:24
    milyonlarca doları kullanışsız
    bir teknolojiye yatırmak.
  • 5:24 - 5:25
    Umursayan var mı?
  • 5:26 - 5:28
    Ya da gerçek trajediler:
  • 5:29 - 5:37
    Yakın zamanda kaza yapan
    iki B-737 uçak sonucunda 346 ölü.
  • 5:37 - 5:39
    Bilgisayarlı komut sisteminde
  • 5:39 - 5:43
    pilotlar düzgünce iletişim
    kuramadığından kaynaklandı.
  • 5:44 - 5:46
    Başarılı bir yüzde 70 için ilk adım
  • 5:46 - 5:51
    algoritmaların veri bilimciler
    ve alan uzmanları tarafından
  • 5:51 - 5:53
    birlikte kodlandığından emin olmaktır.
  • 5:53 - 5:56
    Sağlık sektörünü ele alalım.
  • 5:56 - 6:00
    Ekiplerimizden biri, ufak bir sorunu olan
    bir ilaç üzerinde çalıştı.
  • 6:01 - 6:02
    İlk dozlarını aldıklarında,
  • 6:02 - 6:06
    bazı hastaların çok az bir kısmı
    kalp krizi geçiriyordu.
  • 6:06 - 6:09
    Bu nedenle ilk dozu alacak tüm hastalar
  • 6:09 - 6:12
    bir günlerini hastanede
    geçirmek zorundaydı.
  • 6:12 - 6:14
    Ne olur ne olmaz onları
    gözlemlemek gerekir.
  • 6:15 - 6:20
    Amacımız, sıfır kalp krizi riskine sahip
  • 6:20 - 6:23
    hastanedeki günü pas geçebilecek
    hastaları tanımlamaktı.
  • 6:23 - 6:27
    Klinik deneylerin verilerini analiz etmek
  • 6:28 - 6:32
    ECG sinyallerini, kan bileşimlerini
    ve biyobelirteçleri
  • 6:32 - 6:35
    kalp krizi riskiyle ilişkilendirmek için
    yapay zekâyı kullandık.
  • 6:35 - 6:37
    Bir ay içinde
  • 6:37 - 6:43
    modelimiz sıfır riskte olan hastaların
    yüzde 62'sini işaretleyebildi.
  • 6:43 - 6:45
    Hastanedeki günü pas geçebilirlerdi.
  • 6:46 - 6:48
    Algoritma dedi diye
  • 6:48 - 6:51
    ilk dozunuzda evde kalmaya
    razı olur muydunuz?
  • 6:51 - 6:52
    (Kahkahalar)
  • 6:52 - 6:54
    Doktorlar razı olmadı.
  • 6:54 - 6:56
    Ya yanlış negatif hatamız vardıysa?
  • 6:56 - 7:02
    Yani yapay zekânın evinde kalıp
    ölmeyi önerdiği insanlar olursa?
  • 7:02 - 7:03
    (Kahkahalar)
  • 7:03 - 7:05
    Bizim yüzde 70'imiz böyle başladı.
  • 7:05 - 7:07
    Modelimizdeki her değişkenin
  • 7:07 - 7:11
    tıbbi mantığını kontrol etmek için
    bir doktor ekibiyle çalıştık.
  • 7:12 - 7:16
    Örneğin, belirteç olarak
    bir ciğer enziminin
  • 7:16 - 7:17
    yoğunluğunu kullanıyorduk.
  • 7:17 - 7:21
    Bunun tıbbi mantığı çok açık değildi.
  • 7:21 - 7:24
    İstatistiksel sinyal oldukça kuvvetliydi.
  • 7:24 - 7:27
    Fakat ya bu, bizim
    örneğimizdeki bir ön yargıysa?
  • 7:27 - 7:30
    O belirteç bizim modelimizden çıkarıldı.
  • 7:30 - 7:34
    Doktorların gerçek hayatta titizlikle
    ölçemediği belirteçleri de
  • 7:34 - 7:38
    uzmanların uyarısıyla çıkarttık.
  • 7:38 - 7:40
    Dört ay sonra,
  • 7:40 - 7:43
    bir modelimiz ve tıbbi bir
    protokolümüz olmuştu.
  • 7:44 - 7:45
    Geçtiğimiz ilkbaharda
  • 7:45 - 7:48
    tıbbi otoriteler tarafından
    ikisi de onay aldı.
  • 7:48 - 7:52
    Böylece hastaların yarısına daha az stres
  • 7:52 - 7:54
    ve daha iyi yaşam kalitesi sağladık.
  • 7:54 - 7:59
    Bunun dışında, ilacın satışlarında
    100 milyonun üzerinde artış bekleniyordu.
  • 8:00 - 8:04
    Yapay zekânın yüzde yetmişini
    ekipler ve süreçler ile işlemek
  • 8:04 - 8:07
    ayrıca insanların ve yapay zekanın
    en zor sorunları beraber çözebilmesi için
  • 8:07 - 8:13
    güçlü arayüzler inşa etmekti.
  • 8:13 - 8:18
    Öncelikle bir giyim firması
    bize meydan okudu.
  • 8:19 - 8:22
    "Dünyadaki en iyi
    satın alma uzmanlarına sahibiz.
  • 8:22 - 8:24
    Satış tahminlerinde onları yenebilecek
  • 8:24 - 8:27
    bir yapay zekâ motoru
    inşa edebilir misiniz?
  • 8:27 - 8:31
    Gelecek sene için
    kaç adet lüks, açık yeşil
  • 8:31 - 8:34
    XL erkek tişörtü satın almamız
    gerekeceğini söyleyebilecek?
  • 8:34 - 8:36
    Neyin satıp satmayacağını
  • 8:36 - 8:38
    tasarımcılarımızdan
    daha iyi öngörebilecek?"
  • 8:38 - 8:42
    Geçmiş satış verilerini kullanarak
    ekibimiz birkaç haftada bir modeli eğitti
  • 8:42 - 8:46
    ve yarışma, insan satın almacılar
    ile beraber organize edildi.
  • 8:46 - 8:47
    Peki ya sonuç?
  • 8:48 - 8:53
    Tahmin hatalarını yüzde 25 düşürerek
    yapay zekâ kazandı.
  • 8:54 - 8:59
    Sıfır insan savunucuları bu birincil
    modeli uygulamaya çalışabilirlerdi
  • 8:59 - 9:02
    ve tüm insan satın almacılara
    savaş açabilirlerdi.
  • 9:02 - 9:03
    İyi eğlenceler.
  • 9:03 - 9:08
    Fakat biliyoruz ki insan satın almacıların
    geçmiş verilerde bulunmayan şekilde
  • 9:08 - 9:11
    moda akımları hakkında öngörüleri vardı.
  • 9:12 - 9:15
    Yüzde 70'imiz burada başladı.
  • 9:15 - 9:17
    İnsan satın almacıların
  • 9:17 - 9:20
    yapay zekânın önerdiği sayıları incelediği
  • 9:20 - 9:21
    ve gerektiğinde düzeltebildiği
  • 9:21 - 9:24
    ikinci bir teste gittik.
  • 9:24 - 9:25
    Sonuç mu?
  • 9:26 - 9:29
    İnsanların kullandığı yapay zekâ kaybetti.
  • 9:30 - 9:34
    İnsanların yaptığı
    düzeltmelerin yüzde 75'i
  • 9:34 - 9:36
    doğruluk payını azaltıyordu.
  • 9:37 - 9:40
    İnsan satın almacılardan
    kurtulmanın vakti gelmiş miydi?
  • 9:40 - 9:41
    Hayır gelmemişti.
  • 9:41 - 9:44
    İnsanların yapay zekânın
    doğruluğunu sınamayacağı
  • 9:44 - 9:49
    fakat yapay zekânın
    insan satın almacılardan
  • 9:49 - 9:54
    gerçek girdiler alacağı
    bir model yaratma vaktiydi.
  • 9:55 - 9:59
    Modeli tamamen yeniden inşa ettik
  • 10:01 - 10:03
    ve "Hey, insan! Tahminlerim şunlar,
  • 10:03 - 10:05
    istediğin kısmı düzeltebilirsin."
  • 10:05 - 10:07
    diyen birincil arayüzümüzden
  • 10:07 - 10:10
    çok daha zengin bir arayüze geçtik.
  • 10:10 - 10:12
    "Hey, insanlar!
  • 10:12 - 10:14
    Önümüzdeki senenin akımlarını bilmiyorum.
  • 10:14 - 10:17
    En yaratıcı tahminlerinizi
    benimle paylaşır mısınız?"
  • 10:18 - 10:20
    "Hey, insanlar!
  • 10:20 - 10:23
    Şu birkaç büyük parçanın miktarını
    belirlememe yardım eder misiniz?
  • 10:23 - 10:26
    Geçmiş veride karşılaştırabileceğim
    güzel bir örnek bulamadım."
  • 10:26 - 10:28
    Sonuç mu?
  • 10:28 - 10:30
    Tahmin hatalarını yüzde 50 azaltarak
  • 10:30 - 10:34
    "İnsan artı yapay zekâ" kazandı.
  • 10:36 - 10:39
    Aracı tamamlamamız bir yılımızı aldı.
  • 10:39 - 10:42
    Uzun, maliyetli ve zor.
  • 10:43 - 10:45
    Fakat kâr ve faydalar
  • 10:45 - 10:51
    giyim şirketine yıllık 100 milyonun
    üzerinde bir tasarruf sağladı.
  • 10:51 - 10:54
    Çok hassas konular üzerine yüzde 70 demek,
  • 10:54 - 10:58
    aynı zamanda insanların
    doğru ve yanlışı belirlemesi
  • 10:58 - 11:00
    ve yapay zekânın neyi yapabilip
  • 11:00 - 11:02
    neyi yapamayacağının
    kurallarını koyması demekti.
  • 11:02 - 11:06
    Bunlara örnek; fiyatlandırma motorlarının
    sunulan fiyatı kabul edecek
  • 11:06 - 11:10
    eğitimsiz müşterilere
    aşırı yüksek fiyat sunmaması için
  • 11:10 - 11:12
    tavan fiyat eklemek olabilir.
  • 11:13 - 11:15
    Bu sınırları sadece
    insanlar tanımlayabilir.
  • 11:15 - 11:19
    Yapay zekânın bunları geçmiş verilerde
    bulabilmesinin ihtimali yoktur.
  • 11:19 - 11:22
    Bazı durumlar gri alanda kalıyordu.
  • 11:22 - 11:25
    Bir sağlık sigortası
    şirketiyle çalışıyorduk.
  • 11:25 - 11:30
    Hangi müşterilerinin hastaneye
    gitmek üzere olduğunu belirleyerek
  • 11:30 - 11:32
    onlara lüks hizmetler satan
  • 11:32 - 11:34
    bir yapay zekâ motoru geliştirmişti.
  • 11:35 - 11:36
    Sorun şuydu:
  • 11:36 - 11:39
    Hastaneye gitmesi gerekebileceğinden
  • 11:39 - 11:42
    henüz haberi olmayan bazı müşteriler
  • 11:42 - 11:45
    satış ekibi tarafından arandılar.
  • 11:46 - 11:48
    Bu şirketin CEO'su sizsiniz.
  • 11:48 - 11:50
    Bu programı durdurur musunuz?
  • 11:51 - 11:52
    Kolay bir soru değil.
  • 11:53 - 11:56
    Bu soruyu ele almak için bazı şirketler,
  • 11:56 - 12:02
    iş ve teknoloji ekiplerini
    kişiselleştirme ve manipülasyon,
  • 12:02 - 12:06
    kişiye özel teklifler ve ayırımcılık,
    hedefleme ve ihlal arasında
  • 12:06 - 12:09
    limitler konulmasına yardımcı
    olacak takımlar kurup
  • 12:09 - 12:12
    etik kurallar
    ve standartlar tanımlıyorlar.
  • 12:13 - 12:16
    Herhangi bir şirkette
    gerçekten önemli durumlarda
  • 12:16 - 12:21
    yapay zekâ uygulamanın çok büyük
    getirisi olduğuna ben ikna oldum.
  • 12:21 - 12:24
    İş liderleri yapay zekâyı
    takım ve süreçlerine
  • 12:24 - 12:26
    verimli bir şekilde uygulamak isterlerse
  • 12:26 - 12:27
    cesur olmaları,
  • 12:27 - 12:31
    birkaç konu seçmeleri,
  • 12:31 - 12:34
    her konu için teknoloji, yapay zekâ,
    veri bilimi, etik gibi
  • 12:34 - 12:37
    en iyi takımlarından 10, 20, 30
    kişiyi harekete geçirip
  • 12:37 - 12:40
    "İnsan artı yapay zeka" felsefesinin
    yüzde 10- 20-70 döngüsünün
  • 12:40 - 12:44
    tamamının üzerinden gitmeleri gerekir.
  • 12:45 - 12:47
    Başka bir yolu yok.
  • 12:47 - 12:52
    Gelişmiş ekonomilerdeki vatandaşlar
    algokrasiden hali hazırda korkuyorlar.
  • 12:52 - 12:56
    Yeni bir anket kapsamında
    yedi bin kişiyle görüşüldü.
  • 12:56 - 13:00
    Bunların yüzde 75'inden fazlası
  • 13:00 - 13:03
    yapay zekânın iş gücüne,
    gizliliğe etkisinden
  • 13:03 - 13:07
    ve insanlıktan çıkmış bir toplum riskinden
    cidden endişelendiklerini belirttiler.
  • 13:07 - 13:13
    Algokrasiyi dayatmak
    şirketlerde ve hatta toplumda
  • 13:13 - 13:17
    yapay zekâya karşı
    ciddi bir ters tepki riski yaratır.
  • 13:17 - 13:20
    "İnsan artı yapay zekâ"
    yapay zekânın faydalarını
  • 13:20 - 13:23
    gerçek dünyaya getirmek için
    tek seçeneğimizdir.
  • 13:24 - 13:25
    Son olarak
  • 13:25 - 13:29
    kazanan kuruluşlar
    insan bilgisine yatırım yapacaklar.
  • 13:29 - 13:32
    Sadece yapay zekâ ve veriye değil.
  • 13:33 - 13:36
    İnsan uzmanlarını işe almak,
    eğitmek, ödüllendirmek.
  • 13:37 - 13:40
    Verinin petrolün yerini aldığı söyleniyor
  • 13:40 - 13:44
    fakat aslında fark yaratan şey
    insan bilgisi olacak.
  • 13:44 - 13:48
    Çünkü veride gizlenmiş petrolü
    pompalamak için
  • 13:48 - 13:51
    mevcut olan tek vinç odur.
  • 13:53 - 13:54
    Teşekkürler.
  • 13:54 - 13:58
    (Alkışlar)
Title:
Daha iyi işlere imza atmak için insan ve yapay zekâ nasıl birlikte çalışabilir
Speaker:
Sylvain Duranton
Description:

İşte size bir çelişki: Şirketler işlerini düzene koymak adına yapay zekâyı kritik kararlar için kullanırken, verimlerini yanlışlıkla azaltabilirler. İş teknolojisti Sylvain Duranton, "İnsan artı Yapay Zekâ" yaklaşımını savunuyor - Yapay zekâ sistemlerini insanlar yerine değil, insanlarla birlikte kullanmak - ve şirketlerin insanları döngüde tutarak yapay zekâyı başarılı bir şekilde kullanması için özel bir formülü paylaşıyor.

more » « less
Video Language:
English
Team:
closed TED
Project:
TEDTalks
Duration:
14:10

Turkish subtitles

Revisions