Return to Video

כיצד אני נלחמת בהטייה אלגוריתמית

  • 0:01 - 0:04
    שלום, שמי ג׳וי, ואני משוררת של קוד,
  • 0:04 - 0:09
    במשימה לעצור כח בלתי נראה שנמצא בעליה,
  • 0:09 - 0:12
    כח שקראתי לו ״בהייה קודית״,
  • 0:12 - 0:15
    ההגדרה שלי להטייה אלגוריתמית.
  • 0:15 - 0:20
    הטייה אלגוריתמית, בדומה להטייה אנושית,
    גורמת לחוסר הוגנות.
  • 0:20 - 0:26
    אבל אלגוריתמים, כמו וירוסים,
    יכולים להפיץ את ההטייה בצורה נרחבת
  • 0:26 - 0:27
    ובקצב גבוה.
  • 0:28 - 0:32
    הטייה אלגוריתמית יכולה
    להוביל לחוויות פסילה
  • 0:32 - 0:34
    ולפרקטיקות מפלות.
  • 0:35 - 0:37
    בואו ואראה לכם למה אני מתכוונת.
  • 0:37 - 0:39
    שלום מצלמה, יש לי פנים.
  • 0:40 - 0:42
    את מזהה את הפנים שלי?
  • 0:42 - 0:44
    אולי בלי משקפיים?
  • 0:44 - 0:46
    את רואה את הפנים שלה.
  • 0:46 - 0:48
    מה לגבי הפנים שלי?
  • 0:52 - 0:56
    יש לי מסכה. את רואה אותה?
  • 0:56 - 0:59
    אז איך זה קרה?
  • 0:59 - 1:02
    למה אני יושבת לפני המחשב
  • 1:02 - 1:03
    במסכה לבנה,
  • 1:03 - 1:07
    מנסה להיות מזוהה על ידי
    מצלמת רשת זולה?
  • 1:07 - 1:09
    ובכן, כשאני לא נלחמת בבהייה הקודית
  • 1:09 - 1:11
    כמשוררת של קוד,
  • 1:11 - 1:14
    אני סטודנטית לתואר שני במעבדת המדיה של MIT,
  • 1:14 - 1:19
    ושם יש לי הזדמנות לעבוד על כל מיני
    פרוייקטים גחמניים,
  • 1:19 - 1:21
    כולל ״המראה המעצימה״,
  • 1:21 - 1:26
    פרוייקט שעשיתי כדי לשים מסכה דיגיטלית
    על ההשתקפות שלי.
  • 1:26 - 1:29
    כך שבבוקר, אם רציתי להרגיש עוצמתית,
  • 1:29 - 1:30
    יכולתי לשים מסיכה של אריה.
  • 1:30 - 1:34
    אם רציתי להיות מעודדת, יכולתי לשים ציטוט.
  • 1:34 - 1:37
    ובכן, השתמשתי בתוכנת זיהוי פנים כללית
  • 1:37 - 1:38
    כדי לבנות את המערכת,
  • 1:38 - 1:43
    אבל גיליתי שקשה לבדוק את המערכת
    בלי שאלבש מסיכה לבנה.
  • 1:44 - 1:49
    לרוע המזל, נתקלתי בבעיה זו גם בעבר.
  • 1:49 - 1:53
    כשלמדתי לתואר ראשון במדעי המחשב
    במכון הטכנולוגי בג׳ורג׳יה,
  • 1:53 - 1:55
    עבדתי על ״רובוטים חברתיים״,
  • 1:55 - 1:59
    ואחת מהמשימות היתה ללמד רובוט לשחק מחבואים
    (Peek-a-boo),
  • 1:59 - 2:01
    משחק פשוט מבוסס תורות
  • 2:01 - 2:05
    שבו השחקנים מכסים את פניהם, וכשהם מגלים
    אותם הם אומרים ״Peek-a-boo״!
  • 2:05 - 2:09
    הבעייה היא שהמשחק לא עובד
    אם אי אפשר לראות אותך.
  • 2:09 - 2:12
    והרובוט שלי לא יכל לראות אותי.
  • 2:12 - 2:16
    אבל השאלתי את פניה של השותפה לדירה שלי
    כדי להשלים את הפרוייקט,
  • 2:16 - 2:17
    הגשתי את המשימה,
  • 2:17 - 2:21
    והנחתי שמישהו אחר
    כבר יפתור את הבעייה הזאת.
  • 2:22 - 2:24
    כעבור זמן לא רב,
  • 2:24 - 2:28
    הייתי בהונג קונג כמשתתפת בתחרות יזמות.
  • 2:28 - 2:31
    המארגנים החליטו לקחת את המשתתפים
  • 2:31 - 2:33
    לסיור בין סטארטאפים מקומיים.
  • 2:33 - 2:36
    באחד הסטארטאפים היה ״רובוט חברתי״,
  • 2:36 - 2:38
    והם החליטו לערוך הדגמה.
  • 2:38 - 2:41
    ההדגמה עבדה על כולם עד שהגיעו אלי,
  • 2:41 - 2:43
    ואתם בטח כבר מנחשים,
  • 2:43 - 2:46
    הרובוט לא הצליח לזהות את פניי.
  • 2:46 - 2:49
    שאלתי את המפתחים למה זה קורה,
  • 2:49 - 2:54
    ומסתבר שהם השתמשו באותה תוכנה כללית
    לזיהוי פנים.
  • 2:54 - 2:56
    בצד השני של העולם,
  • 2:56 - 3:00
    למדתי שהטייה אלגוריתמית יכולה לנוע
    באותה מהירות
  • 3:00 - 3:03
    שלוקח להוריד כמה קבצים מהאינטרנט.
  • 3:04 - 3:07
    אז מה קורה פה?
    למה הפנים שלי לא מזוהות?
  • 3:07 - 3:10
    ובכן, עלינו להבין כיצד אנו נותנים למכונות
    את היכולת לראות.
  • 3:10 - 3:14
    ראייה ממוחשבת משתמשת
    בטכניקות של למידת מכונה
  • 3:14 - 3:16
    כדי לבצע זיהוי פנים.
  • 3:16 - 3:19
    הדרך בה זה עובד היא שאתה מכין
    קבוצת אימון של דוגמאות של פנים.
  • 3:19 - 3:22
    אלו פנים. אלו פנים.
    אלו לא פנים.
  • 3:22 - 3:27
    ואז, לאחר זמן מה, אתה יכול ללמד את
    המחשב לזהות פנים אחרות.
  • 3:27 - 3:31
    אבל, אם קבוצות האימון
    אינן באמת מגוונות מספיק
  • 3:31 - 3:34
    אז כל צורת פנים שסוטה יותר מדי מהנורמה
  • 3:34 - 3:36
    תהיה קשה לזיהוי,
  • 3:36 - 3:38
    וזה מה שקרה לי.
  • 3:38 - 3:40
    אבל אל דאגה - יש לי חדשות טובות.
  • 3:40 - 3:43
    קבוצות אימון אינן נוצרות משום מקום.
  • 3:43 - 3:45
    אנחנו למעשה יכולים ליצור אותן.
  • 3:45 - 3:49
    כלומר יש לנו הזדמנות ליצור קבוצות אימון
    שמכסות את כל הספקטרום
  • 3:49 - 3:53
    ומייצגות דיוקן עשיר יותר של האנושות.
  • 3:53 - 3:55
    כעת ראיתם בדוגמאות שהבאתי
  • 3:55 - 3:57
    כיצד בעזרת רובוטים חברתיים
  • 3:57 - 4:02
    גיליתי על הטייה אלגוריתמית שגורמת לפסילה.
  • 4:02 - 4:06
    אבל הטייה אלגוריתמית יכולה
    להוביל גם לאפלייה.
  • 4:07 - 4:09
    לאורך כל ארצות הברית
  • 4:09 - 4:13
    מחלקות משטרה מתחילות
    להשתמש בתוכנה לזיהוי פנים
  • 4:13 - 4:16
    כחלק מהאמצעים ללחימה פשע.
  • 4:16 - 4:18
    האוניברסיטה ג'ורג'טאון לאו
    פרסמה דו״ח
  • 4:18 - 4:24
    שהפנים של אחד מכל שני בוגרים בארה״ב -
    כלומר 117 מליון אנשים
  • 4:24 - 4:28
    נמצאות ברשתות של זיהוי פנים.
  • 4:28 - 4:33
    מחלקות משטרה משתמשות כיום ברשתות
    אלו בצורה לא מוסדרת,
  • 4:33 - 4:37
    ומשתמשות באלגוריתמים שדיוקם לא מוודא.
  • 4:37 - 4:41
    ועדיין, אנו יודעים שזיהוי פנים
    אינו חף מטעויות,
  • 4:41 - 4:45
    ותיוג פנים בעקביות נשאר אתגר.
  • 4:45 - 4:47
    אולי ראיתם זאת בפייסבוק.
  • 4:47 - 4:50
    חבריי ואני צוחקים כל הזמן כשאנו רואים
    אנשים אחרים
  • 4:50 - 4:52
    מתוייגים בטעות בתמונות שלנו.
  • 4:52 - 4:58
    אבל זיהוי מוטעה
    של חשוד בפשע אינו נושא לצחוק,
  • 4:58 - 5:01
    כמו גם פריצת זכויות אזרח.
  • 5:01 - 5:04
    לימוד מכונה נמצא בשימוש של זיהוי פנים,
  • 5:04 - 5:08
    אך זה גם מתרחב מעבר לתחום
    של ראייה ממוחשבת.
  • 5:09 - 5:13
    בספרה ״נשקים של השמדה מתמטית״,
  • 5:13 - 5:20
    מדענית הנתונים קאת׳י אוניל מדברת על
    העלייה של אלגוריתמים מסוג WMDs -
  • 5:20 - 5:24
    אלגוריתמים נפוצים, מסתוריים והרסניים
  • 5:24 - 5:27
    שנמצאים בשימוש גובר למטרת קבלת החלטות
  • 5:27 - 5:31
    שמשפיעות על עוד ועוד היבטים של חיינו.
  • 5:31 - 5:32
    מי מתקבל לעבודה ומי מפוטר?
  • 5:32 - 5:35
    האם תקבל את ההלוואה?
    האם תקבל את הביטוח?
  • 5:35 - 5:38
    האם אתה מתקבל לקולג׳ שרצית?
  • 5:38 - 5:42
    האם אתה ואני משלמים אותו מחיר
    עבור אותו מוצר
  • 5:42 - 5:44
    שנקנה באותה פלטפורמה?
  • 5:44 - 5:48
    יחידות לאכיפת החוק גם מתחילות
    להשתמש בלימוד מכונה
  • 5:48 - 5:50
    עבור שיטור תחזיתי.
  • 5:50 - 5:54
    יש שופטים שמשתמשים בציוני סיכון שהופקו ע״י
    מכונה כדי להחליט
  • 5:54 - 5:58
    כמה זמן אדם יבלה בכלא.
  • 5:58 - 6:01
    לכן עלינו לחשוב באמת על החלטות אלו.
  • 6:01 - 6:02
    האם הן הוגנות?
  • 6:02 - 6:05
    וכבר ראינו שהטייה אלגורימית
  • 6:05 - 6:08
    לא בהכרח מביאה לתוצאות הוגנות.
  • 6:08 - 6:10
    אז מה ניתן לעשות בקשר לזה?
  • 6:10 - 6:14
    ובכן, אנחנו יכולים להתחיל לחשוב איך ניצור
    קוד יותר מכליל
  • 6:14 - 6:17
    ולממש שיטות קידוד מכלילות.
  • 6:17 - 6:19
    זה באמת מתחיל באנשים.
  • 6:20 - 6:22
    כך שזה משנה מי מקודד.
  • 6:22 - 6:26
    האם אנחנו בונים צוותים מכל הספקטרום
    עם אנשים שונים?
  • 6:26 - 6:28
    שיכולים לבדוק את האזורים המתים של האחרים?
  • 6:28 - 6:32
    בצד הטכני, איך אנחנו מקודדים משנה גם.
  • 6:32 - 6:35
    האם אנחנו משקללים גם הוגנות כשאנו
    מפתחים מערכות?
  • 6:36 - 6:38
    ולבסוף, למה אנחנו מקודדים גם משנה.
  • 6:39 - 6:44
    השתמשנו בכלים ממוחשבים לפתוח עושר עצום.
  • 6:44 - 6:48
    יש לנו הזדמנות כעת לפתוח אפילו יותר שוויון
  • 6:48 - 6:51
    אם ניתן עדיפות לשינוי חברתי
  • 6:51 - 6:53
    ולא רק לאחר מעשה.
  • 6:54 - 6:59
    וכך אלו שלושת העיקרים של תנועת
    ״הקוד המכליל״.
  • 6:59 - 7:00
    מי שמקודד משנה,
  • 7:00 - 7:02
    איך מקודדים משנה
  • 7:02 - 7:04
    ולמה אנחנו מקודדים משנה.
  • 7:04 - 7:07
    כדי להתקדם לעבר הקוד המכליל
    אנחנו יכולים להתחיל לחשוב
  • 7:07 - 7:10
    על בניית פלטפורמות שיכולות לזהות הטייה
  • 7:10 - 7:13
    על ידי איסוף חוויות מאנשים,
    כפי שאני שיתפתי,
  • 7:13 - 7:16
    אך גם על ידי ביקורת של תוכנה קיימת.
  • 7:16 - 7:20
    אנו יכולים גם ליצור קבוצות אימון
    שלמות יותר.
  • 7:20 - 7:23
    דמיינו קמפיין ״סלפי לשלמות״
  • 7:23 - 7:27
    שבו אתם ואני יכולים לעזור למפתחים
    לבדוק וליצור
  • 7:27 - 7:29
    קבוצות אימון שלמות יותר.
  • 7:29 - 7:32
    אנו יכולים גם להתחיל לחשוב
    בצורה מודעת יותר
  • 7:32 - 7:38
    על ההשפעה החברתית
    של הטכנולוגיה אותה אנו מפתחים.
  • 7:38 - 7:40
    כדי להתחיל את תנועת ״הקוד המכליל״,
  • 7:40 - 7:43
    השקתי את הליגה לצדק אלגוריתמי,
  • 7:43 - 7:49
    שבה כל אחד שאכפת לו מצדק
    יכול להילחם בבהייה קודית.
  • 7:49 - 7:52
    באתר codedgaze.com אתם יכולים
    לדווח על הטייה,
  • 7:52 - 7:55
    לבקש ביקורת, להיות בודק
  • 7:55 - 7:57
    ולהצטרף לשיחה על הנושא,
  • 7:57 - 8:00
    #codegaze.
  • 8:01 - 8:03
    אז אני מזמינה אתכם להצטרף אלי
  • 8:03 - 8:07
    ביצירת עולם שבו הטכנולוגיה עובדת
    עבור כולנו,
  • 8:07 - 8:09
    לא רק עבור חלקינו,
  • 8:09 - 8:14
    עולם שבו אנו מעריכים שלמות
    ומתרכזים בשינוי חברתי.
  • 8:14 - 8:15
    תודה לכם.
  • 8:15 - 8:19
    (מחיאות כפיים)
  • 8:21 - 8:24
    יש לי רק שאלה אחת:
  • 8:24 - 8:26
    תצטרפו אלי למאבק?
  • 8:26 - 8:27
    (צחוק)
  • 8:27 - 8:31
    (מחיאות כפיים)
Title:
כיצד אני נלחמת בהטייה אלגוריתמית
Speaker:
ג׳וי בולמוויני
Description:

הסטודנטית בוגרת MIT ג׳וי בולמוויני עבדה עם תוכנה לזוהוי פנים כשהבחינה בבעייה: התוכנה לא זיהתה את פניה - - כיוון שמפתחי האלגוריתם לא לימדו אותו לזהות מגוון של גווני פנים ומבני פנים.
היא כעת במשימה להילחם בהטייה שיש בלמידת מכונה, תופעה שהיא מכנה ״בהייה קודית״.
זו הרצאה פותחת עיניים על הצורך לאחריות בקידוד.. כיוון שאלגוריתמים משפיעים על תחומים נרחבים יותר ויותר של חיינו.
more » « less
Video Language:
English
Team:
closed TED
Project:
TEDTalks
Duration:
08:46

Hebrew subtitles

Revisions

Our website uses cookies for analysis purposes.