YouTube

Got a YouTube account?

New: enable viewer-created translations and captions on your YouTube channel!

Arabic subtitles

كيف وجدت أسواء موقف في مدينة نيويورك, باستعمال البيانات الضخمة - بين ويلينقتون TEDxNewYork

Get Embed Code
12 Languages

Showing Revision 7 created 08/02/2015 by Anwar Dafa-Alla.

  1. ستة آلاف ميل من الطرق
  2. ستمائة ميل من سكك قطارات الأنفاق
  3. أربعمائة ميل من طرق الدراجات
  4. ونصف ميل من سكة الترام...
  5. إذا زرت (جزيرة روزفيلت) من قبل
  6. هذه الأرقام التي تشكل
    البنية التحتية لمدينة نيويورك
  7. هذه هي إحصائات البنية التحتية لمدينتنا
  8. وهي الأرقام التي تَنشر
    في التقارير الحكومية
  9. مثلاً مكتب المواصلات قد يخبرك
  10. عدد الأميال من الطرق التي تتم صيانتها
  11. إدارة النقل ستتفاخر بطول سكة الأنفاق
  12. معظم إدارات المدينة تزودنا بالإحصاءات
  13. هذا من تقرير السنة الحالية
  14. من لجنة سيارات الأجرة
  15. حيث نجد ان هنالك حوالي 13,500 سيارة أجرة
  16. هنا في نيويورك
  17. مثير للإهتمام, صحيح؟
  18. لكن هل تساءلت عن مصدر هذه الأرقام؟
  19. حتى تستنتج هذه الأرقام
  20. لابد لشخص ما في مكتب المدينة قال
  21. "هممم, هذا رقم قد يرغب البعض بمعرفته
  22. هذا رقم يود مواطنونا معرفته"
  23. فهم يعودون للبيانات الأولية
  24. يحصون ويضيفون و يحسبون
  25. ثم يحررون التقارير
  26. وهذه التقارير تحوي أرقاماً كهذه
  27. المشكلة هي كيف يعلمون بكل أسئلتنا
  28. ولدينا الكثير من الأسئلة
  29. هناك في الحقيقة بشكل ما
  30. عدد لانهائي لأسئلة
    يمكن أن نسألها عن مدينتا
  31. لذلك لا يمكن للإدارات مجاراتها
  32. إذاً هذا النموذج غير ناجح
  33. واعتقد أن صانعي القرار يعلمون ذلك لأنه
  34. في عام ٢٠١٢ وقع العمدة
    (بلومبيرج) قانون ما سماه
  35. تشريع البيانات المفتوحة
    الأكثر طموحا وشمولا في البلد
  36. ومن عدة نواحي هو على حق
  37. في السنتين الماضيتين نشرت المدينة
  38. 1000 مجموعة بيانات في بوابة البيانات
  39. وهو شيء رائع جداً
  40. فترى هذه البيانات ليس لعد سيارات الأجرة
  41. يمكننا أن نسأل أسئلة مختلفة
  42. خطر لي سؤال:
  43. متى تكون ساعة الذروة في نيويورك؟
  44. وهو ماقد يزعج البعض
    متى ساعة الذروة بالضبط؟
  45. وفكرت بداخلي سيارات
    الاجرة ليست مجرد أرقام
  46. هذه خرائط ملاحة لمساراتهم في شوارع مدينتنا
  47. سجلات تحوي كل طريق يسلكونه
  48. توجد بيانات هنا،
    وانا انظر الى تلك البيانات
  49. ودونت معدل سرعة سيارة
    الاجرة في مدينة نيويورك طوال اليوم
  50. تشاهدون أنه تقريبا من
    منتصف الليل الى ٥:١٨ صباحا
  51. تزداد السرعة، وعند هذه النقطة،
    حيث تنعكس القراءة
  52. حيث تقل السرعة تدريجياً حتى ٨:٣٥ صباحاً
  53. حيث يقل المعدل ليصل إلى ١١,٥ ميل/الساعة
  54. متوسط سرعة سيارات الأجرة
    في شوارع مدينتا هو ١١,٥ ميل
  55. ويتضح أن ذلك المعدل يبقى ثابتاً
  56. لباقي اليوم.
  57. (ضحك)
  58. قلت لنفسي أعتقد أنه لا توجد
  59. ساعة ذروة في نيويورك.
  60. هناك يوم الذروة.
  61. ذلك منطقي. وهذا شيْ ضروري لسببين.
  62. لو كنت مسؤول تخطيط في النقل
    سيبدو ذلك مهماً لمعرفته.
  63. ولكن إذا أردت الذهاب سريعاً لمكان ما،
  64. الآن تعرف أنه يجب ضبط المنبه
    الساعة ٤:٤٥ صباحاً لتكون مستعداً
  65. نيويورك, أليس كذلك؟
  66. ولكن هناك قصة خلف هذه البيانات.
  67. هذه المعلومات ليست متوفرة فقط لذلك.
  68. هذه البيانات أتت من قانون
    طلب تحرير المعلومات
  69. أو يختصر FOIL
  70. هذا نموذج متوفرعلى موقع
    لجنة سيارات الأجرة والليموزين.
  71. لتحصل على معلومات كهذه
    يجب عليك بملء هذاالنموذج
  72. وتقديم الطلب، وهم سيبلغونك لاحقاً.
  73. وهناك شاب أسمه (كريس وونق)
    قام تماماً بذلك.
  74. (كريس) قدم الطلب وردوا عليه:
  75. "أحضر محرك أقراص صلبة إلى مكتبنا
  76. أترك المحرك لمدة ٥ ساعات،
    سنقوم بنسخ البيانات
  77. ثم سوف تسترد المحرك".
  78. ومن هنا, أتت هذه البيانات.
  79. كريس هو ممن يريد
    أن يتيح هذه البيانات للعامة.
  80. فقام بنشر هذه البيانات على الأنترنت للعامة
  81. ومنها تم رسم هذا التخطيط.
  82. كون هذه المعلومات متاحة شيء مذهل.
  83. مسجلات المواقع GPS .. رائعة.
  84. ولكن كون مواطنين يتجولون
    حاملين أقراص صلبه,
  85. ثم يطلبون البيانات من
    المدينة لنشرها للعامة,
  86. والتي أساسا هي بيانات عامة
    يمكنك الوصول إليها،
  87. ولكنها "عامة", ولكن ليس تماماً.
  88. ونستطيع تقديم أفضل من ذلك كمدينة.
  89. لا نحتاج إلى مواطنينا
    أن يحملوا أقراص صلبة.
  90. الآن، ليست كل البيانات متاحة
    من خلال نموذج الطلب FOIL
  91. هنا خريطة قمت بإنشائها توضح
  92. أكثر التقاطعات خطورة في نيويورك
  93. من حيث حوادث الدراجات الهوائية.
  94. حيث النقاط الحمراء هي الأكثر خطورة.
  95. وكما ترون، الجانب الشرقي من "مانهاتن"
  96. خصوصا الجانب السفلي من "مانهاتن"
  97. يحوي الجزء الأكبر من حوادث الدراجات.
  98. يبدو ذلك منطقياً.
  99. لأن هناك دراجات أكثر تعبر الجسور هناك.
  100. ولكن هناك نقطة حرجة أخرى تستحق الدراسة.
  101. هنا في "ويليامسبيرق" وجادة "روزفيلت"
  102. وهذا تحديداً مانحتاجه كرؤية مبدئية.
  103. وهذا تماماً ما نبحث عنه.
  104. وأيضاً توجد قصة لهذه البيانات كذلك.
  105. هذه البيانات لم تظهر بالصدفة.
  106. من يعرف هذا الشعار؟
  107. نعم, أرى البعض يهزء رأسه موافقاً.
  108. هل حاولت نسخ ولصق بيانات من ملف PDF
  109. لتعرضها بشكل منطقي أكثر؟.
  110. أرى المزيد ممن يوافق.
  111. من استخراج بيانات أكثر
  112. ممن عرف الشعار.
  113. ما حصل هو أن البيانات التي رأيتموها
  114. كانت موجوده في ملف PDF.
  115. المئات والمئات من صفحات ملفات PDF
  116. يتم نشرها بواسطة قسم شرطة نيوروك لوحده.
  117. وحتى تحصل عليها, أما عليك النسخ واللصق
  118. لعدة مئات من الساعات.
  119. أو يمكنكم أن تكونوا "جوهن كراوس".
  120. جون كراوس قال أنه لن يقوم بنسخ ولصق
  121. هذه البيانات, ولكن سأقوم بانشاء تطبيق
  122. إسمه المساعد في تفكيك بيانات شرطة نيويورك.
  123. البرنامج يذهب لموقع
    شرطة نيويورك الإلكتروني
  124. , ويقوم بتحميل ملفات PDF
  125. كل يوم، التطبيق يبحث
    ويقوم بتحميل أي ملف جديد.
  126. وحينها يقوم التطبيق بتنفيذ مسح,
  127. والمخرجات تكون عباره عن نص
  128. وينشره على الأنترنت. حينها
    نستطيع عمل خرائط كهذه.
  129. وبالمناسبة هذه البيانات التي حصلنا عليها
  130. كل الحوادث مرتبة بطريقة أفقياً
  131. ويمكن تخيل كمية الملفات.
  132. حقيقة أنه يمكننا الوصول
    لهذه البيانات شيء عظيم,
  133. ولكن لنتوقف عن نشرها بملفات PDF
  134. لأنه سيكتب المواطنين برمجيات لهذه الملفات.
  135. وهذا ليس الخيار الأفضل لوقت المواطنين,
  136. كما أنه يمكننا كمدينة تقديم أفضل من ذلك.
  137. الآن, الخبر الجيد أنه إدارة "دي بلاسيو"
  138. أصدرت منذ فترة قريبة هذه البيانات,
  139. والآن يمكننا الوصول إليها,
  140. ولكن هناك الكثير من البيانات
    مدفونة في ملف PDF
  141. مثلاً, سجل الجرائم ما زال
    متوفر فقط بصيغة PDF
  142. وليس سجل الجرائم فقط
    بل ميزانية المدينة أيضاً.
  143. ميزانية المدينة التي يمكن قرائتها
    هي صيغه PDF فقط.
  144. ولسنا الوحيدين الذين لا نستطيع تحليله,
  145. ولكن المشرعَين الذين
    صوتوا على هذه الميزانية
  146. أيضا تصلهم بصيغة PDF فقط.
  147. إذن, المشرعّون لا يمكنهم فهم
    الميزانية التي يصوتون عليها.
  148. وحين أفكر كمدينة يمكننا
    تحسين ذلك قليلاً بالطبع.
  149. هناك العديد من البياناتا
    لتي ليست محصورة بملفات PDF.
  150. هذا مثال لخريطة قمت بإنشائها
  151. وهي تمثل الممرات المائية
    الأقذر في نيويورك.
  152. الآن, كيف قمت بحساب تلوثها؟
  153. ذلك يبدو غريباً بعض الشيء,
  154. ولكنني بحثت في معدلات بيكتريا القولون,
  155. والتي تقيس معدل القاذورات
    في كل من هذه الممرات.
  156. الدائرة الأكبر, تعني تلوث أكثر.
  157. الدائرة الأكبر تمثل المياة الأكثر تلوثاً,
  158. والأصغر أقل تلوثاً.
  159. الذي ترونه هي الممرات الداخلية.
  160. هذه البيانات أستخرجت من فحص عينات
  161. قامت بها المدينة خلال ٥ سنوات.
  162. والممرات الداخلية تعتبر أكثر تلوث.
  163. وذلك منطقي. أليس كذلك؟
  164. كما تعلمت عدة أمور.
  165. أولاً: لا تسبح في أي شيء
    ينتهي بقناة أو جدول مائي.
  166. ولكن ثانياً:وجدت أن أقذر
    ممر مائي في نيوروك,
  167. من خلال هذه العينات.
  168. في جدول "كوني أيلند"وهو ليس الذي
    تسبحون فيه، لحسن الحظ.
  169. أنه في الجهة المقابلة.
  170. ولكن ٩٤٪ من العينات المأخوذة
  171. من هذا الجدول خلال السنوات الماضية الخمس
  172. تحتوي على مستويات عالية جداً
  173. مخالفة للقوانين من حيث المستويات
    المسموح السباحة فيها.
  174. وهذه ليست أحدى الحقائق التي يمكن أن تجدها
  175. في تقارير المدينة. أليس كذلك؟
  176. لن تجدها في موقع المدينة.
  177. لن تجدها في ذلك الموقع,
  178. ولكن من الجيد أن نصل لهذه البيانات.
  179. ولكن مرة أخرى, ذلك ليس سهلاً أبداً.
  180. لأن هذه البيانات
    ليست في البيانات العامة.
  181. لو ذهبت الى البيانات العامة
  182. ستجد قصاصة منها، سنة أو عدة أشهر.
  183. في الواقع هذه البيانات
    كانت في موقع إدارة حماية البيئة.
  184. وكل هذه الروابط عباره عن ملفات
    جداول حسابية "Excel"
  185. وكل ملف مختلف.
  186. مختلف في العناوين.تقوم بنسخ
    ولصق وترتيب البيانات.
  187. حينها تستطيع عمل خرائط وهذا
    شيء عظيم.ولكن أيضاً،
  188. يمكن تقديم أقضل من ذلك.
    يمكننا تعميم الأشياء.
  189. ونحن ندفع لذلك، بسبب الموقع الذي
    أسسه "ساكروتا" والذي
  190. يعرف بإسم بوابة البيانات
    العامة لمدينة نيويورك.
  191. هنا حيث توجد ١١٠٠ مجموعة بيانات خالية
  192. من العيوب التي أخبرتكم بها مباشرة.
  193. وهذا الرقم بازدياد, وهذا شيء عظيم.
  194. يمكنكم تحميل البيانات بأي صيغة،
    جداول CSV أو PDF أو Excel
  195. أيها تريد, يمكنك الحصول على البيانات بذلك.
  196. المشكلة هي, حين تفعل ذلك
  197. ستجد أن كل إدارة
  198. لديها ترميز مختلف لعناوينها.
  199. حيث مرة يكون أسم الشارع وتقاطع الشوارع،
  200. الشارع والبلدة والعنوان
    والمبنى وعنوان المبنى.
  201. إذن مرة أخرى ستقضي الوقت
    رغم توفر هذه البوابة
  202. تقضي الوقت لتسوية خانات العنوان.
  203. هذا تضييع لوقت المواطنين.
  204. يمكننا فعل أفضل من ذلك كمدينة.
  205. يمكننا توحيد العناوين.
  206. حينها يمكننا الحصول على خرائط أكثر كهذه.
  207. هذه خرائط لحنفيات الحريق في نيوروك
  208. ولكن ليس كل الحنفيات.
  209. هذه أعلى ٢٥٠ حنفية على الاطلاق
  210. من حيث مخالفات مواقف السيارات.
  211. (ضحك)
  212. لقد تعلمت عدة أشياء من هذه الخريطة
  213. أنا أحب هذه الخريطة.
  214. أولاً: لا تركن السيارة في
    الجزء الشمال شرقي.
  215. فقط لاتفعل. لا يهم أين توقف سيارتك
  216. سوف تحصل على مخالفة متعلقه بحنفيات الحريق.
  217. ثانياً:وجدت أكثر حنفيتان
    على الأطلاق في نيويورك
  218. وتقعان في الجنوب الشرقي من المدينة,
  219. وقد وفرتا أكثر من ٥٥ ألف دولار سنوياً!
  220. قيمة مخالفات المواقف بجوارهما.
  221. ويبدو ذلك غريباً لبعض الشيء حيث لاحظت ذلك.
  222. ثم قمت بالمزيد من البحث وأتضح
    أنه ما يبدو أنه طفاية حريق
  223. هو في الحقيقة تمديد لممر مشاة
  224. وهو عبارة عن ممر بعرض
    ٧ أقدام للعبور عليه
  225. يمر في منطقة مواقف.
  226. حيث تأتي هذه السيارات ..
  227. " الحنفية ليست قريبة, سأركن هنا"
  228. والموقف متاح وتم طلائة بشكل جميل لذلك.
  229. سيوقفون سياراتهم, وشرطة نيويورك
  230. تخالفهم الرأي بمسمى هذه الموقف,
  231. وسيقومون بمخالفتهم.
  232. وحينها لست الوحيد الذي حصل على مخالفة.
  233. هذه سياره من خرائط تصوير الشوارع لقوقل
  234. وقد حصلت على نفس المخالفة.
  235. حينها, قمت بالكتابة عن ذلك في
    مدونتي في "Quant NY",
  236. وإدارة المواصلات قامت بالرد وقالوا,
  237. " بما أن الإدارة لم تتلقى أي
    شكاوى عن هذا الموقع,
  238. سنقوم بإعادة النظر لهذا الممر
    ونقوم بأي تعديلات بديلة."
  239. وقلت لنفسي, رد نموذجي من جهة حكومية,
  240. حسناً، سأتغاضى عن ذلك.
  241. ولكن عدة أسابيع لاحقاً، شيء عجيب حصل.
  242. لقد قاموا بإعادة طلاء المنطقة.
  243. ولثانية، كأني رأيت مستقبل البيانات العامة
  244. فكّر بما حصل هنا.
  245. لخمس سنوات
  246. كان يتم المخالفة في هذه النقطة
    وكانت ذلك محيراً,
  247. ولكن مواطن عثر على شيء
    وأخبر المدينة. لاحقاً،
  248. وخلال أسابيع, تم إصلاح المشكلة.
  249. ذلك مذهل.العديد يرى أن
    البيانات العامة هي الحارس.
  250. ولكنها ستكون شريك.
  251. نستطيع حث المواطنين ليكونوا
    شركاء أفضل للحكومة.
  252. وذلك ليس صعباً.
  253. كل ما نحتاجه بعض التغيرات.
  254. اذا كنت تصيغ بيانات للعامة،
  255. واذا رأيت أن بياناتك
    يتم صياغتها للعامة،
  256. إذن لننشرها بحيث تكون مصممة للعامة.
  257. وإذا كنت جهة حكومية تنشر
    بياناتك بصيغه PDF,
  258. لنقر تشريع يطلب منك نشرها
    بالبيانات الدقيقة،
  259. وذلك لأن هذه البيانات أتت من مصدر ما.
  260. لا أعرف من أين، ولكنها أتت من مصدر ما
  261. ويمكن نشرها بصيغة PDF حينها.
  262. ولنتبنى بعض معايير
    البيانات المفتوحة للعامة.
  263. لنبدأ بعنوانيننا هنا في نيويورك.
  264. لنبدأ بتعميم عنوانيننا.
  265. لأن نيويورك رائدة في
    نشر البيانات المفتوحة.
  266. بغض النظر عما سبق, إن لنا الطليعة
    في البيانات المفتوحة
  267. ولو بدأنا بتعميم معايير للبيانات المفتوحة،
  268. آخرون سيتبعوننا.الولاية,
    وربما الحكومة الفيدرالية.
  269. أعلم, يبدواً جنونياً, ولكن
  270. بلدان أخرى قد تفعل ذلك،
  271. ونحن لسن بعيدين عن الوقت حيث
    تستطيع كتابة برنامج وحيد
  272. وانشاء خريطة معلومات من ١٠٠ دولة.
  273. هذا ليس خيال علمي. نحن قريبون من ذلك حقاً.
  274. وبالمناسبة, من هو المستفيد من هذا؟
  275. لأن ذلك لا يخص"جوهن كراوس"
    او "كريس وونج" فقط.
  276. هناك المئات من اللقاءات
    تجري في نيويورك الآن.
  277. لقاءات نشطة.
  278. هناك آلاف الناس تحضر هذه اللقاءات.
  279. هولاء الناس يذهبون بعد العمل
    وفي عطل الأسبوع،
  280. ويحضرون ليطلعوا على هذه البيانات المفتوحة.
  281. وليجعلوا مدينتنا أفضل.
  282. مجموعات مثل "بيتا نيويورك",
  283. التي أطلقت الأسبوع الماضي
    موقع شكاوى نيويورك.
  284. يتيح الأشتراك بنحو ٣١١ شكوى
  285. قريبة من منازلنا, أو مكاتبينا.
  286. تضع عنوانك وتحصل على الشكاوى المحلية.
  287. كما أن المختصّون ليسوا وحدهم
    خلف هذا المشروع،
  288. ولكن مخططي المدن، كطلابي في معهد برات.
  289. الناشطين السياسيين أيضاً, والجميع.
  290. إنها مجموعة من المواطنين من مختلف الأعراق.
  291. ومع بعض التغييرات، تغييرات تدريجية،
  292. يمكننا إطلاق شغف وقدرة المواطنيين
  293. لإستغلال البيانات المفتوحة
    لجعل مدينتا أفضل
  294. سواء كانت مجموعة بيانات واحده،
  295. أو موقف سيارات وحيد، على حده.
  296. شكراً
  297. (تصفيق)