גלובס - עיתון העסקים של ישראלאתר נגיש

בינה מלאכותית בפרקליטות? סכנה ממשית לזכויות הפרט

החובה של הפרקליטות כגוף שלטוני שנועד להגשים צדק היא להקפיא את הפרויקט בנושא עד להכנסת רגולציה מקיפה של התחום

בניגוד לדעה הרווחת, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות
בניגוד לדעה הרווחת, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות

הכותב הוא סטודנט לתואר שני למשפט וטכנולוגיה באוניברסיטת חיפה

בימים אלה, לפי הדיווחים בתקשורת, הפרקליטות פועלת להקמה של מערכת בינה מלאכותית שתסייע לפרקליטים לחזות את סיכויי ההצלחה בתיק. לצורך פיתוח המערכת, מוזנים בשלב זה אלפי תיקים שעבדה עליהם הפרקליטות, ומהם האלגוריתם צפוי ללמוד. כבר עכשיו יש לומר בצורה ברורה שאינה משתמעת לשתי פנים: מדובר בסכנה של ממש לאזרחים ולזכויותיהם.

בניגוד לעמדה הרווחת, לפיה אלגוריתמים ומערכות של בינה מלאכותית הם ניטרליים ואובייקטיביים, מחקרים רבים הראו כי מערכות בינה מלאכותית הן מוטות ומפלות ואף מעמיקות את הפערים החברתיים, וזאת מבלי שניתן לבקרם באופן יעיל ונכון.

לא אובייקטיביים

כך למשל, מערכת של בינה מלאכותית שנועדה לסנן קורות חיים בחברת אמזון, הדירה נשים רבות וטובות שהגישו מועמדות לתפקידים השונים, וזאת משום שהמערכת שלמדה את קורות חייהם של עובדי החברה ראתה שיש מיעוט נשי בחברה, והסיקה מכך ש"פחות נשים - יותר טוב".

בהקשר המשפטי, החשש להטיה במערכת בינה מלאכותית הוא חמור שבעתיים. לא אחת מונחים על הכף חירותם וזכויותיהם של נאשמים, ולא ניתן - בשם היעילות או בשל נתון סטטיסטי - להביא לפגיעה כה חמורה בזכויותיהם של אזרחים.

הדוגמה המובהקת לשילוב של מערכת בינה מלאכותית ומשפט היא בארצות-הברית, של מערכת בשם "COMPAS". המערכת שימשה שופטים לצורך הערכת מסוכנותם של נאשמים, כך שבטרם נשלחו למאסר, השופטים קיבלו ציון מהמערכת שמשקף עד כמה אותו נאשם הוא מסוכן. מטבע הדברים, ככל שהציון היה גבוה יותר, כך נהגו השופטים להחמיר יותר. לאחר תקופה התברר כי המערכת הפלתה נאשמים שחורים והעריכה את מסוכנותם בצורה שגויה, מה שהביא להחמרת ענישה רוחבית עם נאשמים שחורים על בסיס שיקול מקומם וחסר צדק.

למערכת זו לא נאמר בשום שלב כי עליה לשקול גזע או צבע עור, ובמערכת של אמזון לא הייתה שורת קוד שהוטמעה באלגוריתם שאמרה "רצוי להדיר נשים".

הסיבות להטיות במערכות של בינה מלאכותית יכולות להיות מגוונות. בין הסיבות הנפוצות היא הגדרה שגויה של ההצלחה, כך שהאלגוריתם לומד מנתוני העבר את ההצלחה, ובכך למעשה הוא מנציח טעויות עבר ומשמר מצב קיים, שממילא בהרבה מקרים הוא בעייתי. כך שבהקשר של הפרקליטות, יכול להיות מצב אבסורדי שבו אם הייתה הצלחה בתיקים של עבריינים רבים בשם "אמיר" שהורשעו, והתיק בעניינם התקדם בהצלחה רבה, הדבר עלול להשליך על התוצאות שיספק האלגוריתם לכל נאשם בשם "אמיר" - כי בעבר הפרקליטות הצליחה בתיקים עם פרמטר דומה. לחלופין, יכול שיהיה מצב שבאזור מסוים הפרקליטות מצליחה לנהל תיקים בהצלחה רבה למול עבריינים מיישוב מסוים, ולפתע מגיע נאשם שהוא חף מפשע - האם עובדת היותו מתגורר באותו יישוב היא שיקול להצלחת התיק?

עמימות האלגוריתם

מה שמוסיף מורכבות לשימוש במערכת שכזו היא עמימותם של האלגוריתם וקיומה של "קופסה שחורה". אחת הבעיות המדוברות במערכות של בינה מלאכותית היא שבשל מורכבות האלגוריתמים והליך עיבוד הנתונים, לא ניתן לנמק את ההחלטה של המערכת' מה השיקולים שעמדו לנגד עיניה ומה המשקל שקיבל כל שיקול בדרך להחלטה. קיומה של "קופסה שחורה" כזו לא מאפשר ביקורת יעילה ואפקטיבית על המערכת ומקשה גם על תיקונה.

בעיות אלה במערכות של בינה מלאכותית הביאו מדינות רבות לנקוט רגולציה שאוסרת על שימוש בבינה מלאכותית בתחומים מסוימים, מתוך הבנה שהסיכון הוא גדול ואינו שווה את התועלת, לפחות בשלב זה. באיחוד האירופי מנסים לקדם רגולציה חדשה שתסדיר את השימוש בכלים של בינה מלאכותית, לרבות רכבים אוטונומיים, שתחייב בדיקות מקיפות בטרם השימוש.

מכאן, החובה הבסיסית של הפרקליטות כגוף שלטוני שנועד להגשים צדק היא להקפיא את הפרויקט עד לפיתוחים טכנולוגיים שיאפשרו שימוש בבינה מלאכותית הוגנת או לפחות עד לרגולציה מקיפה של התחום במדינת ישראל. אחרת, כולנו נצטרך לשלם את המחיר.

עוד כתבות

התחביבים הביזאריים של הדיקטטורים האכזריים בעולם / איור: גיל ג'יבלי

מיסטר בין בשירות הג'יהאד: התחביבים הביזאריים של הדיקטטורים האכזריים בעולם

תחקיר שערך לאחרונה אטלנטיק חשף את ימיו האחרונים של אסד בשלטון, שכללו בילוי שעות במשחקי וידאו ● השליט המודח לא היה הדיקטטור היחיד עם תחביב שלא מתיישב עם התנהגותו: בן לאדן העריץ סרטי אנימציה, סדאם חוסיין פרסם רומנים וסטאלין התמכר למערבונים

צוללים לשוק האג''ח / צילום: AI

שוקלים להשקיע בשוק האג"ח? צבי סטפק מסביר ממה צריך להיזהר

שוק משעמם? תחשבו שוב. הוא אולי לא מספק ריגוש כמו שוק המניות, אבל לא חסרים גורמים שמשפיעים על איגרות החוב שהנפיקו ממשלות ארה"ב, יפן ואפילו ישראל ● מהי נוסחת הקשר בינו לבין שוק המניות, והאם כאשר הריבית יורדת הוא מושפע תמיד באותו הכיוון כמו מניות?

הבורסה בתל אביב / צילום: Shutterstock

ירידות בת"א; זו הסיבה שאל על צונחת ב-7%

המסחר בת"א מתנהל במגמה שלילית - ת"א 35 יורד בכ-0.7%, ת"א 90 מאבד מערכו כ-0.6% ● חברות התעופה מובילות את הירידות - אל על נופלת ב-7%, ישראייר עם ירידה של 3% ● ירידות קלות על חוזים עתידיים בוול סטריט לקראת פרסום מדד המחירים לצרכן ● המסחר באירופה מתנהל במגמה מעורבת: הקאק בכ-0.4%, הפוטסי עולה בכ-0.2% ● הזהב רושם התאוששות קלה של  1%, הכסף עולה בכ-1.7% ● באופנהיימר עדכנו רשימת המניות הישראליות המומלצות שלהם: אלה שיצאו ואלה שנכנסו ● עדכונים שוטפים

צוואר הבקבוק שמונע ממובילאיי, איטורו ופאגאיה להירשם גם בת''א / צילום: שלומי יוסף (עיבוד: טלי בוגדנובסקי)

צוואר הבקבוק שמונע ממובילאיי, איטורו ופאגאיה להירשם בבורסת ת"א

לגלובס נודע כי מספר חברות טכנולוגיה ישראליות שנסחרות בוול סטריט מעוניינות להצטרף לבורסה ולהפוך לדואליות, אך מה שעומד בינן ובין הרישום הכפול הוא חסם רגולטורי: לחברות עם שני סוגי מניות אסור להירשם למסחר בבורסה המקומית ● הרגולטור מקדם שינוי, אך החקיקה "תקועה" לכאורה בוועדת הכספים של הכנסת

איתמר פורמן, מנכ''ל ישראכרט / צילום: ענבל מרמרי

אחרי שנכנס לתפקיד המנכ"ל: המינויים של איתמר פורמן בהנהלת ישראכרט

חברת האשראי הודיעה על מינויו של אייל בן-חיים, לשעבר ראש החטיבה הבנקאית בבנק לאומי, לתפקיד ראש חטיבת העסקים ● בנוסף, אדר גורן תקודם ותמונה לתפקיד סמנכ"לית דאטה, דיגיטל ושיווק

דיון בבג''ץ / צילום: עמית שאבי, פול ידיעות אחרונות

שופטי העליון: המחסור בשופטים מוביל לשחרור נאשמים ברצח

ביהמ"ש העליון דן היום בעתירה המבקשת לחייב את שר המשפטים לכנס את הוועדה לבחירת שופטים, לאחר למעלה משנה ● לפי הנתונים שהוצגו, 45 תקנים אינם מאוישים ו-55 נוספים צפויים להתפנות או להתווסף ● השופט אלכס שטיין סיפר: "נאלצתי אישית לשחרר שלושה אנשים בתיקי רצח" ● בינתיים השר טוען כי החוק נותן לו שיקול דעת לפעול בהתאם לאידיאולוגיה שלו

דמותה של אירנה בקמפיין הפועלים

מי המפרסם שלקח השבוע את הדאבל במדד הזכורות והאהובות

הפרסומת החדשה של בנק הפועלים עם אירנה והילה קורח מתברגת כפרסומת הזכורה והאהובה ביותר השבוע, כך עולה מדירוג הפרסומות הזכורות והאהובות של גלובס וגיאוקרטוגרפיה ● לפי נתוני יפעת בקרת פרסום, סלקום השקיעה את התקציב הגבוה ביותר, אך לא התברגה

עיצוב: טלי בוגדנובסקי

רשות המסים מאיימת בשומות של עשרות אלפי שקלים על רוכשי דירות

הכתבה הזו הייתה הנצפית ביותר השבוע בגלובס ועל כן אנחנו מפרסמים אותה מחדש כשירות לקוראינו ● הרשות הפסידה בפסק דין דרמטי שקבע כי זכייה במכרזי "מחיר למשתכן" אינה נחשבת לרכישת זכות במקרקעין ● ברשות נערכים לערער לעליון ובינתיים מזהירים כי יתקנו את כל שומות מס הרכישה של הרוכשים בתוכניות מחיר למשתכן, מחיר מטרה ודירה בהנחה ● מדובר בכ-30 אלף שקל לדירה של 2 מיליון

חדר כושר / אילוסטרציה: Shutterstock

מחלוקת של מיליונים על ארנונה הסתיימה בתבוסה לעיריית תל אביב

חדר הכושר נסגר והפך למחסן, עיריית ת"א המשיכה לדרוש ארנונה של עסק ● ביהמ"ש נאלץ להתערב במחלוקת בין בעלת הנכס לבין העירייה, שבעצמה הורתה על הפסקת הפעילות של חדר הכושר - אך דרשה ממנו להמשיך לשלם ארנונה לפי תעריף גבוה יותר

הצ'אטבוט של קלוד / צילום: Shutterstock

אנתרופיק מגייסת 30 מיליארד דולר לפי שווי של 380 מיליארד דולר

החברה שמאחורי הצ'אטבוט קלוד מדווחת על קצב הכנסות שנתי של 14 מיליארד דולר ומושכת ענקיות השקעה לסבב הגיוס הגדול בתולדותיה ● לדברי החברה, יותר מ-500 ארגונים משלמים מעל מיליון דולר בשנה עבור שימוש במודלים ובמוצרים שלה

עומרי קוהל, מנכ''ל פירמיד אנליטיקס / צילום: כפיר זיו

אחרי ארמיס: ServiceNow רוכשת חברת BI ישראלית

העסקה מגיעה זמן קצר לאחר רכישת ארמיס הישראלית ב־7 מיליארד דולר, ומוסיפה לפורטפוליו של סרוויס-נאו את הפלטפורמה של פירמיד אנליטיקס המאחדת איסוף נתונים, ניתוח וחיזוי במקום אחד ● לפי ההערכות בתעשייה, החברה נמכרה בכמה מאות מיליוני דולרים

נוטרילון של חברת טבע / צילום: יח''צ

תינוק בן 4 שבועות נפטר. משרד הבריאות מקים ועדת בדיקה בנושא צריכת נוטרילון

תינוק מת מכשל נשימתי לאחר שצרך נוטרילון מאצווה שבוצע עליה ריקול; משרד הבריאות: לא רואים קשר, אך נמשיך לבדוק ● בתוך כך, 5,000 הורים דורשים ממשרד הבריאות ועדת בדיקה לפרשת הנוטרילון

מטוס ארקיע / צילום: ארקיע

סומליה חזרה בה: ארקיע תוכל לטוס מעליה למרות הכרת ישראל בסומלילנד

חברת התעופה ארקיע הודיעה כי קיבלה אישור לשוב ולהפעיל את טיסותיה לתאילנד במסלול הרגיל והקצר, החוצה את המרחב האווירי של סומליה ● ההסדרה הושגה בעקבות מאמצים של משרדי הממשלה ורשות התעופה האזרחית, על רקע הסוגיה הרגישה של ההכרה הישראלית בסומלילנד

ניקש ארורה, מנכ''ל פאלו אלטו / צילום: מולי גולדברג

פיטורים בפאלו אלטו לאחר השלמת רכישת סייברארק, מתוכם עשרות בישראל

המספר הרשמי של מפוטרי כלל החברה לא נמסר, אך הערכות מדברות על מאות עובדים ● החברה מסרה: "שינויים ארגוניים אסטרטגיים הם חלק טבעי מתהליך של חיבור בין שני מובילים בתעשייה"

אילן רום / צילום: יוסי זמיר

"ישראל היא כבר לא מדינת אי": ראיון אופטימי עם מנכ"ל משרד האוצר

עם עבר של 25 שנים במוסד ותואר בארכיאולוגיה, אילן רום אינו מנכ"ל האוצר הטיפוסי ● למרות הביקורת על כך שהכנסת חוררה את חוק ההסדרים, הוא מתגאה: "מעולם לא עברו כל כך הרבה רפורמות בשנת בחירות" ● עם זאת, הוא מתריע שהציבור ישלם מיליארדים כ"מס פיצול" ● כך הוא נלחם בהון השחור, מגן על עצמאות אגף התקציבים ומקדם חזון להפוך למעצמת אנרגיה ומים ביום שאחרי

מגרשים באוניברסיטת תל אביב. הראשונים שנפתחו בישראל / צילום: רומן גרוניך

עומר אדם ועומרי כספי כבר התמכרו: המספרים מאחורי שיגעון הפאדל החדש

150 מגרשים, השקעה של כ־2 מיליון שקל בהקמת מתחם, הכנסות של עשרות אלפי שקלים בחודש למועדון ומפורסמים שמזוהים עם הספורט ● הישראלים התמכרו למשחק הפאדל - והיזמים נוהרים ● האם מדובר בטרנד חולף? בשוודיה הבועה כבר התפוצצה להם בפנים

אוטובוס של דן / צילום: Shutterstock

לידיעת חברי דן: זה הרווח הפנטסטי של בעלי השליטה

קבוצת ווליו-LBH של ווליו בייס, יאיר אפרתי, עופר לינצ'בסקי ושמעון בן חמו תפיק רווח מוערך של פי 5 (כ-2 מיליארד שקל) על השקעתה בחברת התחבורה הציבורית

דוד צרויה, מנכ''ל פלוס500 / צילום: נתנאל טוביאס

שוקי החיזוי מגלגלים מיליארדים בניבוי העתיד, אך בישראל אין עליהם פיקוח

שוקי החיזוי דוהרים למחזור של טריליון דולר והופכים ללהיט התורן של עולם ההשקעות ● הכניסה של Plus500 הישראלית מעוררת את המשקיעים, אך בישראל הרגולציה נותרה מאחור

צילומים: AP, רויטרס-KCNA

"תרגיעו": המדינה המפתיעה ששולחת מסר מאיים לסין

אחרי שטבחו באלפים, המשטר האיראני יוצא למלחמה נגד העסקים הקטנים ● הבת של שליט קוריאה הצפונית רק בת 12 וקרובה יותר מתמיד לרשת את השלטון ● וגם: מה גרם למשבר הדיפלומטי בין הסינים לפיליפינים? ● זום גלובלי, מדור חדש

בורסת תל אביב / צילום: שלומי יוסף

ת"א ננעלה בעליות; הדולר היציג צנח לשפל של יותר מ-30 שנה

מדד ת"א 35 עלה בכ-0.7% ● מדדי הבנקים והביטוח הובילו את העליות ● מניית נובה נפלה בעקבות הדוח הרבעוני ● פאלו אלטו נטוורקס הודיעה על כוונתה להירשם למסחר בת"א, והזניקה את מניית הבורסה ● וגם: המניה הלא צפויה שזינקה אתמול בוול סטריט, על רקע מרוץ ההתחמשות בתחום ה-AI