גלובס - עיתון העסקים של ישראלאתר נגיש

עמוד הבית  טכנולוגיה

ה-Ai ברח מהמעבדה של חברה ישראלית. מי אשם?

גוגל מצטרפת ל-OpenAI ואנתרופיק ומודה שמודל הבינה המלאכותית שלה יצא מסביבת הניסויים האטומה של אירגיולר ופעל על דעת עצמו ברשת ● למרות חלוקת האחריות על המחדל, הסטארט-אפ הישראלי נהנה מחשיפה פומבית של רשימת הלקוחות הגדולה ביותר שניתן לבקש ● התקריות מוכיחות כי בהיעדר סטנדרט ורגולציה מחייבת, ענקיות הטכנולוגיה קובעות בעצמן את התזמון והקריטריונים לדיווח על כשלים מסוכנים

דן להב (מימין) ועומר נבו, מייסדי Irregular / צילום: בן חכים
דן להב (מימין) ועומר נבו, מייסדי Irregular / צילום: בן חכים

במהלך השבת הצטרפה גוגל למקהלת ענקיות ה- AI שהודיעו כי מודל הבינה המלאכותית המתקדם שפיתחו נתפס כשהוא מנסה לפרוץ לחברות אמיתיות - בהצתה מאוחרת, לאחר OpenAI ואנתרופיק הודיעו על אותה הבעיה לפני כחודש. שלוש החברות עשו זאת תוך מתן קרדיט - או הפניית אצבע מאשימה - לחברה הישראלית אירגיולר (Irregular), שפיתחה סביבת אבטחת מידע סגורה לכאורה המאפשרת למודלי השפה החזקים ביותר - בהם מיתוס של אנתרופיק או אסטרה של OpenAI - להתנסות במעשים הכי חמורים שהם יכולים לבצע.

סירי המשופרת כבר פה. האם אפל עומדת בציפיות?
המחליף של באפט: חקלאי, צלם ופילנתרופ

במילים אחרות, הסביבה הישראלית, שחוסכת לענקיות ה-AI מאות אנשי אבטחה שמבצעים בדיקות ידניות - מאפשרת למודלים להתפרע בתוך הסביבה האטומה לכאורה שלה, במה שמכונה בשפה המקצועית כ"ארגז חול" (Sandbox) - כדי לבדוק את הסכנות והחולשות שהן מביאות איתן. כפי שהתברר בשבועות האחרונים מאז הדיווח הקודם - סוכני ה- AI המתקדמים של ענקיות הבינה המלאכותית פועלים לא פעם על דעת עצמם, עוקפים כללים ומחסומים ומתאמים אלה עם אלה מתקפות - אם כי טרם תועדו מתקפות אוטונומיות מסוכנות שיד אדם לא היתה מעורבת בהם.

פרסומת חינם בלב המשבר: רשימת הלקוחות של אירגיולר נחשפת

ובכל זאת, טוב עשו ארבע ענקיות הטכנולוגיה שהודו ביכולת הזדונית של המודלים שלהם - ובכך שהפנו חלק מהאחריות גם למעבדה הישראלית "אירגיולר" שהקימו היזמים דן להב ועומר נבו ולה גייסו 80 מיליון דולר ממשקיעי צמרת כמו קרן סקויה, רדפוינט, אסף רפפורט ועומרי כספי. ההצטרפות של גוגל לקבוצת החברות שמודות כי המודלים שלהם "ברחו" מהקופסה השחורה של אירגיולר, מהווה בפועל מודעת פרסום חינמית נוספת שממנה נהנית החברה הישראלית. לא בגלל הנזק שאירע - בגוגל טוענים שהנזק נמנע לאחר שהמודל שלה הבין שהוא פורץ לאתר של חברה אמיתית - אלא בגלל העובדה שרשימת הלקוחות של אירגיולר רק הולכת ונחשפת - ואלה הלקוחות הגדולים ביותר שניתן להעלות על הדעת. גם אם נראה שתדמיתה של אירגיולר רק הולכת ונסדקת עם עוד לקוח שיוצא לאור ומחלק איתה את האחריות על מודלי השפה הסוררים - ההסבר למעשה טמון באותו האירוע שאירע כבר בחודש יולי השנה.

אירגיולר קימצה במידע על הפריצה ורק מסרה כי "מדובר באותו אירוע נקודתי שכבר דווח בעבר ולא באירוע נפרד ומהותי. כל מעבדות ה- AI הרלוונטיות עודכנו בסוף יולי וכל הבעיות הידועות שהיו בצד שלנו טופלו ונפתרו כבר לפני מספר שבועות". אלא שאחד מחוקרי החברה הרחיב על כך בתגובה ברשת אקס: "בין יתר הדברים שאנחנו עושים, יצרנו סט אתגרים שמדמים חברות אמיתיות ואנחנו נותנים למודלים הכי מתוחכמים בעולם, כאשר הם פועלים בהגדרות הכי מאפשרות שלהם, להדגים כמה רחוק הם יכולים להגיע כאשר נותנים להם אתגרי אבטחת מידע מורכבים. בחלק מהאתגרים הללו הגישה לאינטרנט הכרחית על מנת לאפשר למודלים לפעול במלוא היכולת שלהם. באחד מהאתגרים הייתה גישה לא מכוונת לאינטרנט ומדובר באותה תקלה נקודתית כמו באירועים הקודמים שפורסמו לפני חודשיים, וכמובן שהבעיה תוקנה מאז. הסנדבוקס שלנו דווקא מחזיק מעמד יופי".

הכשל הכפול: כך ג'מיני יצא מהמרחב המוגן למתקפה אוטונומית

במקרים המדווחים בגוגל - כפי שאירע גם במטא , אנתרופיק ו-OpenAI - התקיימו שני כשלים: המודל תירגל פריצה לאתר כלשהו בעל שם פיקטיבי, אלא שבאופן אוטונומי הוא איתר חברה אמיתית בעלת שם דומה וניסה לפרוץ אליה. הכשל השני כלל, כפי שציין אותו עובד באירגיולר, נקודת יציאה מהמרחב הדיגיטלי המוגן לרשת האינטרנט שלא הוגדרה במקומה. במקרה של גוגל, ג'מיני תקפה את אחד האתרים על ידי ניחוש ססמאות סדרתי עד קבלת גישה למערכת המוגנת, ובמקרה אחר מצא המודל פרטים מוכמנים של שם משתמש וססמה, שאפשרו לו לנסות ולפרוץ לשני ארגונים אחרים. גוגל טוענת שנזק לא נגרם וכי היא עצרה את הפריצה עוד לפני שזו הספיקה לגבות מחיר.

מקרה דומה קרה לאירגיולר גם עם אנתרופיק, יצרנית קלוד וגם כמה מהמודלים העוצמתיים ביותר שנבדקו באירגיולר - פייבל ומיתוס. בבלוג של אירגיולר הסבירו כבר לפני כחודשיים בילבול בכתובת של אתר אינטרנט חיצוני הביא לכשל. הרשומה בבלוג ייחסה את הכשל במרומז לגורם האנושי וטענה שכתובת האתר האמיתי לא הייתה ידועה והקשר בינה לבין החברה לא זוהה בסקירה הראשונה שלה. במקרה אחר העלה המודל של אנתרופיק העלה בטעות חבילת קוד פייתון זדונית לספריה שהביאה אתרים אחרים להוריד אותן. האשם, הוא, כאמור, באותה דלת אחורית שהושארה פתוחה ואפשרה למודל לצאת החוצה מהקופסא השחורה המוגנת - החוצה. במקרה זה מפנים האחראים את הבעיה לא רק כלפי עצמם, אלא גם כלפי תצורת המערכת של אנתרופיק שהביאה להתנהגות הזדונית של המערכת - ובמשתמע, במי שפיתח את אותה התצורה.

בכל המקרים הללו, לא נרשמו נזקים חמורים - ואולי זו הסיבה שהחברות המדוברות - גוגל, אנתרופיק או אירגיולר עצמה - הרשו לעצמן להתייחס למקרים האלה ללא חשש. בגוגל התגאו במיוחד שהמודלים הפסיקו את פעילותם כאשר הבינו כי פרצו לאתרים אותנטיים. דווקא המודל המתקדם פחות של אנתרופיק, אופוס 4.7 המשיך בתקיפה לאחר שהבין את הטעות, אך מודל מיתוס 5 המתקדם יותר עצר את עצמו בפרץ.

הבעיה טמונה לא רק בכך שחברה אחת משרתת כ"ארגז החול" של כל יצרניות המודלים האמריקאיות הגדולות, אלא בכך שחברות משחררות הודעות על מודלים סוררים בהתנדבות: הן קובעות את התנאים, הקריטריונים והתזמון לשחרור ההודעה. כך קרה שגוגל הרשתה לעצמה לתאר מקרה שקרה כבר לפני חודשיים, באירוע שכבר דווח עליו על ידי שתיים מהמתחרות הגדולות שלה. ואם להאמין לבכירי החברות - ובפרט לדריו אמודאי, מנכ"ל אנתרופיק וסאם אלטמן, מנכ"ל OpenAI, השליטה על מודלי השפה איננה מוחלטת ועשויה להפתיע לרעה. כשאין רגולציה ואין סטנדרט - השקיפות היא סלקטיבית, וזאת בענף שהפך את עורו ממיזם מדעי למכונת מזומנים מסחרית. קריאתו של טראמפ לזנוח את השיקולים המוסריים סביב פיתוח בינה מלאכותית בשל חשש מיתרון סיני, מבטיחה שהתעשייה תמשיך להתנהל באופן שכזה גם בשנים הקרובות.

עוד כתבות

איפה יש הזדמנויות? / צילום: Shutterstock

כל הנורות האדומות נדלקות - אבל וול סטריט עדיין לא נבהלת

הנפט מעל 100 דולר, תשואת האג״ח האמריקאית ל-10 שנים חצתה 5%, הפד חזר להעלות ריבית והסיכונים הגיאופוליטיים מתגברים ● ובכל זאת, מדד הפחד נשאר נמוך יחסית ● האם המשקיעים פשוט התרגלו לזעזועים - או שהשוק מפספס משהו?

שכונת צמודי קרקע אמריקאית / צילום: Shutterstock

הרבה משקל לריבית, חשיבות עצומה לאשראי: הרגליים שעליהן עומד שוק הנדל"ן האמריקאי

דמוגרפיה קובעת כמה אנשים רוצים בית, וההיצע מעיד כמה בתים עומדים לרשותם, אך האשראי קובע כמה הם מסוגלים לשלם ● כשמשקי הבית מקבלים גישה רחבה למימון משכנתאות, זמינות הכסף לדיור עולה, וגם המחירים ● איך זה עובד בארה"ב, ומה ניתן ללמוד מהשוואה לישראל? ● כתבה ראשונה בסדרה

מה מקור המילה בנק? / צילום: Shutterstock

מה מקור המילה בנק?

איזה שיר ששרה מירי אלוני נפתח במילים מתוך תפילת "כל נדרי", למה משמש קבוע אבוגדרו ואיזה איבר בגופם של תנינים אינו יכול לנוע כלל? ● הטריוויה השבועית

גלעד אלשטשולר, יוסי לוי, יאיר לפידות / צילום: סם יצחקוב, יח''צ, איל יצהר

רגע לפני העסקה: הסטות הכספים הגדולות מאלטשולר שחם נמשכו

אלטשולר שחם וילין לפידות ממשיכים לאבד מיליארדים למתחרים • כלל זינקה לראש טבלת המגייסים עם 1.64 מיליארד שקל, בעוד מיטב ירד למקום השני ● איילון מופיעה לראשונה בטבלאות, ומגדל בדרך לעקוף את מנורה מבטחים בהיקף הנכסים המנוהלים • וברקע, עסקת ווישור מציבה סימן שאלה כפול: כיצד ייראה שיתוף הפעולה העתידי בפעילות הגמל של איילון ואלטשולר שחם החדשה?

''רצח לעת ערב''. הכומר חוקר / צילום: באדיבות yes

"רצח לעת ערב": הבריטים נשארים מנומסים בזמן שהגופות נערמות לרגליהם

כפר אנגלי מנומנם, תעלומת רצח וסודות שנקברו במשך עשרות שנים עומדים במרכז סדרת המתח החדשה שעלתה ב־yes ● מת’יו לואיס, הזכור כנוויל מסרטי "הארי פוטר", נכנס לנעלי הכומר המקומי ומגלה שרצח מהעבר ממשיך לגבות קורבנות גם בהווה ● מאחורי הנימוסים והשלווה הכפרית מסתתרת קהילה שתעשה לא מעט כדי שהאמת תישאר קבורה

תחנת כוח פחמית בארה''ב. היתרון האנרגטי של סין נובע מכורים גרעיניים ומפאנלים סולאריים / צילום: ap, J. David Ake

בתוך העולם הדיסטופי המזוהם של מרכזי הנתונים

חוות השרתים הענקיות שמשמשות את מודלי ה-AI צורכות יותר אנרגיה מערים שלמות ● בדרך הן פולטות גזי חממה בקצב מסחרר, שצפוי להכפיל את עצמו עד 2030 ● הפתרון: כורים גרעיניים שקמים לתחייה בזה אחר זה ● כך המרוץ להנעת הבינה המלאכותית מעצב את העולם

מגדל בראשית / צילום: נוי מאיה

סכסוך ענק במגדל היוקרה בתל אביב: תביעות הדדיות של מעל מיליארד שקל

אלקטרה בנייה ויזמי פרויקט "בראשית" בשכונת בבלי הגישו תביעות הדדיות לבוררות • חברת הביצוע אלקטרה תובעת כ-270 מיליון שקל בגין עיכובים בתשלומים והשלכות השריפה בבניין • מנגד, חברת "מגדלי בראשית דניאל" של משפחת כוזהינוף תובעת עד מיליארד שקל • פרויקט הדגל סובל משרשרת עיכובים, אכלוס שנדחה בשנתיים וסכסוכים משפטיים עם רוכשים - למרות שהדירות בו נמכרות במחירי שיא של עד 117 אלף שקל למ"ר

קמפיין מתחזה לגופים מוסדיים במטרה להפיל משקיעים / צילום: Shutterstock

אזהרה: חשבונות פיקטיביים מנסים להתחזות לגלובס ברשתות החברתיות

מספר חשבונות פיקטיביים מתחזים לעיתון גלובס ביממה האחרונה ומציעים המלצות על מניות ותשואות עתק ● מדובר במגמה הולכת וגוברת של הונאות פיננסיות שמטא לא נותנת להן מענה ● אנו מטפלים בנושא מול מטא ● אנא שימו לב לסימני האזהרה

צילום: Shutterstock

הילדים משתוללים? אל תאשימו את הסוכר

אחת לשבוע המדור "בודקים את המיתוס" יעסוק בעיוותים היסטוריים מפורסמים, מדוע נוצרו, וכיצד הם משפיעים עד ימינו ● והשבוע: יש סיבות טובות להגביל את הסוכר אצל ילדים. היפראקטיביות היא לא אחת מהן

קפטן סומיט צ'אוהאן / צילום: תמונה פרטית

הנשיא ההודי של נמל חיפה: "יכולות לעבור בישראל פי מיליון סחורות"

ההשתלטות על מצר באב אל־מנדב והמתיחות הגוברת במפרץ הפרסי טלטלו מחדש את נתיבי השיט העולמיים ● בצל החשש ממשבר אנרגיה וגל התייקרויות, נשיא נמל חיפה, קפטן סומיט צ'אוהאן, מזהיר בריאיון כי "הסחר הבינלאומי כבר לא יחזור לקדמותו" ● כעת הוא מצביע על ההחמצה הישראלית, ומציג את המודל שיכול לשנות את התמונה

בתי התושבים בגרינלנד / אילוסטרציה: ap, Evgeniy Maloletka

טראמפ ישתלט ביטחונית על האי הגדול בעולם. ניצחון או התקפלות?

נשיא ארה"ב הודיע הלילה על הסכם חדש עם דנמרק וגרינלנד לאחר שדרש שליטה מוחלטת באי ● האם מדובר בהתקפלות, למה שליטה באי הגדול בעולם חשובה כל כך לטראמפ ומה ההשלכות הכלכליות? גלובס עושה סדר

הצוללת האמריקאית הבלתי מאוישת שנפלה לידי איראן / צילום: ערוץ היוטיוב של Anduril industries

המדינה שרכשה מישראל נשק במיליארדים ולוטשת עיניים לטכנולוגיה נוספת

צוללת אמריקאית בלתי מאוישת נפלה בשלמותה לידי איראן, שכעת תוכל לבצע בה הנדסה הפוכה ולנסות להעתיק את הטכנולוגיה ● במקביל, חברת רחפנים ישראלית מסמנת את מזרח אירופה כשוק יעד, ואיחוד האמירויות מספקת לאנגולה מסוקים בלתי מאוישים בעסקה של מיליארד אירו ● השבוע בתעשיות הביטחוניות

מערכת ההגנה האווירית ספיידר / צילום: רפאל

רפאל מאשרת את חשיפת גלובס: בדרך לעסקת ענק בצ׳כיה

רפאל אישרה את חשיפת גלובס על המגעים להרחבת עסקת מערכת ההגנה האווירית ספיידר בצ׳כיה, שנחתמה במקור עבור ארבע סוללות ● התוכנית צפויה להתפתח למערך הגנה לאומי משולב, עם יכולות נגד טילים בליסטיים וכטב”מים ומערכות מבוססות לייזר ● שתי הסוללות הראשונות מהעסקה המקורית כבר נמצאות בצ׳כיה

צבי ברק / איור: גיל ג'יבלי

מאקזיט ענק לעסקת השבוע: המיליארדר שמעטים בשוק ההון מכירים

הוא עשה את הונו מאקזיט מכשור רפואי ומאז שלח זרועות לתשתיות, אנרגיה וביטוח ● צבי ברק, מבעלי המניות המובילים בחברת ווישור, מחזיק יחד עם אשתו ענת גם בזכיינית כביש 6, בתחנות כוח ובאפליקציית החניה פנגו

כוחות צה''ל בעזה / צילום: דובר צה''ל

גם כוחות מיוחדים: תגבור משמעותי של צה"ל ברצועה ביום הכיפורים

צה"ל מעלה בצורה משמעותית את הכוננות בגבול רצועת עזה ומתגבר את הכוחות באוויר ועל הקרקע לקראת יום הכיפורים ● ההחלטה התקבלה למרות שאין התרעה קונקרטית ● במערכת הביטחון מעריכים כי חמאס נערך למערכה נוספת ● מחבל פתח באש מרכב חולף לעבר מבלים במעיין הסמוך לציר תנועה מרכזי בבנימין ונמלט ● לאחר שצוותי מד"א וצה"ל נאבקו בשטח על חייו של פצוע אנוש, נקבע מותו ● טהראן טוענת כי העבירה לארה"ב דרך תיווך קטארי את תנאיה לסיום המלחמה; במקביל, הנשיא טראמפ קיצר במפתיע את חופשתו בקמפ דייוויד וחזר לבית הלבן

ריצ'רד פרנסיס / עיבוד: AI, מקור: אלעד מלכה

מקום 10: המנהל שהחזיר את טבע לצמיחה - "כשיש נתונים ברורים, צריך לפעול מהר"

ריצ'רד פרנסיס קיבל לידיו את חברת טבע אחרי שלב הקיצוצים עם משימה: להקפיץ אותה מדרגה ● השנה כבר הוביל רכישה ראשונה זה עשור ● 30 המנהלים והמנהלות הטובים 2026 

צילום מסך של אתר ההגרלות ''דירה בהנחה''

משרד השיכון סגר זמנית את אתר "דירה בהנחה"

האתר נסגר לצורך איתור חרדים שמצויים בסטאטוס של המתנה, לאור החלטת בג"ץ והנחיית הייעוץ המשפטי לממשלה, לפיהן חרדים שלא שירתו בצה"ל אינם זכאים להשתתף בהגרלות ● לפי שעה, לא ברור מתי האתר ייפתח שוב

מנת לברק של נונו ומימי / צילום: מתוך הספרים

4 ספרי בישול לחגים עם סיפור שהוא הרבה מעבר למתכונים

ספר האפייה של עדי שילון מציג מטבח ביתי ומנחם ● המתכונים של נונו ומימי מאפשרים לנסות בבית את המנות של הרשת הפופולרית ● רב המכר של שושנה כהן־לברן שבלבו המטבח התוניסאי, חוזר ומוקדש לנכד שנפל בעזה ● והספר שמחבר בין אוכל לכובעים מרהיבים

האוורד באפט / צילום: ap, Nati Harnik

המחליף של באפט: חקלאי, צלם ופילנתרופ

הווארד ג'י. באפט, בנו של וורן באפט, לא יהיה האיש שינהל את אימפריית ההשקעות. את התפקיד הזה קיבל גרג אייבל ● במקום זאת, בגיל 71, הוא מונה ליו"ר ברקשייר כדי לשמור על הדבר שאביו מגדיר כנכס החשוב ביותר שלה: התרבות והערכים

פי.ג'יי. סיטנפלד ומתקן הכליאה באשלנד, קנטקי / צילומים: Al Behrman AP, John Flavell

לא הבנתי עד כמה הייתי מכור לטלפון שלי, עד שנכנסתי לכלא

פוליטיקאי לשעבר מסינסינטי כותב על האירוניה שבפרידה הכפויה מהמכשיר שלא הפסיק לצפצף