Roni Goldshmidt (@ronigoldshmidt) profile picture

חוקר AI בנקסר. בונה מודלי עולם, פיזיקל AI, הבנת וידאו ומה שבניהם.

Joined November 2023
Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)Photo by Roni Goldshmidt (@ronigoldshmidt)
פיזיקל AI הוא מסוג הדברים שכולם מדברים עליהם, וכמעט אף אחד לא עושה. הצורך ברור: ChatGPT שינה לכולנו את החיים, אבל הוא עדיין חי בעיקר בעולם של טקסט. העולם האמיתי הוא סיפור אחר: דאטה ייחודי, קלטים ופלטים מורכבים, הרבה דרגות חופש, ובעיקר מחיר טעות גבוה בהרבה מתשובה לא נכונה בצ׳אט.
4
1
1
13
1,501
מסקנה חשובה מאתמול: תיבת תהודה זה דבר רע שגורם לאנשים לחיות במציאות אלטרנטיבית.
1
2
77
Exciting news 🎉 Our paper “Risk Without Boxes” has been accepted to World Models in Physical AI Workshop @ NeurIPS 2026! We show risk prediction and hazard localization are different capabilities and that self-supervised learning + supervised distillation can achieve both.
🤖 Made with AI
1
1
1
2
705
1/6 יש בעיה מעניינת שמעסיקה היום כמעט כל מי שבונה מודלים שרוצים "להבין" את העולם באמצעות תמונה או וידאו: האם עדיף למודל להבין טוב מאוד מה קורה בתמונה כולה, או לדעת בדיוק מה נמצא בכל מקום קטן בתוכה? מסתבר שאלו לא תמיד אותה יכולת. בואו נצלול קצת לעומק של זה
3
1
11
960
8/8 כלומר שני המודלים נאבקים באותה בעיה משני קצוות שונים: איך גורמים לאותו ייצוג לדעת גם "מה קורה כאן?" וגם "מה בדיוק נמצא איפה?" מסתבר שלהיות מצוין באחת מהשאלות לא מבטיח שתהיה מצוין בשנייה.
1
2
96
9/ פה בעיניי נמצא החלק הכי מאתגר בחזון של יאן לקון. הרעיון הוא שמתוך למידה לטנטית כללית של העולם יצמחו לבד אובייקטים, פיזיקה, מרחב, תנועה וסמנטיקה. ואולי זה באמת היעד. אבל DINO ו-V-JEPA מראים שהדרך לשם לא חלקה. ובינתיים יש ציר בין יכולת על גלובלית ללוקאלית ואנחנו הלוליינים.
1
3
104
דוגמה מעולה של ערן לפערים בין המודלים האחרונים של אנתרופיק. פה רואים שפאבל מוביל מבחינה עיצובית במחיר של פי חמש מהעלות ובזמן כפול. האם זה נכון למשימה שלכם? נצרך? מתאים? הכל תלוי קונטקסט.
I asked both Fable and Opus 4.8 to recreate TIM - The Incredible Machine game. Bottom line: Both created a totally playable version. Fable's version was def more polished and had twice as many levels, BUT It cost almost 5x more and took more than twice the time.
2
431
1/9 השבוע הסתיים CVPR 2026, כנס הראייה הממוחשבת המוביל בעולם וחזרתי ממנו עם הרבה תובנות. זה היה הכנס השלישי שלי בשנתיים האחרונות, והיו כמה מגמות מרתקות שהפתיעו אותי יותר ממה שציפיתי. שרשור תובנות, מסקנות ומחשבות לעתיד. נתחיל:
5
1
2
65
10,938
8/9 עוד הפתעה עבורי הייתה היקף ההשקעה של NVIDIA בתחום. ידעתי שהם פעילים בנהיגה אוטונומית, אבל לא ציפיתי לראות את זה כמעט בכל מקום: שיחות, פוסטרים, הדגמות, סימולציה, תשתיות וכלי פיתוח. נראה שהם בונים הרבה יותר מחומרה בלבד.
1
7
793
9/9 אם הייתי צריך לסכם את הכנס במשפט אחד: הרבה פחות מודלי שפה פשוטים, הרבה יותר פיזיקל AI ומעבר לעולם האמיתי. המרוץ הזה רק מתחיל. עוד אין ארכיטקטורה מובילה, עוד אין חברה מובילה ועוד אין מוצר שעובד מקצה לקצה. תהיה פה חברה שתהיה שווה טריליונים בעוד שנים ספורות. המנצח ייקח הכל.
1
22
691