EE Seminar: Interpreting the Inner Workings of Vision Models

13 בינואר 2025, 12:00 
אולם 011, בניין כיתות-חשמל  
EE Seminar: Interpreting the Inner Workings of Vision Models

(The talk will be given in English)

 

Speaker:     Dr. Yossi Gandelsman

                        UC Berkeley and Meta

                          

011 hall, Electrical Engineering-Kitot Building‏

Monday, January 13th, 2025

12:00 - 13:00

 

Interpreting the Inner Workings of Vision Models

 

Abstract

In this talk, I will present an approach for interpreting the internal computation in deep vision models. I will show that these interpretations can be used to detect model bugs and to improve the performance of pre-trained deep neural networks (e.g., reducing hallucinations from image captioners and detecting and removing spurious correlations in CLIP) without any additional training. Moreover, the obtained understanding of deep representations will be utilized to unlock new model capabilities (e.g., novel identity editing techniques in diffusion models and faithful image inversion in GANs). I will demonstrate how to find common representations across different models (discriminative and generative) and how deep representations can be adapted at test time to improve model generalization without any additional supervision. Finally, I will discuss future work on automation of the presented interpretation techniques and their application to continual model correction and scientific discovery.

Short Bio

Yossi is a EECS PhD at UC Berkeley, advised by Alexei Efros, and a visiting researcher at Meta. Before that, he was a member of the perception team at Google Research (now Google-DeepMind). He completed his M.Sc. at Weizmann Institute, advised by Prof. Michal Irani. His research centers around deep learning, computer vision, and mechanistic interpretability.

 

השתתפות בסמינר תיתן קרדיט שמיעה לתלמידי תואר שני ושלישי = עפ"י רישום שם מלא + מספר ת.ז. בטופס הנוכחות שיועבר באולם במהלך הסמינר

 

 

 

האקתון אוטוסייבר

27 בינואר 2025, 10:30 
קמפוס אפקה עתידים, סיטיזון, פארק עתידים תל אביב.  
האקתון אוטוסייבר

האקתון אוטוסייבר

מרכז החדשנות והיזמות ומערך הסייבר הלאומי מקיימים לראשונה

אוטוסייבר 2025: האקתון טכנולוגי לפתרונות סייבר בתחבורה חכמה

 

24 שעות של יצירתיות ופיתוח: שני-שלישי 27.01-28.01 | פארק עתידים תל אביב, קמפוס אפקה ו- CityZone

 

להרשמה:

 

אוטוסייבר 2025 - האקתון סייבר הראשון של אפקה - הרשמת משתתפים

ROBUSTNESS AND RESILIENCE OF DYNAMICAL NETWORKS IN NATURE

הציבור מוזמן ( אינו סמינר שמיעה)

20 בינואר 2025, 14:30 
Room 011 Kitot Building  
ROBUSTNESS AND RESILIENCE OF DYNAMICAL NETWORKS IN NATURE

 

 

הרצאה זו אינה נחשבת לסמינר שמיעה לסטודנטים בתארים מתקדמים 

 

 

 

 

 

 

Protein-Driven Biomaterials: Advancing Hydrogels and Microgels for Bio-Applications- By Luai R. Khoury Neubauer Assistant Professor

12 בינואר 2025, 14:00 
חדר סמינרים  
Protein-Driven Biomaterials: Advancing Hydrogels and Microgels for Bio-Applications- By Luai R. Khoury Neubauer Assistant Professor

Abstract
Proteins, with their unmatched biochemical diversity, structural adaptability, and tunable properties, are revolutionizing the field of biomaterials. In this seminar, we explore the transformative potential of protein-driven materials, showcasing their evolution from bulk hydrogels to finely engineered microgels. By harnessing the intricate folding nanomechanics of proteins and their synergistic interactions with synthetic polymers like polyethylene glycol diacrylate (PEGDA), our research has unlocked a new class of stimuli-responsive systems with broad applications. Highlights include enzyme-triggered bovine serum albumin (BSA)-based hydrogels for controlled drug release and shape morphing [1], transparent protein-polymer lenses capable of tunable focal adjustments [2], and microgels synthesized using a porous medium emulsification approach inspired by techniques like espresso brewing [3]. These advances integrate dynamic responsiveness, mechanical robustness, and biocompatibility, addressing challenges in tissue engineering, drug delivery, and bio-optics. By bridging proteins’ nanoscale precision with practical functionality, this research showcases the versatility of protein-based materials and their potential to drive innovation in biomedical engineering and material science

חברת Starkware מגיעה לפגוש אתכם.ן בקמפוס! לקראת המפגש הכירו את נועה עובד, שתספר קצת על עצמה ועל החברה.

25 דצמבר 2024
  1. ספרי לנו קצת על עצמך, ומה הוביל אותך ללמוד מדעי המחשב ומתמטיקה?

קוראים לי נועה, גדלתי בצורן, נולדתי לשני הורים קיבוצניקים ויש לי אחות תאומה ואח צעיר יותר. מאז שהייתי קטנה, תמיד אהבתי לאתגר את עצמי. במשך 6 שנים הייתי בנבחרת אקרובטיקה והשתתפתי בתחרויות ארציות. בתיכון, החלטתי ללמוד במגמה מדעית הנדסית, ושם גם נחשפתי לראשונה לתחום של מדעי המחשב. לאחר מכן, התגייסתי לאיתור שחקים שוב"ל בחיל המודיעין (יחידת הלוויינות) ובהמשך יצאתי לקצונה. 

כיום, אני חיה עם בן זוגי בתל אביב, ובזמני הפנוי אני אוהבת לקרוא ספרים, לעשות ספורט (בעיקר כדורעף חופים), לטייל ולטרק. 

 

כמי שאהבה מתמטיקה עוד מגיל צעיר, ואחרי שנחשפתי מעט לעולמות הקוד בצבא, הבנתי שאלו התחומים בהם ארצה להתעמק בעתיד. נרשמתי לטכניון לתואר במדעי המחשב בעדיפות ראשונה, ומתמטיקה בעדיפות שנייה, ובהפתעה משמחת הם פנו אליי והציעו לעשות תואר כפול ובכך ללמוד את שני התחומים שמעניינים אותי. 

לאחר השלמת התואר הראשון, יצאתי לטייל במשך חצי שנה, ואחריו המשכתי לתואר שני במכון ויצמן למדע במדעי המחשב התאורטיים, ובפרט - קריפטוגרפיה.

 

  1. תתני לנו קצת רקע על סטארקוויר, מה החברה עושה?

סטארקוויר פיתחה טכנולוגיה ייחודית שפותרת את אחת הבעיות המרכזיות שיש כיום בבלוקצ'יין, והיא בעיית הscale. טכנולוגיה זו (המכונה STARK) מבוססת על מערכות הוכחה שמגיעות מהתאוריה האקדמית ונקראות הוכחות באפס ידיעה, Zero Knowledge Proofs. הטכנולוגיה הזו, מאפשרת לתשתיות בלוקצ'יין שאנחנו מכירים היום, כמו את'ריום, ובקרוב גם ביטקוין, לשמור על ביזור ואבטחה, אך לא על חשבון הscale

במסגרת הטכנולוגיה פיתחנו שני מוצרים: הראשון מביניהם הוא StarkEx, אפליקציה שעומדת בפני עצמה ומשמשת כ-Validity-Rollup. השני הוא Starknet, בלוקצ'יין המבוסס על טכנולוגיית STARK, ומאפשר למפתחים בכל העולם לפתח אפליקציות מתחומים מגוונים על הבלוקצ'יין.

 

  1. איך הגעת לחברה? מה גרם לך לרצות להצטרף לסטארקוויר? 

במהלך תואר המאסטר התלבטתי אם להמשיך לדוקטורט או "לצאת" לתעשייה. חברה סיפרה לי על התלבטות דומה שהייתה לחברה של אחותה והציעה לי לדבר איתה. דיברתי איתה, היא בחרה להמשיך לתעשייה אחרי המאסטר וסיפרה לי על החברה בה היא עובדת, סטארקוויר. היא הסבירה לי שבבסיס המוצר שסטארקוויר מפתחת ישנו רקע תיאורטי רחב ועומק מתמטי, דבר שמאוד סקרן אותי. 

לדבריה, העובדים בחברה סקרנים ואדיבים, ותיארה דיונים תיאורטיים מרתקים שמתנהלים במהלך העבודה המשותפת. לאחר שיחה זו ושיחה נוספת עם עובד בחברה, בהן שניהם סיפרו לי כמה הם נהנים לעבוד בסטארקוויר, הרגשתי רצון ומוטיבציה לעבוד גם כן בחברה, במקום שמשלב אתגר קוגנטיבי יחד עם סביבת עבודה מספקת וכיף עם אנשים. 

היום, אחרי שנתיים בחברה, אני יכולה להעיד שאני בהחלט מסכימה איתם.

 

  1. מה תפקידך בחברה? על מה את אחראית היום? 

כיום אני ראש צוות באחת הקבוצות בחברה (Centrelized Starknet). התחלתי כמפתחת בצוות שהיה אחראי על המוצר Starknet. אחרי כשנתיים נחשפתי לתחומי עניין חדשים בחברה ולהזדמנויות קידום, כך הפכתי לראש צוות בקבוצה שמתעסקת גם היא במוצר זה. הצוות שלי אחראי על מימוש אלגוריתם למיקבול טרנזקציות בבלוקציין, במוצר הספציפי שלנו בחברה. 

באופן כללי, בחברה הדברים מאד דינאמיים. כל הזמן נוצרים צוותים חדשים על בסיס רעיונות חדשים שמוצעים, יש פתיחות לפיתוח כיוונים תאורטיים לכדי מוצרים של ממש, הזדמנויות של קידום מקצועי וחשיפה לתחומים חדשים.

 

  1. נשמע שאת ממש הופכת תאוריה לפרקטיקה. האם זה משהו שהחברה עושה הרבה? מה הייחודיות של זה? 

כן, זה משהו שהחברה עושה הרבה והוא יחסית ייחודי לחברות טק שעוסקות באלגוריתמיקה הקלאסית.

כפי שציינתי, החברה עובדת על הטמעת פרוטוקול להוכחות של יושרה חישובית בתוך עולם הבלוקצ'יין. שני התחומים האלה עשירים באלגוריתמים מעניינים שצריך להבין ולממש אותם בצורה שמתאימה לפרקטיקה.

הרבה פעמים אלגוריתם תאורטי כזה נחקר בעיקר ברמה האקדמית, אז אי אפשר לקחת אותו ולמשש כמו שהוא. חייבים להתאים אותו לדרישות ולצרכים בפועל.

 

  1. מה הייתה ההיכרות שלך עם תחום הבלוקצ'יין לפני שהתחלת לעבוד בחברה?

כשלמדתי בטכניון, עבדתי על פרויקט בתחום הבלוקצ'יין. מטרתו הייתה לנתח אלוגירתמים משוערכים לבחירת טרנזקציות ליצירת בלוק. מטרת האלגוריתמים הייתה לבחור טרנזקציות כך שיוצר הבלוק ממקסם את הרווח מעמלות הטרנזקציות. בעבודתי על הפרויקט, נחשפתי לראשונה לעולם הבלוקצ'יין, לתאוריה בבסיסו ולמטרתו. בהמשך, על רקע ההיכרות הזו, התקבלתי להתמחות באוניברסיטת קורנל טק בניו יורק  בתחום הבלוקצ'יין. בהתמחות חקרתי את מידת הרווח של יוצר בלוק שפועל לפי אסטרטגיה שחורגת מהפרוטוקול הרשמי.

 

  1. באמת ההיכרות היום עם תחום הבלוקצ'יין היא עדיין לא מספקת. אנחנו שומעים מאנשים שונים גרסאות שונות, חלקן טובות יותר וחלקן פחות, מה דעתך על הנושא כמי שמתעסקת בלב ליבו של התחום?   

קיים בלבול נפוץ בין טכנולוגיית בלוקצ׳יין לבין מטבעות קריפטוגרפיים. בלוקצ׳יין היא טכנולוגיה המאפשרת למשתמשים להימנע מתלות בגופים מרכזיים ומהצורך באמון בהם - במקום לתת את האמון בגורם מרכזי, המשתמשים בבלוק׳ציין נותנים את האמון שלהם באלגוריתמי קונצנזוס, במתמטיקה ובקריפטוגרפיה. העולם שבלוקצ'יין פותח בפני המשתמשים בו רחב יותר ממטבעות המסחר שרבים נוטים לחשוב עליהם.

 

  1. אנחנו יודעים שאחוז הנשים בתעשייה אינו משמעותי מספיק עדיין, האם את מרגישה את זה בעבודה היום יומית שלך? בטח בחברת דיפ טק כמו סטארקוויר. 

אכן בתעשייה כולה יש מעט נשים יחסית לגברים, ובהתאם גם בסטארקוויר. היופי הוא שאצלנו הנוכחות של הנשים בחברה מורגשת לחיוב. תמיד כיף לדעת שיש גם נשים בתפקידים ניהוליים בחברה. לתחושתי זו מגמה שנמצאת בעלייה מתמדת, ואני תמיד שמחה להבחין בנשות מקצוע נוספות שנכנסות לתחום בתוך החברה ובתעשייה בכלל.

 

  1. איפה את רואה את החברה בעוד חמש שנים? מה היית מאחלת לה? 

אני רואה את סטארקוויר ממשיכה לצמוח בקצב משמעותי, תוך שמירה על רמת מצויינות גבוהה ועל החזון הטכנולוגי הייחודי שמאפיין את החברה, עם תשתית טכנולוגית גלובלית שמשמשת את המערכת הפיננסית והכלכלית של העולם כולו. 

 

חברת Final מגיעה לפגוש אתכם.ן בקמפוס

19 בינואר 2025, 13:00 - 15:00 
002 צ'ק פוינט  

סטודנטים וסטודנטיות למדמ"ח, הנדסה, מתמטיקה ופיזיקה,

חברת Final מגיעה לפגוש אתכם.ן בקמפוס.

אתגרי התחבורה הציבורית - מצוי, רצוי ומה שביניהם, בנושא: חישמול

12 במאי 2025, 15:00 - 19:00 
אולם טאו (בניין וולפסון), אוניברסיטת תל אביב  
אתגרי התחבורה הציבורית - מצוי, רצוי ומה שביניהם, בנושא: חישמול

צהרי עיון אתגרי התחבורה הציבורית - מצוי, רצוי ומה שביניהם
מפגש IV בסדרה: חישמול

לתוכנית הכנס

לרישום לכנס

אתגרי התחבורה הציבורית - מצוי, רצוי ומה שביניהם, בנושא:היבטים כלכליים-חברתיים

10 במרץ 2025, 14:00 - 18:00 
אודיטוריום יגלום (בניין הסנאט), אוניברסיטת תל אביב  
סדרת הרצאות של אתגרי התחבורה הציבורית - מצוי, רוצוי ומה שבינהם.

עמודים

אוניברסיטת תל אביב עושה כל מאמץ לכבד זכויות יוצרים. אם בבעלותך זכויות יוצרים בתכנים שנמצאים פה ו/או השימוש שנעשה בתכנים אלה לדעתך מפר זכויות
שנעשה בתכנים אלה לדעתך מפר זכויות נא לפנות בהקדם לכתובת שכאן >>