יורغن شميدهوبر (Jürgen Schmidhuber), שנולד בשנת 1963 במינכן, משמש כדמות מרכזית באבולוציה של בינה מלאכותית ורשתות נוירונים. קריירת המחקר שלו, המשתרעת על פני עשורים של מינויים אקדמיים ומוסדיים, מתמקדת בארכיטקטורות למידה עמוקה העומדות בבסיס משימות חישוביות רבות בימינו. תרומותיו מגשרות בין פיתוחים תיאורטיים מוקדמים במבנים רקורסיביים ולמידה עצמית לבין יישומים מודרניים נרחבים.
בסיס אקדמי ומנהיגות מחקרית
شميدهوبر השלים את לימודי התואר הראשון והדוקטורט שלו באוניברסיטה הטכנית של מינכן עד שנת 1991, בהנחייתם של וילפריד בראואר וקלאוס שולטן. הקריירה שלו כוללת תפקידי הוראה באוניברסיטה הטכנית של מינכן ובאוניברסיטת איטליה השוויצרית. מאז 1995, הוא עומד בראש מכון דאלה מולה למחקר בינה מלאכותית בשוויץ. בשנת 2021 הצטרף לאוניברסיטת המדע והטכנולוגיה על שם המלך עבדאללה בערב הסעודית, שם הוא מנהל את יוזמת הבינה המלאכותית במסגרת החטיבה למדעי המחשב, חשמל, מתמטיקה והנדסה.
ארכיטקטורות רקורסיביות וזיכרון ארוך-טווח מופחת
בשנות ה-90, شميدهوبر התמודד עם המגבלות של אלגוריתם ההפלאה לאחור בלמידה עמוקה. בעקבות עבודת הדיפלומה משנת 1991 של תלמידו זפ הוחרייטר, שניתוחה עסק בבעיית הגרדינט הנעלם, شميدهوبر סייע בפיתוח זיכרון ארוך-טווח מופחת (LSTM). השיטה, שהוצגה בדוח טכני משנת 1995 ופורסמה ב-1997, הפכה לטכניקה מרכזית בעיבוד שפה טבעית. שיפורים בהמשך כללו את הארכיטקטורה הסטנדרטית בשנת 2000 יחד עם פליקס גרס ופרד קאמינס, וסיווג זמני קונקשיוניסטי עם אלק גרייבס בשנת 2006.
חדשנות ברשתות נוירונים
מעבר ל-LSTM, شميدهوبر חקר מגוון מושגים של רשתות נוירונים. בשנת 1991, הוא הציג רשתות נוירונים יריبيות, שכונות סקרנות מלאכותית, שבהן רשתות מתחרות מקיימות אינטראקציה דרך משחק סכום אפס. מסגרת זו מהווה בסיס לרשתות יריبيות יוצרות מודרניות. בשנת 1992, הוא פרסם את מתכנת המשקולות המהירות, המהווה סנונית מקדימה לטרנספורמטור הליניארי הלא-נורמלי. יתר על כן, בשנת 2011, צוותו ב-IDSIA הדגים שיפורי מהירות משמעותיים עבור רשתות נוירונים קונבולוציוניות על ידי שימוש ביחידות עיבוד גרפיות, והגיע לביצועים העולים על אנושיים בתחרויות ראייה ממוחשבת.
Twenty questions, eight minutes on the clock, and a percentile measured against everyone who has taken it. No sign-up.
Take the IQ test →מיזמים מסחריים והכרה מקצועית
בשנת 2014, شميدهوبر ייסד את חברת NNAISENSE כדי לחקור יישומי בינה מלאכותית מסחריים במגזרים כגון פיננסים ותעשייה כבדה. למרות שהתמקדה בתחילה בבינה מלאכותית כללית, החברה שינתה בהמשך את הדגש שלה לעבר ניהול נכסים. תרומותיו לתחום זכו להכרה רשמית, כולל פרס החלוץ של רשתות הנוירונים מטעם ה-IEEE לשנת 2016. הוא חבר באקדמיה האירופית למדעים ואמנויות ובמעבדה האירופית ללמידה ומערכות חכמות.
עובדות מהירות
- תאריך לידה: 1963, מינכן, גרמניה - השכלה: האוניברסיטה הטכנית של מינכן (דוקטורט 1991) - פיתוח מרכזי: זיכרון ארוך-טווח מופחת (LSTM) - מיקוד תעשייתי: יישומי בינה מלאכותית באמצעות NNAISENSE - תפקיד נוכחי: מנהל יוזמת הבינה המלאכותית ב-KAUST - פרס בולט: פרס החלוץ ברשתות נוירונים של IEEE (2016)
שאלות נפוצות של קוראים
### מהי החשיבות של מתכנת המשקולות המהירות?
מתכנת המשקולות המהירות, שפורסם על ידי شميدهوبر בשנת 1992, מהווה חלופה לרשתות נוירונים רקורסיביות אשר זוהתה מאוחר יותר כשקולה לטרנספורמטור הליניארי הלא-נורמלי המודרני.
### מהו המיקוד העיקרי של חברת NNAISENSE?
חברת NNAISENSE, שנוסדה בשנת 2014, ייעדה את פעילותה בתחילה ליישומי בינה מלאכותית מסחריים בתחומים כמו פיננסים ומכוניות ללא נהג, ובהמשך הסיתה את מיקודה לעבר ניהול נכסים.