ג'ף דין: התשתית שמתחת לשורת החיפוש של כולם
ישנו ז'אנר של בדיחות אינטרנט המבוסס כולו על מהנדס גוגל (Google) אחד, בדומה לעובדות על צ'אק נוריס: הקוד של ג'ף דין לא מכיל באגים, אלא פיצ'רים; כששרתי האינדקס קרסו ב-2002, נאמר שג'ף דין ענה על שאילתות חיפוש של משתמשים באופן ידני במשך שעתיים, וציוני ההערכה עלו בחמש נקודות. הבדיחה קיימת מכיוון שהטענה העומדת בבסיסה – שחלק עצום מהתשתית המריצה את גוגל, ובהרחבה חלק עצום מהאינטרנט המודרני, עבר תחת ידיו של מהנדס אחד – אינה באמת הגזמה.
מהוואי ועד ערי התאומות
ג'פרי אדגייט דין (Jeffrey Adgate Dean) נולד ב-23 ביולי 1968 בהוואי, בן לחוקר מחלות טרופיות ואנתרופולוגית רפואית שעבודתם הניעה את המשפחה לעיתים קרובות; הוא למד בבית הספר בערים התאומות, מינסוטה, מכיתה ה' ועד כיתה י'. הוא קיבל תואר ראשון בהצטיינות יתרה (summa cum laude) מאוניברסיטת מינסוטה (University of Minnesota) ב-1990, עם התמחות כפולה במדעי המחשב ובכלכלה, וכתב עבודת גמר לתואר ראשון על רשתות עצביות בשפת C בהנחיית ויפין קומאר (Vipin Kumar) – מפגש מוקדם ומפתיע עם הטכנולוגיה אותה יבלה את המשך הקריירה שלו בבנייה בקנה מידה גדול. הוא פגש את אשתו לעתיד, היידי הופר (Heidi Hopper), במהלך שנתו הראשונה; שניהם סיימו את לימודיהם ב-1990. לפני לימודי התואר השני עבד בתוכנית העולמית לאיידס של ארגון הבריאות העולמי (World Health Organization), שם כתב תוכנת מידול סטטיסטי לחיזוי התפשטות מגפת ה-HIV/איידס – עבודת תוכנה יישומית ומשמעותית ולא סטייה אקדמית. לאחר מכן השלים דוקטורט במדעי המחשב באוניברסיטת וושינגטון (University of Washington) בשנת 1996 בהנחיית קרייג צ'יימברס (Craig Chambers), בנושא טכניקות אופטימיזציה לכל תוכנית עבור שפות מונחות עצמים, לפני שהצטרף למעבדת המחקר המערבית של DEC/Compaq כדי לעבוד על כלי פרופיילינג וארכיטקטורת מיקרו-מעבדים – שם החל שותפות עבודה ארוכה עם סנג'יי גמהוואט (Sanjay Ghemawat) שתגדיר את רבע המאה הבא.
עובד מספר שלושים
דין הצטרף לגוגל באמצע 1999, כעובד ה-30 של החברה, לאחר תקופה קצרה בסטארט-אפ השוואת הקניות mySimon שבו בנה מערכות זחילה לרשת. בגוגל הוא וגמהוואט הפכו, עד שנת 2018, לשני ה-Senior Fellows היחידים בחברה – הדרגה הטכנית הגבוהה ביותר שלה – זיווג שהיה פרודוקטיבי מספיק כדי שחלק גדול מהתשתית המרכזית של גוגל יישא את שמות שניהם במסמכי התכנון שלה. יחד הם הובילו את התכנון המקורי של Protocol Buffers, פורמט סריאליזציית הנתונים הניטרלי של גוגל, שעדיין נמצא בשימוש כמעט אוניברסלי במערכות החברה ואומץ באופן נרחב מחוצה לה.
Twenty questions, eight minutes on the clock, and a percentile measured against everyone who has taken it. No sign-up.
Take the IQ test →MapReduce, Bigtable, Spanner
העבודה המשותפת המשמעותית ביותר שלהם הגיעה לאחר מכן. MapReduce, שדין וגמהוואט תכננו ויישמו, הוא מודל תכנות שאיפשר למהנדסים רגילים לעבד וליצור מערכי נתונים עצומים על פני אלפי מכונות קומודיטי מבלי להפוך למומחי מערכות מבוזרות בעצמם – הוא הפך לבסיס לאופן שבו גוגל חישבה בקנה מידה רחב והעניק השראה ישירה לאקו-סיסטם של Apache Hadoop בקוד פתוח, שעליו נבנה חלק גדול משאר התעשייה לאחר מכן. Bigtable, שתוכנן בשיתוף עם גמהוואט, פיי צ'אנג (Fay Chang) ומייק בורוז (Mike Burrows), פתר את הבעיה המקבילה של אחסון: מערכת חצי-מובנית המסוגלת להחזיק נתונים בסדר גודל של פטה-בייטים על פני מיליארדי שורות תוך מתן מענה לשאילתות עם שיהוי נמוך, המשולבת ישירות עם MapReduce. Spanner הרחיב את החשיבה הזו עוד יותר, למסד נתונים מבוזר גלובלית בעל יכולת הרחבה אופקית המסוגל לשכפל נתונים באופן סינכרוני בין מרכזי נתונים ביבשות שונות תוך הבטחת עקביות חזקה – בעיה שנחשבה זמן רב כבלתי ניתנת לפתרון בקנה מידה כזה. דין וגמהוואט גם שחררו את LevelDB ב-2011, חנות מפתח-ערך הניתנת להטמעה המבוססת על עקרונות התכנון של Bigtable, שהפכה לאחר מכן למנוע האחסון של IndexedDB ב-Chrome, ובאופן בולט, עבור Bitcoin Core.
פנייה לעבר רשתות עצביות
בשנת 2011, עבר דין למעבדות Google X כדי לחקור רשתות עצביות עמוקות, והפיק את מה שנודע כ-"מאמר נוירון החתול" – רשת אמונה עמוקה רחבת היקף שאומנה ללא פיקוח על פריימים של סרטוני YouTube, שלמדה באופן עצמאי לזהות את המושג של חתול. פרויקט זה הפך לעבודת היסוד של Google Brain, אותו הוביל דין משנת 2012 ואילך. מערכת האימון הפנימית של הצוות שלו, DistBelief, עברה בסופו של דבר רפקטורינג ל-TensorFlow, מסגרת הלמידה החישובית בקוד פתוח שדין עזר לתכנן וליישם בתחילה, אשר במשך שנים הייתה הכלי הדומיננטי במחקר למידה עמוקה לפני עלייתו המאוחרת של PyTorch. הוא עבד גם על Pathways, מערכת מבוזרת אסינכרונית לאימון רשתות עצביות, ששימשה בפיתוח מודל השפה הגדול PaLM. באפריל 2018 הוא מונה לראש מאמצי הבינה המלאכותית של גוגל, ולאחר ש-Google Brain התמזגה עם DeepMind לתוך Google DeepMind ב-2023, הוא הפך למדען הראשי של גוגל – ועל פי הדיווחים הציע את השם "Gemini" עבור מערכת ה-AI המובילה של החברה, "כי זה כמו תאומים שמתאחדים".
לא ללא מחלוקת
מנהיגותו של דין לא הייתה חפה מביקורת. בדצמבר 2020, לאחר שגוגל פיטרה את חוקרת אתיקת ה-AI תמנית גברו (Timnit Gebru) בעקבות מאמר שלא פורסם הבוחן סיכונים של מודלי שפה גדולים, דין שלח לעובדים מזכר המכיר בכך שהפרשה "הציפה סוגיות גדולות וחשובות" בנוגע לתרבות המחקר וההכלה; כאשר חוקרת אתיקה שנייה, מרגרט מיטשל (Margaret Mitchell), פוטרה חודשים לאחר מכן, הוא כתב באופן פנימי שגוגל "יכלה וחייבת הייתה לטפל במצב הזה ברגישות רבה יותר". בנפרד, דין היה מחבר בכיר במאמר משנת 2021 בכתב העת Nature שטען שלמידת חיזוק יכולה להתעלות על בני אדם בתכנון שבבים; מהנדס גוגל שערער בפומבי על התוצאות פוטר ונתבע מאוחר יותר, תוך ציון שמו של דין, וחוקרים אקדמיים עצמאיים גילו לאחר מכן ששיטות פשוטות יותר – סימולציה של חישול ועיצוב מסחרי סטנדרטי – השתוו לתוצאות המאמר או עלו עליהן במבחנים ציבוריים, עם מאמר ב-Communications of the ACM שעבר ביקורת עמיתים שתיאר "שיטות מחקר מפוקפקות" בעבודה.
מדוע ג'ף נקרא גאון
הטיעון לגבי גאונותו של דין מתועד היטב באופן יוצא דופן בסטנדרטים של הנדסת תוכנה, מכיוון שכל כך הרבה ממה שבנה עדיין משמש בסיס ישיר לשירותים שמיליארדי אנשים משתמשים בהם מדי יום – חיפוש, מפות, תרגום, Chrome, והדור הנוכחי של מודלי AI גדולים רצים כולם על גבי מערכות שהוא תכנן או תכנן במשותף באופן אישי. המם של "עובדות ג'ף דין" הוא פולקלור, אך הוא צמח מעדויות עמיתים אמיתיות בתוך גוגל לפיהן התפוקה והטווח הטכני שלו היו יוצאי דופן גם בתוך חברה עמוסה במהנדסים מובחרים; בחירתו כ-ACM Fellow, פרס ACM במחשוב לשנת 2012, ומדליית IEEE ג'ון פון נוימן לשנת 2021 הם הגרסה הרשמית של התחום לאותו שיפוט. הסיבוך הכן הוא שתפקידו הבולט ביותר של דין לאחרונה היה ניהולי ואסטרטגי ולא טכני גרידא – הובלת ארגון ה-AI של גוגל בתקופה, כולל פיטורי גברו ומחלוקת תכנון השבבים, שבה תשובותיו עוררו ביקורת ממשית על חוסר כנות ופיקוח, תזכורת לכך שגאונות הנדסית ומנהיגות ארגונית אינן אותה מיומנות ולא תמיד מופעלות באותה מידת קפדנות.
מורשת
שותפותו הטכנית של דין וגמהוואט עיצבה מחדש את האופן שבו התעשייה כולה חושבת על מחשוב מבוזר, וצאצאיו של MapReduce נותרו מוטמעים בתשתית הנתונים הרבה מעבר לגוגל. לצד אשתו, היידי הופר, הוא תרם מיליוני דולרים דרך קרן Hopper-Dean ליוזמות גיוון במדעי המחשב באוניברסיטאות כולל MIT, סטנפורד וברקלי, תוך הרחבת השפעתו מחוות השרתים של גוגל אל צינור המהנדסים שיבנו את כל מה שיבוא אחריהם.