רשת נוירונים היא מלכת הכיתה

May 30, 2017

 

366 מלים
לאחרונה התבשרנו שהמחשב ניצח בקלות את האדם במשחק הגו הנחשב למורכב מבין משחקי החשיבה. בכיתת מדעי הנתונים (Data Science) ונתוני העתק (Big Data) מלכות הכיתה הן הרשתות העצביות (Neural Networks) המדמות את המוח האנושי, ועומדות מאחורי מכוניות אוטונומיות, תרגום שפות, זיהוי תמונה ואפילו יצירת חלומות ממוחשבים.


מודלים מתמטיים המדמים את המוח האנושי באמצעות רשת סבוכה של נוירונים קיימים כבר מאמצע המאה הקודמת, אבל רק בשנים האחרונות הטכנולוגיה הבשילה והגיעה פריצת הדרך המיוחלת. זה קרה כי האלגוריתמים השתכללו, החומרה התחזקה ומאפשרת להריץ על גבה את האלגוריתמים המסובכים ובידינו מאגר נתונים עצום שניתן לעבוד אתו.
אפרט בקצרה מדוע השינויים האחרונים אפשרו לטכנולוגיה להבשיל: השיפורים האחרונים לאלגוריתם הציעו שלא לבצע את תהליך הלמידה על כל הנתונים כל הזמן אלא הראו שמקבלים תוצאות מאד טובות אם רק דוגמים בכל פעם מספר דוגמאות ומכיילים את המערכת באמצעותן (זה נחש וזה נחש וזה נחש וזה נחש). זה חוסך הרבה מאד זמן חישוב. המחשבים הסטנדרטים הם מחשבים עם מעבד ראשי (לעיתים מספר מועט של מעבדים) שמבצעים מהר מאד בצורה סדרתית פעולות יחסית מורכבות, אבל הרשתות העצביות עובדות כך שלמעשה צריך המון מעבדים שיעשו את אותן פעולות פשוטות במקביל. למזלנו יש מעבדים כאלו, אלו המעבדים הגרפיים שמשמשים את חובבי המשחקים. הפעולות שהם עושים על הרבה נקודות במסך במקביל מאד דומות לפעולות שהרשתות העצביות דורשות. חברת המעבדים הגרפיים הגדולה בעולם, נוידיה (NVIDIA) גילתה את זה ושולטת כעת על שוק המעבדים הגרפיים ללימוד מכונה. המעבדים הגדולים שלהם עולים מאות אלפי דולרים ואין להם אפילו יציאה למסך!  הדבר האחרון הוא שהמכונות לומדות מדוגמאות. הרבה דוגמאות. מישהו צריך לספק את הדוגמאות האלו. למשל כשצריך להחליט אם התמונה היא של כלב או של חתול צריך המון תמונות מתויגות של כלבים וחתולים. ומי אם לא חברות כמו פייסבוק, גוגל ומיקרוסופט מחזיקות את המאגר הגדול בעולם של תמונות מתויגות? אגב אנחנו כח העבודה הזול, בחינם, שמתייג את כל התמונות האלו עבורם (לא פלא שרוב החוקרים בתחום רוצים לעבוד בשבילם). זה לא רק הכסף זה גם הנתונים.  
לסיכום, רשתות עצביות היא טכנולוגיה שכבר עובדת. בהרבה מאד מהמקרים היא כבר עברה את המין האנושי והיא באמת משנה את העולם. אבל בצד הפחות רומנטי, אם אתה גדול ועשיר אתה יכול לקנות את החומרה המתאימה ולאמן את הרשתות עם מספיק נתונים. האחרים יצטרכו, כמו רוב הסטרטאפים, בעיקר מזל. 
ד"ר רן ביטמן הוא חוקר מערכות מידע המתמחה בלימוד מכונה (Machine Learning).

Please reload

Featured Posts

VUCA. Shift happens.

July 11, 2016

1/1
Please reload

Recent Posts

December 16, 2018