Neural Network

הסבר פורמלי#

בגלוסרי של Google, רשת נוירונים היא מודל שמכיל לפחות שכבה נסתרת אחת. הקלט עובר דרך שכבות, ובכל אחת מהן מוכפל במשקלים ועובר טרנספורמציה, עד שמתקבל פלט. את המשקלים לומדים באימון בעזרת Backpropagation וירידת גרדיאנט. מודלי שפה גדולים מבוססים על רשתות כאלה.

הסבר בגובה העיניים#

השם נשאב מהמוח, אבל בפועל מדובר בחישובים מתמטיים: הרבה כפל וחיבור של מספרים בשכבות. אפשר לדמיין צנרת שבה כל שלב מעבד את הפלט של הקודם, וה"ידע" נמצא בערכי המספרים שבין השלבים.

למה זה חשוב בפועל#

אין צורך להבין את המתמטיקה, אבל כדאי לזכור שהרשת לא "חושבת" כמו אדם ושהיכולת שלה נובעת מנתוני האימון.

תגיות#

• neural-network
• deep-learning
• models
• architecture

מקורות#

• Google for Developers — Machine Learning Glossary
• Google for Developers — Machine Learning Crash Course: Backpropagation