בימים אלה משיקה גוגל גרסת קוד פתוח לאלגוריתם מצומצם של עיבוד שפה מבוסס למידה. גרסה זו בניגוד לגרסה המלאה BERT, נועדה לצמצם את מספר הפרמטרים הנדרש כדי לעבד את תוצאות החיפוש. בעוד עדכון ברט המלא דורש מאה ושמונה מיליון פרמטרים שונים ויכולות עיבוד נתונים עצומות, “אחיו הקטן” אלברט דורש רק שניים עשר מיליון פרמטרים. מדוע […]

Read More