לא כל תנועה היא תוצאה של למידה

אפשר לתכנת סדר פעולות מראש, לתכנן מסלול בעזרת מודל הנדסי או ללמוד התנהגות מנתונים. מערכות רבות משלבות בין הגישות. לכן כשנאמר שרובוט ״למד״ משימה, צריך לשאול איזה רכיב השתנה: זיהוי החפץ, בחירת הפעולה, מסלול התנועה או בקרת הגוף. אין הכרח שהמערכת תלמד הכול מחדש כדי לבצע משהו חדש, ואין הכרח שכל פעולה מוצלחת נלמדה בשיטה אחת.

למידה מהדגמות

בגישה של חיקוי אוספים דוגמאות של תצפיות ופעולות. אדם עשוי להניע את הרובוט באמצעות אמצעי שליטה, והמערכת מתעדת מה נראה ומה נעשה באותו זמן. תהליך LeRobot מציג איסוף, אימון והערכה כמراحل נפרדות. עצם איסוף הנתונים אינו אומר שהרובוט יודע לפעול עצמאית. רק אחרי האימון וההפעלה אפשר לבדוק מה המערכת מצליחה לבצע ובאילו תנאים.

למידה באמצעות משוב

גישה אחרת משתמשת במשוב על תוצאות כדי לשפר מדיניות פעולה. בניסוי מחשבתי של הכנסת קובייה למגש, אפשר להגדיר הצלחה לפי הימצאות הקובייה בתוך המגש. הגדרת המדד חשובה: אם מתגמלים רק מהירות, עלולים להזניח דרישה אחרת כמו שמירת החפץ. זו דוגמה עקרונית שלנו, ולא מתכון לאימון בטוח או תיאור של מוצר. התנהגות שנראית טובה לפי מדד אחד יכולה להיות לא רצויה לפי מדד אחר.

הסימולציה מאפשרת לשאול יותר שאלות

סביבה מדומה מאפשרת לחזור על תרחישים ולשנות תנאים בלי לבצע כל ניסיון על חומרה אמיתית. אבל היא מתארת את המציאות בקירוב. חיכוך, מגע, גמישות ואיכות חיישנים יכולים להיות שונים. הצלחה בהדמיה היא שלב שימושי, ולא אישור אוטומטי להפעלה בעולם. המעבר מחייב בדיקה של המשימה והמערכת האמיתיות, לרבות מצבים שבהם ההדמיה הייתה אופטימית מדי.

ללמוד משימה או לזכור סביבה

אם הרובוט ראה תמיד קובייה באותו מקום, הצלחה באותו סידור אינה עונה על השאלה מה יקרה כשהיא תזוז. כדי לבדוק הכללה צריך להגדיר שינוי רלוונטי ולהפריד בין נתוני האימון לבין הבדיקה. אפשר לשנות מיקום, חפץ או הוראה, אבל שינוי של כולם יחד מקשה לזהות מה גרם לכישלון. לכן תיאור ניסוי טוב מסביר גם את החלוקה לנתונים ואת תנאי ההערכה.

מה לבקש מהדיווח הבא

חפשו כמה הדגמות נאספו, מאילו תצורות, מה נבדק אחרי האימון וכמה התערבויות נדרשו. מספר גדול של שעות אימון אינו מבטיח תוצאה שימושית. גם מודל כללי עשוי להזדקק להתאמה לחומרה ולסביבה. השאלה המעשית היא אם השיפור נשמר במבחן שמייצג את המשימה הרצויה, ומה המערכת עושה כשהיא פוגשת מצב שלא כוסה מספיק בנתונים.

המקורות שלנו

המקור, סוג העדות ותאריך הבדיקה זמינים כדי שתוכלו לבדוק בעצמכם.

מצאתם טעות או מידע שהתעדכן? שלחו תיקון. תיקונים מהותיים יתועדו כאן.