הכפתור שכבר לא נתן כלום: כך תגמול בלתי צפוי משאיר אותנו בפנים

תגמול בלתי צפוי הוא מצב שבו פעולה מניבה תוצאה חיובית רק בחלק מהפעמים, בלי שניתן לדעת מתי היא תגיע. חוסר העקביות עשוי לחזק התמדה מפני שכל ניסיון חדש יכול להיות הניסיון שיצליח. כך נוצרת התנהגות שממשיכה גם לאחר שהתגמול נחלש, השתנה או נעלם.

תגמול בלתי צפוי אינו חי רק במעבדה. הוא נמצא בתוך הרגלים יומיומיים, ברגע שבו תגובתיות שולחת את היד לטלפון ובאופן שבו תפיסה מעניקה משמעות לשתיקה, לנקודה אדומה או להודעה קצרה. מערכת העצבים לומדת מן ההפתעה, לא רק מן הפרס. לכן שינוי נעשה מסובך במיוחד כשהאדם אינו יודע אם הפעם הבאה תהיה חסרת ערך או בדיוק הפעם שחיכה לה.

הניסיון ה-47 היה חסר טעם. לכן הגיע גם הניסיון ה-48

דמיינו מסך פשוט.

במרכזו כפתור. בכל לחיצה עשויה להופיע נקודה ירוקה ששווה כסף קטן. לפעמים היא מופיעה מיד. לפעמים רק אחרי חמש לחיצות. לפעמים אחרי 20. אין שעון, אין דפוס גלוי ואין הודעה שמסבירה כמה זמן נותר.

בהתחלה אתם לוחצים מתוך סקרנות.

הנקודה מופיעה.

אתם לוחצים שוב. דבר לא קורה.

עוד לחיצה. כלום.

ואז, בדיוק ברגע שבו הפעולה מתחילה להיראות מגוחכת, הנקודה חוזרת.

כעת קרה משהו חשוב יותר מן הרווח הקטן. נוצר סיפור. הכפתור עובד, רק לא תמיד. מהרגע הזה כל לחיצה ריקה כבר אינה הוכחה שכדאי להפסיק. היא יכולה להיות הלחיצה שמגיעה רגע לפני הפרס.

זהו הרעיון שבבסיס חיזוק חלקי: התוצאה אינה מופיעה אחרי כל פעולה. לעיתים היא מגיעה ולעיתים לא. כאשר אי אפשר לחזות את התזמון, היעדר הפרס אינו מספק תשובה ברורה. הוא משאיר מקום לעוד ניסיון.

החיים מלאים בכפתורים כאלה, גם כשאין בהם כפתור.

מרים שולחת הודעה לאדם שהיא יוצאת איתו. לפעמים הוא עונה בתוך דקה, בחום ובעניין. לפעמים הוא נעלם ליום שלם. כשהוא חוזר, הוא מצחיק, נוכח ומדויק. דווקא משום שהקשר אינו עקבי, כל שתיקה יכולה להסתיים בהודעה המיוחלת.

איתי מעלה סרטון. הסרטון הראשון מקבל 300 צפיות. השני מגיע ל-18 אלף. השלישי נעצר על 700. הוא אינו יודע מה השתנה, ולכן הוא מעלה עוד סרטון. אולי הפעם האלגוריתם יבחר בו.

בעלת עסק שולחת הצעות מחיר. רוב הלקוחות אינם חוזרים. פעם בכמה שבועות מגיעה עסקה גדולה בעקבות הודעה כמעט מקרית. התוצאה אינה הופכת אותה למהמרת, כמובן. עבודה עסקית דורשת התמדה. אבל מערכת הלמידה פוגשת כאן מבנה מוכר: מאמצים רבים, שתיקה ארוכה, ואז תגמול שמגיע בלי אזהרה.

הבעיה אינה שהפרס קטן.

הבעיה היא שאי אפשר לדעת אם הוא באמת נגמר.

האדם אינו נשאר רק מפני שקיבל משהו. לעיתים הוא נשאר מפני שהפעם הבאה עדיין פתוחה.

המוח אינו מכונת ממתקים

דופמין הפך בשנים האחרונות לסלבריטאי של עולם ההסברים. כמעט כל הרגל, התלהבות או גלילה מקבלים מיד את אותו הסבר: "קיבלנו זריקת דופמין".

זהו ניסוח קליט. המציאות מורכבת יותר.

אחת התרומות המרכזיות להבנת מערכת התגמול הגיעה ממחקריהם של וולפרם שולץ ועמיתיו. במקום לתאר דופמין רק כחומר של הנאה, המחקרים הצביעו על תפקידו בלמידה מתוך תחזיות. הפעילות שנמדדה אצל קופים לא שיקפה בפשטות את עצם קבלת הפרס. היא השתנתה בהתאם לפער שבין מה שהיה צפוי לבין מה שקרה בפועל.

כאשר פרס לא צפוי הגיע, נרשמה תגובה.

לאחר שהחיה למדה שרמז מסוים מנבא את הפרס, הפעילות עברה בהדרגה אל הרמז. ואם הפרס הצפוי לא הגיע, נראתה ירידה בזמן שבו היה אמור להופיע.

במילים אנושיות יותר, המערכת לא רק שואלת "האם היה נעים?". היא עוקבת גם אחרי שאלה אחרת: "האם המציאות התנהגה כפי שחזיתי?"

ההבדל הזה משנה את הסיפור.

אם כל לחיצה על כפתור הייתה מספקת אותה תוצאה, הלמידה הייתה נעשית ברורה במהירות. לחיצה מובילה לפרס. אין תעלומה גדולה. אם הכפתור היה מפסיק לעבוד לחלוטין, לאחר זמן היה אפשר ללמוד קשר חדש: לחיצה כבר אינה מועילה.

תגמול בלתי צפוי משאיר את התחזית בתנועה. התוצאה החיובית עדיין אפשרית, אך אינה מובטחת. כל ניסיון מכיל מידע חדש. המערכת נשארת דרוכה מפני שעדיין יש מה לגלות.

במחקר של כריסטופר פיורילו, פיליפ טובלר ושולץ נבדקה פעילותם של תאי דופמין כאשר ההסתברות לפרס השתנתה. התוצאות הבחינו בין תגובה הקשורה לערך הצפוי לבין פעילות הקשורה לאי ודאות. כאשר הסיכוי לפרס לא היה אפס או ודאות מלאה, הופיעה גם דריכות מתמשכת בתקופת ההמתנה.

אין פירוש הדבר שכל בדיקה בטלפון ניתנת להסבר באמצעות תא עצב מסוים, או שכל חוסר ודאות יוצר אותה תגובה אצל כל אדם. מחקרים במעבדה מצמצמים מציאות מורכבת לתנאים שניתן למדוד. אבל הם מציעים רעיון חזק: הציפייה אינה חלל ריק בין פעולה לתוצאה. המוח עובד בתוכה.

לפעמים ההמתנה היא האירוע.

תגמול בלתי צפוי מתחיל לפני שהטלפון נדלק

השעה 22:17.

נועה כבר כיבתה את האור. הטלפון מונח על השידה, המסך כלפי מטה. היא אינה מצפה להודעה מסוימת. לפחות זה מה שהיא אומרת לעצמה.

כעבור דקה היד נשלחת הצדה.

המסך נדלק.

אין הודעות.

היא מניחה את הטלפון.

כעבור שלוש דקות היא בודקת שוב.

לכאורה לא קרה דבר בין שתי הבדיקות. בפועל נשארה שאלה פתוחה: אולי עכשיו יש משהו. הודעה מחברה, תגובה לתמונה, חדשות, מייל חשוב, משפט מאדם שלא כתב כל היום.

רוב הפעמים אין שם דבר ששווה את ההפרעה. לעיתים נדירות יש.

דווקא המיעוט הזה מעניק לבדיקה הבאה סיבה.

חשוב לדייק כאן. הטלפון אינו מכונת מזל, וכל שימוש תכוף אינו התמכרות. הודעות מספקות מידע אמיתי, קשר חברתי ולעיתים גם צורך מקצועי. אנשים שונים מאוד זה מזה באופן שבו הם משתמשים בטכנולוגיה ובמידה שבה השימוש מפריע לחייהם.

ובכל זאת, המבנה מוכר. הפעולה קלה, התוצאה משתנה והעלות של ניסיון נוסף נראית זניחה. חצי שנייה, הצצה אחת, החלקה קצרה.

המחיר אינו מורגש בכל בדיקה. הוא מצטבר במעברים.

המחשבה שהופרעה.

השיחה שנקטעה.

הרגע שבו המוח בדיוק התחיל להשתעמם, ואז קיבל דרך להימלט.

כך הרגלים נוצרים לעיתים בלי החלטה. תגובתיות מחברת בין רמז קטן לבין פעולה מוכרת. שקט, המתנה או אי נוחות מפעילים את היד. המסך מספק תשובה, גם אם התשובה היא שאין חדש.

ואז מגיעה פעם אחת שבה יש.

הודעה מצחיקה בדיוק כשמשעמם.

מחמאה אחרי יום קשה.

תגובה מאדם שנועה חיכתה לו.

אותו רגע אינו מתגמל רק את הבדיקה הנוכחית. הוא מעניק משמעות גם לבדיקות הבאות. כעת תפיסה יכולה להפוך כל שקט לאפשרות.

לפעמים אנחנו אומרים לעצמנו שאנחנו בודקים מפני שאולי הגיעה הודעה. הסדר עשוי להיות הפוך: האפשרות שהגיעה הודעה נעשתה חשובה מפני שהתרגלנו לבדוק.

זה גם מסביר מדוע תגובה אוטומטית אינה תמיד מרגישה אוטומטית. לכל בדיקה יש הסבר סביר. אולי מישהו כתב. אולי צריך לענות. אולי קרה משהו. ההסבר מגיע במהירות כזאת, עד שנדמה שהפעולה נולדה מתוך החלטה.

אבל אילו הייתה זו החלטה חדשה בכל פעם, מדוע היא מופיעה כמעט תמיד באותם רגעים?

במעלית.

בתור.

לפני השינה.

אחרי משפט לא נעים.

בתוך שלוש השניות שבהן המחשב טוען קובץ.

היד אינה מחכה לדיון פילוסופי. היא כבר מכירה את הדרך.

הפרס נעלם, אך ההתנהגות נשארה

בפסיכולוגיה של למידה קיימת תופעה המכונה אפקט החיזוק החלקי בהכחדה. הניסוח נשמע כאילו הוא דורש חלוק לבן ולוח מחיק, אך הרעיון פשוט: התנהגות שקיבלה תגמול רק בחלק מהפעמים עשויה, בתנאים מסוימים, להמשיך זמן רב יותר לאחר שהתגמול מפסיק.

מדוע?

אם פעולה תמיד קיבלה פרס ופתאום אינה מקבלת דבר, השינוי בולט. העולם שבר את הכלל.

כאשר הפעולה הצליחה רק לפעמים, כישלון נוסף אינו בהכרח מידע חדש. גם בעבר היו ניסיונות ריקים. האדם כבר למד שאכזבה זמנית אינה אומרת שהפרס נעלם.

ארבעה ניסויים בבני אדם שערך החוקר פרודה סוורטדל בחנו התמדה לאחר חיזוק מלא לעומת חיזוק חלקי. המשתתפים לא תמיד חזו מראש כיצד היסטוריית התגמול תשפיע עליהם. ההתמדה התגלתה בהתנהגות לפני שהייתה מיוצגת היטב בתחזית המודעת שלהם.

יש משהו כמעט מעליב בממצא הזה. אנחנו אוהבים לחשוב שנדע מתי אנחנו נסחפים. שנזהה את הרגע שבו פעולה מפסיקה להשתלם ונעזוב בהחלטיות. אלא שהלמידה יכולה לפעול לפני שהסיפור המודע משיג אותה.

ועדיין, אסור להפוך את אפקט החיזוק החלקי לחוק קסם.

מחקרים אינם מראים שכל תגמול לא עקבי יחזק כל התנהגות. התוצאות משתנות לפי סוג הלמידה, סדר החיזוקים, החלופות הזמינות וההקשר. במחקר אנושי אחר נמצא שחיזוק חלקי יכול להגביר בחירה באפשרות מסוימת לאחר שהתגמול הוסר, אך ההשפעה הכוללת הייתה תלויה גם באטרקטיביות של האפשרות החלופית. בניסויים אחרים, סוגים מסוימים של התניה לא הפגינו את האפקט באופן עקבי.

המורכבות הזאת חשובה.

אין כפתור סודי שמבטיח שאדם יישאר. אנשים אינם מכונות, והחיים אינם מערך ניסוי מבוקר. קשר אנושי, עבודה, משחק ורשת חברתית מכילים זיכרונות, ערכים, מחויבויות, עלויות ותפיסה עצמית.

אבל חוסר העקביות עושה דבר משמעותי אחד: הוא מקשה עלינו לפרש את היעדר הפרס כסיום.

כל עוד הטוב הופיע לפעמים, גם התקופה הריקה יכולה להרגיש כמו הקדמה.

"כמעט" הוא לפעמים פרס בתחפושת

שלושה סמלים מסתובבים על מסך.

הראשון נעצר.

גם השני.

השלישי חולף שבריר שנייה מעבר לסמל שהיה משלים זכייה.

לא זכיתם.

מבחינה כספית, התוצאה ברורה. כמעט זכייה שווה בדיוק להפסד. הכסף לא מתרשם מקרבה אסתטית.

אבל החוויה האנושית אינה מנהלת חשבונות.

מחקרים על הימורים בדקו את אפקט ה"כמעט זכייה", אותו רגע שבו תוצאה מפסידה נראית קרובה להצלחה. מחקרי הדמיה וסקירות מצאו שתוצאות כאלה עשויות לעורר פעילות באזורים הקשורים לעיבוד תגמול ולחזק את המוטיבציה להמשיך, אף שלא התקבל פרס.

עם זאת, גם כאן התמונה אינה אחידה. סדרת ניסויים מוקדמים מראש שפורסמה ב-2024 מצאה שכמעט זכיות השפיעו על תחושת המוטיבציה של המשתתפים, אך לא תמיד הובילו לשינוי עקבי במדדים התנהגותיים כמו מהירות ההימור או גובה ההימור.

זהו הבדל חשוב בין להרגיש דחף לבין לפעול עליו.

המחקר אינו אומר שכמעט הצלחה שולטת בנו. הוא מצביע על כך שהמוח אינו מקטלג כל תוצאה רק באמצעות שתי מגירות: הצלחה או כישלון. הקרבה עצמה יכולה לקבל משמעות.

מחוץ לעולם ההימורים, ה"כמעט" מופיע בצורות מעודנות יותר.

המועמדת לעבודה מגיעה לשלב האחרון בפעם השלישית. שוב בחרו במישהו אחר, אך המגייסת אומרת שהיא הייתה מצוינת ושכדאי להגיש מועמדות בעתיד. הכישלון מכאיב, אבל הוא גם מוכיח שההצלחה קרובה.

יוצר מעלה פוסט. הוא אינו הופך לוויראלי, אבל אדם מוכר משתף אותו. בפעם הבאה הוא משקיע עוד ערב בניסיון לשחזר את הרגע.

אדם מנסה לקבל יחס ממישהו שאינו עקבי. השיחה כמעט נהיית קרובה. הפגישה כמעט נקבעת. ההתנצלות כמעט נשמעת אמיתית. כל "כמעט" משאיר את הסיפור פתוח לעוד פרק.

השאלה האנושית אינה רק מדוע אנחנו ממשיכים אחרי שקיבלנו משהו.

השאלה המטרידה יותר היא כמה זמן אפשר לחיות מכך שכמעט קיבלנו אותו.

קשרים לא יציבים מלמדים אותנו לחכות לרגע הטוב

ביום ראשון הוא שלח לה הודעה ארוכה.

ביום שני הוא היה חם ומצחיק.

ביום שלישי הוא נעלם.

ביום רביעי בערב הופיעה הודעה קצרה: "עבר עליי יום מטורף, חשבתי עלייך."

מיכל קראה אותה פעמיים.

כל המתח של יום שלישי התחלף בהקלה. היא לא דמיינה את הקרבה. הוא כן חושב עליה. הנה ההוכחה.

למחרת חזרה השתיקה.

קל להביט מבחוץ ולשאול מדוע היא נשארת. מבחוץ רואים ממוצע: מעט נוכחות, הרבה המתנה. מבפנים לא חיים בתוך ממוצע. חיים בתוך רצף של רגעים, והרגעים הטובים מגיעים לעיתים בעוצמה גדולה דווקא אחרי תקופה ריקה.

ההקלה נעשית חלק מן התגמול.

מחווה קטנה לאחר ריחוק עשויה להרגיש חזקה יותר ממחווה זהה בתוך קשר יציב. היא אינה רק נעימה. היא מסיימת זמנית את אי הוודאות. הגוף משתחרר, התפיסה משתנה והימים הקשים מקבלים הסבר מקל: היה לו עומס, הוא היה מבולבל, אבל הקשר קיים.

אין פירוש הדבר שכל קשר לא עקבי הוא מניפולציה מכוונת. אנשים נעשים מרוחקים מסיבות רבות. עומס, קושי רגשי, נסיבות חיים או סגנונות תקשורת שונים יכולים ליצור חוסר עקביות בלי תכנון ובלי כוונה לפגוע.

ובכל זאת, האדם שממתין לומד מן הדפוס, גם אם איש לא תכנן ללמד אותו.

הוא לומד ששתיקה יכולה להסתיים בקרבה.

שריחוק אינו בהכרח סוף.

שעוד הודעה עשויה לפתוח מחדש את הדלת.

כאן תגמול בלתי צפוי פוגש משמעות. התוצאה אינה רק הודעה על המסך. היא תשובה לשאלות עמוקות יותר: האם אני חשוב? האם הקשר אמיתי? האם הפעם יבחרו בי?

ככל שהשאלה גדולה יותר, גם פרס קטן יכול לקבל משקל עצום.

זה אינו מוגבל לזוגיות. עובד מקבל במשך חודשים מעט הכרה ממנהל ביקורתי. פעם אחת, אחרי פרויקט קשה, המנהל אומר מול כולם: "בלעדיו זה לא היה קורה". העובד חוזר הביתה זקוף יותר. במשך שבועות הוא משקיע מעל ומעבר בתקווה לשמוע שוב את אותו משפט.

ילדה מקבלת מאביה תשומת לב מלאה רק כשהיא מצטיינת. אין צורך שמישהו יאמר לה במפורש שהישג מביא קרבה. המערכת לומדת את המשוואה בעצמה.

במקומות כאלה, שינוי אינו רק הפסקת פעולה. הוא ויתור על האפשרות שהפעם הבאה תיתן סוף סוף את מה שהפעמים הקודמות הבטיחו.

ולכן אנשים אינם תמיד נאחזים במה שהם מקבלים.

לפעמים הם נאחזים במה שהמערכת לימדה אותם לצפות לו.

גם חדשות רעות יכולות להפוך לתגמול

בשעה 07:06 דני פותח אתר חדשות.

הכותרת הראשונה מדאיגה. השנייה חוזרת על מידע שכבר קרא בלילה. בשלישית יש פרט חדש, קטן ולא ממש שימושי.

הוא סוגר את האתר.

בשעה 07:14 הוא פותח אותו שוב.

דני אינו נהנה. הוא גם אינו מצפה לשמחה. ובכל זאת, הפעולה ממשיכה לספק משהו: מידע חדש, תחושת מוכנות, אישור לכך שהוא אינו מפספס אירוע חשוב.

תגמול אינו חייב להיות עונג. לפעמים הוא הפחתה רגעית של מתח.

בדיקה רפואית חוזרת עשויה לא לספק חדשות טובות, אבל היא יכולה להעניק כמה דקות של ודאות. רענון חשבון הבנק אינו מגדיל את היתרה, אך הוא מסיים לרגע את השאלה כמה כסף נשאר. חיפוש נוסף על סימפטום אינו מרגיע תמיד, אבל הוא נותן תחושה שהאדם עושה משהו.

כך הרגל יכול להתבסס גם סביב הקלה.

אי נוחות מופיעה.

האדם בודק.

הבדיקה משנה את התחושה, ולו לזמן קצר.

מערכת העצבים לומדת שהפעולה רלוונטית.

בפעם הבאה שהמתח עולה, התגובה מגיעה מהר יותר.

זהו אחד המקומות שבהם חרדה הופכת לדחיפות. האדם אינו רק רוצה מידע. הוא מרגיש שעליו להשיג אותו עכשיו. ככל שההקלה מגיעה באופן לא עקבי, כך עשויה להתארך שרשרת הניסיונות.

לפעמים הבדיקה הראשונה מרגיעה.

לפעמים השנייה מגלה פרט מדאיג.

לפעמים החיפוש העשירי מוצא הסבר מרגיע במיוחד.

המוח אינו מקבל לוח תוצאות מסודר שמראה כי רוב הבדיקות הגדילו את המתח. הוא זוכר גם את הפעמים שבהן נמצא המשפט המדויק שהחזיר אוויר לריאות.

התוצאה מזכירה אדם שמנער מכונת חטיפים לאחר שהמוצר נתקע. הוא כבר שילם. הוא רואה את השקית. היא כמעט נפלה. עוד ניעור אחד נראה סביר לחלוטין.

רק שבחיים, המכונה אינה מודיעה מתי היא ריקה.

הרגע שבו הפסקנו לבחור והתחלנו לחכות

יש הרגלים שנשארים מפני שהם מועילים.

ויש הרגלים שנשארים מפני שהם עדיין לא הוכיחו סופית שאינם מועילים.

ההבדל עדין.

אדם נכנס שוב לאפליקציה לא משום שבכל פעם קורה שם משהו, אלא משום שלפעמים כן. הוא שולח עוד הודעה לא מפני שתמיד נענה, אלא מפני שפעם אחת קיבל תשובה ששינתה את כל הערב. הוא נשאר במקום עבודה שוחק מפני שמדי כמה חודשים מגיע פרויקט שמזכיר לו מדוע התאהב במקצוע.

השאלה אינה אם ההתמדה טובה או רעה. בלעדיה, מעט מאוד דברים משמעותיים היו מתרחשים. לימודים, קשרים, יצירה, עסקים ומחקר דורשים תקופות שבהן אין פרס מיידי. אדם שמפסיק לאחר ניסיון ריק אחד לא יגיע רחוק.

הקושי מופיע כאשר הציפייה מחליפה את הבחירה.

כשהאדם כבר אינו יכול לומר מה בדיוק הוא מחכה לקבל.

כשהעלות עולה, אך כל אכזבה רק הופכת את התגמול העתידי לחשוב יותר.

כשהרגל ממשיך לנהל את הזמן גם לאחר שהסיבה המקורית נחלשה.

מחקר על חיזוק חלקי אינו מספק נוסחה פשוטה לחיים. הוא כן מציע דרך אחרת להביט בהתנהגות שנראית מבחוץ בלתי הגיונית. האדם אינו בהכרח חלש, תמים או חסר משמעת. ייתכן שהוא למד בסביבה שבה היעדר תגמול מעולם לא היה סימן אמין לעצור.

מדי פעם הגיע משהו.

זה הספיק כדי לשמור את האפשרות בחיים.

גם מחיר השליטה מופיע כאן בצורה משונה. הבדיקה הבאה מעניקה תחושה של פעולה, אבל למעשה היא משאירה את השליטה אצל הדבר שעליו מחכים: ההודעה, התוצאה, המספר, האדם האחר.

נדמה שאנחנו מפעילים את הכפתור.

אחרי זמן מה, הכפתור מפעיל אותנו.

סיכום

תגמול בלתי צפוי חושף אמת לא נוחה על הרגלים: ההתנהגות אינה זקוקה להצלחה קבועה כדי להמשיך. לפעמים די בהצלחה נדירה, בהקלה קצרה או ב"כמעט" אחד כדי להשאיר את הציפייה פתוחה.

תגובתיות שולחת את היד לפעולה לפני שנערכה בחירה מלאה. תפיסה מעניקה לתוצאה משמעות, מערכת העצבים לומדת את ההקלה, והרגלים משמרים את המסלול גם כשהפרס נעשה נדיר. לכן שינוי אינו רק החלטה להפסיק ללחוץ. הוא גם מפגש עם השקט שמופיע כשהלחיצה כבר אינה מספקת תשובה.

מאוחר בלילה, נועה מושיטה שוב את היד אל הטלפון.

לרגע היא נעצרת.

המסך עדיין כבוי. אין לה דרך לדעת אם מחכה שם הודעה.

זו בדיוק הסיבה שבגללה היא רוצה לבדוק.

וזו גם הפעם הראשונה שבה היא רואה שההמתנה עצמה כבר הפכה לחלק מן הפרס.

מקורות

• Schultz, Dayan & Montague, A Neural Substrate of Prediction and Reward, Science, 1997: https://pubmed.ncbi.nlm.nih.gov/9054347/
• Fiorillo, Tobler & Schultz, Discrete Coding of Reward Probability and Uncertainty by Dopamine Neurons, Science, 2003: https://pubmed.ncbi.nlm.nih.gov/12649484/
• Svartdal, Extinction After Partial Reinforcement: Predicted vs. Judged Persistence, Scandinavian Journal of Psychology, 2003: https://pubmed.ncbi.nlm.nih.gov/12603004/
• Hochman & Erev, The Partial-Reinforcement Extinction Effect and the Contingent-Sampling Hypothesis, Psychonomic Bulletin & Review, 2013: https://pubmed.ncbi.nlm.nih.gov/23595350/
• Clark, Decision-Making During Gambling: An Integration of Cognitive and Psychobiological Approaches, Philosophical Transactions of the Royal Society B, 2010: https://pubmed.ncbi.nlm.nih.gov/20026469/
• Palmer, Ferrari & Clark, The Near-Miss Effect in Online Slot Machine Gambling, Psychology of Addictive Behaviors, 2024: https://pubmed.ncbi.nlm.nih.gov/38709628/