עצמאות שמגינה על ההחלטה שלכם
הצוות שלכם מכיר את המוצר, השוק והאילוצים. המעבדה מועילה משום שהיא יכולה לבדוק רעיון מושך בלי להזדקק לכך שינצח. תוצאה אפסית או שלילית עשויה לחסוך יותר ערך מסיפור מחמיא.
למה מעבדה אוניברסיטאית
הצוות שלכם בנה את האינטליגנציה. מעבדה אוניברסיטאית בודקת מה גורם לאנשים לבחור בה.
חברה בנויה ליצור תיאום ולספק מוצר. מעבדה אוניברסיטאית יכולה לכנס אנשים שכמעט לעולם לא ישבו באותו קו דיווח — משוררים, חוקרי אופנה, מעצבים, מדעני התנהגות, קלינאים, סטטיסטיקאים ומהנדסי תוכנה — ולהעביר את המחלוקות ביניהם דרך תהליך מדעי. המטרה אינה סיעור מוחות אקלקטי, אלא ראיות עצמאיות להחלטת הלקוח והעסק הבאה שלכם.
תהליך שנועד לאפשר לטיעון להפסיד
אנו מגדירים מראש את השערת האפס, התוצאה הראשית, גודל האפקט המשמעותי, תכנית הדגימה, ההחרגות וכלל ההחלטה. אנו אומדים אי־ודאות, מתקנים ריבוי בדיקות, מנסים להפריך את הטענה ומשחזרים לפני הרחבה.
צוות שאף תרשים ארגוני מסחרי אינו צריך לקלוט
הצוות החריג הוא זמני ומותאם לבעיה בכוונה. ארגון המוצר שלכם ממשיך לנוע; המעבדה מביאה בדיוק את החיכוך האינטלקטואלי שהחלטה משמעותית דורשת והופכת אותו לראיות שהארגון יכול להשתמש בהן.
מעבדה מצדיקה את מקומה בנכונות להפריך את הרעיון המושך.
איננו מוכרים מסקנות שנקבעו מראש ואיננו מבטיחים צמיחה. אנו מסכימים מראש איזו תוצאה תתמוך בהתערבות, מה יהיה קטן מכדי להצדיק פעולה ומה יאמר לנו לעצור. תוצאה חיובית, אפסית או שלילית יכולה לחזק החלטה עסקית אמיתית.
הנאמנות הראשונה שלהם היא לבני אדם, לידע או למלאכה — לא לרבעון.
זהו יתרון. משורר עשוי לדאוג למה שתשובה עושה לכבוד האדם; קלינאי — לפעולה בטוחה; מעצב — למי שנשאר בחוץ; ומהנדס — לאמינות ולעלות. הכנסה, אימוץ ושימור עדיין חשובים משום שהעסק שלכם חייב להחליט — אבל הם נמדדים לצד ההשפעה האנושית, לא במקומה.
אי־התאמה פורייה היא חלק מכלי המחקר.
האנשים האלה עשויים לחלוק אפילו על השאלה מהי הבעיה. איננו כופים הסכמה מלאכותית. אנו הופכים קריאות מתחרות להשערות יריבות, וחוזה המחקר — לא הוותק או כישרון ההצגה — קובע מה שורד.
משורר או חוקר ספרות
רואה קול, רצף, מטפורה, השמטה והקורא המשתמע — כולל מה שהתשובה מבקשת בשקט מאדם להאמין או לעשות.
חוקר אופנה וזהות
רואה מעמד, שייכות, טעם, סימנים תרבותיים ומי מרגיש שפונים אליו או מדירים אותו — עוד לפני שמדד שימושיות רגיל מבחין בכך.
מעצב וחוקר אינטראקציית אדם–מחשב
רואה היררכיה, אפשרויות פעולה, עומס קוגניטיבי, מודאליות והרגע שבו תשובה אינטליגנטית נעשית קשה לשימוש.
מדען התנהגות או קלינאי
רואה ערפלנים, לחץ, מוטיבציה, פעולה מתאימה, נזק והפער בין מה שאנשים אומרים לבין מה שהם באמת עושים.
סטטיסטיקאי או מתודולוג
שואל אם האפקט גדול מן הרעש, אם הניתוח נבחר לאחר שראו את התשובה ואם השוואה אחת בת־מזל מוצגת בטעות כממצא.
מהנדס תוכנה או LLM
הופך את ההתערבות לניתנת לשחזור, מבודד שינויים במודל ובממשק ומשאיר זמן השהיה, אמינות, טוקנים ועלות שירות בתוך ההחלטה.
מדעי הרוח אינם מקשטים את התשובה. הם מייצרים משתנים שכדאי לבדוק.
קריאה צמודה, תורת הנרטיב, ניתוח תרבותי, לימודי אופנה ומחקר עיצוב חושפים מנגנונים שבנצ׳מרק עלול להחמיץ. אנו הופכים את התובנה הרלוונטית להתערבות מבוקרת ומודדים מה אנשים אמיתיים מבינים, בוחרים, מוכנים לשלם עליו, משתמשים בו, זוכרים או פועלים לפיו בבטחה. לא כל חוויה אנושית צריכה להפוך למספר; כל טענת מוצר שמבוססת עליה צריכה לשרוד בדיקה אמפירית.
ספרות ושירה
- מה התחום רואה
- קול, סדר, מטפורה, מרחק נרטיבי והשמטה יכולים לשנות את משמעותה של אותה קבוצת עובדות עבור הקורא.
- איך בודקים זאת
- מציגים תשובות תואמות במבנים נרטיביים מתחרים, תוך שמירה על אותו מודל, אותן עובדות ואותה משימה.
- מה מודדים
- הבנה, זכירה, אמונה מכוילת, פעולה מתאימה והעדפת מסר.
אופנה, זהות ותרבות
- מה התחום רואה
- סימנים חזותיים ולשוניים מתקשרים מעמד, שייכות, מומחיות, אינטימיות והדרה עוד לפני שהלקוח מעריך יכולת.
- איך בודקים זאת
- משנים הצגה, פרסונה, שפה חזותית ורמזים תרבותיים בין פלחי לקוחות בלי לשנות את התשובה עצמה.
- מה מודדים
- רלוונטיות נתפסת, כיול אמון, בחירה, נכונות לשלם ואפקטים בין תתי־קבוצות.
עיצוב ואינטראקציית אדם–מחשב
- מה התחום רואה
- היררכיית מידע, חשיפה הדרגתית, מודאליות ושליטה קובעות אם ניתן להשתמש ביכולת ברגע ההחלטה.
- איך בודקים זאת
- משווים מבני אינטראקציה עם אותו תוכן ואותו מודל במשימות מבוקרות ותחת לחץ זמן מציאותי.
- מה מודדים
- הצלחת משימה, זמן, שגיאות, נטישה, כיול ביטחון וביקוש לתמיכה.
פסיכולוגיה ומדעי ההתנהגות
- מה התחום רואה
- קשב, רגש, נורמות, תמריצים ועומס קוגניטיבי יכולים להפוך תשובה נכונה טכנית ללא יעילה או לא בטוחה.
- איך בודקים זאת
- מגדירים מראש מנגנון התנהגותי, משווה ובדיקת מניפולציה, ואז בודקים אותם עם האנשים ובהקשר החשובים.
- מה מודדים
- התנהגות נצפית, אימוץ, שימור, הסלמה בטוחה, איכות החלטה ואפקטים הטרוגניים.
מתובנה מוזרה להחלטה שאפשר להגן עליה.
זוהי שיטה מדעית מוכרת שמיושמת באינטראקציית אדם–LLM ובהחלטות עסקיות. ערך p הוא כלי אבחוני אחד — לא מכונת אמת. גודל האפקט, אי־הוודאות, איכות התכנון, המשמעות המעשית והשחזור קובעים אם הממצא ראוי לפעולה.
- UCL — Methods for HCI Research
1. מתבוננים ומפרשים
ראיונות, קריאה צמודה, תצפית בשטח, ניתוח תרבותי ונתוני מוצר מאתרים את המנגנון האנושי שכדאי לחקור.
- Center for Open Science — Registered Reports
2. מגדירים מה יכול להיות שגוי
אנו מגדירים את השערת האפס, ההסבר היריב, התוצאה הראשית והאפקט המזערי שיהיה גדול מספיק כדי לשנות את ההחלטה העסקית.
- Center for Open Science — Preregistration
3. מתחייבים לפני שרואים את התשובה
האוכלוסייה, המדגם, ההחרגות, כלל העצירה, ההתערבות, המשווה, התוצאות והניתוח המאשש נקבעים לפני שהתוצאה יכולה לפתות אותנו להזיז את השערים.
- NIST — AI Risk Management Framework
4. בודקים את המערכת האמיתית עם אנשים אמיתיים
אנו שולטים ככל האפשר במודל, בפרומפט, בממשק ובחשיפה; מקצים באקראי או מתאימים תנאים; מתעדים את הקשר השימוש; ומשלבים אתיקה וסיכון בתכנון.
- American Statistical Association — Statement on p-values
5. אומדים — לא רק מכריזים על מובהקות
אנו מדווחים על גדלי אפקט, רווחים, ערכי p כאשר הם מתאימים, ספים מעשיים ואי־ודאות. ערך p קטן אינו מוכיח שאפקט אמיתי או חשוב.
- Holm (1979) — A Simple Sequentially Rejective Multiple Test Procedure
6. מתקנים את הפיתוי שבריבוי השוואות
כאשר נבדקות כמה השערות מאששות, שיטות כגון תיקון הולם שולטות בשיעור הטעות המשפחתי במקום לתגמל את התוצאה בת־המזל ביותר.
- Many Labs 2 — Replicability across samples and settings
7. מנסים לגרום לזה להיכשל שוב
אפקט מבטיח משוחזר במדגם, בשפה, במודל, בתהליך עבודה או בסביבה חדשים לפני שהוא הופך לטענה כללית או להטמעה רחבה.
הצוות שלכם אינו צריך להפוך לאוניברסיטה — והמעבדה אינה צריכה להעמיד פנים שהיא מנהלת את העסק שלכם.
ניסיון לשחזר את התמהיל הזה לצמיתות בתוך מבנה דיווח יחיד יקהה את המחלוקת או יעמיס על ארגון המוצר אנשים שהוא מעולם לא נועד לנהל. שותפות אוניברסיטאית מוגדרת שומרת על שני היתרונות: הצוות שלכם שומר על מהירות ושיקול דעת; המעבדה מספקת חיכוך עצמאי, שיטה וראיות.
הצוות שלכם
החברה שלכם מביאה
- ידע על המוצר, הלקוחות והשוק
- את ההחלטה האמיתית ואת המשמעות הכלכלית שלה
- גישה לתהליכי עבודה, למשתמשים ולאילוצים תפעוליים
- בעלי סיכון, מומחי תחום ויכולת הטמעה
- שיקול דעת וסמכות לפעול על פי התוצאה
המעבדה
המעבדה האוניברסיטאית מביאה
- עצמאות מן התשובה הפנימית המועדפת
- מדעי הרוח, עיצוב, מדע, רפואה והנדסה במחקר אחד
- אתיקה של מחקר בבני אדם ותהליכים שקופים
- השערות אפס, ביקורות, ספים, אי־ודאות וכללי עצירה
- הפרכה, תיקון ריבוי בדיקות ושחזור
זו אינה שיטה מדעית חדשה. זהו דפוס אוניברסיטאי מבוסס — שמכוון לערך של LLM ללקוחות.
אוניברסיטאות מקימות זה שנים מרכזים סביב בעיות שאף תחום יחיד אינו יכול להחזיק לבדו. אלה תקדימים, לא שותפויות רשמיות: כל אחד מדגים חלק מן השיטה שאנו מתאימים למחקר LLM ממוקד־אדם עם תוצאות מדידות ללקוחות ולעסק.
Stanford University
Stanford Institute for Human-Centered AI
מכון AI בין־תחומי המשתרע על פני שבעת בתי הספר של סטנפורד ומונחה בידי השפעה אנושית והשאיפה להעצים בני אדם.
לביקור במרכזMassachusetts Institute of Technology
MIT Media Lab
מעבדה בין־תחומית שבנויה על ערבוב לא שגרתי של תחומים שנראים רחוקים — ובהם AI, אמנות, עיצוב, בריאות, רובוטיקה, מוזיקה ואינטראקציית אדם–מכונה.
לביקור במרכזArizona State University
Center for Science and the Imagination
מחבר סופרים, אמנים והוגים יצירתיים עם מדענים, מהנדסים וטכנולוגים ומקשר נרטיבים אנושיים לשאלות מדעיות.
לביקור במרכזUniversity College London
UCL Interaction Centre
חוקר אנשים, טכנולוגיה וחברה דרך המסורות המדעיות של מדעי המחשב ומדעי האדם, בצומת שבין הנדסה, מדעי ההתנהגות ועיצוב.
לביקור במרכזStanford University
Stanford Literary Lab
קולקטיב מחקר שמיישם ביקורת חישובית על ספרות — תקדים ישיר לשאלות הומניסטיות שנחקרות בשיטות אנליטיות ניתנות לשחזור.
לביקור במרכזPrinceton University
Center for Digital Humanities
מתייחס לחישוב, מדעי הנתונים ומדעי הרוח כשותפים הדדיים ומשלב פרשנות ביקורתית עם מחקר עתיר נתונים והנדסת תוכנה.
לביקור במרכזUniversity of Oxford
Institute for Ethics in AI
מחבר חוקרים מפילוסופיה, מדעי הרוח ו־STEM עם מנהיגים בטכנולוגיה, עסקים, ממשל וחברה אזרחית כדי לספק נקודות מבט עצמאיות על AI.
לביקור במרכזUniversity of Maryland
Human–Computer Interaction Lab
מעבדת HCI בין־תחומית ותיקה שמחברת לימודי מידע, מדעי המחשב, פסיכולוגיה, חינוך, אנגלית, הנדסה, עיתונות ותחומים נוספים.
לביקור במרכזHarvard University
metaLAB
מעבדה לעיצוב ידע ששורשיה באמנות ובמדעי הרוח ופועלת בצמתים שבין קוד לנרטיב, נתונים לאתיקה ורשתות לארכיונים.
לביקור במרכזLondon College of Fashion, UAL
Fashion Innovation Agency
מחברת מומחיות אופנה, מותגים ושותפי טכנולוגיה דרך הוכחות היתכנות ואבות טיפוס, ולאחר מכן מחזירה את הידע לאוניברסיטה.
לביקור במרכזRoyal College of Art
Helen Hamlyn Centre for Design
מרכז מחקר לעיצוב כוללני וממוקד־אדם שעובד עם עסקים, ממשל, אקדמיה והמגזר השלישי על פני עיצוב, פסיכולוגיה, מדעי המוח, בריאות וחשיבה מערכתית.
לביקור במרכזחוזה המחקר
לפני הבדיקה אנו מסכימים מה ישנה את ההחלטה.
זהו חוזה המחקר הקצר שמאחורי כל מחקר ממומן. הוא מגן על הצוות שלכם מתוצאה מרשימה שעונה על השאלה הלא נכונה — ומגן על המעבדה מהגדרה שקטה מחדש של הצלחה לאחר הגעת הנתונים.
01ההחלטה העסקית, בעל ההחלטה והתנהגות הלקוח שעל הפרק
02המנגנון ההומניסטי או ההתנהגותי וההסבר היריב
03השערה שניתנת להפרכה והשערת אפס מפורשת
04אוכלוסייה, נימוק לגודל המדגם, גיוס והחרגות
05התערבות, משווה, גרסת מודל והקשר שימוש
06תוצאה ראשית, אפקט משמעותי מזערי ותוצאות משניות
07תכנית ניתוח, דיווח אי־ודאות ותיקון ריבוי בדיקות
08כללים לתוצאות חיוביות, אפסיות, שליליות ועמומות
09תנאי השחזור הנדרש לפני הרחבה
הביאו את שיקול הדעת המוצרי. אנחנו נביא את האנשים שתרשים הארגון שלכם אינו יכול להכיל — ושיטה חזקה מספיק לבדוק את כולם.
התחילו בהחלטת לקוח או עסק משמעותית אחת. נרכיב את הצוות ההטרוגני הקטן ביותר שיכול לאתגר אותה ונעצב מחקר שתוצאתו תישאר שימושית גם אם הרעיון המקורי לא ישרוד.