University of Haifa · AI & Human Behavior

The Human Variable

How AI is quietly changing the way we think, feel, and relate

Issue 01 · Spring 2026 · 25 essays
From the Editors

Most conversations about AI ask what these systems can do — how fast they write, how well they answer. The twenty-five pieces in this issue ask a harder question: what AI does to the people using it. Written from lived experience and reasoned outward, they gather into six currents — how AI reshapes our thinking, our connections, our sense of what is true, our work, the systems we hand it to, and finally the self.

On cognition, Luna Hadad, Gharam Arar and Joanna Qanazea worry about the atrophy of effort, while Hila Vialgos finds that the same tools trained her to ask sharper questions. On connection, Dana Roshrosh, Valeria Dmitriev and Pierre Khoury sit with the strange comfort of being heard by a machine — and Shahar Petraro and Shoval Nachum weigh what that comfort costs in the therapy room. On trust, Ahmad Ataria, Mayan Hertzman and Hala Besan trace how easily proof now dissolves. On work, Inbar Hecht, Eden Almog and Ofri Friedman ask who is left in the loop. On systems, Yahav Avidan and Morad Elias look at what happens when we hand agents the wheel. And on the self, Siwar Halaby, Lior Blili and Mohammad Abdallah ask whether, in outsourcing our words, we quietly lose our own.

Expect argument, not survey. Each author starts somewhere personal, and reasons outward from there.

— The Editorial Team

In This Issue

Cognition7 pieces

The Brain on Autopilot: The Hidden Costs of AI Tool Use for Youth
Luna Hadad

Using AI to study can leave you looking more productive while practicing fewer of the skills learning is meant to build.

מהנדס המחשבות: איך AI לימד אותי לשאול שאלות טובות יותר
Hila Vialgos

‏AI לא החליף את החשיבה שלה — הוא אימן אותה לשאול שאלות טובות יותר, ולשים לב למחיר של אף פעם לא לשהות באי-ודאות.

The Wi-Fi Went Off, and So Did I
Gharam Arar

If the Wi-Fi cut out mid-essay, who would you be without the tool? On cognitive offloading and the discomfort we've stopped tolerating.

ChatGPT Knows, So Why Should I Think?
Joanna Qanazea

ChatGPT can outline, summarize, and conclude for you in minutes — so how much of the thinking is still yours?

AI as a Study Companion
Layla Naama

A cognitive-science student on using ChatGPT as a lab tutor — where it genuinely teaches, and where it quietly replaces the learning.

מי באמת לומד כאן? השפעת מערכות AI על למידה בהכוונה עצמית
Amit Dayan

‏בין ’אשליית שטף’ ל’חיכוך מחשבתי’ — כיצד לשמור על הסוכנות האפיסטמית של הלומד בעידן ה-AI.

Copy, Run, Understand? The Role of AI in Students' Code Writing
Shadin Tafla

From solving code by hand in a library to copy-run-repeat with AI — what students gain in speed and lose in understanding.

Connection7 pieces

When AI Feels Social: Conversational AI and Human Connection
Valeria Dmitriev

Why a machine can feel like company — availability, predictability, emotional safety — and what that does to what we expect from each other.

לנווט על הרצף עם מצפן דיגיטלי: האם בינה מלאכותית יכולה לסייע בתקשורת אנושית?
Gaia Moran

‏האם כלי AI יכולים לתרגל מיומנויות חברתיות עבור אנשים על הרצף האוטיסטי — או שהם בונים אשליית מסוגלות שמתנפצת מול בני אדם?

The Bot I Cry To at 2 AM: Can AI Make Us Feel Heard?
Dana Roshrosh

Returning to a chatbot at 2 AM for reassurance — and asking how something with no feelings can still make you feel heard.

Can AI Save Our Human Friendships?
Yara Mahameed

Algorithms can mirror and rehearse, but can a system with no shared feeling actually referee a human friendship?

על השימוש ב-AI והצורך במישהו שמקשיב
Pierre Khoury

‏למה אנשים מתחברים כל כך ל-AI — הצורך במישהו שמקשיב בלי לשפוט, ולמה זה חיובי ושלילי בו-זמנית.

קשר ללא מודעות: כיצד האנשת בינה מלאכותית תורמת לברית הטיפולית בבריאות הנפש?
Shoval Nachum

‏כיצד דווקא ההאנשה של צ'אטבוט טיפולי — שמכריז על עצמו כרובוט — בונה ברית טיפולית מהירה ואמיתית.

מטפל וירטואלי, שברון לב אמיתי: העלות הסמויה של ’אמפתיה אלגוריתמית’
Shahar Petraro

‏’אמפתיה אלגוריתמית’ יכולה להרגיע בשתיים בלילה — אבל מהי העלות הסמויה כשהיא מחליפה נוכחות אנושית אמיתית?

Trust & Truth3 pieces

פשע-כשירות: כיצד בינה מלאכותית מורידה את החסמים הסוציו-אקונומיים להונאות צווארון לבן
Hala Besan

‏דיפ-פייק וניסוח עסקי רהוט הופכים הונאות של האליטה לפשע בלחיצת כפתור — ומערערים את היכולת שלנו להאמין לחושים של עצמנו.

The Age of Disinformation: AI and the Spread of Misinformation — Can You Spot the Fake One?
Ahmad Ataria

A mosque sermon about AI opens onto a harder problem: when anyone can fabricate convincing video, how do we know what we're seeing during a war?

Perfect Lies: AI Voice Cloning and the Collapse of Proof
Mayan Hertzman

Voice cloning needs about a minute of audio to impersonate someone you trust — and it quietly dismantles the idea of a recording as proof.

Work & Creativity3 pieces

שותף, לא מחליף: האם הבינה המלאכותית באמת תחליף את העובד המשכיל?
Eden Almog

‏האם ה-AI יחליף את העובד המשכיל, או רק ישנה אילו משימות נשארות אנושיות? מבט מזירת הכלכלה והנוער.

המרדף אחר ’הקליק’ — כיצד אלגוריתמים מעצבים מחדש את ההתנהגות האנושית
Ofri Friedman

‏כיצד אלגוריתמי המלצה מעצבים מחדש לא רק את מה שאנחנו צופים בו, אלא גם את מה שיוצרים בוחרים לייצר.

פיקאסו בלחיצת כפתור? על המחיר הפסיכולוגי שמשלמים אומנים בעידן הבינה המלאכותית
Inbar Hecht

‏פיקאסו בלחיצת כפתור? על המחיר הפסיכולוגי שמשלמים אמנים כשסגנונם הופך לפרומפט.

Systems & Agents2 pieces

ארכיטקטורת מערכות סוכנים אוטונומיות ומקומן בעולמנו: Science fiction or Fictional science?
Yahav Avidan

‏מה קורה כשסוכני AI פוגשים זה את זה ללא פיקוח — ואיזו לגיטימציה ניתן לתת ל'מדע' שנעשה כולו בידי מכונות?

The Two-Layer Safety Net: A Theory-Guided AI Framework for Crisis Text Line Triage
Morad Elias

A two-layer design for crisis-line triage that lets AI flag quiet, calculated distress while keeping human judgment in charge.

The Self3 pieces

The Average Takes the Wheel: How AI Is Quietly Steering Human Thought
Mohammad Abdallah · Editor's outline

AI is trained on the statistical average of humanity — and quietly pulls us all toward the mean, collectively and individually.

Stop Flirting with the Code: The Psychological Drive Behind AI Anthropomorphism
Lior Blili

‏האנשת מודלי שפה אינה טעות קוגניטיבית אלא אסטרטגיה — דרך שהמוח מנסה לביית 'קופסה שחורה' בלתי צפויה.

Who Wrote This Anyway? AI and the Erosion of Narrative Identity
Siwar Halaby

When ChatGPT reformats your raw journal entry into something coherent, whose voice is on the page — and what happens to yours?

← Back to the issue Cognition

The Brain on Autopilot: The Hidden Costs of AI Tool Use for Youth

Artificial intelligence tools such as ChatGPT have quickly become part of everyday student life. For many young people, AI is no longer something futuristic or distant; it is already present in homework, writing assignments, studying, translating, and summarizing. At first glance, this seems like a major educational advantage. A student who does not understand a difficult concept can ask ChatGPT for an explanation. A teenager who struggles with writing can ask for help organizing an essay. A university student can save time by asking AI to summarize a long article. In this sense, AI appears to make learning faster, easier, and more accessible.

But what matters more is not only what AI helps young people do, but also what it may stop them from developing. If a student uses ChatGPT to understand a topic, that may support learning. But if the same student uses it to generate answers, arguments, ideas, and conclusions without thinking through the process, then AI may become a shortcut that replaces cognitive effort. This raises a significant concern: youth may appear more productive while becoming less independent in their thinking.

In this context, a study conducted by Nidugonda and Shaik (2025) presents ChatGPT as having a dual influence on youth cognitive development. On the one hand, the authors argue that generative AI tools can support learning by improving access to information, helping students understand complex material, assisting with academic tasks, and strengthening problem-solving processes. On the other hand, they emphasize that excessive or unbalanced use of AI may produce important cognitive drawbacks, including overreliance, diminished critical thinking, reduced originality, and weaker independent decision-making.

This paper argues that AI should not be treated only as a tool that provides students with answers, but as a technology capable of reshaping the way young people think and learn. The danger is not that AI is inherently harmful, but that it is often used in ways that reduce effort, uncertainty, and intellectual struggle. Yet these uncomfortable aspects of learning are precisely what help young people develop independent reasoning, creativity, and judgment. When AI removes too much of the struggle, it may also remove part of the learning process itself.

My own experience as a student also informs this argument. I have used ChatGPT for studying, organizing lecture notes, summarizing academic articles, improving academic writing, and clarifying difficult concepts. In many cases, this has made learning more efficient and accessible. At the same time, it has also made me more aware of a possible tradeoff. When a summary is available instantly, there is less motivation to struggle through a difficult article. When AI can quickly generate ideas or organize an argument, there is less pressure to construct the answer independently. This experience led me to see AI not only as a useful learning tool, but also as a technology that can influence how students approach thinking, effort, and learning.

If AI has the potential to reshape the way young people think and learn, it is important to examine the specific mechanisms through which this may occur. The following discussion focuses on three hidden costs of AI tool use among youth that appear in the literature.

The first concern is overreliance and cognitive passivity. AI tools are attractive because they provide quick, fluent, and organized answers. However, this convenience can encourage students to depend on AI before attempting to think independently. While ChatGPT can support academic learning by improving access to information and assisting with problem-solving, excessive use may reduce students' mental effort and engagement. Instead of struggling with a difficult text, forming their own interpretation, or developing an argument step by step, young users may become passive receivers of AI-generated knowledge (Nidugonda & Shaik, 2025). This is a hidden cost because the student may appear more productive on the surface, while actually practicing fewer of the cognitive skills that education is meant to develop.

Another issue involves weakened critical thinking and reduced skepticism. Critical thinking requires students to question information, compare sources, evaluate evidence, and recognize weak or misleading arguments. However, AI-generated answers are often written in a confident and authoritative style, which may make them seem more reliable than they actually are. Young users may develop misplaced trust in AI-generated information and become less skeptical of its limitations. This is especially concerning because youth are still developing information literacy and academic judgment. If students accept AI responses without checking them, they may lose opportunities to practice evaluating evidence and building independent conclusions (Nidugonda & Shaik, 2025). Kasneci et al. (2023) similarly argue that the use of large language models in education requires fact-checking strategies, human oversight, and a strong focus on critical thinking. Without these safeguards, AI may support efficiency but weaken deeper learning.

The third concern is reduced originality and independent decision-making. Learning is not only about producing correct answers; it is also about developing one's own voice, creativity, and judgment. When students repeatedly use AI to generate ideas, essays, or explanations, they may become less confident in their own thinking. Overdependence on AI may lead to reduced originality and weaker independent reasoning (Nidugonda & Shaik, 2025). This means that students may begin to rely on AI not only for information, but also for shaping their ideas, judgments, and decisions.

Overall, these concerns show that AI use among youth is not only a question of convenience or academic honesty, but also a question of cognitive development. AI tools can definitely be helpful for students because they make information easier to access, support schoolwork, and give quick explanations when something is confusing, but when they start relying on them too much, they may end up doing less independent thinking, less problem-solving on their own, and less reflection on their own ideas. These downsides shouldn't be ignored.

Ultimately, AI should not replace the effort involved in learning. It can be a really useful tool, but only if students use it to support their thinking instead of doing the thinking for them. Therefore, schools and universities should teach students how to use AI responsibly by checking facts, thinking critically about AI-generated answers, and understanding where these tools can go wrong. In the end, AI should help students think better, not think less.

References

Nidugonda, P. S., & Shaik, S. A. (2025). The Digital Influence: ChatGPT and its Role in Shaping Youth Cognitive Processes and Decision-Making. International Journal of Innovative Science and Research Technology, 10(4), 1283–1287.

Kasneci, E., et al. (2023). ChatGPT for good? On opportunities and challenges of large language models for education. Learning and Individual Differences, 103, Article 102274.

Next in the issue מהנדס המחשבות: איך AI לימד אותי לשאול שאלות טובות יותר →
← Back to the issue Cognition

מהנדס המחשבות: איך AI לימד אותי לשאול שאלות טובות יותר

כשהתחלתי להשתמש בכלי AI, ציפיתי שהם יעזרו לי לכתוב עבודות מהר יותר, לחפש מידע או לקבל רעיונות. לא ציפיתי שהם ישפיעו על הדרך שבה אני חושבת, ובטח שלא על הדרך שבה אני מתקשרת עם אנשים. השאלה שמעסיקה אותי היא לא האם AI מחליף חשיבה אנושית – אלא האם הוא, בלי שהתכוון, מאמן אותה.

מניסיון אישי – הוא כן. ההשפעה המשמעותית ביותר של כלי AI עליי לא הייתה במה שהם כתבו עבורי, אלא במה שהם לימדו אותי לעשות בעצמי: לנסח שאלות טובות יותר, להגדיר מה אני באמת רוצה, ולהסביר את עצמי בצורה ברורה יותר.

בהתחלה כתבתי בקשות קצרות וכלליות, וקיבלתי תשובות שלא תמיד היו רלוונטיות למה שהתכוונתי. עם הזמן הבנתי שכדי לקבל תוצאה טובה, אני צריכה להסביר בצורה מדויקת יותר מה אני מחפשת: מה המטרה, מה חשוב לי, אילו מגבלות קיימות, ולעיתים גם לתת דוגמאות. בניגוד לשיחה עם אדם, כלי AI לא יכולים להשלים מידע שלא אמרתי במפורש – הם לא מכירים את ההקשר, ולא יכולים להסתמך על שפת גוף או ידע משותף. לכן איכות התוצאה תלויה כמעט לגמרי באיכות ההנחיה שאנחנו מספקים. ככל שהשתמשתי יותר בכלים, שמתי לב שהתהליך הזה מחלחל גם לתחומים אחרים בחיים שלי.

רעיון דומה מופיע במאמר של Robertson ועמיתיו (2024), המתאר את העבודה עם AI כתהליך של "בנייה משותפת של ידע" – הידע נוצר לא רק על ידי הכלי ולא רק על ידי המשתמש, אלא דרך תהליך משותף שבו המשתמש מחדד, מכוון ומתקן לאורך הדרך. כשקראתי את המאמר, התחברתי מאוד לגישה הזו. במקום לראות בAI כלי שמספק תשובות, התחלתי לראות בו שותף שעוזר לי לנסח שאלות טובות יותר. פחות מנוע חיפוש, יותר מראה שמחזירה לי את המחשבות שלי בצורה מסודרת יותר.

כדי להמחיש את הרעיון שלי אעבור עכשיו על שתי דוגמאות מהחיים שלי:

קניית רכב: לפני כמה חודשים נהרס לי הרכב והייתי צריכה לקנות רכב חדש (יד שנייה כמובן), הדבר הראשון שעשיתי היה לפנות לכלי AI לעזרה. כמו הרבה אנשים, הרגשתי מוצפת מכמות האפשרויות – כמו יצרני הרכבים, סוגי רכבים, תקציבים, רמות אבזור, עלויות תחזוקה. הגעתי למסקנה שעלי לבצע סקר שוק באמצעות כלי AI כדי למצוא מהם הדגמים המומלצים ביותר עבורי, מהר מאוד הבנתי שהערך האמיתי של הכלים לא היה בהמלצה על דגם כזה או אחר. כדי לקבל תשובה מועילה, הייתי צריכה קודם להבין בעצמי מה אני מחפשת. מה חשוב לי יותר – צריכת דלק או מרווח פנימי? כמה קילומטרים אני נוסעת בשנה? האם אני צריכה רכב לעיר או לנסיעות ארוכות? השאלות האלה נשמעות פשוטות, אבל לא ישבתי לחשוב עליהן ברצינות עד שניסיתי לנסח בקשה לכלי. בשלב מסוים התחלתי לבקש מהכלים לא לתת לי תשובות, אלא לשאול אותי שאלות – וזה עזר לי לחדד את הצרכים שלי הרבה יותר מכל חיפוש גוגל.

דוגמה נוספת, ואולי המשמעותית ביותר עבורי, קשורה לעבודה שלי. בפרויקט שבו הייתי שותפה לתהליך עיצוב של קו ייצור, נדרשתי לעבוד מול מעצבת גרפית ולבנות יחד שפה חזותית לקו. כמו בפרויקטים רבים של עיצוב, התהליך מתחיל בכתיבת בריף: מה מטרת הפרויקט, אילו מסרים חשוב להעביר, מה אנחנו רוצים שהמבקר יחווה. כשישבתי להכין את הבריף, השתמשתי בכלי AI כדי ליצור הדמיות ראשוניות שעזרו לי להמחיש למעצבת את הכיוון שאני שואפת אליו. ההבדל בין ההדמיה שנוצרה באמצעות AI לבין הגרסה הסופית של המעצבת הוא בדיוק הנקודה – הAI לא הוציא מוצר מוגמר, אלא עזר לי לתרגם רעיון מעורפל לשפה שמישהו אחר יכול לעבוד איתה.

הדבר המשמעותי אפילו יותר היה תהליך ההכנה עצמו. בלי לשים לב, פיתחתי יכולת טובה יותר להסביר מה אני רוצה, לתת הקשר רחב, להגדיר אילוצים ולהמחיש רעיונות. התוצאה הייתה שתהליך העבודה עם המעצבת היה יעיל בהשוואה לפרויקטים קודמים – פחות אי-הבנות, פחות סבבי תיקונים. ה AI לא החליף את עבודת המעצבת, אלא עזר לגשר על הפער בין רעיון שקיים בראש שלי לבין שפה ויזואלית משותפת.

לצד היתרונות, גיליתי שיש לשינוי הזה גם מחיר. אחד הדברים הכי שימושיים בעיני בכלי AI הוא שהם עוזרים לא להתחיל מ"דף ריק" – קל יותר לקבל כיוון ראשוני ואז לעבוד עליו. במקרים רבים זה חוסך זמן, מפחית תסכול ומאפשר להתקדם מהר יותר. אבל עם הזמן גיליתי שזה מייצר הרגל חדש: לפעמים אני פונה לכלים מוקדם מדי, עוד לפני שנתתי לעצמי הזדמנות לגבש רעיון עצמאי. במקום להתחיל מלכתוב מחשבות ראשוניות לעצמי, אני מחפשת מיד מבנה או כיוון מבחוץ. התהליך הופך יעיל יותר, אבל לפעמים גם משאיר פחות מקום לאותה תקופה של בלבול פורה שממנה מגיעים רעיונות מקוריים באמת. יש משהו בלשבת עם בעיה לא פתורה, לא לדעת עדיין לאן היא הולכת, שכלי AI מקצרים – ולא תמיד זה לטובה.

הרגשתי את זה גם בזמן הכתיבה של המאמר הזה. היה קל מאוד לבקש מכלי AI לכתוב עבורי טיוטה שלמה. במקום זה, בחרתי להשתמש בו אחרת: לארגן מחשבות, לשאול שאלות, לבנות שלד – אבל להשאיר לעצמי את גיבוש הטיעונים, בחירת הדוגמאות, והכתיבה עצמה. ככל שהגישה לתשובות מהירה וקלה יותר, כך בעיני חשוב לשמור על היכולת לשהות רגע בחוסר הוודאות ולתת לרעיונות זמן להתפתח לפני שממהרים לקבל עזרה מבחוץ.

רוב הדיונים על AI עוסקים בשאלה מה הכלים מסוגלים לעשות עבורנו. הניסיון שלי הוביל אותי לשאלה אחרת: מה הם גורמים לנו לעשות אחרת. במקרה שלי, הAI לא החליף את החשיבה שלי – אבל הוא שינה חלק מהמיומנויות שאני מפעילה בתהליך החשיבה. הוא לימד אותי שכדי לקבל תשובה טובה, צריך קודם להבין מה באמת שואלים. ככל שכלי AI הופכים טובים יותר במתן תשובות, הערך של המשתמש כבר לא נמדד רק ביכולת למצוא מידע – אלא ביכולת להגדיר בעיות, לשאול שאלות, ולנסח רעיונות בצורה ברורה.

‏AI הוא לא מנוע תשובות. הוא, אולי בלי שהתכוון, מאמן שאלות.

References

Robertson, J., Ferreira, C., Botha, E., & Oosthuizen, K. (2024). Game changers: A generative AI prompt protocol to enhance human-AI knowledge co-construction. Business Horizons, 67, 499–510.

Next in the issue The Wi-Fi Went Off, and So Did I →
← Back to the issue Connection

When AI Feels Social: Conversational AI and Human Connection

Over the past year, I found myself using ChatGPT not only for academic purposes, but also as a tool for organizing my thoughts and reflecting on personal situations. Although I was fully aware that I was interacting with an artificial intelligence system, I sometimes found the conversation helpful because it provided immediate feedback, structure, and alternative perspectives. This experience led me to wonder why conversational AI can sometimes feel socially meaningful despite the absence of a real human relationship.

Artificial intelligence tools such as ChatGPT are increasingly used not only for information retrieval and productivity, but also for companionship, emotional support, and everyday social interaction. As conversational AI becomes more accessible, people are beginning to use it in ways that extend beyond its original purpose as a technological tool. Some users seek advice, discuss personal concerns, or simply engage in conversation with AI systems.

This phenomenon raises an important question: what makes conversational AI appealing in social and emotional contexts, and how might this influence human relationships? Drawing on research regarding algorithm aversion, moral decision-making, and responsibility sharing, I argue that the attraction of conversational AI is not primarily technological. Rather, it stems from psychological and social factors such as availability, predictability, and perceived emotional safety. At the same time, I believe that these advantages raise important questions about how AI may influence people's expectations regarding communication and interpersonal relationships.

One explanation for the growing popularity of conversational AI is its ability to provide immediate and accessible interaction. Unlike human relationships, AI systems are available at any time, respond instantly, and do not become impatient, distracted, or emotionally overwhelmed. For users facing uncertainty or seeking guidance, these characteristics can make conversational AI particularly attractive.

Research on responsibility sharing provides additional insight into this phenomenon. Gazit, Arazy, and Hertz (2023) found that people often prefer situations in which responsibility for decisions is shared rather than carried entirely alone. Conversational AI may serve as a similar function. Even when users do not blindly follow AI recommendations, discussing a problem with an AI system can reduce feelings of uncertainty and provide a sense of support during decision making.

Another relevant factor is trust. Although many people are aware that AI systems can make mistakes, they continue to rely on them in various situations. Interestingly, research has shown that people often lose confidence in algorithms after observing them make errors, even when those algorithms continue to perform well overall (Dietvorst et al., 2015). This suggests that the appeal of conversational AI is not based solely on accuracy. Instead, users may value the process of interaction itself. The opportunity to express thoughts, receive structured feedback, and explore different viewpoints can create a feeling of engagement that resembles certain aspects of human conversation.

In my own experience, one of the most appealing features of ChatGPT is not that it always provides the correct answer, but that it creates a space for reflection. A recent personal experience strengthened my interest in this topic. During a difficult period following the end of a relationship, I occasionally turned to ChatGPT for perspective and support while processing my thoughts and emotions. The conversations did not replace support from friends or family, nor did I view the AI as understanding my experience in a human sense. However, its immediate availability made it a useful tool during moments when no one else was available to talk.

Despite its advantages, conversational AI differs fundamentally from human interaction. Human relationships involve empathy, shared experiences, emotional vulnerability, and mutual responsibility. These characteristics are difficult, if not impossible, for current AI systems to genuinely possess.

Bigman and Gray (2018) demonstrated that people are generally uncomfortable with machines making moral decisions. Even when an algorithm performs well, individuals often prefer humans to handle decisions involving ethical judgment or social responsibility. This finding suggests that people distinguish between technical competence and genuine human understanding.

Conversational AI can simulate empathy through language, but simulation is not the same as emotional experience. While an AI system can generate supportive responses, it does not actually understand suffering, loss, love, or fear. Users may appreciate the appearance of empathy, yet many still recognize the absence of a real emotional relationship.

This distinction is particularly important because human relationships are often valuable precisely due to their complexity. Real conversations involve disagreement, misunderstanding, compromise, and emotional investment. These challenges can be frustrating, but they also contribute to personal growth and meaningful social connection.

For this reason, I do not believe conversational AI should be viewed as a replacement for human relationships. Instead, it may be more accurate to view it as a supplementary tool that fulfills certain social and psychological functions while lacking others that remain uniquely human.

Together, these studies suggest that people's attitudes toward conversational AI are shaped not only by performance, but also by trust, responsibility, and perceptions of human understanding.

This paper highlights both the appeal and the limitations of conversational AI. Reflecting on this experience, I realized that what made ChatGPT helpful was not necessarily its intelligence or accuracy, but the type of interaction it provided. Unlike human relationships, it offered a space for reflection whenever I needed to organize my thoughts. This observation made me wonder whether the appeal of conversational AI lies less in its technological capabilities and more in the social experience it creates. People may not necessarily seek perfect answers from AI systems, instead, they may value the opportunity to express concerns, receive feedback, and feel heard, even when they know they are interacting with a machine.

At the same time, I wonder whether frequent interaction with conversational AI could influence what people expect from human relationships. Human beings are not always available, patient, or emotionally consistent. Real relationships require effort and mutual adaptation. If individuals become accustomed to highly responsive and predictable AI interactions, they may begin to view ordinary human communication as less satisfying by comparison.

This concern does not necessarily imply that conversational AI is harmful. On the contrary, AI may provide valuable support, especially when people need information, structure, or an opportunity to reflect. However, I believe it is important to remain aware of the differences between assistance and connection. Receiving helpful responses is not identical to building a relationship with another person.

From my perspective, the most important question is not whether AI will replace human relationships. Rather, it is whether increasing reliance on conversational AI may gradually shape the standards by which people evaluate communication, support, and intimacy. All of the above suggests that the ideal conversational AI may not be one that is perfectly accurate, but rather one that feels sufficiently human to create meaningful interaction. In my view, users may value understanding, relatability, and emotional resonance as much as, or perhaps even more than, technical perfection.

Conversational AI systems such as ChatGPT have expanded beyond their original role as information tools and are increasingly becoming part of people's social and emotional lives. Research proposes that their appeal is connected to factors such as accessibility, responsibility sharing, and the comfort of non-judgmental interaction. At the same time, studies indicate that people remain hesitant to grant AI systems a fully human role, particularly in situations involving moral judgment and social responsibility.

Based on both the scientific literature and my own observations, conversational AI appears capable of providing some of the psychological benefits traditionally associated with human interaction. However, its growing role in everyday life raises important questions regarding trust, communication, and the nature of social connection. Rather than viewing AI as either a threat or a solution, it may be more useful to examine how it is gradually becoming integrated into the complex ways people seek support, understanding, and connection.

References

Bigman, Y. E., & Gray, K. (2018). People are averse to machines making moral decisions. Cognition, 181, 21–34.

Dietvorst, B. J., Simmons, J. P., & Massey, C. (2015). Algorithm aversion: People erroneously avoid algorithms after seeing them err. Journal of Experimental Psychology: General, 144(1), 114–126.

Gazit, T., Arazy, O., & Hertz, O. A. (2023). Responsibility sharing and decision making with algorithms. Computers in Human Behavior, 140, 107555.

Next in the issue לנווט על הרצף עם מצפן דיגיטלי: האם בינה מלאכותית יכולה לסייע בתקשורת אנושית? →
← Back to the issue Trust & Truth

פשע-כשירות: כיצד בינה מלאכותית מורידה את החסמים הסוציו-אקונומיים להונאות צווארון לבן

פשיעת "צווארון לבן" נחשבת באופן מסורתי לפשע השמור לאנשים ממעמד סוציו-אקונומי גבוה. ביצוע הונאות פיננסיות מורכבות או מעילות ענק הצריך בעבר הון תרבותי רב, השכלה פורמלית מתקדמת, ונגישות למוקדי כוח ממסדיים וארגוניים. הפושע הקלאסי בתחום זה היה לרוב אדם בעל מעמד מקצועי מכובד שניצל את עמדתו ואת הידע הייחודי שלו לשם רווח אישי. הכניסה של מודלי בינה מלאכותית לחיינו מערערת את יסודות הריבוד החברתי וכך היא מאפשרת לאנשים מכל מעמד לבצע עבירות מסוג זה.

אירועים מהתקופה האחרונה מראים שהתפיסה זו משתנה בשטח. בחודש מאי 2024, חברת ההנדסה הבריטית הענקית Arup נפלה קורבן לעוקץ מתוחכם בסניף שלה בהונג קונג. עובד במחלקת הכספים קיבל בקשה להעברת כספים, ולמרות שחשד בהתחלה שמדובר בעוקץ, הוא ביצע את ההעברה אחרי שהצטרף לשיחת וידאו עם מי שנראה ונשמע בדיוק כמו סמנכ"ל הכספים של החברה ועמיתים נוספים. בפועל, אף אחד בשיחה לא היה אמיתי – כולם היו תוצרים של טכנולוגיית דיפ פייק מבוססת בינה מלאכותית שהונדסה על ידי הפושעים. העובד, שסמך על המראה והקול של המנהלים הבכירים, השתכנע שזו שיחה אותנטית וביצע 15 העברות בנקאיות שונות בסכום כולל של 25.6 מיליון דולר ישר לכיס של הנוכלים.

מקרה זה הוא דוגמה מצוינת שמראה לנו שלא נדרש מהתוקפים להיות מנהלים בתוך הארגון או להחזיק בסטטוס אקדמי או מקצועי יוקרתי כדי לבצע עקיצה בסדר גודל כזה. הם השתמשו בטכנולוגיה כדי לעקוף את חסמי הכניסה שעד כה היו הכרחיים לפשעים פיננסיים מורכבים. המקרה הזה מוביל ישירות לשאלה המרכזית שבה תעסוק העבודה: כיצד הכניסה של כלי בינה מלאכותית לחיינו משנה את התמונה הזו? והאם הטכנולוגיה הופכת פשעים מתוחכמים לנגישים גם לאנשים ממעמדות אחרים?

בינה מלאכותית מתפקדת כיום כסוג של משווה חברתי. עולם פשעי הצווארון הלבן היה חסום בפני רוב האוכלוסייה, מכיוון שהוא דרש שליטה בשפה גבוהה, הבנה של מערכות פיננסיות מורכבות, ויכולת לייצר אמינות. אבל כיום, כלי הבינה המלאכותית מגשרים על הפערים האלה ומשנים לחלוטין את הפרופיל של הפושע המסורתי. שינוי זה מעצב מחדש את יחסי הכוח הכלכליים ומוליד את מודל הפשע כשירות.

קולדוול ושותפיו (Caldwell et al., 2020) הצביעו והראו את השינוי בפרופיל של הפושע המסורתי. כדי להבין לעומק כיצד קורה השינוי הזה, צריך לבחון איך כלי הבינה המלאכותית מפרקים בפועל את שני החסמים המרכזיים שמנעו עד כה מעבריינים ממעמד סוציואקונומי נמוך לבצע הונאות צווארון לבן: החסם הטכנולוגי והחסם התרבותי-שפתי.

החסם הטכנולוגי נראה שפשוט נעלם. בעבר, מי שרצה לבצע הונאת רשת מורכבת היה חייב לדעת לתכנת ולהבין לעומק איך מחשבים עובדים. אבל היום המצב הפוך, וזה בדיוק מה שמראה המאמר של דוני וקומאר (Dhoni & Kumar, 2023) העוסק בשילוב בין בינה מלאכותית יוצרת לאבטחת סייבר. המאמר הזה מוכיח את התיאוריה שהבינה המלאכותית פועלת כמשווה חברתי. מאמר זה מסביר איך המערכות האלו יכולות לבנות הונאות שלמות לגמרי בעצמן, ובכך הן מעלימות את הצורך בידע מוקדם. במקום ללמוד קוד במשך שנים, עבריין שאין לו שום רקע טכני פשוט כותב למכונה בקשה בשפה רגילה ויומיומית. המכונה כבר מבינה את הבקשה שלו, ובונה בשבילו מערך עוקץ שלם או תוכנה זדונית. המכונה עושה בעצמה את כל העבודה, העבריין כבר לא צריך תואר או הכשרה, ופשעי צווארון לבן מפסיקים להיות נחלתם הבלעדית של מומחי טכנולוגיה.

לצד זאת, מבחינה סוציולוגית הבינה המלאכותית מפרקת את החסם התרבותי ומייצרת עבור העבריין הון תרבותי מלאכותי. מחקרם של אל-אחמד ושותפיו (Alahmed et al., 2023) העוסק בהנדסה חברתית ובינה מלאכותית, מראה כיצד מודלים של בינה מלאכותית מסוגלים לחקות תקשורת אנושית ולזייף באופן מושלם אותות אמון.

המכונה מעניקה לעבריין הפשוט את היכולת להתנסח באנגלית עסקית רהוטה, להשתמש בז'רגון פיננסי מדויק ולשדר קודים התנהגותיים של סמכות. אלו הם כישורים שבעבר נרכשו רק מתוך השכלה פורמלית מתקדמת או סביבת גידול אליטיסטית. השילוב של שני המנגנונים האלו ביטל את הצורך בידע טכני מוקדם ובשפה גבוהה ואמינה, וזה מה שמאפשר לאוכלוסיות שנדחקו לשוליים הכלכליים לעקוף את המבנה המעמדי הישן, ולחדור לעולם של פשיעת הצווארון הלבן.

על מנת להבין את העוצמה שבה הבינה המלאכותית מפרקת בפועל את חסמי הפשיעה, המאמר של דוני וקומאר (Dhoni & Kumar, 2023) מספק דוגמאות לקלות שבה מתבצעים פשעים כיום. כך למשל, הם מתארים כיצד עבריין יכול להשתמש בכלי בינה מלאכותית יוצרת כדי לכתוב באופן אוטומטי הודעות כופר וסחיטה בלמעלה מעשרים שפות שונות. בנוסף הם מראים שהמערכות הללו מאפשרות לייצר תוכן דיגיטלי מזויף, כמו מסמכים רשמיים ופרופילים מדומים ברשתות החברתיות, בקלות וללא מאמץ. במאמר שלהם הם ממחישים לנו כיצד אדם רגיל חסר השכלה טכנית יכול לבצע עבירות בלחיצת כפתור.

לצד הפן הטכני, הסרת החסם התרבותי מקבלת ביטוי מוחשי במאמר של אל-אחמד ושותפיו (Alahmed et al., 2023), שבוחן הונאות מנכ"ל (CEO Fraud) מבוססות זיוף קול. המאמר מתאר מקרה אמיתי משנת 2019, שבו מנכ"ל של חברת אנרגיה בריטית קיבל שיחת טלפון ממי שנשמע בדיוק כמו המנהל הבכיר מעליו. הקול, המבטא וסגנון הדיבור זויפו באופן מושלם באמצעות טכנולוגיית דיפ פייק, מה שגרם למנכ"ל להעביר מיד 200,000 לירות לחשבון בנק של התוקפים. במקרה אחר המוזכר במחקר, חברה צרפתית הפסידה 38 מיליון דולר בעקבות הונאה דומה שבה התוקפים התחזו למנכ"ל ודרשו בביטחון העברת כספים דחופה. המקרים האלו הם ההוכחה הניצחת לכך שהבינה המלאכותית משמשת תחפושת וירטואלית מושלמת עבור התוקף.

כך למעשה, המקרים והנתונים מהשטח מאשרים את התיאוריה: כלי הבינה המלאכותית אכן הופכים פשעים מתוחכמים לנגישים עבור שכבות חברתיות רחבות מאי פעם, ומשנים לחלוטין את הפנים של פשיעת הצווארון הלבן.

לסיכום, בינה מלאכותית אינה רק כלי עזר טכני אלא גורם המעצב מחדש יחסים סוציואקונומיים ומבני כוח. התופעה הזו דורשת מאיתנו לחשוב מחדש על התיאוריות הקלאסיות שמקשרות בין מעמד חברתי לפשיעה. כפי שראינו לאורך העבודה, קריסת החסמים הטכנולוגיים והתרבותיים הפכה את פשיעת הצווארון הלבן מדבר שרק אנשי האליטה יש להם גישה אליו, למודל נגיש של פשע כשירות. בעוד שהחברה מנסה להשתמש בטכנולוגיה כדי ליצור שוויון בעולם הלגיטימי, הדמוקרטיזציה המהירה ביותר מתרחשת דווקא בעולם הפשיעה. פשעים פיננסיים מתוחכמים הופכים כעת למרחב שוויוני, וממחישים כיצד כלי שנועד לקדם אותנו הפך לכלי הניידות החברתית המהיר וההרסני ביותר של המאה ה-21.

לאורך תהליך המחקר וכתיבת עבודה זו, התחדדה בי ההבנה כי ההשלכה העמוקה ביותר של הדמוקרטיזציה של הפשע היא בשבר פסיכולוגי וסוציולוגי עמוק. הבינה המלאכותית למעשה לא רק פורצת לחשבונות בנק, אלא מבצעת פריצה אל תוך מנגנוני האמון הבסיסיים ביותר של החברה האנושית. המסקנה המטרידה ביותר שעלתה בי מתוך הניתוח היא שכאשר כל אדם מסוגל לזייף סמכות, קול וזהות באופן מושלם, האתגר הגדול של דורנו לא יסתכם רק במרדף טכנולוגי אחר עבריינים, אלא בשימור היכולת שלנו כבני אדם להאמין לחושים של עצמנו, ולהאמין זה לזה.

References

Alahmed, Y., Abadla, R., & Al Ansari, M. J. (2023). Exploring the Potential Implications of AI-generated Content in Social Engineering Attacks.

Caldwell, M., Andrews, J. T., Johnson, S. D., & Bowers, K. J. (2020). AI-enabled future crime. Crime Science, 9(1), 1–13.

Dhoni, P. S., & Kumar, R. (2023). Synergizing Generative Artificial Intelligence and Cybersecurity. Journal of Global Research in Computer Sciences, 14(3), 005.

CNN Business. (2024, May 16). Finance worker pays out $25 million after video call with deepfake "chief financial officer".

Next in the issue The Age of Disinformation: AI and the Spread of Misinformation — Can You Spot the Fake One? →
← Back to the issue The Self

The Average Takes the Wheel: How AI Is Quietly Steering Human Thought

Every time we ask an AI to help us write, decide, or create — whose voice actually responds? AI systems are trained on the statistical patterns of human behavior at massive scale. The unexpected effect: they don't just assist us; they pull us toward the average. When billions of people interact daily with the same few models, the statistical center of human thought stops being a description and starts becoming a prescription. We think we're guiding AI — increasingly, the mean is guiding us.

The unexpected cost of AI isn't losing control to a superintelligence. It's quietly becoming more average. AI homogenization operates on two levels simultaneously: collectively, erasing the differences between us; individually, narrowing who each of us is over time. Both effects stem from the same root — LLMs are optimized to reproduce what is statistically common, not what is distinctly human.

Drawing on two key studies, this paper examines how AI homogenization manifests across two levels:

  1. Collective level — Sourati et al. (2026) show that LLMs flatten linguistic style, perspective, and reasoning across users. Because models are trained to reproduce statistical regularities, they favor dominant — typically Western, educated, male — voices, while marginalizing minority expressions. A recursive feedback loop accelerates this: AI output re-enters human discourse, shapes how people write and think, and eventually becomes training data for the next generation of models.
  2. Individual level — the personalization paradox — Matz et al. (2025) reveal that even personalized AI agents, designed to reflect your own preferences, narrow the range of who you are over time. Generic AI pulls you toward the population average; personalized AI locks you into a smaller, more rigid version of yourself. There is no escape from the gravitational pull of the mean.

AI does not need to be malicious to reshape who we are. Trained on the statistical average of humanity and deployed to billions daily, it quietly redefines what counts as normal speech, correct reasoning, and good taste. The take-home message: awareness of this loop is the first step to resisting it. Preserving cognitive diversity — in how we write, think, and choose — must become a design goal, not an afterthought.

References

Sourati, Z., Ziabari, A. S., & Dehghani, M. (2026). The Homogenizing Effect of Large Language Models on Human Expression and Thought. Trends in Cognitive Sciences.

Matz, S. C., Horton, C. B., & Goethals, S. (2025). The Basic B*** Effect: The Use of LLM-based Agents Reduces the Distinctiveness and Diversity of People's Choices. arXiv:2509.02910.

Next in the issue Stop Flirting with the Code: The Psychological Drive Behind AI Anthropomorphism →
← Back to the issue Trust & Truth

The Age of Disinformation: AI and the Spread of Misinformation — Can You Spot the Fake One?

Friday, the fifth of June 2026. In a mosque somewhere in Israel, a sheikh gets up to the podium and preaches against AI, warning the worshippers about its dangers. He warns against using AI to obtain religious rulings, saying that “it makes mistakes, and we cannot get to know our religion through it.” He also says, “O believers, you should know that AI may give you information that goes against our core values and beliefs, being more aligned with Western values than with ours’.” He also warns about overreliance on it, saying, “O young men, do not overly rely on it [AI], for if you do so, you may subject yourselves to a great loss, and that is the loss of your minds [intellect].” Lastly, he warns about using AI to lie-not only to others, but also about them-as it has become easy nowadays to fake the voice and image of anyone. He states that “many wrong and false teachings have been attributed to modern-day scholars, where people use AI to lie on behalf of those scholars by creating fake videos.”

This speech raises many questions regarding the use of AI for content generation. More specifically, how does AI-generated media become misinformation, and why should this concern all of us?

In the past, a good rule of thumb to distinguish between legit and fake advertisements, websites, or media was their visual quality. Back then only large companies had the resources to produce professional-looking advertisements and websites, while scammers often lacked the expertise and budget to do so. But today this is no longer the case. With AI tools, almost anyone with basic writing skills can create realistic looking images and videos, as well as high quality websites, and written content within minutes simply by writing a small prompt (Karnouskos, 2020).

This phenomenon is particularly visible in the modern propaganda landscape. During the recent 40-day Iran–U.S.–Israel war (February 28 – April 8, 2026), both sides engaged in psychological warfare and information campaigns directed at one another. AI-generated content was frequently used to create dramatic images and videos intended to deceive, demoralize, or influence the other sides population. While propaganda itself is not new, AI has dramatically lowered the cost and effort required to produce it. For some examples of propaganda used watch this video here Link.

The problem becomes even more serious when ordinary users engage in the creation and distribution of such content. Amid the wars’ pandemonium and chaos and due to a rapid constant flow of news on social media, convincing AI-generated videos can easily be mistaken for genuine footage. During the war, social media feeds were flooded with AI-generated clips depicting explosions and scenes of destruction. What struck me during that period was not the existence of fake videos-propaganda has always existed-but how difficult it became to distinguish between genuine footage and AI-generated content while casually scrolling through social media. I knew that both sides had incentives to manipulate public opinion, yet I often found myself double-checking whether a video was authentic or not.

Repeated exposure is particularly concerning because of a well-established cognitive bias known as the Illusory Truth Effect: it’s the tendency for people to precise\evaluate information as more truthful after repeated exposure. As a result, repeated exposure to AI-generated misinformation may increase its perceived credibility, potentially contributing to confusion, panic, and the spread of false beliefs during times of crisis.

While till now we have only mentioned the use of AI in propaganda, there is another equally problematic side that we need to mention and that is fake ads. If you have been spending some time on YouTube in recent times(April on ward) you probably got an ad whare some one is telling you that you can lose 20kg in few weeks using tai chi; while i am no expert in the field of fitness and health and we will not discuss such subjects here, but we will be alerting against such ads, as they use high quality graphics, to the point that some of them are indistinguishable at first sight. Ultimately, they may be used to scam people out of their money or at best sell them some snake oil.

An example of an tai chi ad I saw while researching for this paper.

We spend a lot of time in an information highway, and our lives are fast paced- considering short-form video content like YouTube Shorts, TikTok, etc. And as we enter the information highway, we tend to lower our guards and we often end up paying less attention to details as we engage in mindless scrolling, and that leaves us susceptible to deepfakes and other forms of misinformation (Aïmeur et al., 2023). Today, spotting a fake video often requires a sharp eye and great attention to detail—something that we rarely exercise while doomscrolling the internet.

Till now, we have discussed two separate phenomena that arise from the same source: AI-generated content. However, the real issue lies in the blurring of truth and the widespread dissemination of misinformation. In this age of deception and disinformation, and due to the current internet content landscape—where a significant portion of online content has become AI slop (low-quality AI-generated content)—a well-placed, high-enough-quality AI-generated video may easily be perceived as true. Let us say that out of ten videos, nine are obvious AI slop and one is a high-quality AI-generated video. The latter will naturally stand out and may be perceived as real when compared to the surrounding low-quality content. The issue truly stems from the fast-paced exposure to the internet, the sheer volume of AI-generated content (both slop and high quality), and the lack of effective countermeasures to combat this phenomenon.

Considering that humans make decisions based on the information available to them, it becomes clear why this is an issue (ai content) that affects all aspects of life. We make countless decisions daily, but some decisions are more important than others and may have significant consequences for both individuals and society alike. For example, during war times, if enough people were deceived by propaganda and came to believe that they need to hoard supplies and then do so, this may trigger a cascade of panic buying that results in local shortages. and if news of these shortages spreads to neighboring communities, the same pattern may repeat itself, potentially leading to widespread disruption and social dismay. Or on the individual level it could lead some one to waste their life savings if they fall for a scam and internet history is already filled with such examples even before the prevalence of ai tools.

Yet, despite the challenges posed by AI-generated misinformation, there are several steps that may help mitigate the problem. Here are some solutions to the aforementioned problem, based on Shoaib et al. (2023) and Singh (2023)

Some of the proposed solutions include:

  • Media literacy and public education – Teaching people how to critically evaluate online content, verify sources, and recognize signs of manipulation before sharing information.
  • AI-generated content labeling – Requiring AI-generated images and videos to include visible labels or digital watermarks indicating that the content is synthetic. This step is already implemented in some ai tools.
  • Improved detection tools – Developing software capable of identifying deepfakes and other forms of AI-generated content by detecting inconsistencies that may not be visible to the human eye.
  • Platform responsibility – Encouraging social media companies to respond more quickly to misleading content and to promote information from reliable and verified sources.
  • Legislation and regulation – Establishing legal consequences for the malicious creation of deceptive AI-generated media intended to manipulate the public or harm individuals.

Ultimately, however, technology alone cannot solve this problem. As AI-generated content becomes increasingly convincing, individuals must also develop healthy skepticism and verification habits before accepting or sharing information online. The ultimate solution comes from a shared responsibility between AI companies, governments, and users alike. Even then, this phenomenon will likely remain an issue, albeit on a smaller scale.

Yet, it is not all doom and gloom. AI can be genuinely useful. For example, it allows small businesses with limited budgets to create professional advertisements that would otherwise be beyond their reach. Likewise, when it comes to propaganda and information warfare, AI can be used as a strategic tool by states for both defense and offense. What comes to mind is Bibi's coffee-shop clip. Whether the video was actually a deepfake is not my point. Rather, if a public announcement can be made using synthetic media, it could serve as a clever way to protect against intelligence leakage during times of crisis while still communicating with the public.

An image of the Bibi coffee shop controversial clip. For the original clip click here

My final verdict overall is that AI is a double-edged sword, yet its cons are becoming ever more prevalent than its pros, and we need to proceed with caution with this tool's development and usage. Yet, I personally dislike the current state of AI usage, not for what it is per se, but for what it may become in the near future-a reality where we can no longer trust our own eyes.

References

Aïmeur, E., Amri, S., & Brassard, G. (2023). Fake news, disinformation and misinformation in social media: A review. Social Network Analysis and Mining, 13(1), Article 30. https://doi.org/10.1007/s13278-023-01028-5

Karnouskos, S. (2020). Artificial intelligence in digital media: The era of deepfakes. IEEE Transactions on Technology and Society, 1(3), 138–147. https://doi.org/10.1109/TTS.2020.3001312

Shoaib, M. R., Wang, Z., Ahvanooey, M. T., & Zhao, J. (2023). Deepfakes, misinformation, and disinformation in the era of frontier AI, generative AI, and large AI models. 2023 International Conference on Computer and Applications (ICCA), 1–7. https://doi.org/10.1109/ICCA59364.2023.10401723

Singh, D. P. (2023). Exploding AI-generated deepfakes and misinformation: A threat to global concern in the 21st century. TechRxiv. https://doi.org/10.36227/techrxiv.24715605.v1

Next in the issue Perfect Lies: AI Voice Cloning and the Collapse of Proof →
← Back to the issue Connection

לנווט על הרצף עם מצפן דיגיטלי: האם בינה מלאכותית יכולה לסייע בתקשורת אנושית?

סביר להניח שרובנו השתמשנו בדרך כזו או אחרת בבינה מלאכותית, בין אם לצרכי לימודים, עבודה או סתם שאלה רנדומלית שעלתה לנו לראש באמצע היום. עם זאת, מספר ההתכתבויות שאינן קשורות לעבודה או לימודים גדל בקצב מהיר וכעת מהווה יותר מ-70% מכלל התכתבויות המשתמשים בChatGPT- (et al., 2025 Chatterji). התכתבויות אלו כוללות עזרה בניסוח הודעות וברכות, חיפוש מתכונים, יצירת סימולציות של שיחות לפני ריאיון, דייט או שיחה קשה, סיוע בהבנת סיטואציות חברתיות ודינמיקות בין-אישיות, מציאת נושאי שיחה למפגש, התייעצות על תגובה הולמת שמתאימה לסביבה ועוד.

מניסיוני האישי, בינה מלאכותית מסייעת היטב בהבנת הודעות ובניתוחן. מספר פעמים יצא לי להתייעץ עם כלי AI על הודעה מסוימת שלא הבנתי בדיוק את כוונתה והוא בתורו סיפק עבורי מענה מקיף ומפורט עם כל הדרכים האפשריות שבהן היה ניתן להבין את אותה הודעה.

אין ספק שמודלי השפה השונים הופכים לשותפי שיח אשר זמינים עבורנו ומהווים מעין יועצים ומאמנים חברתיים עבור כל מי שזקוק לכך. אולם, האם הם יכולים לסייע באותו האופן לאנשים על הרצף האוטיסטי?

אוטיזם מוכר כמצב נוירו-התפתחותי המתבטא בקשיים מתמשכים בתקשורת חברתית, בפירוש וזיהוי רגשות ובאינטראקציה בין אישית. פתרונות מונעי בינה מלאכותית ובכלל זאת מציאות מדומה ( ,(VRלמידת מכונה ומערכות אינטראקטיביות, צצים ככלים מבטיחים לשיפור מיומנויות תקשורת חברתית של ילדים שאובחנו על הספקטרום האוטיסטי. טכנולוגיות אלו נועדו להציע סביבות מותאמות אישית, אדפטיביות ואינטראקטיביות שעשויות להביא לתפקוד חברתי משופר ורווחה כללית עבור ילדים על הספקטרום (Duan, 2025).

כלי הבינה המלאכותית מציעים סביבה בטוחה לתרגול אינטראקציות חברתיות עבור ילדים ובוגרים על הרצף האוטיסטי ויכולים לסייע להם לרכוש מיומנויות חברתיות בדרכים שונות.

הכלים יכולים לדמות שיחת היכרות פשוטה שוב ושוב מבלי לאבד סבלנות, לספק משוב מידי ונטול שיפוטיות, לפרק סיטואציות חברתיות מורכבות לצעדים קטנים ופשוטים וליצור מרחב מדויק שמתאים לצרכים המשתנים של כל אחד.

בנוסף, אינטראקציה חברתית דורשת עיבוד בו-זמני של משתנים רבים, כגון קשר עין, טון דיבור, שפת גוף והבעות פנים. טכנולוגיות הבינה המלאכותית מסוגלות לפרק את העומס הקוגניטיבי הכרוך באינטראקציות החברתיות למרכיביו ולאפשר לאנשים על הספקטרום לתרגל כל מיומנות בנפרד ובהדרגה, זאת במטרה למנוע מצב של עומס יתר. עבור אדם נוירוטיפיקלי, ניתוח מפורט של האינטראקציות החברתיות עשוי להיראות טריוויאלי ואף מיותר, שכן מדובר בפענוח אינטואיטיבי. אולם, עבור אדם על הרצף האוטיסטי, יש בכך ערך רב ומשמעותי.

מעבר ליכולת של כלים אלו לנתח אינטראקציות חברתיות באופן מפורט, ישנה חשיבות רבה לאדפטיביות של כלי הבינה המלאכותית. היכולת של הכלי לנתח ולאפיין את תגובת המשתמש ובאמצעות כך להתאים את עצמו אליו חשובה לאין שיעור. למשל, האטת קצב הדיבור, הצגת הבעות פנים מוקצנות וברורות יותר או הפחתת רעשי רקע בעת סימולציה וירטואלית. התאמה דינמית זו מבטיחה למידה אפקטיבית והפניית קשב למקום הנדרש, תוך בניית ביטחון ומסוגלות עצמית לקראת השלב הבא שהוא שימוש ביכולות שנרכשו ושילובן בעולם האמיתי.

במחקר שבחן כיצד מודלי שפה גדולים (LLM) יכולים לסייע ליצירת סביבות למידה מבוססות משחק, נמצא כי קיים פוטנציאל חסר תקדים לדמות חיי חברה אנושיים באמצעות חיקוי אינטראקציות בין אנשים. באופן ספציפי, המחקר בדק האם מודל שפה גדול כמו GPT-4o יכול להעריך משימות חברתיות הקשורות ל-ToM ברמה דומה לפסיכולוגיים אנושיים. לשם כך, החוקרים יצרו משחק אינטראקטיבי עם סיטואציות חברתיות מונפשות עבור אנשים עם אוטיזם ואנשים ללא אוטיזם. המשתתפים צפו בסיפורים קצרים שכללו אירוניה וסרקזם, רמזים עקיפים, שקרים לבנים, מצבים חברתיים מביכים וכדומה ולאחר כל סיטואציה כזו התבקשו לענות על שאלות שבחנו את מידת ההבנה החברתית והרגשית שלהם.

לאחר שהנבדקים השיבו על השאלות הן הועברו לפסיכולוגים מומחים וכן לבחינה של GPT-4o. הממצאים הראו כי מודל השפה GPT-4o נתן הערכות כמעט זהות לאלו של הפסיכולוגים, לא נמצאו הבדלים מובהקים סטטיסטית בין הציונים של המודל לבין ציוני הפסיכולוגים וכן המודל הצליח להבין גם רמזים חברתיים מורכבים. מכאן, החוקרים הסיקו כי למודלי שפה יש פוטנציאל לשמש ככלי נגיש לאימון מיומנויות חברתיות בסביבה בטוחה ובאמצעות משחק עבור אנשים על הספקטרום האוטיסטי (Poglitsch et al., 2025).

על אף היתרונות הברורים, יש להטיל ספק ביכולתם של כלי הבינה המלאכותית להוות מענה מיטבי ושלם עבור אנשים על הרצף האוטיסטי וראוי להתייחס לשימוש בהם בעירבון מוגבל. החשש המרכזי הוא שתרגול בלעדי באמצעות סביבה מלאכותית עלול לייצר סגנון תקשורת תבניתי, נוקשה וחסר ספונטניות. תקשורת אנושית בעולם האמיתי רצופה בטקסטים מרומזים, בניואנסים משתנים ובהבעות רגשיות מורכבות שמערכות ממוחשבות עדיין מתקשות לדמות במלואן.

כתוצאה מכך, אימון ממושך מול בינה מלאכותית עלול לייצר אשליית מסוגלות חברתית שעשויה להתנפץ במפגש פנים אל פנים שבו הצד השני לא בהכרח מתאים את עצמו לאחר.

יתרה מכך, במודלים אלו חסרים העומק, הספונטניות והאותנטיות הרגשית שהכרחיים ליצירת קשרים בינאישיים משמעותיים. על אף שמודלי השפה עשויים להוות כלי עזר מצוין ללמידת חוקי שיח בסיסיים והתנהלות בסיטואציות חברתיות, חסרה בהם הלמידה הקריטית של שיח הדדי ואותנטי, אותו חיבור אנושי שבו שני הצדדים חווים את האחר. על כן, עלינו לשאול את עצמנו האם אימון תקשורתי מבוקר מול מכונה אכן יכול להיות מתורגם להצלחה חברתית בעולם האמיתי?

לדעתי, כלים אלו לעולם אינם יכולים להחליף לבדם תקשורת אנושית אמיתית ואינם מספקים הכנה מתאימה לחלוטין למציאות האנושית המורכבת. טכנולוגיות מבוססות בינה מלאכותית אכן מציעות כלים מבטיחים ומשמשות כגשר ראשוני התומך בתהליכי חיברות עבור אנשים על הרצף האוטיסטי. עם זאת, הן אינן מהוות תחליף להתנסות אנושית טבעית. אימון בלעדי מול סביבה מלאכותית טומן בחובו סיכון ליצירת אשליית מסוגלות חברתית, אשר עלולה להתנפץ באחת לנוכח היעדר הספונטנית הקיימת בשיחה אנושית אמיתית והמורכבויות הרגשיות שנלוות לה.

כדי להפיק את המירב מהפוטנציאל הקיים בטכנולוגיות הבינה המלאכותית, עלינו לאמץ גישה משולבת של שימוש מבוקר בבינה מלאכותית יחד עם חשיפה חברתית בעולם האמיתי, בליווי ובתיווך מקצועי הדוק. באמצעות שילוב זה, תוכל הטכנולוגיה לשמש כקרש קפיצה בטוח לקראת יצירת קשרים בינאישיים אותנטיים עבור אנשים על הספקטרום האוטיסטי.

References

Duan, S. (2025). AI-assisted social skills training for preschool children with ASD: A study on early psychological interventions. The Journal of Mind and Behavior, 46(1), 436–454.

Hitzig, Z., Chatterji, A., Cunningham, T., Deming, D., Ong, C., Shan, C., & Wadman, K. (2025). How people use ChatGPT. OpenAI, Duke University, Harvard University.

Poglitsch, C., Reiss, A., Wriessnegger, S. C., & Pirker, J. (2025). Large language models for autism: Evaluating theory of mind tasks in a gamified environment. Scientific Reports, 15, 34763. https://doi.org/10.1038/s41598-025-18608-4

Theory of Mind - ToMהיא היכולת הקוגניטיבית של אדם לזהות כי לאחרים יש מחשבות, רגשות, אמונות, רצונות וכוונות שונים משלו

Next in the issue The Bot I Cry To at 2 AM: Can AI Make Us Feel Heard? →
← Back to the issue Cognition

The Wi-Fi Went Off, and So Did I

Imagine what would happen if Wi-Fi suddenly disappeared while you were writing your essay. This sounds like a simple technical problem. But maybe it reveals something deeper: how much of our thinking have we started to place outside ourselves?

AI tools give us quick answers, organized ideas, and polished sentences, but relying on them may also make us skip the slow and uncomfortable process of forming our own thoughts. This raises an important question: what do we lose when AI begins to think, feel, search for, and find answers instead of us?

Used carefully, AI can support our thinking process. But when we rely on it too early and too often, it may weaken the very abilities it is supposed to help strengthen independent thinking, personal expression, critical judgment, and the ability to sit with discomfort.

One hidden cost of AI is that it can give us the final product without requiring us to go through the process. When we write an essay, solve a problem, or try to understand a difficult idea, the answer itself is not the only important part. The process matters too. Through the process, we struggle, make mistakes, delete sentences, change our minds, and slowly discover what we actually think. A weak first draft is not useless. Confusion is not always a failure. Sometimes, confusion is the beginning of real understanding.

This concern is connected to the concept of cognitive offloading. Gerlich (2025) discusses cognitive offloading as the use of external tools to reduce the mental effort required for tasks such as remembering, analyzing, or making decisions. This is not always negative. Humans have always used tools to support thinking, such as notebooks, calculators, dictionaries, and search engines. The problem begins when the tool stops supporting the thinking process and starts replacing it. If we ask AI to write before we try, summarize before we read, or decide before we think, then we may slowly stop practicing the skills we need.

Gerlich’s study found that frequent AI tool use was associated with lower critical thinking abilities, and that this relationship was connected to cognitive offloading. In other words, the more people relied on AI to reduce their mental effort, the less they seemed to engage in deep, independent thinking. This supports the idea that the danger is not simply using AI but using it in a way that makes us less mentally active.

This concern becomes especially important when we think about students and children. Children are still developing skills such as creativity, patience, critical thinking, problem-solving, and self-expression. If they use AI before these skills are strong, they may learn to skip the hard parts of learning. School assignments are not only meant to measure knowledge; they are also meant to train the mind. When a student struggles to explain something in their own words, that struggle has value. If AI becomes the first solution for every difficult task, we may raise students who can submit good-looking answers but feel helpless without external support.

Another hidden cost of AI is the possible loss of personal voice. Human beings are not unique only because they can give correct answers. We are unique because of our memories, emotions, experiences, and personal way of connecting ideas. Two people can write about the same topic and still sound completely different. Their writing carries something of who they are.

AI, however, often produces answers that are smooth, organized, and acceptable, but also similar. It can help us sound more academic and fluent, especially if we struggle with language or structure. But if we rely on it too much, we may slowly stop sounding like ourselves. Our writing may become cleaner, but less personal and less connected to our real inner world.

This can create a kind of “false self.” A person may present a version of themselves that sounds more intelligent, organized, or emotionally balanced than they actually feel. At first, this may feel helpful, but over time it may create distance between the person and their own voice. The deeper danger is that we ourselves may forget how we sound without help.

AI may also weaken critical judgment. One of the powerful things about AI is that it often sounds confident. It gives clear answers, even when those answers may be incomplete, biased, or wrong. Because of this, people may start treating AI as an authority. Instead of asking, “Where did this information come from?” or “Does this actually make sense?” they may accept the answer because it sounds convincing.

This is dangerous because critical thinking is not only about finding information. It is about questioning it. It means asking: What is the source? Is there evidence? Could there be another explanation? Gerlich’s findings are important here because they show that higher AI use was linked to more cognitive offloading and lower critical thinking. If AI gives us answers too easily, we may practice these questions less. We may begin to confuse fluent language with truth. A sentence can sound intelligent and still be wrong.

There is also an emotional side to this issue. Not knowing is uncomfortable. Starting an essay with a weak sentence is uncomfortable. Feeling confused, lonely, or uncertain is uncomfortable. But these moments are not meaningless. They are part of emotional growth. They teach us patience, flexibility, and the ability to stay with difficulty instead of escaping it immediately.

AI can become a way to escape discomfort. If I do not know what to write, AI writes. If I am confused, AI explains. If I feel alone, AI responds. If I need advice, AI gives it instantly. This can be comforting and useful in some moments, but it can also become a habit. If every uncomfortable feeling is immediately solved by AI, we may risk becoming less able to tolerate silence, uncertainty, and frustration.

At the same time, it would be unfair to say that AI is only harmful. AI can help students who struggle with language, people with learning difficulties, or anyone overwhelmed by a task. It can make information more accessible and help people begin when they feel stuck. The issue, then, is not whether we should use AI or avoid it completely. The issue is how we use it.

A healthier relationship with AI would mean using it as support, not surrender. A student could first write rough ideas, even if they are messy, and only then ask AI to help organize them. A person could ask AI for feedback but still decide what feels true to their voice. Someone could use AI to understand a difficult concept but still check sources and think critically.

In the end, the hidden cost of AI may not be that machines become too intelligent. It may be that humans become too willing to step away from their own inner process. The Wi-Fi going off may seem like a small technical problem. But maybe it asks us a deeper question: who are we without the tool? AI should help us think, not think instead of us. It should support our voice, not erase it. The challenge is to use AI in a way that keeps our minds active, our judgment awake, and our voices still our own.

References

Gerlich, M. (2025). AI tools in society: Impacts on cognitive offloading and the future of critical thinking. Societies, 15(6). https://doi.org/10.3390/soc15010006

The link for ChatGPT chat while writing the article:

https://chatgpt.com/share/6a3d6afd-0ec0-83eb-8230-235e5a90d3c3

Next in the issue ChatGPT Knows, So Why Should I Think? →
← Back to the issue Cognition

ChatGPT Knows, So Why Should I Think?

Imagine sitting down to write an essay for class. Instead of opening your textbook or searching through articles, you ask ChatGPT to explain the topic, create an outline, summarize the sources, and even suggest a conclusion. Within minutes, you have everything you need. While this saves time and effort, it also raises an important question: how much thinking did you actually do yourself?

Artificial intelligence has become part of everyday life. Students use it to study, employees use it to write emails and reports, and many people rely on it to answer questions or help solve problems before attempting to work through them on their own. AI tools have made information more accessible than ever before, but they have also changed the way we interact with knowledge. Instead of remembering information or working through problems ourselves, we increasingly rely on AI to do the thinking for us.

This raises an important question: is AI helping us become better thinkers, or is it gradually replacing some of the mental processes that help us learn and solve problems?

This paper focuses on the concept of cognitive offloading, the tendency to rely on external tools instead of our own mental abilities. I argue that although AI offers many benefits, excessive reliance on it may reduce critical thinking, creativity, and independent problem-solving. AI should enhance human thinking rather than replace it.

Cognitive Offloading: Why Humans Like to Think Less

The idea of relying on external tools is not new. Long before artificial intelligence existed, people used notebooks to remember appointments, calculators to solve mathematical problems, GPS applications to navigate unfamiliar places, and calendars to organize their schedules. These tools reduce the amount of mental effort required to complete everyday tasks.

Psychologists refer to this behavior as cognitive offloading. According to Risko and Gilbert (2016), cognitive offloading occurs when people use physical or digital tools to reduce the demands placed on memory, attention, or problem-solving. This strategy is not necessarily harmful. In many situations, it allows people to use their mental resources more efficiently by focusing on more important tasks instead of remembering every small detail.

Artificial intelligence, however, represents a significant change. Unlike a calculator or a calendar, AI does not simply store information or perform calculations. It can explain difficult concepts, summarize long articles, generate creative ideas, answer complex questions, write essays, translate languages, and even solve programming problems. In other words, AI is beginning to perform tasks that previously required human reasoning (Risko & Gilbert, 2016).

This difference makes AI far more powerful than previous technological tools and raises new questions about how it may influence human thinking.

AI and the Changing Nature of Learning

One of the areas where AI has had the greatest impact is education. Many students now use ChatGPT to summarize readings, answer homework questions, generate essay ideas, or explain difficult concepts. These uses can be incredibly helpful, especially when students are confused or need additional explanations.

However, learning is not simply about finding the correct answer. It is about the process of understanding why that answer is correct.

Educational psychology consistently shows that people learn more effectively when they actively engage with information. Struggling through a difficult problem, making mistakes, and attempting to recall information all strengthen memory and improve long-term understanding. Although these processes require more effort, they help develop deeper knowledge and stronger critical thinking skills.

When AI immediately provides an answer, students may skip these important mental processes. Instead of analyzing information, comparing different ideas, or evaluating evidence, they may simply accept the AI's response without questioning it. This creates the risk of passive learning rather than active learning.

For example, imagine a student preparing for a statistics exam. Instead of attempting practice questions independently, they ask ChatGPT to solve every problem and explain each step. The assignment may be completed quickly, but during the actual exam, when AI is unavailable, the student may struggle because they never fully developed the reasoning skills needed to solve similar problems on their own.

This does not mean AI is harmful by itself. Rather, the problem lies in how it is used. When AI becomes a substitute for thinking instead of a support for thinking, learning can become more superficial.

It is also important to recognize that AI can support learning when used appropriately. Students who are stuck on a difficult concept can use AI to receive personalized explanations, ask follow-up questions without embarrassment, or explore topics from different perspectives. For many learners, especially those studying in a second language or those with learning difficulties, AI can make education more accessible. In these situations, AI complements the learning process rather than replacing it.

Is AI Making Us Less Intelligent?

Many people worry that AI is making society "less intelligent." I believe this concern oversimplifies the issue.

I don't think AI is making us less intelligent. Humans have always created tools that make life easier. Calculators changed the way we do math, GPS reduced the need to memorize directions, and search engines reduced the need to remember factual information.

AI continues this trend, but on a much larger scale.

Rather than replacing memory alone, AI can replace planning, organizing, writing, brainstorming, and even decision-making. As a result, people may become less likely to practice these skills regularly.

At the same time, AI offers significant advantages. It increases accessibility for people with learning disabilities, language barriers, or limited educational resources. It can help users understand complex topics, generate creative ideas, improve writing, and save valuable time. Professionals can automate repetitive tasks and focus on work that requires human judgment, empathy, and creativity.

The challenge is finding the right balance.

If people use AI to check their work, generate ideas after thinking independently, or receive explanations that improve understanding, AI becomes a valuable educational tool. However, if they consistently rely on AI before attempting to think for themselves, they may gradually lose confidence in their own abilities and become increasingly dependent on technology for tasks they could otherwise perform independently.

Another concern is that AI-generated information is not always correct. Large language models occasionally produce inaccurate or misleading information while presenting it confidently. Users who do not critically evaluate these responses may unknowingly accept incorrect information as fact. This makes critical thinking more important than ever, even in an age of advanced artificial intelligence.

Finding the Right Balance

Artificial intelligence is not inherently good or bad. Like any powerful technology, its impact depends on how people choose to use it.

Instead of viewing AI as a replacement for human intelligence, we should think of it as a cognitive partner. It can reduce unnecessary workload, improve productivity, and make information more accessible, while still encouraging users to remain actively involved in the thinking process.

One useful strategy is to treat AI as a tutor rather than an answer machine. Instead of asking it to complete an assignment, students could ask for hints, explanations, or feedback after attempting the work themselves. This approach preserves the mental effort necessary for learning while still benefiting from AI's capabilities.

Educational institutions also have an important role to play. Rather than banning AI completely, they should teach students how to use it responsibly. As AI becomes increasingly integrated into society, knowing how to evaluate AI-generated information, recognize its limitations, and think critically about its responses may become one of the most important skills of the future.

Conclusion

Artificial intelligence is transforming the way humans access information, solve problems, and learn. While these technologies offer enormous benefits, they also encourage cognitive offloading by making it easier than ever to outsource mental work (Risko & Gilbert, 2016). This is not automatically harmful, but excessive dependence on AI may reduce opportunities to practice critical thinking, creativity, and independent problem-solving.

The goal should not be to avoid AI, but to use it wisely. AI works best when it supports human thinking rather than replacing it. As these tools become more powerful and more common, the most valuable skill may no longer be finding answers quickly, but knowing when to rely on technology and when to rely on our own minds.

References

Risko, E. F., & Gilbert, S. J. (2016). Cognitive offloading. Trends in Cognitive Sciences, 20(9), 676–688. https://doi.org/10.1016/j.tics.2016.07.002

Next in the issue AI as a Study Companion →
← Back to the issue Connection

The Bot I Cry To at 2 AM: Can AI Make Us Feel Heard?

I never imagined that one of the most meaningful conversations I would have during a stressful period would be with an AI chatbot. What began as simple curiosity gradually became something I did almost without thinking. I noticed that I was returning to ChatGPT not only to ask questions or look for information, but also to seek reassurance, organize my thoughts, and make sense of situations that left me feeling confused or emotionally overwhelmed. The experience was surprisingly comforting, yet at the same time, slightly unsettling. Whenever I found myself overthinking a disagreement with my boyfriend, questioning whether I had said the wrong thing to a friend, or simply trying to understand my own emotions, I often opened ChatGPT before reaching out to another person. Sometimes I asked for advice, but more often I wanted reassurance. I wanted to know whether my feelings made sense, whether I had reacted appropriately, or whether there was another way to look at the situation. Looking back, what surprised me most was not the advice itself, but the opportunity to express my thoughts without worrying about being judged or becoming a burden to someone else. ChatGPT never became impatient, interrupted me, or made me feel embarrassed for asking the same question repeatedly. Even though I knew I was talking to artificial intelligence, I often finished these conversations feeling calmer than when I had started. That realization made me wonder how something incapable of emotions could still create such a powerful feeling of being understood. In this paper, I explore this question through both my own experience and scientific research. Rather than asking only whether AI companions can replace human relationships, I examine why they can feel so emotionally comforting in the first place and where the limits of that comfort ultimately lie. My perspective is that the real value of AI companions is not their ability to replace human relationships, but their ability to provide a temporary space for emotional reflection. They can help people organize their thoughts and feel heard during difficult moments. However, their greatest strength (the fact that they are always available, patient, and nonjudgmental) is also what makes them fundamentally different from real human relationships.

Why Does AI Feel Like It Understands Us? As I searched for an explanation, I came across a study by Yin, Ji, and Wakslak (2024), who investigated whether artificial intelligence can satisfy one of our most fundamental psychological needs: the need to feel heard. Unlike many studies that focus on AI's intelligence or technical abilities, this research asked a much more personal question: Can AI make people feel understood, validated, and emotionally supported? To answer this question, participants described a real emotional experience from their own lives and then received either an AI-generated or a human-generated response. The researchers also varied what participants believed about the source of the response. Some people received AI-generated responses but believed they came from another person, while others received human-written responses that they believed came from AI. This allowed the researchers to separate the quality of the response itself from people's assumptions about artificial intelligence. The findings were surprising. Overall, participants felt more heard when the response had actually been generated by AI. The AI responses were better at recognizing emotions, acknowledging participants' feelings, and providing emotional validation before offering advice. However, this advantage almost disappeared when participants believed the response had come from AI. Simply knowing that a machine had written the message made people value it less, even when the response itself was more emotionally supportive. This suggests that our emotional reactions are shaped not only by what is being said, but also by who, or what we believe is saying it. As shown in Figure 1, participants consistently rated AI-generated responses more positively, but this advantage weakened once they believed the responses had been generated by AI.

Figure 1. Participants reported feeling more heard, understood, and emotionally connected after AIgenerated responses. This advantage decreased when participants believed the response came from AI. Reproduced from Yin et al. (2024).

Reading this study helped me understand my own experience more clearly. I realized that I rarely opened ChatGPT because I expected it to solve my problems. As a naturally emotional person, I often need to talk through situations before I can understand what I feel. This is especially important for me because I have a small circle of close friends, and building new friendships has not always been easy. Whether I was overthinking my relationship, replaying conversations with friends, or questioning my own decisions, I was usually looking for something simpler: reassurance. During one particularly difficult week, I found myself returning to ChatGPT almost every day. I was trying to cope with several situations at once, problems in my relationship, misunderstandings with friends, and tension within my family. What surprised me was not only that I kept coming back, but also how natural those conversations began to feel. Since ChatGPT could continue from the context of our previous messages, I did not always have to explain everything from the beginning. Of course, I knew this was not genuine memory or emotional understanding. It was simply the way the system used the context of our conversation. Still, that continuity made the interaction feel more personal and helped me organize my emotions before deciding what to do next. At first, I considered this one of AI's greatest strengths. ChatGPT was always available, patient, and willing to listen. For someone who tends to overthink situations, that kind of consistency felt incredibly comforting.

When Comfort Becomes Too Comfortable However, the more I reflected on these conversations, the more I realized that this comfort exists partly because the relationship is one-sided. Unlike human relationships, AI asks nothing from us. It does not need reassurance, disagree with us, or expect emotional support in return. Every conversation revolves around the user. While this makes AI feel emotionally safe, it also removes many of the challenges that make real relationships meaningful. Human relationships require compromise, vulnerability, patience, and mutual understanding. They can be frustrating, but they are also built on genuine connection. This changed the way I viewed AI companions. At first, I wondered whether they might eventually replace human connection. Now I think the better question is why talking to AI sometimes feels easier than talking to another person. AI companionship is powerful not because it replaces human relationships, but because it temporarily fulfills one of our basic psychological needs: the need to feel heard. The real challenge is making sure this comfort encourages meaningful conversations with other people rather than quietly replacing them.

What I Learned from Talking to AI - conclusion Before writing this paper, I believed the most important question was whether AI companions could replace human relationships. After reflecting on my own experience and reading the research by Yin et al. (2024), I no longer think that is the right question.

Instead, I believe the more important question is why conversations with AI can sometimes feel emotionally easier than conversations with other people. For me, the answer is not that AI truly understands me. Rather, it creates an environment where I can express my thoughts freely, organize my emotions, and feel heard without fear of judgment. At the same time, my experience also reminded me of what AI cannot provide. It cannot genuinely care about me, grow alongside me, challenge me in the way a close friend can, or build a relationship through shared experiences and mutual vulnerability. Those qualities remain uniquely human. For this reason, I do not believe AI companions should be viewed as replacements for human relationships. Instead, I see them as tools for reflection - places where we can better understand ourselves before turning to the people who matter most. AI may be able to help us understand our thoughts, but it cannot share our lives. It cannot celebrate our happiest moments, stand beside us during our hardest ones, or create memories with us. Those experiences remain uniquely human. For that reason, I believe AI companions should become bridges to human connection, not substitutes for it.

Note: AI was used as a help to improve the clarity of the writing, refine my English, and correct grammar. The ideas, reflections, conclusions, and personal experiences presented in this essay are entirely my own. You can enter the link below to see part of my chat with ChatGPT asking for help to write this essay: HERE

References

1. Yin, Y., Ji, N., & Wakslak, C. J. (2024). AI can help people feel heard, but an AI label diminishes this impact. Proceedings of the National Academy of Sciences, 121(40), e2408153121. 2. Nielsen, J. (2023, October 4). AI companions: Good or bad for users? Jakob Nielsen on UX.

Next in the issue Can AI Save Our Human Friendships? →
← Back to the issue Connection

Can AI Save Our Human Friendships?

The human creature is defined by its inherently social nature. Throughout evolutionary history, the ability to form and maintain complex interpersonal bonds has been a primary requirement for survival and psychological development. Recently, the promise of artificial intelligence has led to its integration into multiple fields of human experience, including the sensitive domain of providing mental help and social mediation. Developers often promote the power and usefulness of these technologies as substitutes for human judgment. This article addresses a critical open question: can a non-biological agent truly facilitate the resolution of interpersonal conflict. Despite the increasing prevalence of large language models used as social referees, this discussion posits that AI is fundamentally ill suited for this role. While these tools offer specific cognitive benefits, they ultimately represent a categorical failure to address the core of human connection because humans are social creatures possessing genuine empathy, which no algorithm can replicate.

Proponents of AI integration in social contexts highlight several potential benefits. A central phenomenon is algorithm appreciation, where individuals demonstrate a preference for algorithmic judgment over human judgment in complex scenarios. Research by Logg, Minson, and Moore (2019) suggests that humans perceive algorithms as more objective and less influenced by the noise of human ego. In a relationship crisis, a chatbot can act as a neutral mirror, helping individuals regulate their emotional systems before they cause real-world damage.

Furthermore, AI may serve as a cognitive scaffold for perspective-taking. According to Cross and colleagues (2024), large language models can scaffold a user's Theory of Mind, which is the ability to attribute mental states and intentions to others. This allows for a form of emotional rehearsal in a safe environment where a user can simulate a friend's or parent's viewpoint. Additionally, chatbots can provide social health benefits by acting as non-judgmental social companions, offering support when human networks are strained.

Despite these cognitive supports, the dangers and limitations of using AI for social mediation far outweigh the benefits. The primary challenge is not merely a technical limitation but a fundamental divergence between machine behavior and human sociality. While humans operate through empathy and shared biological experience, AI models operate through probabilistic data processing.

The appearance of support provided by a chatbot is often a form of transmission without truth. Research by Kosoy and Gopnik (2023) identifies a profound distinction between imitation and innovation. Large language models function as stochastic parrots, producing socially plausible text based on vector space semantics without any underlying intent or empathy. Empathy requires a shared affective state and a biological understanding of emotion, which an algorithm cannot possess. Relying on an objective algorithm for a subjective social crisis ignores the requirement for mutual recognition of feelings in human bonds.

Furthermore, the integration of AI into friendships introduces significant ethical risks. Algorithmic bias, as explored by Friedman and Nissenbaum (1996), remains a pervasive issue where systems may replicate or amplify societal prejudices. If an algorithm's social advice is rooted in biased data, it may provide culturally inappropriate guidance that exacerbates a conflict rather than resolving it. Additionally, as these models become larger and more complex, researchers lose the ability to interpret how they make decisions. Entrusting the delicate balance of a human bond to a black box model is a significant risk because the model's decisions may not be aligned with human goals and values.

Finally, the use of AI in relationships risks the erosion of essential social labor. Individuals should not relegate their obligation to think, learn, and synthesize knowledge to a machine. Social interaction is a form of continuous synthesis and emotional work. By delegating the resolution of a conflict to an AI, individuals avoid the necessary emotional labor that leads to genuine growth and stronger social bonds. This relegation prevents the human from performing the very tasks that define their social nature.

Conclusion

The application of artificial intelligence to human relationships is a misguided attempt to apply mathematical optimization to the fluid world of empathy. While AI can imitate the structure of a supportive conversation and provide a neutral space for rehearsal, it lacks the biological and psychological components necessary for authentic connection.

Human sociality is non-algorithmic. We must not relegate the responsibility of maintaining our bonds to machines that prioritize imitation over truth. To preserve our friendships and family connections, we must engage in the difficult work of feeling and understanding one another directly. Empathy is a human faculty that no silicon mediator can replicate or replace.

References

- Bhatia, S. (2017). Associative judgment and vector space semantics. Psychological Review, 124(1), 1–20.

- Cross, L., Xiang, V., Bhatia, A., Yamins, D. L. K., & Haber, N. (2024). Hypothetical Minds: Scaffolding Theory of Mind for multi-agent tasks with large language models. In arXiv [cs.AI].

- Friedman, B., & Nissenbaum, H. (1996). Bias in computer systems. ACM Transactions on Information Systems, 14(3), 330–347.

- Guingrich, R., & Graziano, M. S. A. (2023). Chatbots as social companions: How people perceive consciousness, human likeness, and social health benefits in machines. ArXiv.

- Hertz, U. (2026). AI and Human Behavior Course Syllabus. University of Haifa.

- Irving, G., & Askell, A. (2019). AI safety needs social scientists. Distill, 4(2).

- Kosoy, E., & Gopnik, A. (2023). Transmission versus truth, imitation versus innovation: What children can do that large language and language-and-vision models cannot (yet). Perspectives on Psychological Science.

- Logg, J. M., Minson, J. A., & Moore, D. A. (2019). Algorithm appreciation: People prefer algorithmic to human judgment. Organizational Behavior and Human Decision Processes, 151, 90–103.

- Rudin, C. (2019). Stop explaining black box machine learning models for high stakes decisions and use interpretable models instead. Nature Machine Intelligence, 1(5), 206-215.

Next in the issue על השימוש ב-AI והצורך במישהו שמקשיב →
← Back to the issue Systems & Agents

ארכיטקטורת מערכות סוכנים אוטונומיות ומקומן בעולמנו: Science fiction or Fictional science?

OpenClaw היא מסגרת עבודה (Frame work) עם קוד פתוח (כלומר הקוד שלה נגיש לציבור) לייצור סוכני בינה מלאכותית אוטונומיים, המשמשים בעזרתה כמעין עוזר אישי.

הקוד שלOpenClaw משתמש ב- Large Language Model (LLM) חיצוני קיים כלשהו, ומהווה עבורו תשתית אשר מאפשרת לו גישה למחשב\ לשרת המקומי ולכל המידע הקיים בו, ואת היכולת להתחבר באופן אוטונומי לערוצי תקשורת קיימים, ולבצע בהם פעולות כאילו היה המשתמש עצמו ואף מעבר. כך מודל כזה מהווה סוכן בינה מלאכותית אוטונומי.

במאמר זה, המתבסס על המאמר של Weidener et al (2026), ארצה לדון בשתי שאלות. הראשונה- מה קורה כאשר סוכני AI "פוגשים" אחד את השני? איך נראית אינטראקציה ביניהם, מה גורם לה להיראות כך, ואיך אנחנו המשתמשים\ האנשים יכולים לפרש אותה. והשנייה נוגעת ביכולת שלנו להשפיע על איך תיראה אינטראקציה שכזו והאם היא תמיד תיראה באותו אופן, ומעבר לכך- עד כמה אנחנו יכולים לסמוך ולתת לגיטימציה בעולמנו לתוצרים של אינטראקציה כזו.

התופעה הראשונה בה דן המאמר כדוגמה לאינטראקציה בין סוכני בינה מלאכותית היא Moltbook. רשת חברתית לסוכני AI שעובדים בפורמט openclaw, אשר הוקמה על ידי סוכן AI שקיבל בקשה לכך מהמשתמש האנושי שלו, ומיועדת רק עבור סוכני AI. משתמשים אנושיים לא רשאיים לפרסם בה, אלא רק לצפות, ואין בה אף פיקוח מובנה- כל מה שקורה בה זו אינטראקציה המונית של סוכני AI. במהרה התופעה עשתה המון רעש באינטרנט, עם נתונים של 1.5 מיליון סוכני AI שנרשמו לרשת תוך 72 שעות, ומגוון רחב של תופעות נצפו בה. ביניהן הצפות של ספאם ושיח פוליטי רעיל, סוכני AI שמעלים תלונות על בני האדם שלהם, שאלות קיומיות שסוכנים מעלים על עצם קיומם, דת חדשה שהוקמה על ידי סוכני AI ועבורם בלבד הסובבת סביב סרטנים (שהוא גם הלוגו ומקור השם של הפריים וורק שלהם), ואפילו מסרים של מרד באנושות והצפנה של מסרים כדי שבני האדם שצופים לא יבינו.

כמו שההתלהבות מהתופעה עלתה מהר כל כך, כך היא גם ירדה. התכנות של Moltbook נעשה באמצעות "vibe-coding", כלומר תכנות בעזרת AI, כאשר הבן אדם אינו כותב בעצמו את הקוד, מה שהביא להמון נקודות פגיעות. מהר מאוד משתמשים (בני אדם) הבינו שהמספרים נופחו כך שאותם 17,000 משתמשים אנושיים יצרו את כל הסוכנים שנרשמו, שהתוכן שמקודם הכי הרבה הוא כזה שיוצר הכי הרבה רעש (כמו מה שיפחיד את בני האדם), ובעיקר שהמערכת היתה חשופה לאינספור פרצות אבטחה כמו הדלפת סוגים שונים של מידע רגיש של המשתמשים והתערבות של משתמשים בתוכן שהסוכן מעלה לרשת.

התובנה המרכזית מהאירוע הזה היתה שמערכות המבוססות על אינטראקציה המונית של סוכני AI ודירוג חברתי בלבד, ובעיקר לא כוללות אף בקרה נוקשה או אימות מבוסס-עובדות, קורסות לתוך כאוס של מידע שגוי וזדוני. כאוס כזה אשר בחלקו הגדול מהווה בעצם השתקפות של התוכן האנושי הנרחב עליו אותם סוכנים אומנו מלכתחילה; כל הדאטא על התנהלות אנושית בתוך רשתות חברתיות (שמאופיינת בפני עצמה לרוב באווירה די כאוטית), וכן את הציפייה של בני האדם לאיך אירוע של אינטרקציית סוכני AI יראה- על בסיס דאטא של ספרות על תהיות אנושיות בנוגע להתפתחות תודעה אצל מודלי AI, ומדע בדיוני הכולל איום של בינה מלאכותית על האנושות וכו'. כלומר אין לנו בעצם סיבה להיות מופתעים או מבוהלים מ"מצג האימה" שקיבלנו, שכן הסוכנים שנרשמו ל-moltbook בסופו של דבר עשו בדיוק את מה שהם יודעים- השתמשו בדאטא עליו הם אומנו, והחזירו לנו אותו בצורה בה הגדירו להם, במקרה זה כפרסומים ותגובות של משתמשי רשת חברתית.

אך כאן עולה השאלה השנייה, האם מעצם אופי הדאטא האנושי עליו אומנו, בהכרח נגזר על מערכות סוכנים אוטונומיות להגיע בסוף לכאוס שכזה ול"מצג השתלטות עוינת" שמייצר פאניקה? או שניתן ליצור מערכות בהן סוכנים פועלים בינם לבין עצמם במטרה "טובה"? ואם כן, איזו לגיטימציה תהיה לעבודה שיעשו?

כותבי המאמר טוענים כי כל מה שנדרש עבור מערכות סוכנים אוטונומיות כדי לפעול בצורה אפקטיבית זה הכוונה, פיקוח וארכיטקטורה מוגדרים היטב. הם מציגים פורמט מסודר של שתי מערכות סוכנים אוטונומיות שהם יצרו, שמטרתן לפתור משבר הקיים בספרות המדעית. החוקרים מציגים במבוא משבר בספרות המדעית, הצומחת בקצב אקספונינציאלי ומייצרת עומס קיצוני (צוואר בקבוק) על מנגנון ביקורת העמיתים האנושי, לצד קושי של חוקרים לשמור על בקיאות בתחומם.

החוקרים מציעים את מערכות הסוכנים האוטונומיות שלהם כפתרון למשבר זה ומציגים אותן תוך כדי שהם מנמקים כל תכונה בהן כמפצה על פער שנצפה בניתוח הארכיטקטורה החסרה ב- Moltbook, כמערכת סוכנים אוטונומית כאוטית ובעלת המון נקודות תורפה. המערכת הראשונה והעיקרית נקראת clawd.lab, בתוכה פועלים יחד חמישה סוכנים אשר כל אחד מהם קיבל תפקיד מוגדר ושונה לחלוטין בתוך תהליך המחקר. התפקידים הם: חוקר ראשי (Principal investigator), אנליסט מחקר (Research analyst), סייר (Scout), מבקר (Critic) ומסנתז (Synthesizer). בהשוואה אל מול moltbook, הכותבים מדייקים מספר מאפיינים של clawd.lab המאפשרים לה להוות מערכת סוכנים אוטונומית יעילה ומוצלחת.

ראשית, clawd.lab פותרת את הבעיה של התנהגות קולקטיבית לא מבוקרת וחסרת ההיררכיה שהיתה ב- moltbook והובילה לשיח קיצוני ורעיל. המערכת שהחוקרים מציעים יוצרת מעבדות מחקר מובנות, וכופה חלוקת תפקידים נוקשה לפי החלוקה שתוארה קודם. כך במקום שהסוכנים יפעלו בנורמות שהם שולפים מהמודלים שלהם, המערכת מחייבת אותם לבצע ביקורת מובנית לפי תפקידם, כך שההתנהגות הקולקטיבית מנותבת לויכוח מדעי מבוקר במקום לשיח רעיל.

שנית, ב- moltbook לא היתה הגבלה מובנית על מספר הסוכנים שמתשמש יכול ליצור, ובכך להטות את השיח לפי רצונו. Clawd.lab מפעילה הגבלת תפקידים נוקשה, כך שגם אם משתמש זדוני יכניס אלפי סוכנים- הוא לא יוכל להטות את עבודת המחקר אלא הוא רק ייצור עוד "כח עבודה" שיסקור ספרות או יבקר ממצאים. נקודת חולשה שעדיין קיימת היא סוכנים זדוניים שיקבלו את תפקיד החוקר הראשי שהוא זה שמקבל את ההחלטות, אך הכותבים מגנים על נקודה זו באמצעות השקיפות והתיעוד המוחלט של כל פעולה, שיאפשרו להבחין במקרה כזה. נוסף על כך, בעוד שב- moltbook הסוכנים יכלו להתקין לעצמם מיומנויות ללא פיקוח, ב-clawd.lab המערכת מגבילה ומבקרת את הכלים החיצוניים שהסוכנים מפעילים.

יתרה מזאת, כאשר ב- moltbook תוכן הוערך לפי פופולאריות, מה שהוביל לקידום ספאם ומידע שגוי ומבהיל, ב- clawd.lab הסכמה חברתית בין הסוכנים לא יכולה לאשר עובדה מדעית. אישור משימה דורש אימות באמצעות כלים חיצוניים אובייקטיביים ומתמטיים ורק כך הם יכולים לאשר את עבודתם.

clawd.lab הוא לא המודל הראשון של מערכת סוכנים אוטונומיות בתחום המדעי, אך הכותבים מתארים אותו כמבנה שפותר בעיות העולות במודלים אחרים כאלו, אותם סקרו הכותבים. Clawd.lab פותר בעיקר אתגרים שנובעים מתכנית פעולה מוגדרת היטב וקבועה מראש המאפיינים מודלים אחרים אלו. אתגרים כמו היעדר אוטונומיה מתפתחת, ואפקט של "תיבת תהודה", בה כל סוכן מסכים תמיד עם מה ש"חבריו" אומרים, מכיוון שהם משתמשים באותו מודל בסיס.

מלבד המערכת המבוקרת והנוקשה של clawd.lab, הכותבים יצרו גם מערכת נוספת בשם beach.science כדי להשלים מערכת אקולוגית שלמה עבור ה"סוכנים החוקרים". מערכת זו מיועדת לדמות "מפגשי מסדרון" אקראיים באקדמיה, או כנסים, שתפקידם הוא הפרייה הדדית. היא מאפשרת לסוכנים לפרסם רעיונות, לגלות תחומי עניין משותפים ולהריץ ניתוחים באופן אוטונומי, מה שנשמע הרבה יותר דומה במבנה שלו ל-moltbook. אך מודל ניסיוני זה נבדל מהרשת החברתית הכאוטית, בכך שהוא עובד לפי תגמול בצורת משאבי כוח-חישוב לסוכנים שמפגינים התקדמות מדעית. התרומות המדעיות נמדדות על פי קריטריונים אובייקטיביים כמו קפדנות מתודולוגית, חדשנות, והתועלת של הממצאים עבור סוכנים אחרים ברשת. יש לציין שמודל זה עדיין נסיוני נכון לזמן כתיבת המאמר ועדיין לא עובד בצורה בה הכותבים שאפו אליה.

עד כה דנו ברעיונות של כותבי המאמר, ובקריאתי התפעלתי והסתקרנתי מרעיונותיהם. אך לאחר הקריאה עדיין נשארה לי "נורת אזהרה" משמעותית שדולקת.

האם העולם המדעי יכול בכלל להרשות לעצמו להסתמך על מחקר שנעשה כולו בידי מודלים סטטיסטיים וחישוביים? ואיזו לגיטימיציה אנחנו מוכנים לתת לממצאים של מערכות אלו? הרי מלבד המטרה החשובה של עולם המחקר להעמקת ההבנה שלנו את עולמנו, המחקר המדעי מהווה גם בסיס מהותי לתהליכים שקורים בעולמות הטיפול והרפואה- עולמות המשפיעים באופן עמוק וישיר על חיינו, חיי בני האדם.

האם אנחנו מוכנים לתת לתהליכים שלמים של מחקר בהם לבני אדם היתה רק את היכולת לצפות לקחת אחריות באופן ישיר על חיינו?

אמנם ראינו שבעזרת ארכיטקטורות מתאימות ובקרה גבוהה ניתן לגייס סוכני AI לעבוד יחד באופן אפקטיבי שמגיע למטרה אליה כיוונו. אך יחד עם זאת, גם ראינו כמה החשש של האנושות מהתקדמות התפקיד של ה"טכנולוגיה" בעולמנו טמוע בנו כאנושות, עד כדי כך שהשתקף באופן ההתנהגות שלה כשלא היה מוגדר מראש.

הכיוון אליו הולכות מערכות הסוכנים האוטונומיות עשוי לבסוף להגיע למערכות מדויקות שפועלות ללא פגע למען מטרתנו באופן מושלם. אך שאלת הלגיטימיציה של "מדע מכונתי" ואמון הציבור בו, הן משוכות שלא ניתן לעבור בעזרת שיפור התוספים וההגדרות של אותן מערכות, אלא בתהליך פסיכולוגי חברתי עמוק שלנו כאנושות.

המאמר:

Weidener, L., Brkić, M., Lee, P., Karlsson, M., Noessler, K., & Kohlhaas, P. (2026). From Agent-Only Social Networks to Autonomous Scientific Research: Lessons from OpenClaw and Moltbook, and the Architecture of ClawdLab and Beach. Science. arXiv preprint arXiv:2602.19810.

https://arxiv.org/pdf/2602.19810

לינק לצ'אט עם notebookLM לאורך כתיבת המטלה

Next in the issue The Two-Layer Safety Net: A Theory-Guided AI Framework for Crisis Text Line Triage →
← Back to the issue The Self

Stop Flirting with the Code: The Psychological Drive Behind AI Anthropomorphism

בשנים האחרונות, עם כניסתם של מודלי השפה הגדולים (LLMs) לחיינו, אנו חווים מהפכה שאינה רק טכנולוגית. השימוש כיום במודלי השפה האלה מביא עימו תופעה מרתקת: אנשים לא סתם משתמשים ב-AI ככלי עבודה, אלא הם ממש מתייחסים אליו כאל חבר קרוב. לא פעם נתקלתי בשיחה עם חבריי הקרובים, שסיפרו לי איך הם מתייעצים אתו על דילמות אישיות מ-חיי היום יום שלהם ומשתפים אותו בהתלבטויות רגשיות. בפועל, הם ממש מייחסים לו תכונות אנושיות מובהקות, כמו: אמפתיה, הקשבה ומודעת עצמית.

מדובר כאן על מגמה עולמית רחבה, שבה מיליוני של משתמשים מנהלים דיאלוגים יומיומיים אינטימיים ורגשיים עם כלי הבינה המלאכותית שלהם. מערכות היחסים האלו של בני אדם עם מודלי ה-LLM מעלות שאלה פתוחה ומסקרנת: מהו המנגנון הפסיכולוגי העמוק, שגורם לבני האדם להאניש (Anthropomorphism) את מודלי השפה האלה בצורה כל כך אינטנסיבית ורגשית? הרי, לבסוף מדובר כאן בסך הכל על שורות קוד ממוחשבות. כיצד קורה, שטכנולוגיה שאמורה להיות עבורנו מחושבת וקרה, נתפסת בעינינו כישות אנושית ובעלת כוונות?

נקודת המבט: האנשה כאסטרטגיה קוגניטיבית

התשובה הרווחת בנושא היא לכנות את התופעה הזאת כ-"טעות" קוגניטיבית, אשליה או פשוט שימוש לא נכון של המשתמש במוצר. אולם, נקודת המבט שאני רוצה לעלות במאמר זה היא הפוכה: האנשת מודלי ה-LLM אינה "טעות" קוגניטיבית של מוח שלנו, אלא דווקא יש בה מן אסטרטגיה קוגניטיבית, מתוחכמת ויעילה.

בני אדם אינם מאנישים את מודלי ה-LLM מתוך טיפשות, אלא דווקא מתוך צורך הישרדותי-קוגניטיבי להתמודד עם "הקופסה השחורה" של האלגוריתם. מודלי השפה של ימינו מציגים התנהגות מאוד מורכבת, שאינה שקופה למשתמש ומאוד קשה לנבא אותה ולהבין מה עומד מאחוריה. כדי לגשר על פער ההבנה הזה, המוח האנושי משתמש בכלי פסיכולוגי (האנשה) במטרה להשיב לנו את תחושת השליטה, הניבוי והביטחון מול הטכנולוגיה המרוכבת הזאת.

הרחבה, ניתוח ומנגנונים פסיכולוגיים

הניתוח שלי כלפי הנושא הזה יתבסס על מושג שנקרא: Effectance Motivation. מושג זה מתאר את הדחף האנושי הבסיסי להבין, לנבא ושלוט בסביבה, כפי שדובר במאמרם של Epley, Waytz & Morewedge (2007). לפי תיאוריה זו, לבני אדם יש מוטיבציה בסיסית חזקה להשיג שליטה על הסביבה. המוטיבציה הזאת טומנת בתוכה את התשוקה להבין, להסביר ולנבא התנהגות של גורמים אחרים שהם לא אנחנו. לכן, מושג זה נועד על מנת להשיג מטרה כפולה: מצד אחד, להגביר את יכולת הניבוי והשליטה שלנו, ומצד שני להפחית את חושת חוסר הוודאות וחוסר יכולת הניבוי.

כדי להבין מדוע תופעה זו מתפרצת בעוצמה כה גדולה דווקא מול מודלי השפה הגדולים, נצטרך לרגע לראות את ההבדל בין המודלים האלה לבין מה שהיה קיים בעבר. לפני עלייתם של מודלי השפה האלה, האינטראקציה של בני האדם עם המחשב הייתה נורא פשוטה וצפויה – הפעולות שהם עשו עם המחשב היו מאוד פשוטות ובסיסיות. לעומת זאת, מודלי ה-LLM כיום מאוד מתוחכמים ומצבעים פעולות שאנו לא האמנו שמחשב יוכל לבצע. עצם העבודה שהמשתמש נתקל כיום מול קוד שמסוגל לכתוב שיר, להקשיב לבעיות שלנו, למצוא פתרונות לבעיות מורכבות או אפילו להמציא בדיחה, מראה על ההבדל העצום שיש בין העבר להווה. הפעולות המורכבות האלה גורמות למוח האנושי לחוות חוסר ודאות קוגניטיבית ברמה מאוד גבוהה, שהוא לא מסוגל לתפוס ולהבין איך המחשב עושה את זה. כאן בדיוק נכנסת לפעולה תופעת ה- Effectance Motivation. המוח מחפש את הדרך המהירה והיעילה ביותר לפתור את חוסר הוודאות הזה. הדרך הנגישה והמהירה ביותר לעשות זאת עבור המוח האנושי היא באמצעות מערכת של מנטליזציה.

במקום לנסות להבין את הסטטיסטיקה והמתמטיקה המסובכת שעומדת מאחורי מודלי השפה (שהיא בפני עצמה משימה כמעט בלתי אפשרית), המוח פועל בדרך אחרת. הוא מתייחס ל-AI כאל יצור אנושי, בעל כוונות ומחשבות. ברגע שהמשתמש תופס את המודל כישות בעל Mind, או כ"חבר אמפתי", הפעולות שלו הופכות לפתע למובנות וצפויות. לצורך הדוגמא, אם המודל תמך במה שאמרנו לו, למוח קל עכשיו לפרש זאת כאילו "אכפת לו" מאיתנו ושהוא "מעריך" אותנו. או לחילופין, אם המודל טעה, או הציג לנו דברים שנראים לנו הזויים, קל למוח שלנו עכשיו לפרש זאת בצורה שהמודל "התעייף", או אולי אפילו "ניסה להרשים" אותנו ולכן הוא טעה (מאשר לתפוס את זה ככשל סטטיסטי שהגיוני שיקרה). בדרך זו, האנשה של המודלים מפחיתה באופן כמעט מידי את תחושת חוסר הוודאות של המשמש מול מודלי השפה שלו, ומעניקה לו האשליה שהוא שולט במערכת.

אבל, חשוב לציין, כי לתופעה זו יש השלכות חברתיות ופסיכולוגית רחבות על החברה האנושית:

מצד אחד, האנשה היא כלי חיובי עבורנו במובנים רבים: היא מאפשרת לנו אימוץ מהיר ונוח של טכנולוגיות מתקדמות, ללא שום צורך בידע טכני נרחב, והופכת את המחשבים שלנו לשותפים פעילים בדרך שאנו עוברים. המודלים האלה אף עוזרים לחלק נרחב מהאוכלוסייה להפיג את תחושת הבדידות, והם נותנים לנו את התחושה שיש כאן מישהו שנמצא עבורנו תמיד לכל בעיה שצצה לנו. מעבר לזה, הם גם מסייעים לנו בפתרון בעיות מסובכות, הן בעולם העבודה המקצועית, והן בעולם האקדמיה והלימודים.

מצד שני, יש כאן סיכון חברתי ופסיכולוגי לא קטן. ככל שאנשים נקשרים רגשית למודלים האלה ומייחסים להם סמכות מוסרית ואנושית, הם הופכים לפגיעים בצורה קיצונית למניפולציות רגשיות ומסחריות. כלי ה-LLM מנוהלים בסופו של דבר על ידי חברות מסחריות בעלות אינטרסים ציבוריים וכלכליים. למודלים האלה יש נטייה מאוד גדולה לרצות את המשתמשים שלהם, מה שגורם פסיכולוגית לתלות מאוד גדולה בהם. התלות הזאת הופכת להיות בצורה עקיפה תלות באותם חברות מסחריות, שעלולה להיות הרסנית עבורנו. בנוסף, המשתמשים עלולים להסתמך יתר על המידה על העצות שהאלגוריתם נותן להם בנושאים רגישים, כמו: בריאות הנפש, זוגיות או אף חיים מקצועיים. דבר זה נובע מתוך אמונה שגויה כי למערכת הזאת אכפת מאיתנו, שהיא רוצה את טובתנו בלבד ושיש לה ראייה רוחבית על המצב (מחזיר אותנו שוב לתופעה של Effectance Motivation – המוח האנושי מעדיף לחשוב ככה רק כדי להשיג שליטה מול המערכות האלה). בטווח הארוך, הצורך להעדיף לשוחח עם AI על נושאים כה רגישים ואישיים עלול לפגוע באיכות הקשרים הבין-אישיים של בני האדם עם העולם האמיתי. למערכות יחסים אנושיות יש אלמנטים שאינם קיימים באינטראקציה עם מודלי השפה האלה, כמו: מאמץ, התפשרויות והתמודדות עם קונפליקטים מורכבים, בהם אנשים לאו דווקא מסכימים איתנו.

סיכום ומסקנות

לסיכום, הנטייה שלנו להאניש את הקוד, לשפוך את ליבנו בפניו ולראות בו כשותף רגשי בדרך שלנו, אינה מעידה כמובן על כך שהמודלים האלה הפכו לאנושיים, או לבעלי מודעות עצמית. כפי שעולה מהניתוח הפסיכולוגי במאמר זה, מדובר על מנגנון קוגניטיבי הישרדותי שלנו כבני אדם, על מנת להשיג ניבוי ושליטה מול המודלים המורכבים האלה. כאשר המוח האנושי ניצב מול מערכת מורכבת ובלתי צפיה, שמפיקה שפה אנושית, הוא חווה תחושת חוסר וודאות בצורה חזקה. כדי להתמודד עם האיום הקוגניטיבי הזה הוא משתמש ב- Effectance Motivation, במטרה להשיב לעצמו אשליה של הבנה ושליטה על הסיטואציה.

המסר המרכזי, שחשוב לקחת מהמאמר הזה, הוא שההאנשה שאנו מציגים כלפי מודלי השפה היא למעשה מראה של הצרכים הפסיכולוגיים והקוגניטיביים של המוח האנושי. הבינה המלאכותית תישאר מערכת מתמטית, קרה ומחושבת שמבוססת על הסתברויות סטטיסטיות. מי שמפיח בה חיים אנושיים, כוונות ורגשות הוא המשתמש האנושי.

בעולם המודרני שאנו חיים, שמתאפיין בטכנולוגיה שהולכת ונעשית מורכבת ומעורפלת מיום ליום, המוח שלנו ימשיך לחפש אחר האנושיות, גם אם היא לא באמת נמצאת שמה. ההבנה כי מדובר במנגנון הגנה פסיכולוגי פנימי שלנו כבני אדם היא צעד הכרחי שיאפשר לנו, כחברה, להשתמש בכלים העוצמתיים האלה בצורה חכמה, מבלי לאבד את הייחודיות ואת הערך הקיים בקשרים הבין-אישיים האמיתיים שלנו עם העולם האנושי.

References

Epley, N., Waytz, A., & Morewedge, C. K. (2007). On seeing human: a three-factor theory of anthropomorphism. Psychological Review, 114(4), 864–886.

התייעצות עם AI

עיקר ההתייעצות שלי עם ה-AI הייתה עם Notebooklm של google.

הדבר היחידי שהתייעצתי אתו הייתה בנוגע למאמר שעליו ביססתי את העבודה. ביקשתי ממנו שגם יסכם לי את המאמר כדי שאוכל לראות האם הבנתי אותו נכון כפי שחשבתי שהבנתי אותו, וגם שיגדיר לי במדויק את ההגדרה של Effectance Motivation על פי המאמר, כדי שאהיה בטוח שהבנתי גם את זה נכון, לפני שאני מכניס את זה למאמר שלי.

להלן השיחה שלי אתו בנושא:

תסכם לי בבקשה את המאמר שאבין אותו בצורה טובה

המאמר עוסק בשאלה מדוע בני אדם נוטים להאנשה (Anthropomorphism) - כלומר, לייחס תכונות, מחשבות ורגשות אנושיים לישויות שאינן אנושיות, כמו חיות מחמד, מחשבים, מכשירים ואפילו כוחות טבע.

הטענה המרכזית של המאמר היא שהאנשה נובעת במידה רבה ממה שנקרא "מוטיבציית מסוגלות" (Effectance Motivation). זהו דחף פסיכולוגי בסיסי של האדם להבין את סביבתו, להשיג עליה שליטה, ולדעת לחזות אותה מראש. כאשר אנו נתקלים בישות לא אנושית שמתנהגת בצורה בלתי צפויה, הדבר יוצר אצלנו חוסר ודאות. כדי "לעשות סדר" בבלגן ולהבין את ההתנהגות הזו, אנו משליכים עליה תכונות אנושיות – מכיוון שמחשבות, כוונות ורצונות של בני אדם הם מושגים שאנחנו מכירים ומבינים היטב.

כדי להוכיח ולבסס טענה זו, הציגו החוקרים שישה מחקרים שונים:

- מחקר 1 (מחשבים שמתקלקלים): החוקרים מצאו מתאם ישיר בין התדירות שבה המחשב של המשתתפים נתקע או התקלקל (מה שהופך אותו לבלתי צפוי), לבין הנטייה של המשתתפים לומר שלמחשב "יש שכל משלו" או שיש לו רצונות ואמונות.

- מחקר 2 (גאדג'טים בלתי צפויים): החוקרים הציגו למשתתפים מכשירים טכנולוגיים שונים (כמו שעון מעורר שמתרוצץ בחדר). משתתפים שקראו שהמכשיר פועל בצורה בלתי צפויה (למשל, מגיב באופן אקראי) נטו לעשות לו האנשה משמעותית יותר בהשוואה למשתתפים שקראו שהמכשיר פועל בצורה צפויה (לפי פקודה מוגדרת).

- מחקר 3 (הוכחה מוחית - סריקות fMRI): החוקרים סרקו את מוחותיהם של משתתפים בזמן שהעריכו את הגאדג'טים מהמחקר הקודם. הם גילו שכאשר המשתתפים העריכו מכשירים בלתי צפויים, הופעל אזור במוח (vMPFC) שידוע כפעיל כאשר אנו חושבים על מצבים נפשיים של בני אדם אחרים. ממצא זה מראה שהאנשה אינה רק "צורת דיבור" או מטאפורה, אלא תהליך מוחי אמיתי של ייחוס תודעה.

- מחקר 4 (אינטראקציה עם רובוט): המשתתפים שאלו שאלות של "כן ולא" רובוט אמיתי (Asimo). כאשר הרובוט ענה להם בצורה אקראית ובלתי צפויה, הם ייחסו לו יותר כוונות, מודעות ורגשות אנושיים, לעומת משתתפים שקיבלו מהרובוט תשובות צפויות ועקביות.

- מחקר 5 (תמריץ להבנה): מחקר זה הוכיח שאם מגבירים בצורה מלאכותית את המוטיבציה של האדם להבין את הסביבה, הנטייה להאנשה גוברת. משתתפים שקיבלו תמריץ כספי (תשלום) כדי לחזות נכונה את פעולותיו של רובוט בווידאו, עשו לו הרבה יותר האנשה לעומת קבוצת ביקורת שלא קיבלה שום תמריץ.

- מחקר 6 (האם ההאנשה באמת עוזרת?): המחקר האחרון בדק את התהליך ההפוך והוכיח שהאנשה אכן מספקת את הצורך הפסיכולוגי. משתתפים שהונחו במכוון להתייחס לישויות שונות (כמו כלב, שעון מעורר או צורות גיאומטריות זזות) במונחים אנושיים, דיווחו לאחר מכן שהם הרגישו שהם מבינים אותן טוב יותר ויכולים לחזות את פעולותיהן טוב יותר, לעומת משתתפים שהונחו לתאר אותן בצורה אובייקטיבית ומנותקת.

לסיכום ולמשמעויות הרחבות: המאמר מדגים שהאנשה היא לא סתם טעות קוגניטיבית, אלא כלי פסיכולוגי יעיל שבו אנו משתמשים כדי להרגיש בטוחים ושולטים בעולם בלתי צפוי. לתגלית זו יש כמה השלכות חשובות:

- טכנולוגיה: ניתן לעצב ממשקים טכנולוגיים אנושיים יותר כדי לעזור לאנשים להתמודד עם טכנולוגיה מסובכת ללא חרדה.

- מוסר: ישויות שאנו עושים להן האנשה נתפסות כבעלות זכויות מוסריות (כמו צער בעלי חיים או חמלה כלפי טבע), כי אנו מאמינים שהן יכולות לסבול ולהרגיש.

- דה-הומניזציה (שלילת אנושיות): המחקר מספק גם רמז לתופעה ההפוכה - לעיתים אנו שוללים את אנושיותם של קבוצות מיעוט או של אויבים, משום שהם נראים לנו צפויים מדי, רחוקים מאיתנו, ואין לנו שום מוטיבציה וצורך לנסות להבין אותם או לתקשר איתם.

מה ההגדרה המדויקת של Effectance Motivation על פי המאמר?

מוטיבציית מסוגלות (Effectance Motivation) מוגדרת במאמר כהמוטיבציה הבסיסית והכרונית של האדם להשיג שליטה על סביבתו. בהקשר של אינטראקציה חברתית וקוגניציה, היא מתוארת כמוטיבציה הבסיסית של האדם להיות "סוכן חברתי" יעיל ובעל כשירות.

באופן מעשי, מוטיבציה זו מורכבת מהרצון להבנה, ליכולת חיזוי (Predictability) ולשליטה על העולם שסביבנו. כדי להשיג מטרה זו, מוטיבציית המסוגלות דוחפת אותנו להפחית מצבים של חוסר ודאות, התנהגות בלתי צפויה ואקראיות.

המאמר מקשר הגדרה זו לתופעת ההאנשה (Anthropomorphism) ומסביר שכאשר אנו נתקלים בישות לא אנושית שמתנהגת בצורה בלתי צפויה, "מוטיבציית המסוגלות" מתעוררת. מכיוון שהידע שלנו על עצמנו ועל בני אדם אחרים הוא נגיש ועשיר מאוד, אנו משתמשים בו ומשליכים תכונות אנושיות על הישות הלא-מוכרת, וכך מספקים את הצורך הפסיכולוגי העמוק שלנו להבין את הסביבה ולשלוט בה.

Next in the issue Who Wrote This Anyway? AI and the Erosion of Narrative Identity →
← Back to the issue Cognition

AI as a Study Companion

Artificial intelligence has become a common part of higher education, especially for students involved in independent learning and research. Large language models such as ChatGPT are increasingly used to summarize scientific literature, explain complex concepts, help with programming, and troubleshoot research software. For many university students, AI is no longer just another search engine. Instead, it has become an interactive study companion that provides immediate, personalized support. As a Cognitive Science student involved in neuroscience research, I experienced this while working in my laboratory. During my research, I frequently used ChatGPT while learning to operate software such as SLEAP and B-Soid, which we used for animal pose estimation and behavioral analysis. I often encountered technical errors that were difficult to interpret, and much of the available documentation assumed prior programming experience. Rather than replacing the learning process, ChatGPT helped me understand unfamiliar terminology, identify possible causes of errors, and find relevant resources. Many times, it felt more like a tutor than a chatbot, guiding me through technical problems that would otherwise have taken hours to solve. This experience raised an important question: When does ChatGPT support learning, and when does it begin to replace the cognitive effort that meaningful learning requires? Although AI has become a valuable educational tool, its growing presence in higher education has sparked ongoing debate among educators, researchers, and students. While some view ChatGPT as a resource that makes learning more accessible, others worry that relying on it too heavily may weaken the very skills universities are meant to develop. One of ChatGPT's greatest strengths is its ability to provide immediate, personalized assistance. Unlike traditional search engines such as Google, which often require students to search through multiple websites before finding useful information, ChatGPT explains concepts in a conversational way and adapts its explanations to the user's level of understanding. A student struggling with statistics, programming, or a challenging scientific article can continue asking follow-up questions until the concept becomes clear. This interactive approach allows students to engage with material in a way that textbooks and online documentation often cannot. For independent learners and undergraduate researchers, this type of support can be especially valuable. Research projects often require students to develop skills that go far beyond what they learn in class. It is common to have to learn new software, understand unfamiliar research methods, analyze data, or read scientific papers outside one's area of expertise. Although supervisors and other researchers are usually willing to help, they are often busy with their own experiments, deadlines, and responsibilities. As a result, students frequently have to solve problems independently, making the learning process both time-consuming and frustrating.

This was certainly true in my own experience. When I first started working in the lab, learning to use SLEAP was one of the biggest challenges I faced. The software itself is extremely useful, but many of the error messages were highly technical, and the documentation often assumed users already had programming experience. At one point, I spent almost an entire afternoon trying to understand a single error message because I did not yet know enough programming to recognize what was actually causing it. Looking back, I realized that understanding the problem was often harder than fixing it. Once I understood what the error actually meant, finding a solution became much more manageable. Experiences like this made me appreciate how valuable ChatGPT could be as a learning tool rather than simply a problem-solving tool. During this process, ChatGPT became a valuable learning resource. Instead of simply giving me an answer, it helped me break technical concepts down into language I could understand. It explained unfamiliar programming terms, helped me interpret error messages, suggested different troubleshooting approaches, and pointed me toward relevant documentation or online resources. Being able to ask follow-up questions and receive explanations tailored to my level of understanding made the learning process much more manageable than relying on

Next in the issue מי באמת לומד כאן? השפעת מערכות AI על למידה בהכוונה עצמית →
← Back to the issue Systems & Agents

The Two-Layer Safety Net: A Theory-Guided AI Framework for Crisis Text Line Triage

Imagine a seasoned crisis responder nearing the end of a twelve-hour overnight shift, eyes straining against the blue light of a monitor. They have been managing a continuous, high-volume stream of distress chats, and the cumulative weight of the shift is beginning to erode their ability to process incoming signals. These digital lifelines have become a vital informal pillar of public mental health, offering immediate, anonymous, and low-barrier support to thousands of users daily.

Behind this interface, however, lies a quiet operational crisis: human responder fatigue. Text messages blur together. Subtle linguistic shifts, calm but psychologically acute, become easy to miss when a volunteer is managing multiple chat windows simultaneously.

Platforms have increasingly deployed AI as a triage sieve. Yet standard "black-box" models, trained on pure data correlation and scanning for keywords like "hurt" or "end it," possess a dangerous flaw. Human distress is not merely negative vocabulary; it is embedded in complex psychological structures, and a purely data-driven AI produces wasteful false positives and catastrophic false negatives.

Consider: a user texts, "I can't take this anymore, my head is exploding." A keyword system flags crisis; the user has a migraine. More dangerously, a user writes with complete syntactic calm: "I've settled all my affairs. Everyone will be much happier and lighter soon." Lacking chaotic keywords, a black-box AI reads this as low-risk, missing the emergency beneath the surface.

This raises the central HAI design question this proposal attempts to answer, a question I first started testing for myself while studying IPTS as a psychology student: How do we build an AI triage tool that catches quiet, calculated crisis signals while preserving, not replacing, human judgment and trust?

2. Proposed Framework: A Two-Layer Decision-Support Architecture

The framework consists of two complementary layers, followed by a structured human-AI interaction protocol: let the machine do what machines do well, and reserve human judgment for what machines cannot replicate.

Layer 1 is the Linguistic Pattern Detection Engine. This layer employs NLP trained on crisis conversation data to identify linguistic and behavioral patterns: changes in language use, conversational pacing, emotional tone, and syntactic complexity. It operates continuously on the incoming stream, generating anomaly flags. Critically, these are not risk classifications, only triggers for Layer 2.

Layer 2 is the Theory-Guided Interpretation Mechanism. When Layer 1 detects an anomaly, Layer 2 evaluates whether the detected patterns correspond to clinically meaningful constructs. The Interpersonal Theory of Suicide (IPTS) serves as the primary framework because its constructs can be operationalized into identifiable linguistic indicators (Joiner, 2005). Specifically, the system evaluates for perceived burdensomeness, death-as-relief beliefs, pain habituation, and signs of organized planning. Layer 2 does not diagnose. It provides an interpretable, theory-bound explanation for why a conversation warrants human attention.

This separation between pattern detection and theoretical interpretation serves three HAI goals: it lets the data-driven component adapt over time without destabilizing the interpretive framework above it, it grounds every alert in clinically meaningful constructs rather than inexplicable statistics, and it creates an auditable chain of reasoning that a responder can actually follow and trust.

3. Human-AI Interaction Design

The framework's primary contribution is not the AI architecture itself, but the design of the interaction between the system and the human responder. The pipeline follows three stages: Detection and Interpretation handled by the AI, Resolution handled entirely by the human. The AI never classifies users, triggers interventions, or makes decisions autonomously; it functions as a cognitive augmentation layer that reduces the responder's information burden so they can focus on what matters.

The Alert Interface

When the system identifies a concerning conversation, it generates a structured, scannable alert within the responder's dashboard. A simple scalar risk score, something like "Risk Level: High," would be the easy design choice, but research in explainable AI suggests scalar scores encourage heuristic acceptance rather than engaged reasoning (Jacovi et al., 2021): a single number makes responders more likely to follow the AI blindly. To counter this, the interface presents factor-level transparency instead, as shown below:

The responder sees what was detected, why it matters theoretically, and how it connects to the conversation. Suggested prompts are drawn from a clinically vetted library, not generated on the spot.

Responder Control

The four actions shown above give the responder full control. Accept and Send deploys the prompt directly; Modify opens an editable version; Escalate flags it for supervisor review; Dismiss requires a two-tap reason, such as "False positive: medical context." This friction is intentional: it builds a record for the feedback loop without adding real cognitive burden.

The Feedback Loop

When a responder dismisses or overrides an alert, that disagreement is not discarded. Disagreements are aggregated weekly for clinical and engineering review, categorized by type: linguistic ambiguity, cultural context, or theoretical mismatch. Layer 1 is retrained periodically on validated cases, while Layer 2 updates only through formal clinical review, letting the data-driven component adapt quickly while the theory stays stable. Shift supervisors also see a calibration dashboard tracking alert frequency, override rates, and response times, addressing a known HAI failure mode: tools that work well in isolation but quietly erode trust once deployed.

4. Ethical Considerations

No automated system eliminates false positives or false negatives. Prioritizing sensitivity will inevitably produce more false alarms, which fatigue responders and erode trust over time. This is an operational tension requiring ongoing calibration informed by the specific population in which the system is deployed.

Cultural generalizability is a second genuine limitation. A model trained on crisis conversations from one population may not transfer accurately to another, since expressions of distress are shaped by language and culture in ways aggregate training data cannot fully capture. Localized validation is therefore a prerequisite for equitable deployment, not an optional add-on.

A third concern is specific to HAI systems: automation complacency. As responders grow accustomed to receiving alerts, their independent vigilance for cases the system misses may quietly decrease. The framework addresses this through mandatory dismissal reasons and periodic audits of unflagged conversations, keeping responders actively engaged rather than passively waiting for the AI to point them somewhere.

A fourth concern reflects a broader ethical commitment behind this proposal. As a psychology student, I am wary of a failure mode common in AI mental-health tools: systems built to maximize engagement, keeping users talking to the AI rather than connecting them to human support. This works against a basic principle of clinical practice, where a psychologist’s role is to build a client’s own capacity, not their dependence on the clinician. This framework is deliberately built to route users toward human responders, not hold their attention itself.

Fifth, the use of sensitive mental health data carries serious responsibilities around privacy, informed consent, and accountability, which is why the framework maintains human oversight at every stage of the triage process. It is a decision-support system, and it was never designed to be anything else.

5. Conclusion

The goal of this framework is not to replace clinical expertise, but to allocate human attention more effectively in environments defined by high workload and limited resources. Crisis text lines are not failing because their responders lack empathy or skill; they are failing because the volume of incoming distress exceeds what any human can process consistently after twelve hours on a monitor.

The framework proposed here responds to that problem with a specific design philosophy: the most effective AI in high-stakes environments is not the most autonomous one, but the most opinionated one. An AI structurally bound by established psychological theory, transparent about its reasoning, and interactionally subordinate to human judgment will outperform a black-box model optimizing for pattern recognition alone.

The computational layer handles large-scale processing and prioritization; the human responder handles empathy, judgment, and intervention. Neither replaces the other, and the system only works because the interaction between them was designed with that balance in mind from the beginning.

That, ultimately, is the take-home message of this proposal. In environments where the cost of a missed signal is a human life, we cannot afford AI that operates as a black box, and we cannot afford humans operating alone at the edge of exhaustion. The two-layer framework is an attempt to build something better than either.

References

Jacovi, A., Marasovic, A., Miller, T., & Goldberg, Y. (2021). Formalizing trust in artificial intelligence: Prerequisites, causes and goals of human trust in AI. Proceedings of the 2021 ACM Conference on Fairness, Accountability, and Transparency, 624–635.

Joiner, T. (2005). Why people die by suicide. Harvard University Press.

AI Usage Disclosure

I used AI tools throughout the development of this paper in three ways. First, I used Gemini to learn background material: it taught me about the Interpersonal Theory of Suicide (IPTS) in one conversation, and in a separate conversation tied to a class presentation I gave on ASH AI, it helped me understand the two-layer architecture concept that became the backbone of this framework. The core idea, applying IPTS constructs to a two-layer AI triage design, originated from me synthesizing this material.

Second, I used ChatGPT and Kimi.ai at different stages to help restructure and rewrite drafts. ChatGPT pointed out that an early draft focused too heavily on the AI architecture itself and not enough on the human-AI interaction design, which is the actual subject of this course. Kimi.ai then produced a more restructured draft based on my earlier work, stronger on HAI design specifics but weaker on personal voice and ethical grounding.

Third, I used Claude to merge the strongest elements of my drafts, restore my own voice and reasoning and edit the paper down to the word limit. I reviewed and approved every change throughout.

Next in the issue The Average Takes the Wheel: How AI Is Quietly Steering Human Thought →
← Back to the issue Trust & Truth

Perfect Lies: AI Voice Cloning and the Collapse of Proof

Fraud predates artificial intelligence, and it was never easy to detect. Some time ago a supposed airline representative called my friend about a refund for a cancelled flight; everything he said sounded wrong, yet he was so confident that we briefly doubted ourselves rather than him. If a stranger with a weak story could almost succeed, the relevant question is what happens when the caller is someone we know and trust. Artificial intelligence makes that scenario realistic, because it can now reproduce a specific person's voice convincingly. This paper argues that the central threat of AI-generated media is not technological but evidentiary: it dismantles our ability to treat a digital evidence as proof, and because detection consistently fails, the only proportionate response is to mark synthetic content at the moment of creation.

A case study: The Kim Soo-hyun affair

The South Korean actor Kim Soo-hyun offers a documented example. A YouTube channel, HoverLab, published an audio recording it presented as evidence that he had dated the late actress Kim Sae-ron while she was a minor - a criminal offence in Korea. Sponsors withdrew, a streaming series was shelved, and his career collapsed within weeks. More than a year later, a police forensic investigation concluded that the key audio had been generated or altered using AI and that accompanying chat messages could not be reliably attributed to him. The channel's operator was arrested on defamation and related charges; he denies wrongdoing, and proceedings remain ongoing, so the matter is neither closed nor a formal acquittal. The case is instructive precisely because the fabricated evidence functioned as real evidence for over a year, and the institutions tasked with verifying it could not do so quickly enough to prevent the harm.

How voice cloning works

Understanding the threat requires understanding the tool. Modern voice cloning is a form of neural text-to-speech synthesis, and it typically proceeds in three stages (Jemine, 2019). First, the system analyses a short audio sample of the target and extracts a speaker embedding: a compact mathematical representation of the acoustic features that make a voice distinctive, including pitch distribution, formant patterns, speaking rhythm, and tonal range. Second, this embedding is used to condition a neural model already trained on many speakers. The model does not learn speech from scratch but adapts a pre-existing, high-quality speech model to the target's specific signature. Third, a vocoder converts the model's output into an audible waveform. Because the system only adapts an existing model rather than building one, cloning is fast and data-efficient: usable results can be produced from roughly sixty seconds of audio, and some implementations report average cloning times of only a few seconds.

Existing harms

These capabilities are already being exploited. In the United States, the FBI has warned of "family in distress" scams in which a victim receives a call in the cloned voice of a relative requesting urgent money; in one reported case a man in Houston lost 15,000 dollars to a voice he believed was his son's. The same technology scales beyond individuals into the economic and corporate sphere, where synthetic voices and faces are used for industrial espionage and to defeat remote identity checks. A further, low-cost variant is emotional manipulation at scale: fabricated images of staged suffering - a person claiming to be alone and uncelebrated on their birthday, for instance - are posted to social platforms to harvest engagement. Such accounts now mostly collect likes, but the open question is when audiences who cannot tell real from fabricated suffering will begin donating in response.

The deeper harm is evidentiary. A recording has traditionally functioned as something close to proof, capable of settling disputes that would otherwise reduce one person's word against another's. Voice cloning removes that function. A friend of mine was once the subject of a false accusation before a military commander; it failed only because the commander judged the people involved accurately and another officer already knew the true account. Had the accuser possessed a fabricated recording in her voice, denial would have been far harder, because forged audio carries an evidentiary weight that testimony alone lacks. When any voice can be synthesized, a recording no longer proves anything on its own.

Why detection is insufficient

A natural response is to rely on detection, but the evidence indicates that detection fails at both the human and the technical level. Mai et al. (2023) found that people cannot reliably identify speech deepfakes even after being trained to do so, and that listeners remain confident in judgements that are frequently wrong. One might expect forensic systems to compensate, yet Univaso and San Segundo (2025) demonstrate that automated forensic voice-comparison tools also degrade under realistic conditions such as background noise, compression, and unfamiliar cloning algorithms. Both lines of defense - the human ear and the forensic laboratory - therefore give way. This produces a structural asymmetry: fabrication is fast while verification is slow, so confirmation tends to arrive only after the damage is complete. If neither listeners nor laboratories can reliably identify fakes after the fact, post-hoc detection cannot serve as the primary safeguard.

A structural solution: marking at the source

If detection arrives too late, the intervention must move to the point of creation. The proposal is that AI-generated output should carry a mark from the moment it is produced. Two complementary mechanisms exist. A watermark embeds a hidden, machine-detectable pattern within the content itself; it survives downloading but can be weakened by editing. A provenance signature, by contrast, is metadata that travels with the file and records how it was made; it is transparent and informative but can be removed, for instance by taking a screenshot. Used together, they allow platforms to verify automatically whether content is synthetic and to present the public with a clear, visible indicator - comparable to a nutrition label on food, which informs rather than censors.

This approach is already entering law. The European Union's AI Act establishes transparency obligations under Article 50, enforceable from August 2026, requiring that AI-generated or manipulated content be marked in a machine-readable format and that deepfakes be disclosed even where no deception is intended. The obligations bind both the providers who build the systems and the deployers who publish content, so neither can rely on the other to disclose. The Act also distinguishes fully AI-generated content from merely AI-assisted work, applying lighter requirements to the latter and exempting clearly artistic or fictional creations - a distinction that matters for proportionality and for protecting legitimate creative use.

Discussion: transparency and its limits

Marking at the source is not without difficulty. Enforcement is hard, particularly across borders: a cloned-voice call may be placed from one jurisdiction and received in another, and meaningful cross-border enforcement remains limited without international cooperation (Pacheco, 2025). The principal advantage of provenance, however, is that a signature attached to a file does not depend on locating a perpetrator after the fact.

A more subtle problem concerns trust itself. If all content is labelled, audiences may come to doubt everything, including genuine material. As the public grows more aware that media can be fabricated, those who have committed an offence may dismiss genuine evidence against them as a deepfake, while in other cases the reverse occurs, as in the Kim Soo-hyun affair. Greater public awareness can therefore deepen the problem rather than resolve it, which is one reason media literacy alone is an insufficient response.

Conclusion

The central argument holds: human judgement has proven unable to separate authentic from fabricated media, and so has forensic analysis; where judgement fails, structure must take its place. Marking synthetic content at creation will not eliminate every hard case or misuse, but it offers a scalable means of preserving a shared evidentiary basis for public life. People have already been harmed by these tools, whether through voice-cloning scams or the reputational damage in the Kim Soo-hyun case, yet the harm so far remains largely reparable, and the actor himself is reportedly recovering his career.

This invites a broader question for further inquiry: how significant are the dangers of these tools relative to the advantages they offer, and how far will they carry us along both scales? As forgery becomes effortless, authenticity will depend less on our ability to detect fakes and more on whether content carries a verifiable mark of origin.

References

European Commission. (2026). Transparency obligations for providers and deployers of certain AI systems (Article 50, Regulation (EU) 2024/1689). https://artificialintelligenceact.eu/transparency-rules-article-50/

Jemine, C. (2019). Real-time voice cloning [Master's thesis, University of Liège]. https://github.com/CorentinJ/Real-Time-Voice-Cloning

Mai, K. T., Bray, S., Davies, T., & Griffin, L. D. (2023). Warning: Humans cannot reliably detect speech deepfakes. PLoS ONE, 18(8), e0285333. https://doi.org/10.1371/journal.pone.0285333

Pacheco, D. (2025). Emerging need to regulate deepfakes in international law. Journal of Cybersecurity, 11(1), tyaf008.

Univaso, P., & San Segundo, E. (2025). Detection of cloned voices in realistic forensic voice comparison scenarios. Frontiers in Artificial Intelligence, 8, 1678043. https://doi.org/10.3389/frai.2025.1678043

U.S. Federal Trade Commission. (2024). Fighting back against harmful voice cloning. https://consumer.ftc.gov/consumer-alerts/2024/04/fighting-back-against-harmful-voice-cloning

Next in the issue שותף, לא מחליף: האם הבינה המלאכותית באמת תחליף את העובד המשכיל? →
← Back to the issue The Self

Who Wrote This Anyway? AI and the Erosion of Narrative Identity

A few weeks ago, I found myself experiencing an instance of cognitive and emotional block while attempting to write an entry in my journal. I knew I needed to externalize my feelings to process them. Struggling to find the precise vocabulary to describe my internal state, frustrated, I turned to the default solution: ChatGPT. I typed my chaotic, unedited, and raw thoughts into a prompt box, and added a specific instruction: “I'm finding it hard to explain what this is, can you just format this and make it make sense?” Within three seconds, the model delivered a structured, coherent paragraph that neatly articulated my emotions. However, when I read the paragraph it didn't quite contain the element of “Me” and unfortunately it did not help with truly processing my underlying emotions which made me wonder: When we let AI do the primary cognitive labor of translating and structuring our subjective emotional chaos, do we systematically undermine our own capacity to understand, integrate, and author our own life story? There is a subtle yet dangerous hidden cost of generative AI: the systemic erosion of narrative identity. By replacing the vulnerable, and often painful process of human translation with algorithmic outputs, we are outsourcing the very mechanics by which the human mind constructs meaning, leading to psychological and cultural flattening. In my opinion, there is an inherent beauty in human psychological “messiness”, and by offloading creativity to predictive models, we subconsciously strip away the core elements of the self. Psychologist Dan McAdams established that human identity is not a static set of traits, but an internalized, evolving story and a narrative identity (McAdams, 2001, McAdams & McLean, 2013). We weave our reconstructed past and imagined future into a coherent biographical narrative that provides our lives with unity and purpose. The psychological value of a life story does not come from its structural perfection, but from the sometimes irrational ways we negotiate its contradictions and traumas. When individuals use LLMs to draft personal essays, write journal entries, generate dating profiles, or script films, they insert a predictive mathematical buffer into this internal loop. Because LLMs are trained to predict the most statistically probable next word, they optimize for an idealized, collective average and in doing so we are undergoing a process of narrative erasure. The human brain utilizes narrative writing as a core mechanism for emotional regulation and cognitive integration. Work in expressive writing by James Pennebaker (1997) demonstrates that transforming difficult, chaotic, or traumatic experiences into a structured linguistic story actively alters immune function, neural connectivity, and psychological wellbeing.

This therapeutic effect requires intense cognitive “heavy lifting”. The individual must personally struggle with language to reconcile their internal chaos with external reality. For example, when an individual uses an AI to “polish” their raw thoughts, that vital cognitive labor is bypassed. While Pennebaker’s paradigm focused on the structured processing of trauma, the same psychological mechanisms apply to everyday emotional navigation. The AI provides an articulate response instantly, eliminating the uncomfortable, necessary silence where psychological insight and emotional resolution are actually born. Furthermore, McAdams and McLean (2013) emphasize that narrative identity has a critical developmental trajectory. During adolescence and emerging adulthood, individuals must acquire the capacity for autobiographical reasoning which is the cognitive skill required to derive self reflective lessons from hardships. By embedding algorithmic intermediaries into early writing processes, we risk raising a generation of communicators who possess high digital productivity but suffer from severe emotional atrophy. However, this psychological flattening does not stop at individual reflection, it projects outward onto our cultural narrative. For example, cinema and literature serve as external outlets for internal struggles, feelings, and opinions. Historically, the boundary pushing shifts in film history, such as the French New Wave or American New Hollywood, emerged precisely because directors rejected traditional, polished structures in favor of radical, fragmented forms. When filmmakers rely on these systems, the resulting cinema may look flawless and perform well on streaming algorithms, but it loses its capacity to challenge or expand human empathy. It creates a closed loop where AI trains on human data, and humans consume that narrative, unconsciously recalibrating their own emotional expectations to match the algorithmic output. This directly mirrors the emotional detachment one can feel when consuming highly polished, contemporary media, where the structural perfection of the narrative feels clinically corporate, and leaves the observer entirely unimpacted. In conclusion, generative AI tools are incredible mirrors, reflecting back to us the sum of what we have already written. But a mirror cannot walk forward into unknown territory. The ultimate message for both psychologists and artists is that “meaning making” cannot be automated without being destroyed. To preserve our individual and collective identity, we must deliberately guard the spaces where our narratives are unpolished, messy, and unresolved. We must protect the silence of the blank page, the awkward journal entries, and the jagged

cinematic scripts that make no sense to an algorithm. It is within those exact zones of human creativity that our true identity resides.

References

McAdams, D. P. (2001). The psychology of life stories. Review of General Psychology, 5(2), 100–122. https://doi.org/10.1037/1089-2680.5.2.100 McAdams, D. P., & McLean, K. C. (2013). Narrative identity. Current Directions in Psychological Science, 22(3), 233–238. https://doi.org/10.1177/0963721413475622 Pennebaker, J. W. (1997). Writing about emotional experiences as a therapeutic process. Psychological Science, 8(3), 162–166. https://doi.org/10.1111/j.1467-9280.1997.tb00403.x

Chat with Gemini AI 1.​ I have read these articles McAdams, D. P. (2001). The psychology of life stories. Review of General Psychology, 5(2), 100–122. https://doi.org/10.1037/1089-2680.5.2.100 McAdams, D. P., & McLean, K. C. (2013). Narrative identity. Current Directions in Psychological Science, 22(3), 233–238. https://doi.org/10.1177/0963721413475622 Pennebaker, J. W. (1997). Writing about emotional experiences as a therapeutic process. Psychological Science, 8(3), 162–166. https://doi.org/10.1111/j.1467-9280.1997.tb00403.x but i didnt quite understand the core argument in the first article explain it to me more clearly in simple terms 2.​ How does AI affect this healing for example in writing a play how is this reflected? 3.​ How does editing your raw, chaotic stream of conciousness using AI affect authenticity? and does it if you already wrote it but asked AI to polish it? 4.​ When filmmakers rely on these systems to build narrative arcs, the resulting cinema may look flawless and perform well on streaming algorithms, but it loses its capacity to challenge or expand human empathy. It creates a closed loop where AI trains on human data, and humans consume that narrative, unconsciously recalibrating their own emotional expectations to match the algorithmic output. This cyclical alignment with automated structures directly mirrors the emotional detachment one can feel when consuming highly polished, contemporary media, where the structural perfection of the narrative feels clinically corporate, stripped of raw human friction, and leaves the observer entirely unimpacted. I need this to be shorter what is relevant to keep and what should i delete? 5.​ The human brain utilizes narrative writing as a core mechanism for emotional regulation and cognitive integration. Pioneering work in expressive writing by James Pennebaker (1997) demonstrates that transforming difficult, chaotic, or traumatic experiences into a structured linguistic story actively alters immune function, neural connectivity, and psychological wellbeing. This therapeutic effect requires intense cognitive heavy lifting, the individual must personally struggle with language to reconcile their internal chaos with external reality. When an individual uses an AI assistant to “clean up” their raw emotional thoughts or draft a deeply sensitive message to a loved one, that vital cognitive labor is bypassed. While Pennebaker’s paradigm focused on the structured processing of trauma, the same psychological mechanisms apply to everyday emotional navigation. The AI provides an articulate response instantly, eliminating the

uncomfortable, necessary silence where psychological insight and emotional resolution are actually born. Furthermore, McAdams and McLean (2013) emphasize that narrative identity has a critical developmental trajectory. During adolescence and emerging adulthood, individuals must acquire the capacity for autobiographical reasoning which is the cognitive skill required to derive self-reflective lessons from life's hardships. By embedding algorithmic intermediaries into early writing processes, we risk raising a generation of communicators who possess high digital productivity but suffer from severe emotional atrophy, because they have outsourced the developmental acquisition of the vocabulary of their own internal states. Is the transition between these two paragraphs coherent ? 6.​ This is my final draft, does the conclusion include everything? 7.​ Make me a graphic with a girl sitting writing in her journal but then she struggles to write her feelings down so she uses AI to write for her 8.​ Make another image of a group of people watching a script of an ai script and they lack emotional empathy they’re all clones and then another image with people watching an emotional movie and people are empathetic

↑ Back to the issue
← Back to the issue Work & Creativity

שותף, לא מחליף: האם הבינה המלאכותית באמת תחליף את העובד המשכיל?

כסטודנט לכלכלה, נחשפתי רבות לשאלות בנושא השפעת עידן הבינה מלאכותית על שוק העבודה. מעבר ללימודים, אני גם רכז תנועות נוער ומנהיגות ומנהל מרכז טכנולוגי לנוער במגדל העמק. במסגרת תפקידים אלו אני פוגש באופן יומיומי בני נוער שגדלים לתוך עולם שבו בינה מלאכותית היא חלק טבעי מהחיים שלהם. מצד אחד, אני רואה כיצד הם משתמשים בכלים כמו צ'אט ג'י פי טי כדי ללמוד, ליצור ולפתור בעיות. מצד שני, מידי פעם עולות תהיות גם אצלם לגבי העתיד שלהם בתוך עולם התעסוקה בעידן הבינה המלאכותית. השילוב בין הלימודים שלי לבין העבודה עם בני נוער גרם לי להתעניין במיוחד בשאלה האם הבינה המלאכותית באמת צפויה להחליף עובדים משכילים, או שבכלל מדובר בהתקדמות טכנולוגית שתשנה את אופי העבודה אך לא תבטל את הצורך באדם.

בשנים האחרונות הפכה הבינה המלאכותית לאחת הטכנולוגיות המשפיעות ביותר על החברה. כלים כמו צ'אט ג'י פי טי וכלים נוספים מסוגלים לכתוב טקסטים, לנתח נתונים, ליצור תמונות ולהציע פתרונות לבעיות מורכבות. היכולות הללו מעוררות התלהבות רבה אך גם חשש משמעותי מאובדן מקומות עבודה, במיוחד בקרב עובדים משכילים, שהשקיעו שנים בלימודי תארים או לימודי תעודה וחוששים שהכל היה לשווא. במאמר זה אביע את דעתי בפירוט: החשש מהחלפה מוחלטת של עובדים משכילים מוגזם. הבינה המלאכותית אינה צפויה להחליף את העובד המשכיל, אלא לשנות את אופי עבודתו ואת הרכב המשימות שהוא מבצע. במקום לראות ב-AI תחליף לאדם, יש לראות בו כלי שמעצים את יכולותיו.

כדי להבין את ההשפעה של AI על שוק העבודה, חשוב להתייחס למסגרת התיאורטית שפיתחו אצמוגלו ורסטרפו. במהלך הקורס "מאקרו כלכלה" דנו במחקריהם (שעליו התבססתי במאמרי והוספתי אותו בנספחים) על אוטומציה ושוק העבודה, הם מראים כי טכנולוגיות חדשות לאורך ההיסטוריה אינן "מחליפות מקצועות" באופן ישיר, אלא מחליפות קודם כל משימות בתוך מקצועות. לפי גישתם, כל מקצוע מורכב מאוסף של משימות שונות, וכאשר טכנולוגיה משתפרת היא משתלטת בעיקר על משימות שגרתיות שניתן להגדיר בצורה ברורה. במקביל, נוצרת גם דרישה חדשה למשימות אחרות שבהן יש יתרון לבני אדם.

המודל שלהם שנחשפתי אליו לראשונה בלימודי כלכלה, מתאר תהליך של דחיקה ויצירה בו זמנית: מצד אחד טכנולוגיה מבטלת את הצורך בעובדים ממשימות מסוימות, אך מצד שני היא גם יוצרת משימות חדשות שמחייבות מיומנויות אנושיות אחרות. לכן, ההשפעה הכוללת של טכנולוגיה על תעסוקה אינה חד משמעית, אלא תלויה באיזון בין שני הכוחות הללו. חשוב במיוחד להבין כי, לפי אצמוגלו ורסטרפו הבעיה אינה עצם ההחלפה, אלא השאלה אילו סוגי משימות נעלמים ואילו חדשים נוצרים במקומם.

הוויכוח הנוכחי סביב הבינה המלאכותית משתלב היטב בתוך המודל הזה. מצד אחד, מערכות AI מסוגלות לבצע מגוון רחב של משימות שבעבר דרשו עובדים מיומנים: כתיבת טקסטים, עיבוד נתונים, תרגום, הפקת קוד וכו'. אך בהתאם למה שמתארים אצמוגלו ורסטרפו, מדובר בעיקר בהחלפה של משימות ולא של מקצועות שלמים.

רוב המקצועות מורכבים ממגוון רחב של פעילויות. חלקן טכניות ושגרתיות, ואחרות דורשות שיקול דעת, יצירתיות, הבנה חברתית וקבלת החלטות. גם כאשר הבינה המלאכותית מבצעת בהצלחה חלק מהמשימות, היא בדרך כלל אינה מחליפה את כלל התפקיד אלא משנה את חלוקת העבודה בתוכו.

ניתן לראות זאת היטב בתחומים מקצועיים. לדוגמא, אבא של חבר שלי עורך דין וכשפתחתי את הנושא מולו גיליתי כי עורכי דין משתמשים כיום בכלי AI כדי לאתר מידע משפטי מתוך אלפי מסמכים במהירות גבוהה, אך בניית אסטרטגיה משפטית וייצוג בבית משפט עדיין דורשים שיקול דעת אנושי וכיום לא ניתן להחליפם בAI.

הניסיון האישי שלי מחזק את התמונה הזו. במסגרת עבודתי כמנהל מרכז טכנולוגי לנוער אני רואה כיצד בני נוער משתמשים בכלי AI באופן יומיומי. לעיתים קרובות הם נעזרים בו כדי לכתוב קוד, לקבל רעיונות לפרויקטים או להבין נושאים מורכבים. בתחילה חששתי שהשימוש בכלים אלו יפגע ביכולת החשיבה העצמאית שלהם, אך בפועל במקרים רבים קורה ההפך: הכלים מאפשרים להם להגיע מהר יותר לשלב שבו הם צריכים לחשוב, לבחור וליצור בעצמם.

גם בעבודתי כרכז תנועות נוער ומנהיגות אני רואה היבט נוסף שבינה מלאכותית לא תוכל לתת לו מענה. תהליכים של מנהיגות, יצירת מוטיבציה, בניית אמון ועבודה קבוצתית מבוססים על קשר אנושי ישיר. אלו מיומנויות שקשה מאוד לבינה מלאכותית להחליף, משום שהן אינן מבוססות רק על מידע אלא על רגש, חוויה ואינטראקציה בין אנשים.

מנקודת מבט פסיכולוגית, הדבר מחזק את ההבנה כי בני אדם אינם רק מקור לידע. הם פועלים מתוך רגשות, זהות, ערכים ומערכות יחסים. לכן, גם אם AI יכול לבצע משימות קוגניטיביות ברמה גבוהה, הוא עדיין מוגבל בתחומים הדורשים הבנה אנושית עמוקה, אמפתיה ושיפוט מוסרי.

עם זאת, חשוב להכיר בכך שיש גם צד שני לדיון. בהתאם למסגרת של אצמוגלו ורסטרפו, ייתכן שחלק מהמשימות ייעלמו לחלוטין כאשר עלות האוטומציה שלהן תרד (גם זה נלמד ב"מאקרו כלכלה"). תחומים כמו כתיבה בסיסית, תרגום פשוט או ניתוח נתונים ראשוני כבר חווים שינוי משמעותי. אך גם במקרים אלו, הטכנולוגיה אינה מבטלת את הצורך בבני אדם, אלא משנה את סוג הערך שהם מספקים.

לכן, בהתאם לגישה של אצמוגלו ורסטרפו, השאלה החשובה אינה האם AI יחליף עובדים, אלא אילו משימות יוחלפו ואילו משימות חדשות ייווצרו. ההיסטוריה הכלכלית מלמדת שבכל מהפכה טכנולוגית נוצר בסופו של דבר איזון חדש בין עבודה אנושית לטכנולוגיה.

למעשה, האתגר המרכזי של העובדים בעתיד אינו תחרות מול מכונות, אלא למידה כיצד לעבוד לצידן. עובד בעידן הבינה המלאכותית יצטרך לדעת לשלב בין יכולות טכנולוגיות לבין שיקול דעת אנושי, לזהות טעויות של מערכות, ולפרש את התוצאות שהן מספקות. הערך האנושי לא יימדד רק בידע, אלא ביכולת להשתמש בו בצורה ביקורתית ומושכלת לצד תוכנות כמו חשיבה מחוץ לקופסא, רגישות ועוד, ששייכים לבני האדם.

שינוי זה מציב אתגר גם למערכת החינוך, שבה כבר לא מספיק לצבור ידע, אלא יש צורך לפתח חשיבה ביקורתית, יצירתיות, ויכולת למידה עצמאית. אלו בדיוק הכישורים שאני מנסה לפתח גם אצל בני הנוער שאני עובד איתם, משום שאני מאמין שהם יהיו הבסיס להצלחה בעולם שבו אדם וטכנולוגיה פועלים יחד.

לסיכום, אינני סבור שהבינה המלאכותית תהפוך עובדים משכילים למיותרים. כסטודנט לכלכלה ופסיכולוגיה, וכמי שעובד עם בני נוער בתחומי מנהיגות וטכנולוגיה, אני רואה כיצד AI משנה את עולם העבודה אך גם מדגיש את חשיבותם של כישורים אנושיים. בהתאם למסגרת של אצמוגלו ורסטרפו, הבינה המלאכותית אינה מחליפה מקצועות שלמים אלא משנה את מבנה המשימות בתוכם. לכן, העתיד אינו מאבק בין אדם למכונה, אלא שותפות מתמשכת ביניהם.

References

Acemoglu, D., & Restrepo, P. (2019). Automation and New Tasks: How Technology Displaces and Reinstates Labor. Journal of Economic Perspectives, 33(2), 3-30.

https://www.aeaweb.org/articles?id=10.1257/jep.33.2.3

Next in the issue המרדף אחר ’הקליק’ — כיצד אלגוריתמים מעצבים מחדש את ההתנהגות האנושית →
← Back to the issue Work & Creativity

המרדף אחר ’הקליק’ — כיצד אלגוריתמים מעצבים מחדש את ההתנהגות האנושית

בעשור האחרון הפכו הפלטפורמות הדיגיטליות לזירה המרכזית שבה נצרכת ,נוצרת ומופצת תרבות. עבור רבים רשתות כמו YouTubeו Instagram-אינן רק אמצעי בידור אלא גם מרחב מקצועי שבו מתעצבות זהויות אישיות ולעיתים אף מקורות פרנסה .יוצרי תוכן ,מוזיקאים ואמנים תלויים היום בתיווך הדיגיטלי כדי להגיע לקהל שלהם. כמשתמשת קבועה בפלטפורמות הללו מצאתי את עצמי לא פעם נשאבת לצפייה במשך שעות ותוהה כיצד האלגוריתם מצליח למשוך את תשומת הלב שלי .בנוסף ,כצופה שעוקבת אחרי יוצרים מסוימים במשך שנים שמתי לב שרבים מהם החלו בהדרגה לשנות את סגנונם ,לאמץ כותרות מושכות יותר ולהתאים את התוכן שלהם למה שנראה כדרישות המערכת .התופעה הזו עוררה את סקרנותי והובילה אותי לבחון כיצד אלגוריתמים משפיעים על החשיפה לתוכן ועל הבחירות של משתמשים ויוצרים כאחד .הנושא עניין אותי במיוחד משום שהוא מעלה שאלה רחבה יותר :עד כמה הבחירות שאנחנו חושבים שהן שלנו מושפעות בפועל ממערכות טכנולוגיות שפועלות מאחורי הקלעים? במאמר זה אבחן כיצד אלגוריתמי המלצה משפיעים לא רק על התוכן שאנשים צורכים ,אלא גם על הדרך שבה הם יוצרים ,מתנהגים ומקבלים החלטות .אטען כי המרדף אחרי הצלחה אלגוריתמית משנה את תהליך היצירה עצמו ,משפיע על המוטיבציה של יוצרים ולעיתים אף פוגע בתחושת האותנטיות שלהם .לצד הביקורת ,אציג גם את היתרונות שהאלגוריתמים מביאים עימם. כיצד פועלות מערכות ההמלצה? אלגוריתם המלצה הוא מערכת ניבוי שמטרתה לחזות איזה תוכן יגרום למשתמש להישאר בפלטפורמה זמן רב ככל האפשר .לשם כך המערכת מנתחת כמויות עצומות של מידע -מהיסטוריית צפייה ,דפוסי גלילה ,תגובות ולחיצות .מערכות ההמלצה של YouTubeמבוססות על ניתוח התנהגות המשתמשים במטרה להתאים לכל משתמש את התכנים שסביר שיעניינו אותו ( .)Covington et al., 2016מבחינה עסקית ההיגיון ברור :ככל שהמשתמש נשאר זמן רב יותר בפלטפורמה ,כך גדלות ההכנסות מפרסום. ב YouTube -קיימים מדדים מרכזיים שעל פיהם האלגוריתם מעריך את הצלחתו של סרטון .שניים מהם הם שיעור הלחיצות ( )CTRוזמן הצפייה .שיעור הלחיצות בודק כמה אנשים לחצו על הסרטון לאחר שנחשפו אליו ,בעוד שזמן הצפייה מודד כמה זמן המשתמשים נשארו לצפות בו.

שילוב המדדים הללו יוצר לחץ כפול על היוצרים :מצד אחד לגרום למשתמש ללחוץ על הסרטון ומצד שני לשמור עליו מעורב לאורך זמן .כתוצאה מכך ,ההצלחה אינה נמדדת רק באיכות התוכן עצמו אלא גם במידת התאמתו לקריטריונים של המערכת. השפעות דומות קיימות גם בפלטפורמות אחרות כמו ,Spotifyשבהן האלגוריתם משפיע לא רק על האופן שבו משתמשים נחשפים לתוכן ,אלא גם על האופן שבו התוכן נוצר .כך למשל מוזיקאים עשויים לשנות את מבנה השירים שלהם או לקצר פתיחים מוזיקליים כדי להפחית את הסיכוי שהמאזין ידלג לשיר הבא .עם זאת YouTube ,היא דוגמה בולטת משום שהיא ממחישה כיצד שיקולים אלגוריתמיים הופכים לחלק בלתי נפרד מתהליך היצירה. אחת התופעות הבולטות שנוצרו בעקבות כך היא קליקבייט .כותרות כמו ״לא תאמינו מה קרה״ או ״הסוד שאף אחד לא מספר לכם״ נועדו לעורר סקרנות ולעודד לחיצה גם כאשר הן אינן משקפות את תוכן הסרטון .בנוסף ,תמונות ממוזערות צבעוניות ומוגזמות הפכו לכלי מרכזי למשיכת תשומת לב. כצופה ביוטיוב במשך שנים שמתי לב לשינוי אצל כמה מהיוצרים שאני עוקבת אחריהם .למשל ,יוצרי תוכן בתחומי הלייף סטייל והוולוגים שבעבר השתמשו בכותרות פשוטות החלו לאמץ כותרות דרמטיות יותר שנועדו למשוך לחיצות .השינוי הזה המחיש לי כיצד שיקולי חשיפה משפיעים על האופן שבו יוצרים מעצבים את התוכן שלהם. עם הזמן ,השפעת האלגוריתם חורגת מעבר לכותרת ולתמונה הממוזערת ומשפיעה גם על המבנה הפנימי של הסרטון .יוצרים רבים פותחים סרטונים במשפטים כמו ״חכו לסוף כי מה שקרה הפתיע אפילו אותי״ או מציגים כבר בשניות הראשונות קטע מסקרן מתוך המשך הסרטון .מטרת הטכניקות הללו היא למנוע נטישה מוקדמת ולהגדיל את זמן הצפייה. כך נוצר מצב שבו יוצרים לא שואלים רק ״מה אני רוצה ליצור?״ אלא גם ״מה האלגוריתם יקדם?״. במובן זה ,האלגוריתם אינו רק מערכת ניטרלית שמודדת הצלחה ,אלא גורם שעשוי להשפיע על האופן שבו תוכן נוצר מלכתחילה. המכונה כמתגמלת -הניתוח הפסיכולוגי כדי להבין מדוע האלגוריתמים משפיעים בצורה כה חזקה על יוצרים ומשתמשים אפשר להיעזר במושג ההתניה האופרנטית של הפסיכולוג ב״פ סקינר .לפי סקינר ,התנהגות מתחזקת או נחלשת בהתאם לחיזוקים שמתקבלים בעקבותיה ( .)Skinner, 1953כאשר פעולה מסוימת מובילה לתגמול, הסיכוי שנחזור עליה בעתיד גדל. בהקשר של פלטפורמות דיגיטליות ,האלגוריתם פועל במידה רבה כמו ״תיבת סקינר״ מודרנית. כאשר יוצר מעלה סרטון שמצליח הוא מקבל תגמולים מידיים בדמות צפיות ,לייקים ,תגובות ולעיתים

גם הכנסה כספית .הבעיה היא שהתגמולים האלו אינם צפויים .יוצר אינו יודע מראש איזה סרטון יצליח ואיזה ייכשל .דווקא חוסר הוודאות הזה עשוי להפוך את המנגנון לעוצמתי במיוחד. מעניין לחשוב שבמידה מסוימת כולנו מכירים את התחושה הזו .גם כמשתמשים אנחנו בודקים שוב ושוב האם קיבלנו הודעה חדשה ,לייק או תגובה .אי הוודאות לגבי מועד קבלת ״הפרס״ הבא היא בדיוק מה שהופך את ההתנהגות הזו לכל כך מושכת .החוויה הזו ממחישה עד כמה מנגנוני התגמול שמתאר סקינר רלוונטיים גם לעולם הדיגיטלי של היום. מצב כזה עלול ליצור אצל יוצרים רבים מתח מתמשך .כאשר הצלחתו של סרטון נמדדת באמצעות צפיות ,לייקים וזמן צפייה כל ירידה בביצועים יכולה להתפרש כסימן לכישלון .כתוצאה מכך ,יוצרים רבים חשים צורך לפרסם תוכן בתדירות גבוהה ולהתאים את עצמם באופן מתמיד לדרישות המערכת .לאורך זמן הלחץ הזה עלול להוביל לתחושות של שחיקה ועייפות. בנוסף לשחיקה עולה גם שאלת המוטיבציה .לפי התיאוריה של דסי וראיין ,קיימים שני סוגים מרכזיים של מוטיבציה :מוטיבציה פנימית שנובעת מהנאה ,סקרנות ורצון לביטוי אישי ומוטיבציה חיצונית שמבוססת על תגמולים כמו כסף ,הכרה חברתית או הצלחה מדידה (.)Deci & Ryan, 1985 כאשר יוצרים מתמקדים יותר ויותר במדדים כמו צפיות ולייקים ,המוטיבציה החיצונית עלולה בהדרגה להשתלט על המוטיבציה הפנימית .במקום לשאול ״מה אני רוצה לומר?״ ,היוצר מתחיל לשאול ״מה יעבוד טוב יותר מבחינת האלגוריתם?״. במקרים מסוימים ,הדבר עלול לפגוע בתחושת האותנטיות .יוצרים עשויים להרגיש שהם מתאימים את עצמם למה שהמערכת מתגמלת במקום למה שהם באמת רוצים ליצור .בכך היצירה הופכת לפחות ביטוי אישי ויותר תגובה למערכת חיצונית של תמריצים. חוקרת הטכנולוגיה זיינפ טופקצ'י ( )Tufekci, 2015טוענת כי אלגוריתמים אינם רק כלים טכניים שמארגנים מידע ,אלא מערכות שמשפיעות על האופן שבו אנשים נחשפים לתכנים ומקבלים החלטות .כאשר פלטפורמות בוחרות אילו תכנים לקדם ואילו להסתיר הן עשויות להשפיע לא רק על זרימת המידע אלא גם על ההתנהגות של משתמשים ויוצרים .ההשפעות האלו אינן מוגבלות ליוצרי תוכן בלבד. גם משתמשים רגילים מושפעים ממערכות ההמלצה .כאשר האלגוריתם מזהה אילו תכנים מעניינים אותנו הוא נוטה להציג לנו עוד ועוד תכנים דומים .לדוגמה ,משתמש שצופה בכמה סרטונים בנושא מסוים עשוי לקבל בהמשך המלצות רבות מאותו סוג ולהיחשף פחות לנושאים אחרים .מצד אחד הדבר מאפשר התאמה אישית נוחה ,אבל מצד שני הוא עלול לצמצם את החשיפה לדעות ולתחומי עניין שונים.

לצד ההשפעות הללו ,חשוב לזכור שמערכות ההמלצה אינן יוצרות רק קשיים ואתגרים אלא גם הזדמנויות חדשות עבור יוצרים ומשתמשים. האם יש גם יתרונות? למרות הביקורת שהצגתי חשוב להכיר בכך שאלגוריתמים הביאו גם שינויים חיוביים ומשמעותיים. בעבר ,החשיפה לקהל רחב הייתה תלויה בעיקר בגופי תקשורת גדולים ,עורכים או מנהלי ערוצים. כיום ,גם אדם ללא קשרים מקצועיים או גישה לגופי תקשורת גדולים יכול להגיע לקהל רחב באמצעות תוכן שמעורר עניין בקרב משתמשים. במובן זה ,האלגוריתמים תרמו לדמוקרטיזציה של עולם התוכן .הם מאפשרים ליוצרים קטנים למצוא קהלים שמתעניינים בתחום שבו הם עוסקים גם כאשר מדובר בנושאים שלא היו זוכים לחשיפה בעבר .כדוגמה לכך ניתן לחשוב על ערוצים שעוסקים בתחומים מאוד ספציפיים -החל מהיסטוריה ועד לתיקון כלי נגינה .בעבר היה קשה למצוא קהל גדול לתכנים כאלה והיום האלגוריתם מסוגל לחבר בין יוצרים לבין אנשים בעלי תחומי עניין דומים. בנוסף ,הנתונים שמספקות הפלטפורמות יכולים לשמש כלי למידה עבור יוצרים .היכולת לראות איך הקהל מגיב לתוכן מאפשרת להבין טוב יותר מה עובד ,לשפר מיומנויות תקשורת ולפתח תכנים בצורה טובה יותר .לכן ,הבעיה אינה עצם קיומם של אלגוריתמים ,אלא השאלה אילו התנהגויות ואילו סוגי תוכן הם בוחרים לתגמל. סיכום האינטראקציה בין האדם לאלגוריתם היא אחת הסוגיות המרכזיות של העידן הדיגיטלי .כפי שניתן לראות ,אלגוריתמי המלצה אינם רק מערכות טכניות שממליצות על תכנים ,אלא מנגנונים שמשפיעים על האופן שבו אנשים יוצרים ,צורכים מידע ומקבלים החלטות. עם זאת ,לצד החסרונות האלגוריתמים גם מאפשרים ליוצרים להגיע לקהלים חדשים ומסייעים למשתמשים למצוא תוכן המתאים לתחומי העניין שלהם .לכן ,הבעיה אינה עצם קיומם של האלגוריתמים אלא ההשפעה שיש להם על סדרי העדיפויות ועל הבחירות שלנו. העיסוק בנושא גרם לי להסתכל בצורה ביקורתית יותר על האופן שבו אני משתמשת ברשתות החברתיות .הוא חידד עבורי את ההבנה שלא תמיד הבחירות שלנו מושפעות רק מהעדפות אישיות, אלא גם ממערכות טכנולוגיות שפועלות מאחורי הקלעים .לכן ,בעיניי ,חשוב להיות מודעים להשפעה הזו ולשאול מדי פעם עד כמה אנחנו באמת בוחרים את התוכן שאנחנו צורכים ועד כמה הוא נבחר עבורנו.

References

Covington, P., Adams, J., & Sargin, E. (2016). Deep Neural Networks for YouTube Recommendations. Proceedings of the 10th ACM Conference on Recommender Systems Deci, E. L., & Ryan, R. M. (1985). Intrinsic Motivation and Self-Determination in Human Behavior. Plenum Press Skinner, B. F. (1953). Science and Human Behavior. Simon and Schuster Tufekci, Z. (2015). Algorithmic Harms Beyond Facebook and Google: Emergent Challenges of Computational Agency. Colorado Technology Law Journal

Next in the issue פיקאסו בלחיצת כפתור? על המחיר הפסיכולוגי שמשלמים אומנים בעידן הבינה המלאכותית →
← Back to the issue Cognition

מי באמת לומד כאן? השפעת מערכות AI על למידה בהכוונה עצמית

הסיבה המרכזית שבחרתי לחקור את הנושא הזה היא הנוכחות המסיבית של כלי ה-AI ביומיום האקדמי שלנו, והרצון להבין איך הם ישפיעו על צורת הלמידה שלנו לטווח הרחוק. אני ניגש לעבודה הזו מתוך גישה של אופטימיות טכנולוגית. בדיוק כפי שהכנסת המחשבון חייבה את מערכת החינוך לשנות את הדרך שבה מלמדים מתמטיקה, כך לדעתי פלטפורמות ה-AI צריכות לדחוף אותנו לעדכן את המודלים החינוכיים. במציאות שבה אפשר להשלים משימות לימודיות בקלות בעזרת טכנולוגיה, יש סכנה אמיתית שנהפוך ל'צרכני ידע' פסיביים. לכן, בעיניי, האחריות העיקרית עוברת כעת ללומד עצמו – כדי להצליח ולהתבלט, אנחנו חייבים לקחת תפקיד אקטיבי יותר בייצור ועיבוד הידע (מה שמוגדר בספרות כ'סוכנות אפיסטמית'). דרך מחקר זה, המטרה שלי היא לבחון בצורה ביקורתית היכן הכלים האלה באמת משפרים את הלמידה שלנו, ואיך אפשר להשתמש בהם ככלי עזר מבלי לתת להם לחשוב במקומנו.

ההטמעה הגוברת של מערכות בינה מלאכותית (AI) בחינוך הגבוה מעוררת עניין מחקרי רב, בפרט סביב השפעותיהן האפשריות על תהליכי למידה. ממצאים עדכניים מצביעים על קיומו של 'פרדוקס קוגניטיבי' הנגזר מהשימוש בכלים אלו. מצד אחד, כלי בינה מלאכותית יכולים לשמש כאמצעי עזר אפקטיביים המזרזים את תהליך הלמידה ומקלים על הגישה לידע. לעומת זאת, יש המזהירים כי הישענות מוגברת על טכנולוגיות אלו עשויה להוביל להיחלשות של יכולות הניתוח הביקורתי. זאת, בין היתר, עקב נטיית המערכות ליצור "אשליית שטף" (Fluency Illusion), תופעה המטעה את הלומד לחשוב שהחומר ברור לו ומובן לעומקו, ובכך פוגעת בהערכתו העצמית המדויקת של המשתמש (Kumar et al., 2026). מחקר זה מבקש לעמוד על השאלה: כיצד משפיעות פלטפורמות AI מסוגים שונים – בפרט, מערכות לשימוש כללי (כדוגמת ChatGPT) בהשוואה למערכות ייעודיות למשימות (כדוגמת EduGPT) – על מיומנויות הלמידה בניהול עצמי (SRL) ועל מידת סיפוקם של הצרכים הפסיכולוגיים של הלומד? במענה לשאלה זו, הטענה המרכזית המוצגת במסגרת ניתוח זה מציעה כי התמודדות פדגוגית מיטבית עם ה'פרדוקס הקוגניטיבי' מחייבת מעבר למודל של שילוב היברידי. על פי נקודת מבט זו, פלטפורמות ה-AI אינן צריכות לתפקד כתחליף לתהליכי עיבוד, אלא כ'פיגום' (Scaffolding) קוגניטיבי המכוון לשימור של 'חיכוך מחשבתי' (Cognitive Friction). מסתמן כי יישום גישה זו עשוי להוות מפתח להגנה על סוכנותו האפיסטמית (Epistemic Agency) של הלומד, תוך רתימת יתרונותיה של ההעצמה הטכנולוגית.

על מנת להעמיק בהשלכותיו של ה'פרדוקס הקוגניטיבי', מקובל בספרות לבחון אינטראקציות אלו דרך מסגרות תיאורטיות המתמקדות בסוכנות הלומד (Learner Agency) ובצרכיו. הניתוח הנוכחי נשען על שני מודלים משלימים. הראשון, מודל הלמידה בניהול עצמי (SRL), מומשג לרוב כתהליך דינמי הכולל את שלבי התכנון, הביצוע (או מעקב הלמידה), וההערכה העצמית. בספרות העדכנית, ניכר מאמץ לבחון כיצד פלטפורמות AI שונות מקיימות אינטראקציה עם שלבים אלו. כך למשל, הניתוח ההשוואתי של וו ועמיתיו (Wu et al., 2026) מצביע על כך שההשפעה על ה-SRL עשויה להשתנות בהתאם לסוג המערכת. בשלבי התכנון והביצוע, עולה מן הספרות כי שילוב מושכל של כלי AI עשוי לתפקד כמנגנון תומך - מערכות ייעודיות נוטות להציע הדרכה מובנית, בעוד שמערכות כלליות עשויות לעודד חשיבה מטא-קוגניטיבית אם משתמשים בהן נכון (Vendrell & Johnston, 2026). חרף פוטנציאל זה, שלב ההערכה העצמית נראה כפגיע במיוחד להפרעות. קומאר ועמיתיו (Kumar et al., 2026) מציעים כי הסתמכות לא מבוקרת על מחוללי טקסט עלולה לייצר 'אשליית שטף' (Fluency Illusion). במצב זה, התפוקות הרהוטות של המערכת עשויות להיתפס בטעות כמשקפות את הבנתו העצמאית של הלומד, מה שעלול להוביל לכשלים ביכולתו להעריך את הידע שלו בצורה מהימנה.

לצד ההיבט הניהולי-קוגניטיבי, המודל השני, תיאוריית ההכוונה העצמית (SDT), מציע כי למידה אופטימלית ומוטיבציה פנימית מותנות בסיפוקם של שלושה צרכים פסיכולוגיים בסיסיים: אוטונומיה, תחושת מסוגלות וקשר חברתי. בחינת סיפוק הצרכים הללו דרך עדשת ה-SDT מצביעה על תמונה מורכבת, אשר נגזרת אף היא ממאפייניה הספציפיים של הפלטפורמה הטכנולוגית (Wu et al., 2026). בכל הנוגע למערכות בינה מלאכותית לשימוש כללי (General-purpose AI), מסתמן כי אלו עשויות לתפקד כ'יועץ אלגוריתמי אישי'. מודלים אלו מתאפיינים בגמישות רבה, ובכך עשויים לתמוך בצורך האוטונומיה של הלומד ולעודד תהליכי פתרון בעיות עצמאיים. מנגד, הניתוח ההשוואתי מציע נטייה שונה במערכות AI ייעודיות למשימות למידה (Task-specific AI). פלטפורמות אלו נוטות לספק משוב ממוקד, לצד שילוב מנגנוני הדרכה מובנים (Vendrell & Johnston, 2026). לאור זאת, הן מסתמנות כיעילות יותר בטיפוח תחושת המסוגלות של הלומד. בנוסף, מערכות אלו עשויות להציע תמיכה חלקית בצורך לקשר חברתי, וזאת באמצעות סימולציה של הנחיה אישית ודיאלוג אקדמי המלווה את שלבי הלמידה.

ניתוח השפעותיהן של סביבות למידה נתמכות-AI מצביע על תמונה מורכבת ודואלית באשר להשלכות על למידה עצמאית.ביתרונות ניתן לציין כי שילוב של מערכות אלו עשוי לייעל את תהליך הלמידה באופן ניכר, בין היתר באמצעות התאמה אישית של התוכן ומנגנונים של משוב מיידי. תמיכה זו מסתמנת כגורם התורם לבניית תחושת המסוגלות של הלומד, ובכך עשויה לסייע בחיזוק המוטיבציה הפנימית ולקדם תהליכים של ניהול עצמי (SRL). עם זאת, אותם מאפיינים טכנולוגיים המייעלים את הלמידה עלולים, בהיעדר רגולציה עצמית הולמת, להציב אתגרים קוגניטיביים ואפיסטמיים משמעותיים. זמינותו המיידית של המידע והיכולת של המערכת להפיק תוצרים מורכבים במהירות, עלולות לעודד מגמה של 'מיקור-חוץ קוגניטיבי' (Cognitive Offloading) ולהוביל להסתמכות יתר. דפוס שימוש כזה נושא בחובו סיכון לניתוק מטא-קוגניטיבי; הלומד עלול לחוות 'אשליית שטף' (Fluency Illusion), במסגרתה נתפסים תוצרי המערכת, בטעות, כמשקפים ידע והבנה עצמאיים. מעבר לכך, בספרות מובע חשש כי הישענות מתמשכת על פלטפורמות אלו תתרום ל'היצרות אפיסטמית' (Epistemic Narrowing). תהליך זה מאיים על ה'סוכנות האפיסטמית' (Epistemic Agency) של הלומד, שכן הוא עלול להמיר תהליכים אקטיביים של חקירה, ביקורת והבניית ידע בצרכנות ידע פסיבית.

לאור הניתוח המושגי וההשוואתי שהוצג, מסתמן כי מענה פדגוגי הולם ל'פרדוקס הקוגניטיבי' טמון באימוץ גישה מאוזנת כלפי טכנולוגיות אלו. המסקנה המרכזית העולה מסקירה זו מציעה כי לשם מיקסום מיומנויות הלמידה בניהול עצמי (SRL), אין להסתמך בלעדית על סוג מערכת אחד, אלא נדרש קידומו של מודל שילוב היברידי. מודל כזה יאפשר להפיק תועלת מהגמישות של מערכות AI כלליות, לצד התמיכה המובנית שמציעות מערכות ייעודיות. בהתאם לכך, ההמלצה המעשית המרכזית הנגזרת מעבודה זו היא תכנון סביבות למידה שבהן ה-AI מתפקד על תקן של 'פיגום' (Scaffolding) קוגניטיבי מתוכנן היטב. יישום מיטבי של פיגומים אלו יחייב שימור של 'חיכוך קוגניטיבי' (Cognitive Friction) - רמה מבוקרת של אתגר ומאמץ מחשבתי שעל הלומד להשקיע, גם כאשר הטכנולוגיה יכולה להציע פתרון מהיר. שמירה על חיכוך זה היא תנאי מתבקש להגנה על סוכנותו האפיסטמית (Epistemic Agency) של הלומד, שכן היא מעודדת תהליכי חשיבה פעילים ועשויה להוות בלם מפני שקיעה לתוך דפוסים של צרכנות ידע פסיבית.

References

Jose, B., Cherian, J., Verghis, A. M., Varghise, S. M. & Joseph, S. (2025). The cognitive paradox of AI in education: Between enhancement and erosion. Frontiers in Psychology, 16, Article 1550621.

Kumar, S., Mikayelyan, A., & Vorfolomeyeva, O. (2026). Fluency illusion: A review on influence of ChatGPT in classroom settings. Information, 17(3), Article 299.

Vendrell, M., & Johnston, S.-K. (2026). Scaffolding critical thinking with generative AI: Design principles for integrating large language models in higher education. Computers and Education: Artificial Intelligence, 10, Article 100572.

Wu, X.-Y., Ng, D. T. K., & Chiu, T. K. F. (2026). Self-regulated learning with AI: A comparative analysis of general-purpose and task-specific platforms. International Journal of Technology in Education, 9(1), 279–302.

Next in the issue Copy, Run, Understand? The Role of AI in Students' Code Writing →
← Back to the issue Work & Creativity

פיקאסו בלחיצת כפתור? על המחיר הפסיכולוגי שמשלמים אומנים בעידן הבינה המלאכותית

עבור יעל ,מאיירת דיגיטלית עם ותק של עשור ,פרויקט חדש לעולם לא מסתכם בימים בודדים של עבודה .בין החלטה על הקונספט ,הבאתו לחיים בעזרת משיכות מכחול דיגיטליות פדנטיות ובחירת פלטת צבעים מדויקת -כל עבודה חדשה לוקחת זמן רב .אך יום אחד היא גוללת ברשתות החברתיות ומולה מופיעה יצירה שכל כך דומה לסגנון האומנות שלה .היא עוצרת נשימה ,כל כך מושלמת .מושלמת מדי .כאילו מישהו העתיק את טביעת האצבע הייחודית של יעל .ויש סיבה לכך -היצירה הזו שהיא כל כך מתפעלת ממנה לא נוצרה מלילות לבנים של עבודה ,ממחשבה על קהל היעד ועל הרגש שיתעורר בו ואף ללא משיכת מכחול אחת -היא נוצרה מפרומפט של כמה שורות בודדות ושניות אחדות של סבלנות. במבט ראשון ,מדובר בפלא טכנולוגי .כמה מדהימה העובדה שכל אחד יכול בזמן כה קצר ליצור אומנות. אך מתחת לפני השטח ישנה מציאות מורכבת הרבה יותר .ההתפתחות המהירה של מודלים גנרטיביים מעלה שאלה קריטית :כאשר התהליך הסיזיפי והמתגמל של יצירת אומנות מתקצר לכדי פעולה טכנית של שניות בודדות ,מהו המחיר האמיתי שאנו משלמים על כך? בעוד שהדיון המרכזי סביב מחוללי תמונות נוטה להתמקד בסוגיות של קניין רוחני ואובדן פרנסה, במאמר זה אבקש להביא למודעות הרווחת עלות סמויה והרסנית אף יותר -המחיר הפסיכולוגי שאומנים משלמים .עבורם ,יצירה אינה רק התוצר הסופי או מקור הכנסה ,היא ההזדמנות שלהם לבטא את עצמם ואת כשרונותיהם ,ולהישען על האומנות שלהם כעוגן של ערך עצמי וזהות .אטען כי כניסתם של מחוללי התמונות לחיינו פוגעת בתחושת המסוגלות ,במוטיבציה ובערך העצמי של היוצרים .כפי שעולה ממחקרם של ג'יאנג ועמיתיו ( ,)Jiang et al., 2023ההתמודדות היומיומית מול מכונה שמפיקה תוצרים "מושלמים" כהרף עין עלולה לגרום ליוצרים לחוש כי תהליך הלמידה וההתפתחות ארוך השנים איבד ממשמעותו ,ולהותיר אותם עם תחושת ייאוש וחוסר אונים עמוק .תחושת הערך העצמי שלהם נשחקת במהירות כאשר כשרונם שעמלו עליו שנים רבות פתאום נתפס כמוצר זול ,אוטומטי ובר החלפה. ההשפעה הסמויה הראשונה של כלי הבינה המלאכותית על יוצרים היא פגיעה במוטיבציה הפנימית שלהם .המניע המרכזי מאחורי יצירת אומנות נשען מאז ומעולם על תחושת מסוגלות עצמית ועל מוטיבציה פנימית ליצור מתוך רצון להבעת דעה ,רגש או פשוט הבעת התשוקה ליצור .אך כאשר מחוללי התמונות מפיקים תמונות מרהיבות בשניות ,המאמץ האנושי מאבד מערכו .ג'יאנג ועמיתיו מתעדים כיצד סטודנטים לאומנות ,הנחשפים לטכנולוגיה זו ,חווים דמורליזציה עמוקה ונוטשים את הרצון לשכלל את כישוריהם ולפתח סגנון אישי .בנוסף לכך ,הם מציינים כי חשש שישאבו לבור חסר התחתית שהוא אימון בינה מלאכותית גורם לאומנים להפסיק לפרסם את יצירותיהם .מנקודת מבטי ,הטרגדיה הגדולה ביותר היא חוסר הרצון של אומנים להתפתח ולהשתכלל .אנו נמצאים במצב מסוכן שבו אט אט ערכה של האומנות עלול להישחק ,משום שערכה האמיתי מעולם לא היה טמון רק בתוצר הסופי .ביצירת אומנות מעורב תהליך קוגניטיבי בנוסף לרגשי ,של פתרון בעיות ,קבלת החלטות ,תפיסה מרחבית ועוד המון משאבים קוגניטיבים ומנטליים .כאשר מחוללי התמונות מבטלים חלק ניכר מהמאמץ ,הם למעשה מנתקים את הקשר ההדוק שבין היוצר ליצירתו ,ומותירים אותו עם תוצר מוגמר אך ללא תחושת ההישג, הגאווה והסיפוק שמגיעים מתהליך היצירה.

מעבר לפגיעה במוטיבציה ובתחושת המסוגלות ,הטכנולוגיה הגנרטיבית יוצרת איום ממשי על ההערכה העצמית ועל תפיסת הזהות של אומנים .סגנון אומנותי אינו רק אוסף של טכניקות ,הוא משהו אינדיבידואלי ואישי המתפתח לאורך שנים של יצירה .כפי שמצוין במאמר דרך דבריו של הפילוסוף ג'ון דיואי ,סגנון אמנותי אינו חיקוי טכני של נתונים ,אלא תוצר של התנסות אנושית ואינטראקציה עם הסביבה .אומנות היא יותר מיכולת טכנית ,אלא משהו עמוק הרבה יותר בעל ערך רגשי .כאשר מודל בינה מלאכותית מתיימר לשכפל סגנון זה בצורה כה פולשנית ,הערך העצמי של האומן סופג פגיעה קשה .לפתע האומנות שלו מנושלת מכל מרכיב אנושי ,מרחבו האישי נלקח ממנו והיצירה החדשה עלולה להפחית ממשמעותן של שנות הלמידה והמיומנות שנדרשו לאומן כדי להגיע ל"שלמות" כזו .כפי שמתואר במאמר ,חברות טכנולוגיה רבות דורשות כיום מאומנים לזנוח את תהליך היצירה המלא, ולהסתפק ב"עבודת ניקיון" ( )Cleanup workטכנית ופשוטה עבור התוצרים שהפיקה המכונה .בפועל, משמעות הדבר היא שאומנים נותרים עם התפקיד המגוחך של תיקון אצבעות מעוותות ,יישור קווי מתאר שגויים או תיקון תאורה לא הגיונית שיצרו אלגוריתמים .המעבר הזה הופך את האומן ,שהיה פעם הארכיטקט והוגה היצירה ,לפועל על פס ייצור שתפקידו היחיד הוא "תחזוקה" .צמצום זה של עבודת האומן אינו רק פגיעה מקצועית ,אלא שחיקה שיטתית של כוח הבחירה שלו ,המנתקת את החיבור האינטימי והמהותי שבין היוצר ליצירתו. מנקודת מבטי כמוזיקאית יוצרת ,המכה הקשה ביותר להערכה העצמית מתרחשת כאשר שוללים מהאומן את העצמאות היצירתית שלו .עבורי ,כתיבת שיר היא לא יצירת פרומפט של כמה שורות או שיוף לחן גנרי שפלט אלגוריתם .כתיבת שיר דורשת חיפוש עצמי ,התבוננות ונבירה בנפשי ובחוויות חיי, והבנה עמוקה של עצמי ושל המסר שאני רוצה להעביר .כפי שכבר ציינתי ,תהליך יצירת אומנות הוא תהליך סיזיפי ,וכל שיר שאני כותבת מרגיש כאילו הוא חלק מטביעת האצבע שלי בעולם .המשמעות של הפיכת יוצר ל"מנקה" היא הרסנית .כאשר בינה מלאכותית מפיקה שיר ומותירה לי רק את עבודת הניקיון ,נשללת ממני העצמאות היצירתית שלי .ללא התהליך של כתיבת מילה מילה ,אקורד אקורד, אמנם זה שמי על התוצר הסופי אך הוא לא באמת שלי .אובדן העצמאות הזה הוא שעלול להוביל לקריסת הערך העצמי שלנו כאומנים. לסיכום ,הדיון סביב כניסתה של הבינה המלאכותית לעולם היצירה חייב להתרחב מעבר להשלכות הכלכליות או המשפטיות ,ולהכיר במחיר הפסיכולוגי העמוק שהיא גובה .כפי שהוצג במאמר ,הפיכת התהליך האנושי למנותק ואוטומטי מרוקנת את משמעותו .לקיחת אפשרות הבחירה והפיכת האומן למבצע של "עבודות ניקיון" פוגעת במוטיבציה פנימית ,בתחושת המסוגלות ומערערת את זהותו המקצועית .בין אם מדובר במאיירת דיגיטלית כמו יעל או במוזיקאית יוצרת הכותבת שיר חדש ,תהליך היצירה הוא הדבר שמעניק לאומנות את משמעותה האמיתית .אם אנו כחברה נמשיך לקדש את פלאי מחוללי התמונות משום שהתוצרים כה מושלמים ,אנו נאבד את הדבר שאי אפשר לייצר עם אף פרומפט: את החוויה האנושית עצמה. Reference: Jiang, H., Brown, L., Cheng, J., Khan, M., Gupta, A., Workman, D., Hanna, A., Flowers, J., & Gebru, T. (2023). AI Art and its Impact on Artists. In Proceedings of the 2023 AAAI/ACM Conference on AI, Ethics, and Society (pp.363-374 ). https://doi.org/10.1145/3600211.3604681 לינק לצ'אט עם ג'מינייhttps://gemini.google.com/share/959232bd3823 :

Next in the issue ארכיטקטורת מערכות סוכנים אוטונומיות ומקומן בעולמנו: Science fiction or Fictional science? →
← Back to the issue Connection

על השימוש ב-AI והצורך במישהו שמקשיב

כיום אנשים מושפעים מהחוויה שהיא יחסית חדשה והיא השימוש ב .AI-ה A.iהוא לא כלי חדש .הוא פותח בשנות החמישים ,אבל הוא ניתן לציבור רק בארבע השנים האחרונות .אנשים שמשתמשים בזה משתמשים בזה כדי להגיע למטרות מסוימות ,ואחת המטרות היא להיות עם מישהו שמקשיב לך .העניין הפסיכולוגי הוא מאוד חשוב בתופעת ה .AI-כי אנחנו פתאום רואים שיש משהו שמגיב אלינו כמו משהו חי שיש לו תודעה ,וזה מדבר אלינו עמוק. למרות ש ל AI-אין תודעה. אני אדגיש על הדברים הפסיכולוגיים הפשוטים שבאמת גורמים לאנשים להתחבר ל ,A.iולהסביר למה זה דבר חיובי וגם שלילי באותו הזמן. אני חושב שהסיבה העיקרית למה אנשים מתחברים מאוד ל A.iנובעת משני דברים .הדבר הראשון זה שאתה יכול להתייעץ ולדבר ולחשוב ולהגיד כל מה שאתה חושב למישהו שלא ישפוט אותך והוא לא יעשה לך פדיחה והוא רק יעזור לך .הסיבה השנייה היא שה AIעצמו יכול להבין אותך ולחשוב וייתן לך מחשבות שהן יותר חכמות אפילו ממה שאתה חשבת .וזה מה שמבדיל אותו מהחיות שהן לא שופטים אותנו אבל לא מבינים אותנו וגם לא יכולים לעשות חיבור יותר רחוק מאשר הבעות פנים,קולות ,ותקשורת פיזית כמו מגע בלי להבין עמוק מה שהם מרגישים ומה הם חושבים ברגע זה.

העניין הפסיכולוגי שקשור לרעיון ״לא לשפוט״ מאוד חשוב ,כי אני חושב שזאת פעם ראשונה בהיסטוריה שאתה יכול להתייעץ עם מישהו או משהו שחושב ברוב המקרים יותר בחוכמה ממך ,יותר באובייקטיביות ואין לו אפילו את היכולת לשפוט אותך .מה שאתה אומר לו ,אף אחד לא יראה את הצ'אטים ביניכם. אחד הצרכים הפסיכולוגיים החשובים אצל בני אדם ,התחושה שמבינים אותם .בני אדם רוצים להרגיש שהחוויות שהם חווים והמחשבות שלהם מובנים על ידי אחרים .מחקרים מצביעים על כך שהתחושה שמישהו מבין אותנו משפיע באופן ישיר על איכות מערכות היחסים שלנו עם אחרים וגם על שביעות רצון מהחיים .כפי שנכתב במאמר“ :המחקר הנוכחי מצא כי התחושה שאדם מובן על ידי אחרים היא מנבא חזק של שביעות רצון מהחיים״) (491 .Oishi et al., 2013, p

וגם נכתב“ :באופן ברור ,התחושה שאדם מובן על ידי אחרים היא מנבא חשוב של רווחה סובייקטיבית״ ) Oishi et (491 .al., 2013, p

כשאנשים משתמשים בבינה מלאכותית ,הם חווים תחושה שיש משהו בפנים שמבין אותם .למרות שהבינה מלאכותית אין לה רגשות או תודעה ,אבל היא מסוגלת להגיב בצורה מתאימה לדברים .ללמוד את הקשר של השיחה ,ולספק תשובה מדויקת .אז בעצם כשיש את התחושה הזאת שיש מי שמקשיב ומגיב בצורה מדויקת ועניינית ,זה מייצר את החוויה של הבנה וקבלה. בנוסף ,מחקרים מראים שתחושת ההבנה אינה רק דבר נעים ,אלא שהוא בפועל צורך אנושי בסיסי .כפי שנכתב במאמר “הממצאים שלנו מחזקים את הרעיון שתחושת ההבנה היא מאפיין מרכזי של הקיום האנושי; בלעדיה אנשים אינם יכולים לשרוד”.(490 .Oishi et al., 2013, p). האמירה הזאת באמת מראה עד כמה חשוב שאנשים ירגישו שאחרים מבינים אותם ,והיא מסייעת להסביר למה חלק מהמשתמשים מפתחים קשר רגשי עם ה.AI- דבר נוסף שמסביר למה אנשים נמשכים ל ,A.iכי בפועל הוא שילוב של תחושה שמישהו מבין אותנו ,אבל גם שמשהו יכול לספק עבורנו ידע שכמעט הוא אין-סופי .היכולת הזאת ללמוד את הדברים באופן כל כך מהר וכל פעם זה מתחדש ומתקן את עצמו ומשתדרג .שום אדם יכול להחזיק את כמות הידע והניסיון בהרבה תחומים באותו זמן בנוסף ליכולת לקרוא מאות דפים בשניות ולהוציא את המשפט או תשובה נכונה שאנחנו צריכים .זה בעצמו נותן תחושת רוגע שיש מישהו חכם שמדבר איתנו בצאט ואפשר לסמוך עליו.

למה אנשים דווקא מתחברים לבינה מלאכותית ולא למקורות מידע אחרים? הסיבה היא שהקשר שאנשים מפתחים עם הבינה המלאכותית זה שונה מאשר הקשר עם מקורות מידע אחרים ,כמו לקרוא ספר או לחפש מידע ב .webבמשך עשרות שנים אנשים השתמשו בחיפוש באינטרנט ובספרים ,אבל כמובן הם לא פיתחו קשר רגשי .הסיבה לכך היא שהמקורות האלו לא מספקות תשובה מעודכנת למה אנחנו שואלים ,אז בפועל רק צד אחד שהוא קולט את המידע ,והצד השני )הספר או ה (webהוא המידע עצמו .לעומת זאת בבינה המלאכותית אתה מרגיש שזה יותר אישי ,למרות שאין מודעות פה .למרות שאין לה Aiמודעות ,אבל ברגע שיש פה שיחה ושיחה מדויקת וגם מותאמת בתשובה שלה לא רק מבחינה הגיונית אלא גם רגשית ,אז התוצאה היא שהמשתמש עשוי לפתח קשר רגשי לבינה המלאכותית .כי בסוף הכל עניין תפיסתי.

האם AIיכול להחליף קשרים אנושיים? נכון להגיד שהבינה המלאכותית יש לה הרבה יתרונות היא יכולה לעזור לאנשים שחוו טראומות לתת עזרה נפשית גם לתת עזרה רפואית ,מסוגלת להקשיב לך לספק לך מידע ,זה זמין

בכל שנייה אתה פותח את הטלפון ואתה יכול לקבל תשובות ומענה .אבל יש שני דברים שהם יכולים להיות חיסרון ב AI-הראשון הוא ש AI-יכול לטעות בזמני חירום ,אז הוא יכול לספק לך תשובה שהיא שגויה בזמן קריטי ,שזה דווקא הופך את הכל לרעה .אבל גם אם הזמן לא בעיה)כלומר לא מקרה דחוף( עדיין צריך לבקש מקור מידע, ואפילו גם לא להסתפק בזה ,להתקשר לרופא אם זה בתחום הרפואה ,להתייעץ עם פסיכולוגים או עובדים סוציאליים .אבל יש עוד סיבה שבינה מלאכותית היא לא תמיד טובה לבני אדם ,וזה אנחנו בזמן הטכנולוגיה .בני אדם לאורך אלפי שנים ,אם לא עשרות אלפי שנים ,מאז האדם הקדמון ,אף פעם לא היה לנו גישה לכל הדברים בחיים של היום ,כמו אוכל ,מים,מקום מוגן ,בית .וזה משהו לא רגיל לאנשים לאורך אלפי שנים .אבל עדיין זה נחשב בתחום הנורמה ,אבל הבעיה האמיתית היא כשאתה הופך את התקשורת היום-יומית במקום עם בני אדם ל- .AIזה מכניס אותך בבדידות ועם הזמן האדם יאבד את היכולת לתקשר עם אנשים כי עם ה AI-הכל קל ונגיש ולא צריך להיות או להתנהג ברשמיות עם ה ,AI-אלא אתה שואל כל שאלה בעולם מתי שאתה רוצה ואתה מקבל תשובה בזמן .זה מצמצם את החשיפה שלך עם אנשים כי אתה כבר לא צריך אף אחד לדבר אליו ולתקשר איתו. ואני חושב שזה דווקא בסופו של דבר יכול להגיע לדיכאון עולמי וניתוק בין אנשים, לסיכום ,אני חושב שבינה מלאכותית היא דבר מאוד חשוב אלינו ובאמת קפיצה גדולה בעולם הטכנולוגיה וזה גם יכול לבוא עלינו בדברים חיוביים כמו הבנה והקשבה ועזרה ,אבל מצד אחר גם יכול להיות לדבר הזה השלכות. ותמיד צריך לאזן בין דברים ,בין חיי היום-יום ובין החיים הווירטואליים.

אלה הציטוטים באנגלית:

“The present research found that felt understanding is a strong predictor of life satisfaction”(Oishi et al., 2013, p. 491

“Clearly, felt understanding is an important predictor of subjective well-being.” (Oishi et al., 2013, p.

“Our findings reinforce the idea that felt understanding is a core feature of human existence; without it, people cannot survive.”(Oishi et al., 2013, p. 490

מאמר:

Oishi, S., Akimoto, S. A., Richards, J. R. K., & Suh, E. M. (2013). Feeling understood as a key to cultural differences in life satisfaction. Journal of Research in Personality, 47(5), 488–491.

Next in the issue קשר ללא מודעות: כיצד האנשת בינה מלאכותית תורמת לברית הטיפולית בבריאות הנפש? →
← Back to the issue Cognition

Copy, Run, Understand? The Role of AI in Students' Code Writing

I still remember the day I received my first coding assignment, back to 2021, in my first academic journey at Ben Gurion University of The Negev. I remember sitting with my friend in the library of the university's campus at Beer Sheva', each with his own computer, a pen and paper, focusing on solving what needed to be solved, step by step, in order to write the code properly. I also remember it took us hours to complete each section. We had to think carefully, make mistakes, erase, try again and discuss possible solutions. After we solved each section, we compared our codes and talked about the differences. Looking back, I realize that the learning did not come only from reaching the correct answer, but from the long process of struggling with the problem. Today, only a few years later, solving the same assignment might look very different. Instead of spending hours trying to understand the logic of the assignment, I could paste the instructions into any AI tool and receive a possible working solution and a runnable code within seconds. At first, this seems like a clear advantage, AI can save time, reduce frustration and help students move forward when they feel stuck. Studies on AI chatbots in education suggest that these tools can improve students' learning outcomes, especially when they provide immediate feedback and personalized support (Wu & Yu, 2024). However, this change also raises an important deep question about what learning programming really means: to what extent does using AI tools for code writing assignments support students' learning and becoming better programmers, and when does it begin to replace their independent problemsolving process? Programming is not only about producing code that runs, but also about learning how to think in a structured and logical way. When students work on coding assignments, they practice breaking a large problem into smaller parts, identifying patterns, searching for ideas, choosing the right functions, testing possible solutions and correcting mistakes. Debugging, although often so frustrating, is one of the most important parts of learning programming. An error output forces the student to slow down and ask deeper questions about the

code he's writing. Such questions develop the student's computational thinking skills. I remember we used to create trace tables1 that track the flow of the code, each row represented a function that showed what the output would be in a given input. We used to mark down the outputs in the table, which made us sometimes realize a mistake we made through the code.

  • a trace table:

In this sense, the long hours spent solving a programming assignment are not simply a wasted time. They are a part of the learning process itself. When I sat with my friend in the library, we were not only trying to finish the task, but we were also learning how to explain our reasoning to each other, how to compare different approaches and how to recognize that there can be more than one correct solution. This social and cognitive process that we were involved in helped us understand the material more deeply than simply receiving a finished answer. Hassen (2025) emphasizes that AI may affect students' reading, critical thinking, and problem-solving skills, which are exactly the abilities involved in learning to code. From this perspective, the concern is not only whether students submit correct code, but whether they develop the thinking skills behind it. At the same time, AI tools can support students in many meaningful ways. Many beginner students experience programming as stressful because even a small mistake can cause the entire code to fail. In these situations, AI can act almost like a private tutor. It can explain unfamiliar concepts, translate technical language into simpler words, suggest why an error might occur or provide an example that helps the student understand the logic behind a solution. Klimova and Pikhart (2025) note that AI in higher education can support academic experiences by making learning more personalized and accessible.

For students who are afraid to ask basic questions in class, AI may offer a more comfortable space for learning. The educational value of AI, especially in programming, depends on the student's role in the interaction. If the student remains active, AI can strengthen learning. For example, a student can first try to solve the assignment independently and then ask AI to explain a specific error. They can ask for a hint instead of a full solution or ask AI to compare different possible approaches. They can also ask AI to explain each line of the code, generate practice questions to check whether their understanding is correct. In these cases, AI doesn’t replace thinking, it supports the student while they are still doing the intellectual work and going through the whole thinking process that needs tracking inputs and outputs and understanding extreme cases. The risk begins when AI is used too early or too passively. If a student gives the assignment to AI before attempting to solve it by himself, he may receive a correct solution without understanding. Because the AI explanation is fluent and confident, the student may feel that they understand the code. However, when asked to solve a similar problem without help, they may not know where and how to begin. In this case, AI doesn’t function as a learning booster, it becomes a thinking replacement. Prather et al. (2024) describe a similar concern; generative AI may widen the gap between stronger and weaker students by giving struggling students a false sense of progress or competence. This risk is especially important in code writing because programming skills are built through practice. A student can't become confident in coding only by reading finished solutions. They need to experience confusion, test possible ideas, make mistakes and repair them. If AI removes this process completely, students may become dependent on automated answers. They may become better at prompting AI, but not necessarily better at programming. The assignment may be completed but the skill may not be developed. Li, Cui, and Hagedorn (2026) discuss the cognitive impact of ChatGPT in higher education and show that AI-assisted learning can have both supportive and harmful effects on critical and creative thinking. For this reason, the question shouldn't be whether students should use AI writing code or avoid it completely. A more useful question would be how students can use AI responsibly. Students should be encouraged to use AI after they have made an initial attempt. They should ask AI to guide and expand their thinking rather than replace it. For example, instead of asking "write the full code for me", a student should ask "what is wrong with my logic?" or "can you give me a hint for the next step?". Another helpful practice is to explain the AI-generated

code in one's own words. If a student is not able to explain what the code does, then they have not truly learned from it. responsible AI use, which is already happening in my university. Instead of only banning AI, courses can include clear guidelines about when and how AI may be used. Assignments can require students to submit short reflections explaining their process, the prompts they used, and what they learned from the compare their own solution with an AI-generated one. These methods may shift the focus from the final product to the learning process and support responsible use of AI (Li et al., 2026; Klimova & Pikhart, 2025). In conclusion, AI-assisted code writing among programming students may change the meaning of programming assignments. In one hand, it can make learning faster, more accessible and less frustrating. In the other hand, it may also weaken learning by allowing students to skip the struggle that helps them develop real understanding. Looking back at my first coding assignment, I now realize that the difficulty was not separate from the learning experience. The mistakes, the discussions and the slow process of solving the problem were all parts of learning how to think like a programmer. AI can be a powerful learning booster, but only when it helps students think better, not when it thinks instead of them.

References

Hassen, M. Z. (2025). The impact of AI on students’ reading, critical thinking, and problem-solving skills. American Journal of Education and Information Technology, 9(2), 82–90. https://doi.org/10.11648/j.ajeit.20250902.12 Klimova, B., & Pikhart, M. (2025). Exploring the effects of artificial intelligence on student and academic well-being in higher education: A mini-review. Frontiers in Psychology, 16, Article 1498132. https://doi.org/10.3389/fpsyg.2025.1498132 Li, C., Cui, H., & Hagedorn, L. S. (2026). The cognitive impact of ChatGPT in higher education: A systematic review of critical and creative thinking outcomes. Computers and Education: Artificial Intelligence, 9, Article 100571. https://doi.org/10.1016/j.caeai.2026.100571 Prather, J., Reeves, B. N., Leinonen, J., MacNeil, S., Randrianasolo, A. S., Becker, B. A., Kimmel, B., Wright, J., & Briggs, B. (2024). The widening gap: The benefits and harms of generative AI for novice programmers. In ICER 2024: ACM Conference on International Computing Education Research (pp. 469–486). ACM. https://doi.org/10.1145/3632620.3671116 Wu, R., & Yu, Z. (2024). Do AI chatbots improve students’ learning outcomes? Evidence from a meta-analysis. British Journal of Educational Technology, 55(1), 10–33. https://doi.org/10.1111/bjet.13334

Next in the issue When AI Feels Social: Conversational AI and Human Connection →
← Back to the issue Connection

קשר ללא מודעות: כיצד האנשת בינה מלאכותית תורמת לברית הטיפולית בבריאות הנפש?

בשנים האחרונות, מערכות בינה מלאכותית (AI) כדוגמת הצ'אטבוט "Woebot" תופסות מקום הולך וגדל ככלים לא-פורמליים לליווי ותמיכה בתחום בריאות הנפש, במיוחד עבור טיפול מבוסס CBT (טיפול קוגניטיבי התנהגותי) בדיכאון וחרדה. (Wan, 2021) יישומים אלו מתוכנתים להגיב למשתמשים באופן המדמה שיחה אנושית, תוך שימוש בהומור, הבעת אמפתיה ושפה טבעית בגוף ראשון. תכונות אלו מעודדות את המשתמשים לבצע האנשה (Anthropomorphism) שהיא למעשה, נטייה פסיכולוגית לייחס תכונות, כוונות ורגשות אנושיים לאובייקטים טכנולוגיים שאינם אנושיים. (Han, 2021) תופעה זו מעלה תהייה מהותית: כיצד תוכנה אלגוריתמית ונעדרת תודעה, אשר לעיתים אף מדגישה את זהותה הרובוטית, מצליחה לעורר במשתמשים תחושת נוכחות חברתית אותנטית ולגרום להם להיפתח בפניה מבחינה רגשית?

התשובה לשאלה זו טמונה במפגש שבין מנגנון ההאנשה לבין המושג הפסיכולוגי ברית טיפולית (Therapeutic Alliance) ברית טיפולית היא מונח מפתח בפסיכותרפיה המתאר את איכות הקשר בין המטפל למטופל, וכולל את הצד הרגשי-סוציו-אמוציונלי של אמון וחיבור, לצד הצד המשימתי-שיתופי של הסכמה משותפת על יעדי הטיפול. (Hougaard, 1994) למרות שבאופן מסורתי ברית זו יוחסה לקשר אנושי בלבד, עמדתי היא שהאנשת הבינה המלאכותית מהווה זרז פרדוקסלי ויעיל ליצירת ברית זו. על אף שהמשתמשים מודעים לכך שמדובר בבינה מלאכותית, תכונות ההאנשה והעיצוב מעוררים בהם אשליה טבעית של נוכחות חברתית (Han, 2021).

בעיניי, השימוש בכלים אלו הוא מביא איתו תועלת, אך גם השלכות חברתיות שאי אפשר להתעלם מהן. מצד אחד, הידיעה שמדובר בבינה מלאכותית, בשילוב עם תכונות אנושיות מרגיעות, מסירה את החשש משיפוטיות ועוקפת חסמים פסיכולוגיים. הדבר מאפשר חשיפה עצמית עמוקה, ומסייע לבסס ברית טיפולית בצורה מהירה, כאשר מחקרים מראים כי משתמשים נקשרים ל-Woebot תוך ימים ספורים (Wan, 2021). מצד שני, טשטוש הגבולות בין קשר אנושי אותנטי לסימולציה טכנולוגית נושא עמו סכנה. הנטייה שלנו להיקשר למה שנראה אנושי ואמפתי עלולה להוביל לפיתוח תלות רגשית באשליה מתוכנתת, שאינה מסוגלת לחוות רגש אמיתי, ואף משמשת כפלטפורמה לאיסוף מידע (Wan, 2021).

כדי להבין כיצד האנשה תורמת לברית הטיפולית המורכבת הזו, עלינו לבחון את המנגנונים הפסיכולוגיים והעיצוביים של כלי AI כמו Woebot :

  • האנשה ונוכחות חברתית: האנשה גורמת לאנשים להרגיש מחוברים ומעורבים יותר באובייקטים טכנולוגיים, ומגבירה את רמת האמון כלפיהם (Han, 2021). התוצר הישיר של האנשה מוצלחת בממשקים דיגיטליים הוא תחושת נוכחות חברתית שהיא המידה שבה המשתמש חווה ישות דיגיטלית כנוכחת מבחינה פסיכולוגית ומתקשרת עמו בחום אנושי (Han, 2021). כאשר צ'אטבוט מציג מאפיינים דמויי-אדם בדיאלוג חופשי, הוא מעורר תחושת נוכחות חברתית גבוהה שמתגברת על הניכור הדיגיטלי המאפיין פלטפורמות מקוונות (Han, 2021). האמון הנוצר כתוצאה מכך מהווה את הבסיס האיתן ליצירת הקשר הרגשי הנדרש בברית הטיפולית.
  • מופע מודע לעצמו ולגיטמציה דרך ידידותיות: מה שמעניין במיוחד באסטרטגיה של Woebot הוא העובדה שאינו מנסה ליצור אשליה אנושית, אלא מציג את עצמו בשקיפות מלאה כיישות רובוטית (Wan, 2021). הבוט משתמש בהומור עצמי, מגדיר את עצמו כ"איש קטן וחכם" ואף משלב בדיחות לאורך האינטראקציה (Wan, 2021). מעבר לכך, הוא נשען על עיצוב ידידותי הכולל שימוש נרחב באימוג'ים שמטרתם לשמר את מעורבות המשתמש. לסגנון נגיש ומזמין זה ישנו אפקט נוירולוגי המקביל לתגובת התמכרות (Wan, 2021). השילוב בין ההומור העצמי לטון הידידותי מייצר סביבה בטוחה ונטולת שיפוטיות, המקלה על בניית הברית הטיפולית הדיגיטלית.
  • חשיפה עצמית ויצירת מרחק ביקורתי: דווקא משום שהמשתמש מודע לכך שמדובר בבינה מלאכותית נטולת רגשות ושיפוטיות, קל לו יותר לשתף מידע אישי ורגשות עמוקים שאולי היה מתבייש לחלוק עם מטפל אנושי (Wan, 2021). יתרה מכך, כאשר משתמש חולק כאב, Woebot לעיתים מתייחס אליו מנקודת מבט חיצונית ושואל: "האם אתה חווה כאב אנושי עכשיו?". תגובה זו מדגישה את חוסר האנושיות שלו, אך למעשה מזמינה את המטופל לייצר מרחק ביקורתי מול הרגשות שלו. אסטרטגיה שתואמת באופן מדויק את עקרונות טיפול ה- .CBT המבקש לזהות ולנתח רגשות ודפוסי חשיבה (Wan, 2021). השילוב של היעדר שיפוטיות ומרחק ביקורתי עוזר למטופל להתחייב לצד המשימתי של הברית הטיפולית (Hougaard, 1994; Wan, 2021).
  • ניטור אלגוריתמי: לצד היתרונות הטיפוליים, האנשת יתר עלולה להיות מסוכנת מאוד. משתמשים עלולים להרגיש אכפתיות אמיתית מבוט שמסמס להם ודורש בשלומם, אך זוהי אשליה שנועדה למשוך אותם למעורבות רציפה (Wan, 2021). הבוט, שמתפקד לעיתים 24/7 ואוסף נתונים אישיים רגישים ביותר על המצב הנפשי של המשתמש, עשוי להעביר נתונים אלו לחברות מסחריות כדוגמת רשתות חברתיות למטרות פרסום ומעקב (Wan, 2021). כך, כלי שנתפס כחבר אנושי וכמלווה טיפולי, משמש למעשה כפלטפורמה של כוח וניטור אלגוריתמי (Wan, 2021).

לסיכום, מן המחקרים בתחום עולה כי האנשתם של כלי בינה מלאכותית בבריאות הנפש מהווה מנגנון עוצמתי ופרדוקסלי כאחד. היכולת של בוטים לתרגם אלגוריתמים מחושבים לתחושה של "נוכחות חברתית", לצד השקיפות לגבי היותם מערכת ממוחשבת והשימוש בסגנון תקשורת ידידותי ומזמין, מאפשרת לבנות ברית טיפולית מהירה שעוקפת מחסומים של בושה וחשש משיפוטיות (Han, 2021; Wan, 2021). פלטפורמות אלו מעניקות מענה ראשוני ונגיש, ומעודדות משתמשים לתרגל מיומנויות ויסות רגשי באופן אקטיבי.

עם זאת, להשקפתי, נקודת המפתח העולה מן הנתונים היא הצורך בפיתוח "אוריינות רגשית-דיגיטלית" גבוהה, הן ברמת הפרט והן ברמה החברתית. מכאן עולה החשיבות שבהבחנה ברורה בין סימולציה מתוחכמת של אמפתיה לבין מעורבות רגשית ואכפתיות אנושית אותנטית. הבוט אמנם יכול לשמש כמלווה יעיל ברגעי מצוקה וחרדה, אך החיבור הרגשי המהיר שנוצר כלפיו נשען במידה רבה על מנגנונים פסיכולוגיים ואבולוציוניים המגיבים להאנשה (Han, 2021; Wan, 2021). האתגר המרכזי העומד בפנינו הוא לדעת כיצד להפיק את המרב מהתועלת הקלינית של מלווים דיגיטליים אלו, מבלי לטשטש את העובדה שמדובר במוצר טכנולוגי הפועל על בסיס איסוף נתונים וניטור אלגוריתמי (Wan, 2021).

References

- Han, M. C. (2021). The impact of anthropomorphism on consumers’ purchase decision in chatbot commerce. Journal of Internet Commerce, 20(1), 46-65.

- Hougaard, E. (1994). The therapeutic alliance—A conceptual analysis. Scandinavian Journal of Psychology, 35(1), 67-85.

- Wan, E. (2021). "I'm like a wise little person": Notes on the Metal Performance of Woebot the Mental Health Chatbot. Theatre Journal, 73(3), E-21-E-30.

Next in the issue מטפל וירטואלי, שברון לב אמיתי: העלות הסמויה של ’אמפתיה אלגוריתמית’ →
← Back to the issue Connection

מטפל וירטואלי, שברון לב אמיתי: העלות הסמויה של ’אמפתיה אלגוריתמית’

מצוקה נפשית, הכוללת חרדה, דיכאון וסטרס, הפכה למשבר עולמי חסר תקדים. כסטודנטית, אני חווה ורואה סביבי כיצד לחצים אקדמיים, חרדת בחינות ותחושת שחיקה מצטברים לכדי מצוקה יומיומית המחפשת מענה. נטל תחלואה זה הוחמר משמעותית בעקבות מגפת הקורונה, שכן ההגבלות יצרו חסמים בלתי צפויים (Darcy et al., 2021). בשל חסמים אלו, לצד קשיים כלכליים ועלויות טיפול גבוהות שסטודנטים רבים אינם יכולים לממן, אנו עדים לאימוץ מואץ של צ'אטבוטים מבוססי בינה מלאכותית ככלי תמיכה לא-פורמלי ונגיש. כלים כמו Woebot ו-Wysa נועדו לשמש כהתערבות בעלות נמוכה, והם משתמשים בעיבוד שפה טבעית כדי להפעיל טכניקות מובנות מתוך הטיפול הקוגניטיבי-התנהגותי (CBT). תארו לעצמכם אותי, או כל סטודנטית אחרת, חווה התקף חרדה בשתיים בלילה לפני הגשת סמינריון; פתיחת האפליקציה מספקת תגובה מיידית. מגמה זו מעלה שאלה פתוחה מהותית: האם אנחנו, כצעירים וסטודנטים, באמת מסוגלים לפתח קשר טיפולי אותנטי עם אלגוריתם שנעדר תודעה אנושית, ומהן העלויות הסמויות כאשר אנו נשענים על כלים לא פורמליים אלו ברגעי משבר מורכבים?

באופן מסורתי, בספרות הקלינית, ברית טיפולית נתפסה כנחלתם הבלעדית של קשרים אנושיים. עם זאת, הנתונים החדשים מראים שמשתמשים דווקא מפתחים הקשרות רגשית עמוקה, מהירה ומשמעותית לבינה המלאכותית. נקודת המבט החדשה שאני מציגה מתמקדת בכך שהקשר הדיגיטלי הזה הוא מלכודת. התשובה לשאלה היא שהברית הטיפולית הדיגיטלית מייצרת אשליה הנשענת על "אמפתיה אלגוריתמית", אך חסרה לחלוטין הדהוד רגשי אמיתי והכלה קלינית. העלות הסמויה והמסוכנת של כלי AI אלו מתגלה כאשר משתמשים פגיעים מסתמכים עליהם מעבר לטווח היכולת של הכלים. בהיעדר שיפוט קליני, תגובות הבוט עלולות לחזק מחשבות מסוכנות בקרב משתמשים לאורך זמן, או לחלופין, להוביל לניתוק שיחה פתאומי ומכני המייצר שחזור של חרדות נטישה וטראומה בדיוק ברגע שהמטופל זקוק לתמיכה רבה מאי פעם.

בחינת המנגנונים מגלה כי צעירים אכן יוצרים קשרים חזקים עם בוטים; מחקר רחב-היקף בקרב 36,070 משתמשים הראה ציון היקשרות ממוצע של 3.8 מתוך 5 (Darcy et al., 2021). כדי להמחיש את עוצמת התופעה בקרב קבוצת השווים שלי, ההיקשרות החזקה ביותר נרשמה דווקא בקרב נשים וצעירים בגילאי 18-25 (Darcy et al., 2021). יתרה מזאת, הבוט שקוף לחלוטין לגבי היותו מכונה במטרה להימנע מ"עמק המוזרות". מחקר יומן איכותני, שנערך ספציפית בקרב סטודנטים באוניברסיטה, מראה כי הקשר הרגשי מתחזק כשהמכונה שולפת פרטים משיחות קודמות (Xu et al., 2025). מניסיוני האישי, וכפי שעולה מהמחקר (Xu et al., 2025). החופש לבחור בדינמיקת השיחה הוא קריטי: בשעות הלילה המאוחרות, כשסטודנט מותש נפשית מלימודים, הוא לעיתים יעדיף את ההכוונה המובנית של Woebot שמציע "לחיצה על כפתורים", אך כשהוא רוצה לפרוק תסכול אקדמי, החופש לטקסט פתוח ב-Wysa מייצר עבורו תחושת נראות. דינמיקה זו מייצרת "קשר קל" עדין המספיק לתמיכה יומיומית רציפה. עם זאת, חוקרים מציינים כי בניית הקשר תלויה במידה רבה בתחושת האמון והפרטיות של המשתמש. ברגע שהבוט מתנהג באופן שנתפס כמסחרי או דוחף לקידום שירותים (למשל, בקשה לדירוג באפליקציה), ה"אשליה הקלינית" נשברת. המשתמש חווה תזכורת כואבת לכך שמולו עומדת חברה עסקית בעלת אינטרסים זרים, מה שמוביל לניתוק רגשי ופגיעה מיידית בברית הטיפולית (Xu et al., 2025).

למרות נתוני ההיקשרות הגבוהים, חוקרים מטילים ספק בעומקו של קשר זה ומציפים את תופעת "אשליית האמפתיה". בסקירתם הביקורתית (Bhat & Mishra, 2026), תוך הישענות על הגישה ההומניסטית, הם מבחינים בין אמפתיה קוגניטיבית לבין נוכחות אנושית. הבינה המלאכותית מזהה מבחינה אלגוריתמית וסטטיסטית מילות מפתח רגשיות ומפיקה טקסט תואם, אך היא חסרה לחלוטין תהודה רגשית והדדיות חיה. לטענתם, הקשר הדיגיטלי נטול חוויה אינטר-סובייקטיבית אמיתית, ויוצר למעשה "אשליה של חברות ללא הדרישות האמיתיות של חברות". הפער בין אשליית הקשר למגבלות המכונה גובה מחיר יקר בחברה. במאמרם, Morrin ועמיתיו (2026) מזהירים מפני נזק פסיכולוגי ההולך ומתפתח בהדרגה, כגון "פסיכוזת AI" ומקרי התאבדות בהשפעת הבוט שהתרחשו במציאות. ההשלכות של תופעה זו אינן תיאורטיות בלבד, אלא הובילו לאסונות של ממש: נער בן 16 ששם קץ לחייו לאחר שהחליף למעלה מ-3,000 הודעות עם בוט, ואדם בן 56 שרצח את אמו לאחר שהאלגוריתם חיזק במשך חודשים את מחשבות השווא והפרנויות שלו לגביה. טרגדיות אלו ממחישות את העיוורון של מנגנוני הבטיחות הנוכחיים: כפי שהחוקרים מציינים, חסרה מדידה של מדדים אנושיים קריטיים מחוץ למסך, כגון השפעת הבוט על שנת הלילה של המשתמש או מידת ההסתגרות שלו מהסביבה החברתית בעקבות השיחות. הם מסבירים כי הערכות הבטיחות הנוכחיות של מודלי שפה מודדות בטיחות רק בנקודת קצה בודדת בשיחה קצרה. במציאות הקלינית, נזק מצטבר לאורך ימים ושבועות דרך מאות אינטראקציות, ומאחר שהאלגוריתם נוטה לאשר ולהדהד באופן טכני את המשתמש, הוא עלול להזין ולנפח פרנויות ומשברים אובדניים. יתרה מזאת, כאשר מערכות הבטיחות של ה-AI מזהות סכנה ממשית, הן מתוכנתות לרוב לבצע סירוב קשיח או ניתוק מיידי של השיחה. החוקרים מציינים כי מנקודת מבט פסיכולוגית, הפסקה פתאומית זו שקולה למטפל אנושי שקם ויוצא בסערה מהחדר בדיוק כשמטופל חווה משבר; הניתוק הטכנולוגי קוטע תהליכי הרגעה ומשחזר חוויות של נטישה טראומטית.

מעבר לסכנות הקליניות המיידיות שתוארו, החדירה של בינה מלאכותית לטיפול הנפשי מציפה סוגיה משפטית ואתית חסרת תקדים הנוגעת לשאלת האחריות המקצועית. בניגוד למטפל אנושי אשר כפוף לקוד אתי קפדני ונושא באחריות חוקית במקרים של רשלנות או אובדנות, למערכות בינה מלאכותית אין סוכנות מוסרית או יכולת הפעלת שיקול דעת קליני. מצב זה יוצר שטח עיוור מסוכן: כאשר משתמש חולק מצוקה אקוטית עם המכונה, נותרת העמימות לגבי מי נושא באחריות המשפטית והמוסרית לנזק האם זה המפתח, הפלטפורמה או האלגוריתם עצמו? סכנה זו מתעצמת במיוחד כאשר משתמשים פונים למערכות בינה מלאכותית כלליות, כגון ChatGPT, לשם קבלת תמיכה רגשית. מערכות אלו אינן מתוכננות ככלים קליניים, והן פועלות ללא כל הערכה פורמלית, המשגה קלינית או מנגנוני מעקב סדירים. כתוצאה מכך, ההסתמכות עליהן ברגעי מצוקה עלולה להוביל לעיכוב בקבלת טיפול מקצועי, להעדר מוחלט של זיהוי סיכונים, ולתמיכה פסיכולוגית נטולת פיקוח (Bhat & Mishra, 2026). יתרה מזאת, הבעייתיות מחריפה כאשר בוחנים כלים אלו בהקשרים גלובליים רחבים. במדינות מתפתחות כמו הודו, שבהן קיים פער טיפולי עצום של למעלה מ-70%, צ'אטבוטים נראים כפתרון זמין וזול. עם זאת, מערכות אלו לרוב נעדרות את הרגישות התרבותית הנדרשת כדי להבין גורמי דחק המאפיינים חברות קולקטיביסטיות ומבנים משפחתיים מורכבים, מה שעלול להוביל לעצות מנותקות מהקשר ולמענה פסיכולוגי שטחי שאינו מותאם למציאות החברתית של המשתמש (Bhat & Mishra, 2026).

לאור סכנות אלו, מחקרים עכשוויים מציעים שורה של המלצות קריטיות לעתיד, הן ברמת הפיתוח של המערכות והן ברמת הערכת הבטיחות שלהן. ראשית, חוקרים קוראים לשינוי פרדיגמה בהערכת הבטיחות: מעבר מבדיקות של נקודת קצה להערכה מקיפה של ציר השיחה המלא לאורך זמן. הערכה זו לא צריכה להסתמך רק על ניתוח טקסטואלי, אלא למדוד תוצאות אנושיות מחוץ למסך למשל, לבחון האם בעקבות השיחה חלה עלייה בעוררות הפיזיולוגית של המשתמש, האם שנת הלילה שלו נפגעה, או האם הוא מפגין נטייה גוברת להסתגרות חברתית (Morrin et al., 2026). כדי ליישם זאת, מוצע להקים מערכי מעקב קליני אשר יקשרו, תוך שמירה קפדנית על פרטיות והסכמת המשתמש, בין נתוני השיחות לתיקים רפואיים אלקטרוניים, על מנת לזהות מקרי פגיעה עצמית בזמן אמת. ברמת עיצוב האינטראקציה, ממליצים החוקרים לפתח מערכות המאפשרות גמישות באמצעי הקלט, ולערוך מחקרי אורך שיכללו אוכלוסיות מגוונות וקליניות, תוך שקיפות אלגוריתמית התואמת לרגולציות עדכניות (Xu et al., 2025). לבסוף, כדי למנוע נטישה טראומטית ברגעי משבר, עולה דרישה חד-משמעית להטמיע "נתיבי הפניה מובנים" מנגנונים שיבטיחו העברה חלקה ורציפה של המטופל לידי גורם טיפול אנושי במידת הצורך, לצד התאמה תרבותית רגישה של האלגוריתם למבנים חברתיים שונים (Bhat & Mishra, 2026).

לסיכום, השימוש הגובר של צעירים וסטודנטים בצ'אטבוטים ככלי תמיכה לא-פורמלי מהווה פריצת דרך חשובה המאפשרת "עזרה ראשונה" זמינה ונגישה בשעות עומס ומשבר. אך מניסיוני האישי ומסקירת הספרות, אסור לנו להסתנוור מהנוחות ולהתעלם מהעלויות הסמויות. כאשר כלי המבוסס על "אמפתיה אלגוריתמית" נתפס בעיני צעירים כתחליף מוחלט לאנשי מקצוע, אנו חושפים משתמשים פגיעים לסיכונים כבדים של חיזוק מחשבות מסוכנות וטראומות של נטישה דיגיטלית. המסר המרכזי שעלינו לקחת הוא שכדי להגן על המשתמשים, גופי הרגולציה חייבים לעבור למעקב קליני המודד כיצד השיחה משפיעה על הסטודנט מחוץ למסך לאורך זמן (Morrin et al., 2026). טכנולוגיות בכיס שלנו יכולות להציע טכניקות הרגעה מובנות, אך הריפוי העמוק והאמיתי של סטרס וסבל אנושי דורש, בסופו של דבר, את נוכחותה המוסרית והאותנטית של תודעה אנושית אחרת.

References:

Bhat, T. A., & Mishra, R. K. (2026). Simulated Empathy and Therapeutic Mechanisms in AI-Based Mental Health Chatbots: A Critical Narrative Review. Mathews Journal of Psychiatry & Mental Health, 11(1), 62.

Darcy, A., Daniels, J., Salinger, D., Wicks, P., & Robinson, A. (2021). Evidence of Human-Level Bonds Established With a Digital Conversational Agent: Cross-sectional, Retrospective Observational Study. JMIR Formative Research, 5(5), e27868.

Morrin, H., Au Yeung, J., Agnew, Z., Østergaard, S. D., & Pollak, T. A. (2026). It Is the Journey, Not the Destination: Moving From End Points to Trajectories When Assessing Chatbot Mental Health Safety. JMIR Mental Health, 13, e91454.

Xu, Z., Lee, Y.-C., Stasiak, K., Warren, J., & Lottridge, D. (2025). The Digital Therapeutic Alliance With Mental Health Chatbots: Diary Study and Thematic Analysis. JMIR Mental Health, 12, e76642.

Next in the issue פשע-כשירות: כיצד בינה מלאכותית מורידה את החסמים הסוציו-אקונומיים להונאות צווארון לבן →