بازگشت به کتابخانه

پرسش کلیدی جدید

پردازش‌شده با هوش مصنوعی · تأییدشده توسط نویسنده

چگونه باید چت‌بات‌های هوش مصنوعی مولد را برای ارائه پشتیبانی ایمن و موثر از سلامت روان طراحی کرد؟

Design Considerations for Generative AI Tools in Mental Healthcare
Polina Durneva, Yuan Zhang, Sohye Lee · International Conference on Information Systems (ICIS) · 2026

۲۵ بازدید

تصویر برای: چگونه باید چت‌بات‌های هوش مصنوعی مولد را برای ارائه پشتیبانی ایمن و موثر از سلامت روان طراحی کرد؟

پخش‌کننده Spotify بارگذاری می‌شود؛ ممکن است Spotify کوکی‌هایی تنظیم کند. این دستگاه انتخاب شما را به خاطر می‌سپارد.

یافته‌های کلیدی

  • کاربران و متخصصان به چت‌بات برای برقراری ارتباط با زبان ساده، همدلی، اعتبارسنجی احساسات و سهولت استفاده امتیاز بالایی دادند و کاربران گزارش کردند که این ابزار به تقسیم مسائل به اقدامات قابل مدیریت کمک کرده است.
  • ارزیابی‌ها نقص‌های قابل‌توجهی را در زمینه مبتنی بودن پاسخ‌ها بر شواهد، حفظ زمینه گفتگو در طول تعاملات، مدیریت بار شناختی و شناسایی بحران‌های سلامت روان آشکار ساخت.
  • نویسندگان چهار دستورالعمل طراحی را استخراج کردند که بازیابی چندمرحله‌ای شواهد همراه با ذکر منبع، تولید همدلی هدایت‌شده بر اساس زمینه، ارائه مرحله‌ای اطلاعات متناسب با سطح سواد کاربر، و تشخیص تخصصی و چندمرحله‌ای بحران به همراه پروتکل‌های ارجاع فوری را توصیه می‌کند.

معنای آن برای شما

مدیر ارشد فناوری اطلاعات

Initiate an audit of all deployed conversational AI tools to verify they incorporate specialized multi-stage crisis detection with automated escalation protocols.

مدیر فناوری اطلاعات

Review current chatbot retrieval pipelines and implement multi-stage evidence retrieval architectures with strict source attribution.

استراتژیست کسب‌وکار

Pivot the product roadmap to prioritize domain-specific mental health solutions built on curated evidence sources rather than general-purpose LLMs.

پژوهشگر

Design evaluation metrics specifically to test generative AI's capacity for maintaining conversational context across multi-turn interactions and managing user cognitive load.

سیاست‌گذار

Draft regulatory compliance standards requiring digital mental health tools to feature verifiable evidence grounding and mandatory crisis escalation pathways.

خلاصه

این مطالعه از یک رویکرد پژوهش علم طراحی برای ساخت و ارزیابی یک چت‌بات هوش مصنوعی مولد جهت مدیریت استرس دانشجویان استفاده می‌کند. پژوهشگران برای شناسایی نیازمندی‌ها با ۲۰ کاربر مصاحبه کردند، یک چت‌بات مختص این حوزه را با استفاده از منابع منتخب سلامت روان توسعه دادند و آن را با پانلی متشکل از ۱۲ متخصص بالینی و انفورماتیک در کنار آزمون کاربردپذیری با ۲۶ دانشجوی دانشگاه ارزیابی نمودند. سپس بینش‌های حاصل از این ارزیابی‌ها در قالب دستورالعمل‌های تجویزی طراحی برای ابزارهای هوش مصنوعی آینده در حوزه سلامت روان ترکیب شدند.

مسئله

اختلالات سلامت روان بار سنگینی را بر افراد و سیستم‌های مراقبت سلامت تحمیل می‌کنند، اما کمبود ارائه‌دهندگان خدمات و انگ اجتماعی، دسترسی به مراقبت‌های سنتی را محدود می‌سازد. در حالی که هوش مصنوعی مولد پتانسیل ارائه پشتیبانی مقیاس‌پذیر و گفتگومحور را دارد، مدل‌های عمومی با خطر توهم، عدم اتکا به شواهد معتبر و ناتوانی در مدیریت ایمن بحران‌ها مواجه هستند که طراحان را بدون راهنمایی‌های عملی برای ساخت ابزارهای دیجیتال سلامتِ ایمن به حال خود رها می‌کند.

متن گفتار
Host: به پادکست A.I.S. Insights — powered by Living Knowledge خوش آمدید. من آنا آیوی سامرز هستم و امروز به بررسی یک مطالعه جدید با عنوان «ملاحظات طراحی برای ابزارهای هوش مصنوعی مولد در مراقبت‌های سلامت روان» می‌پردازیم. این مطالعه توسط پولینا دورنوا، یوان ژانگ و سوهی لی انجام شده و در کنفرانس بین‌المللی سیستم‌های اطلاعاتی یعنی ICIS سال ۲۰۲۶ ارائه شده است. تمرکز این پژوهش بر ارزیابی و تدوین راهنماهای طراحی برای چت‌بات‌های هوش مصنوعی است که جهت مدیریت استرس توسعه می‌یابند. همراه من در استودیو، تحلیل‌گر برنامه، الکس ایان ساترلند حضور دارد. الکس، خوش آمدید.
Expert: ممنون آنا. خوشحالم که اینجا هستم تا این مطالعه کاربردی را بررسی کنیم.
Host: الکس، برای شروع، چه مسئله‌ای در دنیای واقعی باعث شد پژوهشگران به سراغ این موضوع بروند؟
Expert: چالش اصلی، کمبود گسترده متخصصان سلامت روان و انگ اجتماعی ناشی از مراجعه به درمانگران است که دسترسی به خدمات را محدود می‌کند. ابزارهای هوش مصنوعی مولد می‌توانند خدمات پشتیبانی را در مقیاس وسیع ارائه دهند، اما مدل‌های عمومی با چالش‌هایی مثل تولید محتوای نادرست یا توهم، عدم اتکا به شواهد علمی و ضعف در شناسایی و مدیریت موقعیت‌های بحرانی روبرو هستند. این مطالعه بررسی می‌کند که چگونه می‌توان این ابزارها را به شکلی ایمن و قابل اعتماد برای کاربران طراحی کرد.
Host: تیم تحقیق برای بررسی این مسئله از چه روشی استفاده کردند؟
Expert: آن‌ها از متدولوژی پژوهش علم طراحی استفاده کردند. در گام نخست، نیازهای کاربران از طریق مصاحبه با ۲۰ دانشجو شناسایی شد. سپس یک چت‌بات اختصاصی مبتنی بر منابع معتبر سلامت روان توسعه یافت. در مرحله ارزیابی، دو گروه مشارکت داشتند: یک پانل متشکل از ۱۲ متخصص بالینی و انفورماتیک پزشکی، و یک گروه شامل ۲۶ دانشجو برای سنجش کاربردپذیری. در نهایت، داده‌های به‌دست‌آمده به اصول طراحی مشخص تبدیل شدند.
Host: نتایج این ارزیابی‌ها چه نکاتی را نشان داد؟
Expert: نتایج دو جنبه متفاوت داشت. از یک سو، کاربران و متخصصان به چت‌بات برای استفاده از زبان ساده، توانایی اعتبارسنجی احساسات، انتقال حس همدلی و سهولت کاربری امتیاز بالایی دادند. کاربران اشاره کردند که ابزار به آن‌ها در تجزیه فشارهای روانی به اقدامات عملی کمک کرده است. اما از سوی دیگر، نقص‌های مشخصی مشاهده شد؛ از جمله ضعف در حفظ پیوستگی موضوع گفتگو در تعاملات طولانی، اتکای ناکافی به ارجاعات علمی، ایجاد بار شناختی به دلیل ارائه حجم زیاد متن، و خطاهایی در شناسایی دقیق نشانه‌های بحران حاد.
Host: این یافته‌ها از دیدگاه تجاری و برای فعالان حوزه سلامت دیجیتال چه اهمیتی دارد؟
Expert: این مطالعه چهار دستورالعمل عملیاتی را استخراج کرده است که مستقیماً برای مدیران محصول و توسعه‌دهندگان فناوری‌های سازمانی قابل استفاده است. نخست، سیستم‌ها باید از بازیابی چندمرحله‌ای اطلاعات همراه با ذکر شفاف منابع علمی استفاده کنند. دوم، پاسخ‌های همدلانه باید با توجه به زمینه گفتگو هدایت شوند نه به شکل الگوهای از پیش تعیین‌شده. سوم، اطلاعات باید به شکل گام‌به‌گام و متناسب با ظرفیت شناختی و سطح سواد سلامت کاربر ارائه شود تا از سردرگمی جلوگیری کند. و در نهایت، باید یک سازوکار اختصاصی و چندمرحله‌ای برای پایش بحران وجود داشته باشد که در صورت لزوم، کاربر را بلافاصله به خطوط تلفنی یا متخصصان انسانی ارجاع دهد.
Host: این اصول برای کسب‌وکارهایی که می‌خواهند خدمات پشتیبانی روان‌شناختی به کارکنان یا مشتریان ارائه دهند، اهمیت زیادی در کنترل ریسک دارد.
Expert: دقیقاً. شرکت‌هایی که ابزارهای هوش مصنوعی را در برنامه‌های رفاهی سازمانی به کار می‌گیرند، با رعایت این چارچوب‌ها می‌توانند خطرات حقوقی، بالینی و اعتباری را کاهش دهند و ابزاری با کارایی واقعی طراحی کنند.
Host: الکس، از تحلیل روشن و ارائه‌ات بسیار سپاسگزارم. و تشکر از شما شنوندگان گرامی که در این قسمت از A.I.S. Insights همراه ما بودید. تا برنامه بعد، خدانگهدار.
Artificial Intelligence & Automation Information Systems & Management Human-Computer Interaction Data Analytics & Big Data Digital Transformation & Strategy Cybersecurity & Privacy Cloud & Infrastructure E-Commerce & Digital Platforms Operations & Supply Chain Sustainability & Green IS

generative AI, mental healthcare, chatbots, design science research, stress self-management, digital mental health