هوش مصنوعی زمانی به خدمت تبدیل میشود که مسئله، کاربر، داده و معیار کیفیت روشن باشند. راهکار میتواند شامل جستجوی معنایی روی اسناد، استخراج ساختیافته، خلاصهسازی برای بازبینی یا طبقهبندی متن باشد؛ انتخاب مدل و معماری بعد از سنجش داده و ریسک انجام میشود.
نمونههای کاربردی با مرز مشخص
پرسشوپاسخ دربارهٔ اسناد مجاز
بازیابی متن از مجموعهٔ تأییدشده و ارائهٔ پاسخ همراه ارجاع به منبع، تاریخ سند و امکان اعلام «پاسخ در منابع موجود نیست».
دستهبندی و استخراج
پیشنهاد برچسب یا تبدیل ورودیهای متنی به فیلدهای ساختیافته؛ موارد مبهم، کماطمینان یا حساس برای بررسی انسان علامتگذاری شوند.
کمک به کارشناس
خلاصهسازی مکاتبه یا پرونده برای کاهش رفتوبرگشت در مطالعه؛ کارشناس باید بتواند متن مبدأ را باز کند و خلاصه را اصلاح کند.
جستجوی داخلی
جستجوی عبارتمحور یا معنایی در دانش سازمان با کنترل دسترسی در سطح سند؛ موتور جستجو نباید مجوز کاربر را دور بزند.
معماری و کنترل کیفیت
- داده و مجوز: منابع، طبقهبندی محرمانگی، دورهٔ نگهداری و مجوز استفاده از هر سند مشخص شود.
- بازیابی و زمینه: اسناد شکسته یا همپوشان، فراداده، نسخه و فیلتر دسترسی پیش از استفادهٔ مدل بررسی شوند.
- ارزیابی: مجموعهای نماینده از ورودیهای واقعیِ مجاز و پاسخهای مورد انتظار ساخته شود؛ دقت، ارجاع درست، پاسخ بیپشتوانه، زمان پاسخ و هزینه پایش شوند.
- مرز ابزارها: مدل فقط اجازهٔ فراخوانی ابزارهای محدود و مجاز را داشته باشد. اقدام حساس یا برگشتناپذیر به تأیید انسان نیاز دارد.
- امنیت: ورودی کاربر یا سند بازیابیشده را دستور معتبر تلقی نکنید؛ تزریق دستور، نشت اطلاعات و دسترسی خارج از نقش باید در طراحی و ارزیابی پوشش داده شوند.
- پایش و توقف: مالک راهکار، نسخهٔ مدل و پرامپت، ثبت رخداد متناسب با محرمانگی، آستانهٔ توقف و روال بازگشت تعریف شود.
برای مدیریت ریسک در سراسر چرخهٔ عمر، NIST AI RMF فعالیتها را در چهار کارکرد «حاکمیت، شناخت زمینه، سنجش و مدیریت» سامان میدهد؛ این چارچوب به تصمیمگیری و اولویتبندی کمک میکند و چکلیست تضمین کیفیت نیست. منبع رسمی چارچوب NIST.
فرایند تحویل
- کاربر، تصمیم یا کار مورد پشتیبانی و پیامد خطا را مشخص کنید.
- دادهٔ مجاز، سطح محرمانگی، نمونههای نماینده و محدودیت نگهداری را بازبینی کنید.
- نسخهٔ پایه بسازید و آن را با روش فعلی یا قواعد ساده مقایسه کنید.
- خطاهای قابلقبول، پاسخ بدون پشتوانه، ارجاع به انسان و مسیر اصلاح را تعریف کنید.
- نسخهٔ محدود را با کاربر بسنجید؛ تنها پس از پذیرش و آمادهبودن پایش گسترش دهید.
- هزینهٔ مصرف، تأخیر، تغییر مدل، تداوم دسترسی و مالک نگهداری را مستند کنید.
برای یکپارچهسازی با سامانههای موجود، صفحهٔ اتصال سامانهها را ببینید. اگر پیش از مدل به ورودی ساختیافتهتر نیاز است، راهکار نرمافزار سفارشی میتواند بررسی شود. دامنهٔ اولیه از روش همکاری آغاز میشود.
یک مورد استفاده را قبل از توسعه ارزیابی کنیم
کاربر، نوع داده، نمونهٔ پرسش یا ورودی و پیامد خطا را شرح دهید تا امکانسنجی و معیار ارزیابی پیشنهاد شود.
درخواست ارزیابی هوش مصنوعی