مستند
Agent برای جواب، مدرک مرتبط در کتابهای تأییدشده پیدا کرده است.
AGENT HEALTH & USAGE
الان Agent چه وضعیتی دارد؟
این صفحه تستهای خودکار را از استفاده واقعی جدا میکند، پوشش دانش را نشان میدهد و تغییرات کتابخانه را قابل فهم میکند.
خلاصه خیلی ساده
الان در چه حوزههایی قویتریم؟
این نقشه از محتوای نسخه فعال کتابها ساخته میشود. «پوشش قوی» یعنی شواهد بیشتر و متنوعتر داریم؛ نه اینکه هر جواب در آن حوزه حتماً درست است.
از آخرین بهروزرسانی چه دانشی اضافه شد؟
معنی وضعیت جوابها
مدرک ناکافی
این شکست نیست؛ Agent عمداً جواب قطعی نساخته چون منبع کافی نداشته است.
نیمهمستند
بخشی از سؤال مدرک دارد و بخشی هنوز پوشش کافی ندارد.
اختلاف منابع
دو یا چند منبع معتبر دیدگاه متفاوت دارند؛ Agent باید اختلاف را صریح نشان دهد.
«قدرت شواهد» احتمال درستبودن جواب نیست؛ فقط نشان میدهد شواهد بازیابیشده چقدر قوی و معتبر بودهاند.
وضعیت جوابهای واقعی
استفاده واقعی از کدام کانال آمده؟
سؤالهای واقعی پرتکرار
سؤالهای Evaluation و Smoke Test در این قسمت حساب نمیشوند.
دانش کم داریم
اینها سؤالهای واقعیای هستند که Agent برایشان مدرک کافی پیدا نکرده؛ بهترین ورودی برای توسعه Knowledge Base.
نیاز به بررسی
پاسخهای واقعی با شواهد ضعیفتر، پوشش ناقص یا اختلاف منابع. این بخش به معنی «همه جوابها نامطمئناند» نیست.
تستهای خودکار سیستم — جدا از کاربران
این درخواستها برای کنترل کیفیت خود Agent اجرا میشوند و در آمار استفاده واقعی بالا شمرده نمیشوند.