The Harness as the Only Mutable Surface: Compliance-Bounded Self-Evolution of LLM Agents in Credit Pipelines, with a Measured Admission Gate

مسئله

ایجنت‌های خودبهبود می‌توانند یک فرایند اعتباری را با قاعده‌ی تغییرکرده تطبیق دهند، اما ایجنتی که خودش را بازنویسی می‌کند آنچه یک ناظر بازبینی می‌کند را از بین می‌برد: یک تغییر نام‌دار، یک تست ثبت‌شده و یک تأیید. در وام‌دهی تنظیم‌شده، تغییری که نشود بازبینی‌اش کرد پذیرفتنی نیست.

روش

نویسنده استدلال می‌کند خودتکاملی فقط وقتی قابل بازبینی است که به هارنس زمان اجرا، یعنی متن دستور، منطق فراخوانی ابزار و ترکیب اجزای پایه، محدود شود و وزن‌های مدل ثابت بمانند، تا هر تطبیق یک تفاضل با علت و تست باشد. یک موتور دوحلقه‌ای با یک دروازه‌ی پذیرش ساخت که پیش از استقرار یک رکورد زنجیره‌ی هش می‌نویسد، و دروازه را در شبیه‌سازی با یک ایجنت شبیه‌سازی‌شده و یک پیشنهاددهنده‌ی جست‌وجوی بذردار، نه مدل زبانی، سنجید.

یافته‌ها

• در سه خانواده بازتفسیر نظارتی با سه شدت و ده بذر، حلقه‌ی دروازه‌دار ۱۴۴ تغییر از ۷۴۴۹ تغییر نامزد را پذیرفت که هیچ‌کدام خطا را روی تاریخچه‌ی کنارگذاشته بدتر نکرد، و در همه‌ی خانه‌های شدت کم و متوسط نرخ مثبت کاذب را بدون افزایش موارد ازدست‌رفته به سطح مرجع بازگرداند.
• با جایگزینی دروازه با بررسی یک سیستم بی‌حد، یعنی خطای کمتر در ردپاهای اخیر، همان حلقه‌ها ۳۰۹ تغییر زیان‌بار پذیرفتند و در ۴۹ اجرا از ۹۰ اجرا موارد ازدست‌رفته بالای ۱۰ درصد ماند.
• در بالاترین شدت ساختاری، تحمل ثابت دروازه جایگزینی درست را در نیمی از بذرها مسدود کرد.

محدودیت‌ها

مقاله بخش جداگانه‌ای برای محدودیت‌ها ندارد؛ نویسنده تأکید می‌کند دروازه فقط در شبیه‌سازی و بدون مدل زبانی سنجیده شده است.