Anthropic جنبه انسانی را اندازه‌گیری کرد. پنج اپراتور در حال ساخت جنبه عامل (Agent) هستند.

Anthropic تحقیق جدیدی درباره Claude Code منتشر کرد. آن‌ها ۴۰۰,۰۰۰ نشست (session) متعلق به ۲۳۵,۰۰۰ نفر را مورد مطالعه قرار دادند. یافته‌های آن‌ها نشان می‌دهد که چگونه تخصص انسانی، عملکرد عامل را تغییر می‌دهد.

داده‌ها الگوی مشخصی را نشان می‌دهند. متخصصان در هر دستور، کار بیشتری انجام می‌دهند. نشست‌های متخصصان در مقایسه با نشست‌های مبتدیان، ۲.۴ برابر اقدامات (actions) بیشتری در هر پرامپت (prompt) دارند. آن‌ها همچنین ۵ برابر خروجی متنی بیشتری مشاهده می‌کنند.

موفقیت به میزان درک شما از مسئله بستگی دارد، نه به آموزش برنامه‌نویسی شما. تخصص به عنوان یک ضریب برای کارهای مبتنی بر عامل (agentic work) عمل می‌کند.

در حالی که Anthropic جنبه انسانی را اندازه‌گیری کرد، هنوز شکافی باقی مانده است. آن‌ها جنبه عامل را مطالعه نکردند. آن‌ها به این نپرداختند که چگونه حافظه، وضعیت (state) یا حاکمیت (governance) اجازه می‌دهد کار در طول نشست‌های مختلف انباشته و تکامل یابد.

پنج متخصص در حال ساخت راه حلی برای این شکاف هستند. تمرکز آن‌ها بر معماری‌ای است که خارج از حلقه استدلال عامل (agent's reasoning loop) قرار دارد.

  • Rapls روی فیلدهای وضعیت (status fields) و گزارش‌های تصمیم‌گیری (decision logs) کار می‌کند.
  • Scarab Systems بر خط‌مبناهای تحت حاکمیت (governed baselines) و اجرا (enforcement) تمرکز دارد.
  • NOVAInetwork از کوئوروم (quorum) برای گسترش انضباط اپراتوری استفاده می‌کند.
  • Raffaele Zarrelli فشار ساختاری در حلقه‌های کند (slow loops) را مطالعه می‌کند.
  • Brian Hall با استفاده از معماری متن‌باز، دروازه‌های قطعی (deterministic gates) می‌سازد.

این پنج نفر به یک نتیجه واحد می‌رسند: LLM ایده‌ها را پیشنهاد می‌دهد. قوانین قطعی (deterministic rules) آن‌ها را اجرا می‌کنند. انسان‌ها گذارها (transitions) را تأیید می‌کنند. این قوانین باید خارج از عامل قرار داشته باشند.

Anthropic آنچه را که هنگام ورود تخصص انسانی به حلقه رخ می‌دهد، اندازه‌گیری کرد. این گروه در حال ساخت روشی هستند که آن تخصص در میان ابزارها و عامل‌های مختلف حفظ شود.

دو سیگنال مستقل در حال همگرایی بر سر یک مشکل واحد هستند. این یک روند (trend) نیست، بلکه تغییری در نحوه ساخت ماست.

انضباط اپراتوری از یک گردش کار شخصی به یک معماری اصلی در حال تبدیل شدن است. شما باید آنچه را که در آینده می‌آید، بسازید، اندازه‌گیری کنید و بر آن حاکمیت داشته باشید.

Source: https://www.anthropic.com/research/claude-code-expertise

Full post: https://dev.to/jugeni/anthropic-measured-the-human-side-five-operators-are-building-the-agent-side-17a0

Optional learning community: https://t.me/GyaanSetuAi