Перетворіть свої плани на дані
Ми місяцями перебували в циклі перевірок. LLM-агенти планували та перевіряли код. Робота постійно поверталася на доопрацювання. Кожне таке повернення коштувало нам часу.
Ми проаналізували 2400 документів із перевірок. Ми виявили 6 причин невдач. Більшість із них не були багами в коді. Це були дефекти планування. Відсутність документації. Неозвучені правила. Прогалини в доказах.
Текстові плани не прив'язують код. Рецензенти не можуть повторно виконати текстовий план. Ми змінили формат. Ми використали TOML. Ми перетворили плани на дані.
Ми створили валідатор на Python. Він перевіряє план ще до того, як його побачить людина.
- Він знаходить цикли.
- Він перевіряє залежності.
- Він гарантує, що кожне твердження має доказ.
- Він відхиляє плейсхолдери.
Помилковий план тепер — це невдале assertion. Людина-рецензент не витрачає час на структуру. Вона зосереджується на ризиках предметної області.
Наш перший план, перевірений за допомогою DAG, пройшов з першого разу. Рецензенти витратили свій ресурс на реальні ризики.
Ваш архів перевірок — це набір даних. Використовуйте його для пошуку закономірностей. Припиніть використовувати звичайний текст для технічних планів. Використовуйте дані.
Source: https://dev.to/wernerk_au/dag-toml-how-we-turned-four-months-of-code-review-pain-into-a-machine-checkable-planning-format-236j Optional learning community: https://t.me/GyaanSetuAi