Могут ли ИИ-агенты вести себя как люди?

Я потратил 12 часов на тестирование StoryCaptcha. Это экспериментальная CAPTCHA. Она не просит вас искать светофоры. Она просит вас написать историю на основе подсказки. Затем она проверяет ваше поведение, чтобы понять, человек ли вы.

Я использовал Playwright, VS Code, GitHub Copilot и Chromium. Моей целью было проверить, может ли ИИ-агент имитировать человеческие паттерны.

Моя первая попытка провалилась с результатом 56/100. ИИ был слишком эффективным. Он копировал и вставлял текст. Он действовал мгновенно, без колебаний. Он следовал идеальным паттернам. Автоматизация эффективна, но она не человечна.

StoryCaptcha показывает метрики, которые она отслеживает:

  • Набранный текст против вставленного
  • Ритм нажатия клавиш
  • Когнитивные паузы
  • Кривизна траектории мыши
  • Использование Backspace
  • Поведение при исправлении ошибок

Я начал настраивать агента.

Сначала я запретил агенту вставлять текст. Я велел ему печатать по одному символу. Результат вырос.

Затем я настроил темп печати. Люди не печатают с идеальным таймингом. Мы делаем паузы, чтобы подумать. Мы ускоряемся и замедляемся. Я добавил случайные задержки между нажатиями клавиш. Результат снова вырос.

Затем я добавил ошибки. Люди делают опечатки. Мы используем Backspace, чтобы их исправить. Я проинструктировал агента совершать ошибки и исправлять их. Результат улучшился еще больше.

Я также изменил движение мыши. Люди не двигают мышью по прямым линиям. Они задерживаются на объектах и исследуют пространство. Я добавил кривизну траекториям движения мыши.

Одна метрика оставалась на уровне 0%, даже когда мой результат рос. Это было перекрытие клавиш (key-overlap). Люди часто нажимают следующую клавишу до того, как отпускают предыдущую. Большинство средств автоматизации отправляют идеально последовательные сигналы. Этот паттерн очень сложно подделать.

Мои результаты:

  • Начальный результат: 56
  • Промежуточный результат: 60–70
  • Оптимизированный результат: 76–77

В итоге агент прошел проверку. Но главным уроком стал не сам результат. Большинство людей сосредотачиваются на фингерпринтах браузера или IP-адресах. Этот эксперимент доказывает, что поведение — это мощный сигнал.

Важно не только то, что вы делаете. Важно то, как вы это делаете.

По мере развития ИИ-агентов поведенческая детекция станет жизненно важной. Самое сложное в том, чтобы быть человеком, — это не выполнение задач. Это несовершенство.

Источник: https://dev.to/shahraan_hussain_b42640e7/can-an-ai-agent-behave-like-a-human-a-12-hour-experiment-with-storycaptcha-1661

Дополнительное обучающее сообщество: https://t.me/GyaanSetuAi