هوش مصنوعی واقعاً چقدر از وبلاگ شما را جذب می‌کند؟

وقتی یک هوش مصنوعی جستجوی وب انجام می‌دهد، چه مقدار از محتوای شما را می‌بیند؟ آیا کل مقاله شما را می‌خواند یا فقط عنوان را؟

من ابزارهای Anthropic را برای فهمیدن این موضوع آزمایش کردم. روش کار به این صورت است:

جستجوی هوش مصنوعی در دو مرحله متمایز انجام می‌شود:

مرحله ۱: WebSearch هوش مصنوعی از یک موتور جستجو برای یافتن لیستی از نتایج استفاده می‌کند. در این مرحله، هوش مصنوعی تقریباً هیچ چیز از صفحه شما نمی‌بیند. فقط موارد زیر را می‌بیند:

  • URL
  • عنوان صفحه
  • آخرین تاریخ به‌روزرسانی

اگر عنوان شما مبهم باشد، ممکن است هوش مصنوعی به‌طور کامل از سایت شما عبور کند.

مرحله ۲: WebFetch اگر هوش مصنوعی عنوان مرتبطی پیدا کند، درخواستی برای دریافت بدنه صفحه ارسال می‌کند. اینجاست که محتوا وارد عمل می‌شود.

با این حال، یک لایه پنهان وجود دارد. ابزارهایی مانند Claude Code از یک مدل میانی (Haiku) استفاده می‌کنند تا ابتدا صفحه را خلاصه‌سازی کند. مدل اصلی هوش مصنوعی اغلب هرگز متن اصلی شما را نمی‌بیند؛ بلکه فقط خلاصه‌ای را که توسط مدل میانی ایجاد شده است، مشاهده می‌کند.

این بدان معناست که نوشته‌های شما پیش از آنکه کاربر آن‌ها را ببیند، فیلتر می‌شوند.

چگونه برای جستجوی هوش مصنوعی بنویسیم:

  • عناوین خود را بهینه کنید: از عبارت "Implementation Notes" استفاده نکنید. به جای آن از "Complete Implementation Notes: Content Negotiation for HTML-to-Markdown" استفاده کنید. به هوش مصنوعی داده‌های کافی برای کلیک کردن بدهید.
  • ارزش اصلی را در ابتدا بیاورید: مدل خلاصه‌ساز از بالا به پایین می‌خواند. نتیجه‌گیری‌های اصلی خود را در چند جمله اول هر بخش قرار دهید.
  • برای نقل‌قول‌ها طراحی کنید: نقل‌قول‌های هوش مصنوعی بسیار کوتاه هستند (حدود ۱۲۵ تا ۱۵۰ کاراکتر). جملات مستقلی بنویسید که بدون هیچ متن یا زمینه اضافه‌ای، معنای خود را برسانند.
  • از Markdown استفاده کنید: از تگ‌های H2، لیست‌های نشانه‌دار و جداول استفاده کنید. این‌ها مانند نشانه‌های راهنما برای هوش مصنوعی عمل می‌کنند تا ساختار شما را درک کند.

یک نکته نهایی: فایل robots.txt خود را بررسی کنید. شما می‌توانید به ربات‌های جستجو اجازه دهید سایت شما را نقل‌قول کنند، در حالی که همزمان از ربات‌های آموزشی برای استفاده از داده‌هایتان جهت آموزش مدل‌هایشان جلوگیری می‌کنید.

نوشتن فقط برای انسان‌ها را متوقف کنید. نوشتن برای عامل‌هایی (agents) که شما را پیدا می‌کنند، شروع کنید.

منبع: https://dev.to/isray_notarray/how-much-of-your-blog-does-ai-search-actually-grab-breaking-down-claudes-websearch-and-webfetch-538f

انجمن یادگیری اختیاری: https://t.me/GyaanSetuAi