Seberapa Banyak Konten Blog Anda yang Benar-benar Diambil oleh Pencarian AI?

Saat AI melakukan pencarian web, seberapa banyak konten Anda yang ia lihat? Apakah ia membaca seluruh artikel Anda atau hanya judulnya saja?

Saya menguji alat-alat Anthropic untuk mengetahuinya. Begini cara kerjanya.

Pencarian AI terjadi dalam dua tahap yang berbeda:

Tahap 1: WebSearch AI menggunakan mesin pencari untuk menemukan daftar hasil. Pada tahap ini, AI hampir tidak melihat apa pun dari halaman Anda. Ia hanya melihat:

  • URL
  • Judul halaman
  • Tanggal pembaruan terakhir

Jika judul Anda tidak jelas, AI mungkin akan melewatkan situs Anda sepenuhnya.

Tahap 2: WebFetch Jika AI menemukan judul yang relevan, ia akan mengirimkan permintaan untuk mengambil isi halaman. Di sinilah konten mulai berperan.

Namun, ada lapisan tersembunyi. Alat seperti Claude Code menggunakan model perantara (Haiku) untuk merangkum halaman terlebih dahulu. Model AI utama sering kali tidak pernah melihat teks asli Anda. Ia hanya melihat ringkasan yang dibuat oleh model perantara tersebut.

Ini berarti tulisan Anda disaring sebelum pengguna melihatnya.

Cara menulis untuk pencarian AI:

  • Optimalkan judul Anda: Jangan gunakan "Implementation Notes." Gunakan "Complete Implementation Notes: Content Negotiation for HTML-to-Markdown." Berikan data yang cukup agar AI mau mengeklik.
  • Utamakan nilai di bagian awal: Model ringkasan membaca dari atas ke bawah. Letakkan kesimpulan utama Anda di beberapa kalimat pertama pada setiap bagian.
  • Desain untuk kutipan: Kutipan AI sangat pendek (sekitar 125 hingga 150 karakter). Tulislah kalimat mandiri yang tetap masuk akal tanpa konteks di sekitarnya.
  • Gunakan Markdown: Gunakan tag H2, bullet points, dan tabel. Ini berfungsi sebagai penanda bagi AI untuk memahami struktur Anda.

Satu tips terakhir: Periksa robots.txt Anda. Anda dapat mengizinkan bot pencari untuk mengutip situs Anda, sembari memblokir bot pelatihan agar tidak menggunakan data Anda untuk melatih model mereka.

Berhentilah menulis hanya untuk manusia. Mulailah menulis untuk agen-agen yang menemukan Anda.

Sumber: https://dev.to/isray_notarray/how-much-of-your-blog-does-ai-search-actually-grab-breaking-down-claudes-websearch-and-webfetch-538f

Komunitas pembelajaran opsional: https://t.me/GyaanSetuAi