LLM Wiki İçin Dört Türlü Bir Çerçeve

Bilgi tek başına muhakeme yeteneği oluşturmaz.

100'den fazla sayfadan oluşan bir LLM wikisi oluşturdum. Bir programlama eğitmeni olarak kullanmayı deneyene kadar iyi çalışıyordu.

Yapay zeka her tanımı biliyordu. Bir öğrenci "Promises konusunu anlamıyorum" dediğinde, yapay zeka ders kitabı tanımı verdi. Bu kötü bir yanıttı.

Gerçek bir eğitmen şunu sorardı: "Önce callback'leri anlıyor musun?" veya "Neleri denedin?"

Yapay zekanın gerçekleri vardı ama sıfır muhakeme yeteneği vardı. Wikimin sadece tek bir bilgi türünü depoladığını fark ettim.

Çoğu LLM wikisi bildirimsel (declarative) bilgi depolar. Bunlar gerçekler, tanımlar ve özetlerdir. "Bu nedir?" sorusuna yanıt verirler.

Uzmanlık daha fazlasını gerektirir. İhtiyacınız olan dört bilgi türü vardır:

• Bildirimsel (Declarative): Gerçekler ve tanımlar. • Yöntemsel (Procedural): Nasıl muhakeme edileceği. Bu, bir uzmanın verdiği kararlar dizisidir. • Deneyimsel (Experiential): Gerçek hayatta nasıl işlediği. Bu, hataları görmeyi ve uzmanların bunlarla nasıl başa çıktığını içerir. • Etkileşimsel (Interaction): Başkalarına nasıl rehberlik edileceği. Bu, ne zaman soru sorulacağını ve ne zaman sessiz kalınacağını bilmektir.

Araştırmalar, bilmek ile yapmak arasında devasa bir uçurum olduğunu gösteriyor. Asistan eğitmenler üzerinde yapılan bir çalışmada, %75'i Sokratik sorgulama yöntemini kullanmak yerine doğrudan cevap verdi. Kuralları biliyorlardı ancak baskı altında bunları uygulayamıyorlardı.

Bunu düzeltmek için sisteminizde iki işleme ihtiyacınız var:

  1. Veri Alımı (Ingest): Bildirimsel bilgi oluşturmak için gerçekleri arar.
  2. Madencilik (Mine): Yöntemsel, deneyimsel ve etkileşimsel bilgi oluşturmak için kararları arar.

Sadece gerçeklere bakarak bir muhakeme yolu bulamazsınız. Kararları aramalısınız. Şunu sormalısınız: Uzman neyi seçti? Bunu ne zaman seçti? Sonrasında ne oldu?

Yapay zekanın yeni nesli daha fazla gerçeğe sahip olarak değil, daha iyi bir muhakeme yeteneğine sahip olarak kazanacak. Muhakeme bir bilgi problemi değildir; bir bilgi türü problemidir.

Eğer sadece gerçekleri depolayan bir yapay zeka inşa ederseniz, sadece bir ders kitabı inşa etmiş olursunuz. Eğer bir uzman inşa etmek istiyorsanız, kararları madenlemelisiniz.

Kaynak: https://dev.to/rongrong/a-four-type-framework-for-llm-wiki-by-karpathy-5f1n

İsteğe bağlı öğrenme topluluğu: https://t.me/GyaanSetuAi