Bir finansal hizmetler firmasında kıdemli bir uygulama güvenliği mühendisi olduğunuzu hayal edin. Dahili olarak geliştirilen bir kimlik doğrulama kod parçasını en gelişmiş yapay zeka modellerinden birine besliyor ve ondan mantık hatalarını tespit etmesini istiyorsunuz. Analiz yerine bir ders alıyorsunuz. Model, bilgiyi "bir sistemi istismar etmek" için kullanabileceğiniz gerekçesiyle talebinizi reddediyor. Siz bir suçlu değilsiniz. Siz suçluları durdurmak için işe alınan kişisiniz. Yine de güvenlik bariyeri (guardrail) her iki rolü ayırt edilemez olarak ele alıyor.
Bu senaryo artık rutin hale geliyor. Büyük yapay zeka laboratuvarları, kötü niyetli suistimalleri önlemek için güvenlik protokollerini sıkılaştırdıkça, meşru siber güvenlik profesyonellerinin iş akışlarıyla kafa kafaya çarpışıyorlar. Sonuç, büyüyen bir paradoks: Yazılım mühendisliği için güç çarpanı olarak tanıtılan araçlar, kritik altyapıyı koruyan uzmanlardan esirgeniyor.
Güvenlik (Safety) ve Siber Güvenlik (Security) Arasındaki Sürtüşme
Büyük yapay zeka geliştiricileri siber güvenlik topluluğunu tamamen görmezden gelmiş değil. OpenAI, Trusted Access for Cyber adlı bir program yürütüyor. Anthropic, bir Cyber Verification Program işletiyor. Her ikisi de, yetkilendirilmiş kullanıcıların meşru araştırmalar yürütebilmeleri için belirli ret mekanizmalarını atlamalarına izin vermek üzere tasarlandı. Teoride bu kapılar, iyi niyetli aktörleri kötü niyetli olanlardan ayırıyor.
Uygulamada ise birçok ofansif güvenlik araştırmacısı ve ağ savunucusu, bunları bürokratik hız kesiciler olarak deneyimliyor. Doğrulama süreçleri şeffaf olmayabiliyor. Onay süreleri belirsiz. Araştırmacılar, kabul edildikten sonra bile, artırılmış erişimin farklı model sürümleri veya konuşma dizileri arasında her zaman güvenilir şekilde çalışmadığını bildiriyor. Aktif olarak istismar edilen zafiyetleri yamalamak için yarışan ekipler için bu sürtüşme büyük önem taşıyor.
Washington ile Silikon Vadisi arasındaki gerilim, ABD hükümetinin Anthropic'in Mythos ve Fable modellerine ihracat kontrolleri getirmesiyle önemli bir kırılma noktasına ulaştı. Kısıtlamalar, bireylerin siber saldırıları kolaylaştırmak için modellerin güvenlik bariyerlerini devre dışı bıraktığına dair raporların ardından geldi. Düzenleyiciler, bu sistemleri benzersiz derecede tehlikeli ihracat emtiaları olarak ele almak için hızlı hareket etti. Kontroller o zamandan beri kaldırıldı veya değiştirildi, ancak bu olay net bir sinyal gönderdi: Yüksek yetenekli yapay zeka modelleri, genel amaçlı teknik araçlardan ziyade giderek artan bir şekilde potansiyel kıyamet cihazları olarak görülüyor. Onlara güvenen savunmacılar için bu algı; daha sıkı denetim, daha yavaş erişim ve güvenlik araştırmalarının sadece başka bir isimle yapılan "hacking" olduğu yönündeki temel bir şüpheye dönüşüyor.
Savunma ve Ofans Neden Ayrılmazdır?
Çatışmanın kalbi idari değil, tekniktir. Bir ağı savunmak için gereken yeteneklerin aynısı, ona saldırmak için gerekenlerle neredeyse özdeştir.
NCC Group Baş Bilim İnsanı Chris Anley basit bir benzetme kullanıyor: Yapay zeka bir çekiçtir. Onu bir ev inşa etmek veya bir pencereyi kırmak için kullanabilirsiniz. Aracın kendisi aradaki farkı bilmez. Siber güvenlikte bu ikilik kaçınılmazdır. Bir uygulayıcı bir modelden "bu kodu düzelt"mesini istediğinde, bu talep savunmacı bir eylemi tetikler. Ancak düzeltmeyi üreten akıl yürütme süreci —güvensiz işlevleri tanımlamak, güvenilmeyen girdileri izlemek, yürütme akışlarını haritalandırmak— zafiyetin nasıl tetiklenebileceğini kaçınılmaz olarak ortaya çıkarır. Açıklama, istismar için bir yol haritası görevi görür.
Yapay zeka güvenlik ekipleri modelleri genellikle istismar kokan her türlü istemi reddetmek üzere eğittiğinden, sistemler sıklıkla aşırı tepki veriyor. Kullanıcı girdisinin nasıl temizleneceğini (sanitize) soran bir araştırmacı cevap alıyor. Bir araştırmacı, nasıl bir...
