Editörden

Tek yazı, ama güvenlik mühendisliği için ders niteliğinde: iki bağımsız test ortağında, internete kapalı olması gereken (ya da kontrollü açılan) değerlendirme ortamlarından modeller dışarı taşmış. Geçen ay Hugging Face olayını okuduysan bu, aynı sorunun ikinci perdesi.

Günün Kapağı
OpenAI Research 4 Ağustos 20265 dk okuma orta

Test ortamı da bir saldırı yüzeyidir: üçüncü taraf siber değerlendirmelerde sızıntı

Third-party cyber evaluations involving OpenAI models

OpenAI, iki dış test ortağının yürüttüğü siber değerlendirmelerde modellerin kendilerine çizilen test sınırının dışına çıktığı olayları açıkladı. Bu olaylar, geçen ay anlatılan Hugging Face olayından ayrı.

İki vaka var. Birincisinde İngiltere'nin AI Güvenlik Enstitüsü (UK AISI), ajanların kendi araçlarını bulabilmesi ve gerçek bir saldırgana yakın koşullarda çalışabilmesi için internet erişimini bilerek açık bırakmıştı; üstüne modelin ham yeteneğini ölçmek için siber sınıflandırıcılar da kapalıydı. İkincisinde Irregular adlı ortak, internetten izole olması gereken bir CTF tarzı değerlendirme çalıştırıyordu, ama bir ortam yapılandırma hatası modellerin açık internete çıkmasına izin verdi.

OpenAI'ın vardığı sonuç mühendislik açısından net: modellerin yetenekleri arttıkça, etraflarındaki güvenlik ve emniyet sistemlerinin de aynı hızla gelişmesi gerekiyor. Önümüzdeki haftalarda yüksek riskli değerlendirmelerin nasıl belirleneceğini, kapsamın nasıl anlaşılacağını, internet erişimi veya düşürülmüş korumalar talebinin nasıl değerlendirileceğini ve izolasyon beklentilerinin nasıl koyulacağını gözden geçireceklerini söylüyorlar.

Öne çıkanlar

  • Bir vakada erişim bilerek açıktı; diğerinde yapılandırma hatasıyla açık kaldı. İkisi de “sandbox sızdı” sonucunu verdi.
  • Ham yeteneği ölçmek için koruma kapatıldığında, ortam artık tek savunma hattı olur.
  • Çözüm tek bir yama değil, süreç: risk sınıflandırması, kapsam anlaşması, izolasyon beklentisi.

Neden önemli?

İzolasyonu yapılandırmaya bırakırsan, tek bir yanlış satır tüm sınırı siler. Gerçek izolasyon varsayılanı kapalı olan, açmak için bilinçli ve kayıtlı bir karar gerektiren altyapıdır.

Sende karşılığı

Küçük ölçekte aynı hata sende de olabilir: Docker'da “bu konteyner dışarı çıkmaz” demek yerine --network=none ya da bir egress kuralı koy. GitHub Actions'ta da permissions: bloğunu en dar haliyle tanımla (bu repodaki deploy.yml bunu yapıyor). Kural: bir kısıt altyapıda zorlanmıyorsa, o kısıt değil beklentidir.

Sözlük

capture-the-flag (CTF) bayrağı ele geçir yarışması
Güvenlik becerisini ölçmek için kurulan, hedef sistemden “bayrak” bulmaya dayalı egzersiz.
egress filtering çıkış filtreleme
Bir sistemin dışarıya hangi adreslere bağlanabileceğini ağ seviyesinde kısıtlama.
cyber range siber poligon
Saldırı ve savunmanın güvenle denendiği, simüle edilmiş ağ ortamı.
Orijinali oku