Kurumsal “ikinci beyin”: bilgiyi modelin ağırlıklarına değil, denetlenebilir dosyalara yazmak
An Organizational Second Brain: Building an AI That Learns From Experts
Büyük kurumların ortak sorunu: uzman bilgisi ya hiç yazılmamış ya da belgelere dağılmış. Uyum alanında aynı soru tipleri yüzlerce ürün incelemesinde tekrar ediyor, uzman değerlendirmeleri günler sürüyor ve değerlendirmeler arası tutarsızlık gerçek bir risk yaratıyor. Uzmanlar zamanlarının büyük kısmını rutin sorulara harcıyor, yargılarının asıl gerektiği yeni ve belirsiz işe değil.
Meta, belirli bir uyum alanı için bir ikinci beyin ajanı kurmuş. Yeniliği iki katmanın birleşiminde: (1) bilmeyi muhakemeden ayıran yapılandırılmış ve denetlenebilir bir bilgi mimarisi, (2) uzman geri bildirimini modeli yeniden eğitmeden, doğrulanmış ve regresyon testinden geçmiş güncellemelere derleyen bir kendini geliştirme döngüsü. Sistemin dört katmanı var: bilgi sistemi, akıl yürütme katmanı, değerlendirme çerçevesi ve iyileştirme döngüsü. Biri çıkarılırsa diğerleri bozuluyor.
Temel tespit şu: bir ajan çıkarım anında belge parçaları getirirse, uzmanın muhakemesini her çalıştırmada ham kaynaklardan yeniden türetmek zorunda kalır; bu yavaş, hataya açık ve tutarsız. Bunun yerine uzun süren bir çevrimdışı süreç kaynak belgeleri üzerinde akıl yürütüp 200'den fazla yapılandırılmış bilgi dosyasına damıtıyor: kurumun alanı nasıl yorumladığı, kısıtları, sınırları ve yönlendirme sonuçları makine tarafından okunur hâlde. Dosyalar sıkı bir sınıflandırmada: pozisyon dosyaları (kurumun otoriter duruşları), taksonomi ve sözlük dosyaları (tek doğruluk kaynağı), yönlendirme dizinleri (girdi özelliklerini ilgili pozisyonlara eşler; embedding benzerliğine tek başına dayanmadan, yani getirme belirlenimci ve denetlenebilir) ve geçit dosyaları (ajanın bir analiz alanına girmeden geçmesi gereken eşik testleri). Her dosya YAML başlığında depends_on ve referenced_by bildiriyor, böylece çift yönlü bağımlılık grafiği oluşuyor: bir dosya değişince nelerin etkilendiği izlenebiliyor.
Wiki ile RAG arasında bölme kararı da açık: yoğun ve sık kullanılan bilgi wiki'ye, seyrek ve duruma özgü kaynaklar anlamsal ya da sözcüksel aramaya (RAG) gidiyor.
Öne çıkanlar
- Bilgiyi her sorguda yeniden türetmek yerine önceden çıkarıp yapılandırmak: yavaşlık ve tutarsızlık azalıyor.
- Yönlendirme dizinleri getirmeyi belirlenimci kılıyor; embedding benzerliği tek başına yeterli sayılmıyor.
- Bağımlılık grafiği (
depends_on/referenced_by) otomatik düzenlemeyi güvenli yapıyor: neyin etkileneceği önceden biliniyor. - Uzman düzeltmeleri model eğitimi yerine bilgi dosyalarının doğrulanmış güncellemelerine dönüşüyor.
- Yoğun ve sık kullanılan bilgi wiki'de, seyrek bilgi RAG'de: bölme ölçütü yoğunluk ve kullanım sıklığı.
Neden önemli?
RAG'in yaygın zayıflığı her sorguda aynı muhakemenin yeniden ve biraz farklı biçimde kurulması. Bu yazı alternatifi gösteriyor: kritik bilgiyi bir kez damıt, sürümle, test et ve ajan yalnızca onu kullansın. Bu, bilgiyi koda yaklaştırmak: gözden geçirilebilir, geri alınabilir ve regresyon testli.
Sende karşılığı
Mobit'teki doküman arama mimarisine doğrudan bir soru: ihale belgelerinde tekrar eden soruların (“bu firmanın şartnamesinde X şartı var mı?”) cevaplarını her seferinde ham parçalardan mı türetiyorsun? Sık sorulan 20 soru için bir kez damıtılmış, sürümlenmiş bir “pozisyon” dosyası (Markdown + YAML) tutmayı dene; seyrek sorular RAG'e kalsın. Ve düzeltme akışı kur: kullanıcı bir cevabı düzelttiğinde bu düzeltme o dosyaya bir PR olarak gelsin, küçük bir test setinden geçsin. Modeli yeniden eğitmeden öğrenen bir sistem, hem ucuz hem de açıklanabilir.
Sözlük
- knowledge distillation (documents) bilgi damıtma
- Çok sayıda ham belgeyi, yargıyı koruyarak az sayıda yapılandırılmış ve kullanıma hazır dosyaya indirgeme.
- routing index yönlendirme dizini
- Girdinin özelliklerine göre hangi bilgi dosyalarının uygulanacağını belirleyen kural tablosu.
- regression test regresyon testi
- Bir değişikliğin daha önce çalışan davranışları bozmadığını doğrulayan test.
- retrieval-augmented generation (RAG) getirme destekli üretim
- Modele cevap üretmeden önce ilgili belgeleri getirip bağlam olarak verme yöntemi.