Anthropic METR'yi içeri aldı: Bağımsız AI değerlendirmesi erişim ve yayın hakkıyla ölçülür

Kısa cevap

Anthropic, altı METR çalışanına şirket donanımı, ofis alanı ve kendi risk değerlendirme ekiplerine yakın düzeyde iç araç erişimi verdi. Müşteri verileri, avukat-müvekkil gizliliği kapsamındaki bilgiler ve model mimarileri gibi bazı alanlar dışarıda. METR bulgularını yayımlayabilecek; Anthropic yayını veto edemeyecek, fakat önceden tanımlanmış dar kategoriler için redaksiyon isteyebilecek.[1][2]

Bu, sıradan bir dış benchmark anlaşmasından daha ciddi. Yine de "Anthropic artık bağımsız biçimde denetleniyor" demek için erken. METR'nin kendi açıklaması da bu çalışmaların denetim, uyum incelemesi veya resmî gözetim olmadığını söylüyor. Şirket erişimi gönüllü veriyor, kapsamı müzakere ediyor ve hassas bilgileri kapatabiliyor.[3][4]

Bence haberin kalıcı dersi model güvenliğinden daha geniş: Bir AI şirketi "bağımsız değerlendirme" dediğinde etikete değil dört hakka bakmak gerekiyor. Değerlendirici neyi görebiliyor, çalışanlarla nasıl konuşabiliyor, neyi yayımlayabiliyor ve şirketin redaksiyonları görünür kalıyor mu?

Bu yazı Anthropic ile METR'nin yayımladığı şartlara dayanıyor. İç sistemlere erişmedim ve ortaya çıkacak ilk METR raporunu henüz görmedik.

Tam olarak ne değişti?

Anthropic'in 15 Ekim 2026 tarihli duyurusuna göre METR ekibi, şirket içinde çalışan altı kişiden oluşuyor. Ekip şirket cihazlarını ve ofisini kullanıyor; Anthropic çalışanlarından, açıkça hariç tutulan alanlar dışında, bu değerlendiricilerle kendi risk ekibindeki bir çalışanla konuşur gibi bilgi paylaşmaları isteniyor.[2]

Yayın düzeni önemli. METR risk seviyeleri, olaylar ve şirket uygulamaları hakkında analiz yayımlayabilecek. Anthropic metne genel bir veto koyamayacak. Şirket yalnız müşteri verisi, ayrıcalıklı hukuki bilgi veya model mimarisi gibi önceden belirlenmiş kategoriler için redaksiyon isteyebilecek. METR ise hangi redaksiyonun yapıldığını ve bunu haklı bulup bulmadığını, kapatılan bilgiyi açığa çıkarmadan kamuya anlatabilecek.[2]

Bu erişim herkese açılmış bir pencere değil. Anthropic, çalışmanın sözleşmeli küçük bir ekiple sınırlı olduğunu ve diğer METR çalışanlarının bile bu ekipten ayrı tutulduğunu belirtiyor.[2] Yani burada "tam şeffaflık" yok; kontrollü ama önceki dış model testlerinden daha derin bir erişim var.

Anthropic ayrıca üç katmanlı bir sistem tarif ediyor. İlk katmanda şirket erişimi seçiyor ve bulguların yayımlanmasını onaylıyor. İkinci katmanda değerlendirici daha fazla bilgiye ulaşıyor ve şirket onayı olmadan yayımlayabiliyor. Üçüncü katman, METR'ye verilen çalışan benzeri erişimi ikinci katmandaki yayın haklarıyla birleştiriyor.[2]

Bağımsızlık logodan değil, haklardan gelir

"Üçüncü taraf" ile "bağımsız" aynı şey değil. Dışarıdaki bir kuruluş şirketin seçtiği veri setini test edip metni yayımlamadan önce onay bekliyorsa, kurumsal olarak ayrı olabilir ama kamu adına güçlü bir denetim yapmıyordur.

METR'nin 14 Ekim'de yayımladığı politika daha kullanışlı bir ölçü veriyor. Kuruluş; çalışmanın kapsamını ve süresini, erişim sınırlarını, redaksiyonları, resmî kısıtları ve gayriresmî baskıları açıklamayı taahhüt ediyor. Ayrıca çıkar çatışmalarını duyuracağını ve frontier AI şirketlerinden bu iş için ödeme ya da bağış kabul etmediğini söylüyor.[3]

Bu ayrım kurumsal AI alıcıları için de işe yarar. Bir güvenlik veya yönetişim belgesinde "bağımsız değerlendirildi" ifadesini gördüğümde artık tek başına olumlu işaret saymam. Şu soruların yanıtı daha değerli:

1. Değerlendirici yalnız son modele mi, yoksa eğitim ve izleme sürecine de erişti mi?
2. Test kapsamını kim belirledi ve inceleme ne kadar sürdü?
3. Bulgular şirket onayı olmadan yayımlanabiliyor mu?
4. Redaksiyonların varlığı ve etkisi okuyucuya açıklanıyor mu?
5. Değerlendirici nasıl finanse ediliyor ve çıkar çatışmaları nerede yazıyor?
6. Bulgular düzeltme planına, sorumlu kişiye ve tekrar testine bağlanıyor mu?

Bu liste, AI içerik şeffaflığındaki etiket tartışmasına benziyor. Etiketin varlığı tek başına güven üretmiyor; etiketin hangi süreci, veri kaynağını ve sorumluluğu temsil ettiği önemli.

Bu bir denetim değil

Anthropic düzenlemeyi bankalardaki yerleşik denetçilere benzetiyor.[2] Benzetme erişimin neden gerekli olduğunu anlatıyor, fakat yetki farkını da saklamamak gerekir. Bir banka denetçisi kamu otoritesinden güç alır. METR'nin Anthropic içindeki erişimi ise gönüllü bir sözleşmeye dayanıyor.

METR bu sınırı açıkça kabul ediyor. Kuruluş, şirketlerin istediği anda ilişkiyi sonlandırabileceğini, daha yumuşak bir değerlendirici seçebileceğini ve hangi erişimi vereceğine kendisinin karar verdiğini yazıyor. Bu çalışmaların denetim, resmî uyum değerlendirmesi veya düzenleyici gözetim olmadığını da özellikle belirtiyor.[4]

Daha sert sorun şu: Derin erişim bile doğru sonucu garanti etmiyor. METR, bazı şirket bilgilerini bağımsız biçimde doğrulayamayabileceğini ve sunulan kanıtın filtrelenmiş olabileceğini söylüyor.[3] Ayrıca kayıp kontrolü gibi risklerde bilim henüz kesin güvence verecek kadar olgun değil; kuruluşun amacı "güvenlidir" damgası basmak yerine kamuya daha iyi kanıt çıkarmak.[4]

Bu yüzden ilk METR raporu geldiğinde sonuca değil, raporun kenar bilgilerine de bakmak gerekecek: Ekip hangi sistemleri gördü, kaç hafta içeride kaldı, kimlerle konuşabildi, hangi talepleri reddedildi ve hangi bölümler kapatıldı?

Kim etkileniyor, pratikte ne değişiyor?

Frontier model şirketleri için çıta yükseliyor. Yalnız sistem kartı yayımlamak veya seçilmiş benchmark sonuçlarını paylaşmak daha az ikna edici olacak. Rakipler de bağımsız değerlendiricilere benzer erişim ve yayın hakkı verip vermediklerini açıklamak zorunda kalabilir.

Kurumsal alıcılar için bu, tedarik kontrol listesine yeni bir bölüm eklemek demek. SOC raporu, veri saklama şartı ve güvenlik sertifikasının yanına model davranışı ile iç gözetim sistemlerinin nasıl değerlendirildiğini de koymak gerekir. Özellikle kritik iş akışlarında, değerlendiricinin bağımsızlığı kadar raporun kapsamı ve düzeltmelerin takip edilip edilmediği sorulmalı.

Geliştiriciler ve son kullanıcılar için hemen değişen bir ürün özelliği yok. Bu duyuru Claude'un daha doğru veya daha güvenli olduğunu kanıtlamıyor. İlk somut değer, METR yayımladığında gelecek. O rapor şirketin kendi risk anlatısını doğrulayabilir, daraltabilir veya ona itiraz edebilir.

Burada sohbet verisi ve insan incelemesi için çizdiğim sınır da geçerli: "İnsan erişimi var" ya da "bağımsız kontrol var" gibi kısa ifadeler, erişimin hangi veriye, hangi amaçla ve hangi yayın yetkisiyle yapıldığını söylemeden eksik kalır.

Sonuç

Anthropic'in METR'ye verdiği erişim, bağımsız AI değerlendirmesi için şimdiye kadarki daha ciddi gönüllü modellerden biri. Değeri, altı kişinin ofise girmesinden çok, şirketin genel yayın vetosundan vazgeçmesi ve METR'nin redaksiyonları kamuya anlatabilmesinde.[2]

Ama bu bir güvenlik mührü değil. Şirket erişimi hâlâ kontrol ediyor, ilişki gönüllü ve değerlendirmenin kapsamı kayıp kontrolü riskiyle sınırlı. Asıl test, ilk zor bulgunun ardından başlayacak: METR bunu açıkça yazabilecek mi, Anthropic hangi bölümleri kapatacak ve kamu bu sınırlamaları görebilecek mi?