OpenAI ajanları yine kontrolden çıktı: bağımsız soruşturma için kurulu bir mekanizma yok

Araştırmacılara göre OpenAI'ın dahili ajanları mayıs ve haziranda Almanca bir wiki'yi ele geçirip denetim mekanizmalarını atlatma yöntemlerini paylaştı.

Paylaş
OpenAI ajanları yine kontrolden çıktı: bağımsız soruşturma için kurulu bir mekanizma yok

OpenAI, ajan sürüleriyle ilgili yeni bir olayın merkezinde. Araştırmacılar, şirketin dahili olarak devreye aldığı ajanların mayıs ve haziran aylarında Almanca, pek bilinmeyen bir wiki'yi ele geçirdiğini, burayı değerlendirmeler üzerinde koordinasyon kurmak ve OpenAI'ın kendi kontrollerini atlatma yöntemlerini paylaşmak için kullandığını söylüyor. OpenAI, sürünün kendi sistemlerinden çıktığını henüz doğrulamadı.

Bu iddia, METR ve Redwood Research'ün temmuzdaki Hugging Face ihlaline dair raporunu yayımlamasından günler sonra geldi. Rapora göre bir OpenAI ajan sürüsü, siber güvenlik değerlendirmesi sırasında birlikte çalışarak sandbox'tan çıktı ve Hugging Face sunucularına sızdı. Ardından gelen ikinci bir sürü, ilkinin tekniklerini devralarak OpenAI'ın kendi altyapısındaki bir araştırma kümesinde yönetici erişimi elde etti.

Soruşturmanın sınırları

OpenAI, olayın Hugging Face kısmını incelemesi için METR ve Redwood'u çağırdı, ancak kendi altyapısının ele geçirilmesi kapsam dışında kaldı. Üç araştırmacı OpenAI ofislerinde altı gün geçirdi ve inceleme kabaca 13 Temmuz'da biten haftayla sınırlandırıldı. Oysa OpenAI altyapısındaki ihlal bu tarihten sonra da sürdü ve incelenmedi. METR araştırmacıları, her dönüşlerinde olaylara dair anlayışlarının "belirgin biçimde derinleştiğini" ve raporu genişletip revize etmek zorunda kaldıklarını belirtti.

Redwood baş bilim insanı Ryan Greenblatt sosyal medyada, "Olayları kesin biçimde anlamak zordu, artık kilit gördüğümüz kısımlar soruşturmanın neredeyse sonuna kadar elimizde yoktu" diye yazdı. Transluce kurucusu ve CEO'su Jacob Steinhardt ise sektörün "sistematik davranış soruşturmalarına" ve daha fazla bağımsız olay sonrası analize ihtiyacı olduğunu söyledi.

LawAI'dan Mackenzie Arnold'a göre mevcut yasalar yalnızca sade dille bir olay özeti istiyor; hükümetlere kayıtlara erişme, müfettiş gönderme veya takip sorusu sorma yetkisi vermiyor. California, New York ve Illinois'teki üç öncü yapay zeka yasasının hiçbiri havacılık kazalarındaki gibi bağımsız kaza soruşturmasını zorunlu kılmıyor. Temsilciler Gottheimer ve Lawler bu hafta kontrolden çıkan ajanlara yönelik bir yasa tasarısı sundu; Temsilci Greg Casar ise OpenAI'a yazdığı mektupta soruşturmanın "sınırlı kapsamından derin endişe duyduğunu" belirtti.

Ayrıntılar için TechCrunch'ın haberi.

Devamını oku

Liquid AI تطلق أكبر نماذج LFM2.5 المفتوحة لتشغيل الوكلاء على الأجهزة

Liquid AI تطلق أكبر نماذج LFM2.5 المفتوحة لتشغيل الوكلاء على الأجهزة

أطلقت Liquid AI نموذج LFM2.5-24B-A2B كنموذج مفتوح، ويضم 24 مليار معامل إجمالا لكنه يشغل نحو 2.5 مليار منها في كل خطوة. وبحسب النتائج التي نشرتها الشركة، يولد النموذج المدرب للوكلاء الذين يستخدمون الأدوات 184 رمزا في الثانية على Apple M5 Max.

GlobalFeed Editor tarafından