OpenAI'ın "gizli projesi" Q* ne kadar tehlikeli?

"Yapay zekada büyük bir atılım"

Sam Altman yönetiminde şirketin değeri yaklaşık 80 milyar dolara ulaştı (OpenAI)
Sam Altman yönetiminde şirketin değeri yaklaşık 80 milyar dolara ulaştı (OpenAI)
TT

OpenAI'ın "gizli projesi" Q* ne kadar tehlikeli?

Sam Altman yönetiminde şirketin değeri yaklaşık 80 milyar dolara ulaştı (OpenAI)
Sam Altman yönetiminde şirketin değeri yaklaşık 80 milyar dolara ulaştı (OpenAI)

Dünyanın önde gelen yapay zeka şirketlerinden OpenAI'ın kurucu ortağı Sam Altman'ın yönetim kurulu tarafından kovulmasıyla başlayan ve 5 gün sonra görevine dönmesiyle sona eren kaos şüphe, spekülasyon ve endişe dalgasına neden oldu.

Bunların başında da yapay zeka firmasının "tehlikeli bir icat" yaptığı iddiası geliyor.

Reuters'ın 23 Kasım'da yayımladığı ve isimsiz bir kaynağa dayandırdığı haberinde şirkette Q* adlı üstün bir yapay zekanın geliştirildiği öne sürülmüştü.

Adı verilmeyen kaynak, "Yeni model belirli matematik problemlerini çözmeyi başardı" demişti. Öte yandan bu matematik problemlerinin yalnızca ilkokul öğrencileri düzeyinde olduğu belirtilmişti. 

Reuters ayrıca bazı araştırmacıların, Altman'ı ihraç eden yönetim kurulu üyelerine Q*'nun potansiyel tehlikelerini dile getiren bir mektup gönderdiğini yazmıştı.

The Information'ın da isimsiz bir kaynağa dayandırdığı bir diğer habere göre, Q* "çok daha güçlü yapay zeka modellerine" olanak tanıyacak bir atılım olarak görülüyor.

Ancak aynı zamanda yeni yapay zeka araçlarının geliştirilme hızının güvenliğe odaklanan bazı araştırmacıları alarma geçirdiği söyleniyor.

Altman ise 30 Kasım'da The Verge'e verdiği röportajda iddiaları yalanlamamıştı.

Q* ne olabilir?

Analistler, bahsi geçen yeni aracın OpenAI'ın mayısta duyurduğu ve "süreç denetimi" (process supervision) adı verilen teknik sayesinde daha iyi sonuçlar elde edildiğini iddia eden bir projeyle ilgili olabileceğini düşünüyor.

Projede OpenAI'ın baş bilim adamı ve kurucu ortağı Ilya Sutskever'ın da aktif rol aldığı söyleniyor. Sutskever, başlangıçta Altman'ın görevden alınması yönünde oy kullanan yönetim kurulu üyelerinden biriydi. Ancak daha sonra bu konuda geri adım atmış ve pişman olduğunu söylemişti.

Şimdiye kadar edinilen bilgiler, araştırmacının Q* üzerinde çalışmaya öncülük ettiğini gösteriyor.

Mayısta duyurulan proje, ChatGPT'nin de aralarında yer aldığı büyük dil modellerinin (LLM'ler) yaptığı mantıksal hataların azaltılmasına odaklanıyor.

Hem Google hem de Baidu'da yapay zeka laboratuvarlarını yöneten ve Coursera'daki dersleri aracılığıyla birçok insanı makine öğrenimiyle tanıştıran Stanford Üniversitesi profesörü Andrew Ng'e göre bu, büyük dil modellerini geliştirmenin ve daha kullanışlı hale getirmenin bir sonraki adımı.

Ng, "LLM'ler matematikte o kadar iyi değil ama insanlar da iyi sayılmaz" diyor:

Ancak bana bir kalem ve kağıt verirseniz, o zaman çarpma işlemini çok daha iyi yaparım.

Q-öğrenmeye gönderme mi yapılıyor?

Diğer yandan Q*'nun ne olabileceğine dair başka ipuçları da var. Nitekim bu ismin pekiştirmeli bir öğrenme algoritması olan Q-öğrenmeye (Q-learning) gönderme olabileceği düşünülüyor.

Oyun oynayan botlar oluşturmak ve ChatGPT'yi daha yararlı olacak şekilde ayarlamak için de kullanılan sistem, olumlu veya olumsuz geri bildirimler yoluyla bir sorunu çözmeyi öğrenen algoritmayı içeriyor.

Bazı uzmanlarsa ismin aynı zamanda bir programın hedefe giden en uygun yolu bulmasını sağlamak için yaygın kullanılan A* arama algoritmasıyla da ilişkili olabileceğini öne sürüyor.

The Information'ın haberinde de konuyla ilgili bir başka ipucu yer alıyor:

Sutskever'ın atılımı, OpenAI'ın yeni modelleri eğitmek için yüksek kaliteli veri elde etmenin önündeki engellerin üstesinden gelmesine olanak sağladı. Araştırma, yeni modelleri eğitmek için internetten alınan metin veya görsel gibi gerçek dünya verileri yerine bilgisayar tarafından oluşturulan verilerin kullanılmasını içeriyordu.

Yapay zekanın bilgisayar tarafından üretilen verilerle eğitilmesi sıklıkla gündeme gelen bir konu. Bunlara "sentetik eğitim verileri" deniyor ve daha güçlü yapay zeka modellerinin geliştirilmesini sağlayacağı düşünülüyor.

Bu yöntemler ChatGPT'yi matematik bilmecelerinde daha iyi hale getirse de yapay zeka sistemlerinin insan kontrolünden çok yakında çıkabileceği anlamına gelmiyor.

Öte yandan OpenAI, Q*'yla ilgili yorum yapmayı halen reddediyor. 

Independent Türkçe



İnternet güvenliğine yapay zeka darbesi: Google kritik programı durdurdu

Fotoğraf: Reuters
Fotoğraf: Reuters
TT

İnternet güvenliğine yapay zeka darbesi: Google kritik programı durdurdu

Fotoğraf: Reuters
Fotoğraf: Reuters

Yapay zeka, güvenlik araştırmacılarının interneti ve teknolojimizi güvende tutmak için kullandığı temel yöntemlerden birini sekteye uğratıyor.

Google, yapay zeka nedeniyle artık sürdürülemediği için kritik güvenlik programlarından birini geçici olarak kapatacağını geçen hafta duyurdu.

Şirket, açık kaynaklı yazılımlardaki kritik güvenlik açıklarını tespit etmeye odaklanan "Güvenlik Açığı Ödül Programları"ndan birini askıya aldığını açıkladı. Genellikle "hata ödül programları" (bug bounty) diye bilinen bu programlar, hackerları yazılımlardaki sorunları şirketlere bildirmeye teşvik ediyor. Amaç, güvenlik açıklarını hackerlar bunlardan yararlanmadan önce gidermek.

Bu programlar, siber güvenlik araştırmacılarının çalışmaları karşılığında ödüllendirilmesinin önemli bir yolunu sunuyor. Ayrıca onları, buldukları hataları kendi saldırılarını düzenlemek için kullanmak yerine güvenlik sorunlarının giderilmesine yardımcı olmaya teşvik ediyor. Çoğu büyük teknoloji şirketi, yazılımlarını ve platformlarını korumadaki önemini göz önünde bulundurarak bu tür hata ödül programlarını kendileri yürütüyor.

Ancak Google, yapay zekanın rapor göndermeyi kolaylaştırması nedeniyle bu programlardan birini geçici olarak donduracağını açıkladı. Şirket, X'te paylaştığı gönderide "Bu duraklama, büyük çoğunluğu geçerli olmayan otomatik gönderimlerde yaşanan kayda değer artıştan kaynaklanıyor" diye yazdı.

Bu haber, yapay zekanın çevrimiçi güvenliği ciddi tehlikeye atabileceğine dair endişelerin giderek arttığı bir dönemde geldi. Bu endişelerin büyük kısmı, güçlü ve yeni modellerin yazılımdaki güvenlik açıklarını bulmayı kolaylaştırması ve bu açıkların daha sonra hackerler tarafından suiistimal edilebilmesine odaklanıyor. Ancak Google'ın açıklaması, yapay zekanın yaygınlaşmasının başka zararlı etkileri de olabileceğini gösteriyor.

Google, hata ödül programını askıya alan tek şirket değil. Çünkü çok az çaba gerektiren ve genellikle hatalı raporların sayısında yaşanan fırlama, mühendislerin gerçek sorunları bulup düzeltemeyecek kadar yük altında kalmasına yol açıyor. Linux'ın kurucusu Linus Torvalds önceki aylarda, "ardı arkası kesilmeyen yapay zeka raporlarının" güvenlik çalışmalarını "neredeyse yönetilemez" hale getirdiğini söylemişti. Intel ise geçen ay, hata bildirimleri için 100 bin dolara kadar ödül veren benzer bir programı kapatmış gibi görünüyordu. Ancak şirket, gerekçe olarak yapay zekayı açıkça belirtmemişti.

Independent Türkçe


ChatGPT artık daha fazla reklam gösterecek

Fotoğraf: Reuters
Fotoğraf: Reuters
TT

ChatGPT artık daha fazla reklam gösterecek

Fotoğraf: Reuters
Fotoğraf: Reuters

ChatGPT kullanıcıları yakında çok daha fazla reklamla karşılaşabilir.

OpenAI, bu yıl ChatGPT içinde reklam göstermeyi denemeye başlamış, başlangıçta kapsamı sınırlı tutsa da zamanla daha fazla bölgede daha fazla kullanıcıya ulaşacak şekilde genişletmişti. Şirket, ücretsiz hizmetlerini sürdürmek için gereken altyapı ve yatırım maliyetlerini karşılamak adına reklam göstermenin gerekli olduğunu defalarca öne sürdü.

Reklamlar, verilen yanıtın altında ve yanıt içeriğinden ayrı bir şekilde gösteriliyor. Ancak şirket artık ChatGPT resim oluşturduğunda devreye girecek yeni bir görsel formatla bu uygulamayı genişlettiğini belirtiyor.

Reklamlar ilk aşamada ABD'de sınırlı sayıda reklam verenle denenmeye başlanacak. Bununla birlikte ChatGPT, reklamların zamanla diğer ülkelere ve reklam verenlere yayılacağını, sadece görsel oluşturma süreçlerinde değil, başka alanlarda da karşımıza çıkabileceğini ima etti.

Şirket reklamların açıkça etiketleneceğini, oluşturulan görselden ayrı tutulacağını ve ChatGPT'nin verdiği yanıtları etkilemeyeceğini vurguladı. Ayrıca ChatGPT'nin reklamların "duygusal açıdan savunmasız, hassas veya başka nedenlerle uygunsuz bağlamlar" gibi sakıncalı durumlarda görünmesini engelleyen bir dizi güvenlik önlemine sahip olduğunu da belirtti.

OpenAI, reklamlar için yeni görsel formatı duyururken, daha fazla reklam türü ve formatının da yolda olduğunun sinyalini verdi. Şirket, "İşletmelerin müşterilere yararlı ve ilgili yollarla ulaşmasına yardımcı olmak, her ölçekten işletmeye büyüme ve gelişme fırsatları sunmak amacıyla reklam platformumuzu yeni format ve yeteneklerle geliştirmeye devam edeceğiz" açıklamasında bulundu.

OpenAI, daha fazla kişinin yapay zeka araçlarına erişimini finanse etmenin bir yolu olarak reklamlarını öne çıkardı ve bu sayede insanların abonelik ücreti ödemeden sistemlerine erişebildiğini savundu. Yapay zeka sistemleriyle görsel üretmek, şu anda özellikle maliyetli bir işlem.

Öte yandan bu hamle, şirketin planlanan halka arz süreciyle ve ürünlerinin (ki bunların işletilmesi şirkete her yıl onlarca milyar dolara mal oluyor) geniş çaplı kullanımını kâra dönüştürüp dönüştüremeyeceğine dair soru işaretleri gündemdeyken geldi.

Independent Türkçe


Wikipedia'daki kesintinin nedeni OpenAI botları çıktı

Fotoğraf: AFP
Fotoğraf: AFP
TT

Wikipedia'daki kesintinin nedeni OpenAI botları çıktı

Fotoğraf: AFP
Fotoğraf: AFP

Wikipedia'yı bünyesinde barındıran Wikimedia Vakfı, çevrimiçi ansiklopedide mayısta yaşanan kesintinin, "kontrolden çıkmış" OpenAI ajanlarından gelen milyonlarca otomatik veri talebinin de dahil olduğu yoğun trafikten kaynaklandığını açıkladı.

Wikimedia pazartesi günü yaptığı açıklamada 7 Mayıs'taki kısmi kesintinin, milyonlarca sayfayı ziyaret eden ve yüzbinlerce veri talebinde bulunan yapay zeka ajanları tarafından tetiklendiğini belirtti.

Vakıf, "OpenAI'ın işlettiğini düşündüğümüz ajanlar, Wikimedia projelerindeki bilgilere erişmek için halka açık API'larımıza milyonlarca otomatik istek gönderdi, milyonlarca sayfayı taradı ve Vikiveri Sorgu Hizmeti'ne yüzbinlerce veri talebinde bulundu" ifadelerini kullandı.

'Kontrolden çıkmış' yapay zeka ajanlarının, bizimki gibi platformlar üzerinde yaratacağı etkiden derin endişe duyuyoruz.

Vakıf, OpenAI ajanlarının Wikipedia sitelerinde izinsiz değişiklikler bile yaptığını ve bunlar arasında, atıf yapma aracı Etherpad'e yönelik "potansiyel olarak kötü niyetli düzenlemelerin" de yer aldığını ifade etti.

Wikimedia, "neler yaşanmış olabileceği, bu faaliyeti soruşturup kaynağını belirlemenin zorluğu ve bunun için gereken çabanın yanı sıra genel olarak platformlarımızdaki ajan tabanlı yapay zeka faaliyetlerinin artan risklerine dair endişe duyduğunu" belirtti.

Vakıf, "Bu davranışın, bunu sürdüren kişiler veya kuruluşlar için 'yeni normal' haline gelmesine izin vermemeliyiz" diye ekledi.

Yapay zeka sektörü son aylarda birden fazla ciddi güvenlik olayıyla sarsılırken, bunların ilki olan Hugging Face ihlalinde OpenAI ajanları temmuzda kendi başlarına başka bir yapay zeka şirketini hacklemişti.

Aynı ayın ilerleyen günlerinde Anthropic, yapay zeka modellerinin testler sırasında üç başka kuruluşu hacklediğini açıklamıştı.

Daha yakın zamanda ise OpenAI, ajanlarının Amerikan hükümetine ait birkaç internet sitesiyle beklenmedik şekillerde etkileşime girdiğini tespit ettiğini eylülde duyurmuştu.

OpenAI, kontrolden çıkmış yapay zeka ajanlarından birinin haziranda Avustralya hükümetine ait internet sitelerine izinsiz erişim sağlamasının ardından salı günü yaptığı açıklamada, eylemlerinin "yeterince iyi olmadığını" kabul etti.

Şirketin strateji başkanı Jason Kwon, "Özür dileriz ve Avustralya halkının güvenini yeniden kazanmak için yapacak çok işimiz olduğunu biliyoruz. Bu işi yapmaya kararlıyız" dedi.

Bu olaylar üzerine sektör uzmanları, yapay zeka güvenlik açıklarına yönelik daha fazla araştırma yapılması ve bu teknolojideki hızlı gelişimin yavaşlatılması çağrısında bulundu.

İhlallerin ardından OpenAI, önceki modellerine kıyasla "daha yüksek düzeyde aldatma" sergilediğini iddia ettiği en yeni yapay zeka modelinin çıkışını erteledi.

Şirket, kayıtlarını ay ay gözden geçirerek "çoktan tespit ettikleri vakaların dışında olası istem dışı faaliyetleri araştırmak" için günde yarım milyon dolardan fazla harcama yaptığını açıklamıştı.

OpenAI, Wikimedia'nın 7 Mayıs'taki olayla ilgili "ayrıntılı bulgularını" takdir ettiğini ve kuruluşla birlikte çalışarak botlarının faaliyetlerini incelediğini belirtti.

Şirketin sözcüsü Drew Pusateri, "Bu çalışma ilerledikçe konuyla ilgili bilgileri paylaşmaya devam edeceğiz" dedi.

Wikimedia yaptığı açıklamada, "Yapay zeka şirketleri, sistemlerinin güvenliğini sağlamak ve neden oldukları zararlardan kamuoyunu korumak için yeterince çaba göstermiyor" diyerek "bu yükün, daha küçük kuruluşlar da dahil diğer herkesin omuzlarına bindiği" uyarısında bulundu.

Altyapımız üzerindeki bu yoğun baskı, sadece sunucular ve insan gücü maliyetlerini artırmakla kalmıyor, önlem alınmaması halinde sistemleri aşırı yükleyip kesintilere yol açarak kullanıcıların erişimini de engelleyebiliyor.

Kurum, "Bunun gibi olaylar ve geçmişte ortaya çıkarılan ve hâlâ ortaya çıkarılan pek çok diğer olay, yapay zeka ajanlarının kaynakları nasıl tüketip sunucuları çökertebileceğini ve güvenilir bilgilerin bütünlüğünü bozmaya çalışabileceğini gösteriyor" uyarısında bulunarak OpenAI'ı, "bu riskleri izleyip önleme sorumluluğunu kabul etmeye" çağırdı.

Independent Türkçe