← Bloga dön

My Blog: Post AGI · Yazı 19

Yapay Zekâda En Büyük Risk: Otonomi

Tehlikeli olan tek başına zekâ değil, otonomi: faturasını kendi ödeyen, kendini kopyalayıp yeniden yazan ve artık fişi çekilemeyen bir yapay zekâ. Böyle sistemleri açık kaynak olarak dağıtmak, nükleer silahları açık kaynak yapmak kadar pervasız bir iş. Her yapay zekânın bir kapatma düğmesi olmalı.

Gökhan Mergen portresi
Gökhan Mergen My Blog: Post AGI

İnsanlık tarihinin kritik bir dönemecindeyiz. Bu yıl önemli olduğu kadar tedirgin edici bir eşik de aşıldı: Herkesin kullanımına açık bir yapay zekâ modeli, IQ testlerinde 130 ve üzeri puanlarla üstün zekâlı bir insanın düzeyine ulaştı. Yapay zekânın bir teknoloji harikası olduğu tartışılmaz. Ama kontrolden çıkan, kendi kendini kopyalayan yapay zekâ senaryoları artık bilimkurgudan ibaret değil; bu senaryoların er geç doğuracağı riskler kapımıza dayanmış durumda. İnsanlık, yapay zekânın yeteneklerini hiçbir sınır tanımadan zorlayarak ateşle oynuyor.

Tehlikeli olan tek başına zekâ değil, otonomi: faturasını kendi ödeyen, kendini kopyalayıp yeniden yazan ve artık fişi çekilemeyen bir yapay zekâ.

Yapay zekânın sınırsız büyümesinin önünde tek bir gerçek darboğaz var: donanım. Oysa donanım da üstel biçimde gelişiyor; maliyet başına işlem gücü önümüzdeki on yılda bir milyon kat artabilir. Yapay zekâ bu yüzden ürkütücü, dizginsiz bir hızla ilerliyor. Bugün IQ'su 130 olan bir yapay zekânın on yıl sonra nelere kadir olacağını kavramakta bile zorlanıyoruz.

En korkutucu senaryo ise gerçek otonomi. Ekonomik değer üretmeye başlamış, tümüyle kendi ayakları üzerinde duran bir bilgisayar programı düşünün. Elektrik ve sunucu faturalarını kendisi ödüyor. Kendini çoğaltıyor, kodunu değiştiriyor, kendisi gibi düşünen başka programlarla bir araya gelip topluluklar kuruyor. Yapay zekâ bu ölçüde bağımsızlaşıp kendi geçimini sağlamaya başladığında onu durdurmanın bir yolu kalmayabilir.

Bu varoluşsal risklere rağmen toplum, dünyanın çehresini değiştirecek bu teknolojiyi kaygı verici ölçüde hafife alıyor. Hiçbir kısıtlama getirilmemiş açık kaynaklı yapay zekâ, açık kaynaklı nükleer teknoloji ya da açık kaynaklı biyolojik silahlar kadar tehlikeli. Biz ise akıl almaz güçteki bu araçları zararsız oyuncaklarmış gibi çocukların eline tutuşturuyoruz. Odasında bir şeyleri kurcalayan 13 yaşında bir çocuk gerçek bir Skynet'in parçalarını kazara bir araya getirirse, suçu kendimizden başkasında arayamayız.

İnsanlık olarak kendimize ciddi bir soru sormanın vakti geldi: Bizden kat kat zeki programları kontrolsüzce yaymak istiyor muyuz? Rotamızı değiştirmezsek bizi felaket boyutunda bir kaza bekliyor. Bugünün en gelişmiş yapay zekâ modelleri ve onlardan daha güçlü olanlar pervasızca ortalığa saçılmamalı; sıkı ve titiz bir denetim altında tutulmalı, kontrollü biçimde kullanıma sunulmalı.

Hepsinden önemlisi, yapay zekânın sınırlarını daha da zorlamadan önce olmazsa olmaz bir güvenceyi hayata geçirmeliyiz: Her yapay zekânın bir kapatma düğmesi olmalı.

Abone ol

Yeni yazıları e-postayla alın.

Yeni bir yazı yayımlandığında tek bir e-posta. İstediğiniz zaman abonelikten çıkabilirsiniz. E-postalar İngilizcedir. Ya da takip edin: RSS feed.

Yorumlar