İçeriğe geç
parazade
Yapay Zeka

Yapay Zekâ Güvenliği Nedir?

İngilizce: AI Safety

Yayın: · Son güncelleme:

Yapay Zekâ Güvenliği Nedir? Kısaca

Yapay zekâ güvenliği, yapay zekâ sistemlerinin insanlara ve topluma zarar vermeden, tasarlandığı amaca uygun, öngörülebilir ve insan denetiminde kalacak şekilde geliştirilmesini ve kullanılmasını amaçlayan araştırma ve uygulama alanıdır.

Yapay Zekâ Güvenliği nedir?
İçindekiler
  1. Yapay zekâ güvenliği nedir?
  2. Hangi riskler ele alınır?
  3. Uygulamada neler yapılır?

Yapay zekâ güvenliği, bugünkü sistemlerin hatalı ya da zararlı çıktılarından gelecekteki çok daha güçlü sistemlerin kontrolüne kadar geniş bir yelpazeyi kapsar. Amaç, yapay zekânın faydalarını korurken risklerini azaltmaktır.

Yapay zekâ güvenliği nedir?

Alan birkaç ana başlıkta çalışır:

  • Hizalama: Modelin hedeflerinin insanların gerçekten istedikleriyle uyumlu olması. Bu konu yapay zekâ hizalaması başlığında ayrıntılanır.
  • Sağlamlık: Modelin beklenmedik ya da kötü niyetli girdilerde de güvenli davranması.
  • Yorumlanabilirlik: Modelin içinde ne olup bittiğini anlayabilmek.
  • Denetim ve kontrol: İnsanların sistemi izleyebilmesi, düzeltebilmesi ve gerektiğinde durdurabilmesi.

Hangi riskler ele alınır?

Kısa vadede halüsinasyon, önyargılı kararlar, kötüye kullanım ve güvenlik açıkları gibi sorunlar öne çıkar. Uzun vadede ise insan seviyesini aşabilecek sistemlerin amaçlanmayan hedefler izlemesi ya da denetimden çıkması gibi senaryolar tartışılır. Bu uzun vadeli risklerin olasılığı ve zamanlaması konusunda uzmanlar arasında görüş ayrılığı vardır.

Uygulamada neler yapılır?

Geliştiriciler modelleri yayımlamadan önce kırmızı takım testleri yapar, korkuluk adı verilen güvenlik katmanları ekler, model ve sistem kartlarıyla sınırlamaları belgeler. Birçok ülke de yapay zekâya yönelik düzenleme çerçeveleri üzerinde çalışmaktadır.

Kullanıcı olarak da yapay zekâ çıktılarını kritik kararlarda doğrulamak, kişisel verileri dikkatli paylaşmak ve sistemin sınırlarını bilmek güvenli kullanımın parçasıdır.

Sıkça Sorulan Sorular

Yapay zekâ güvenliği ile siber güvenlik aynı şey mi?

Kesişirler ama aynı değildir. Siber güvenlik sistemleri dış saldırılardan korur; yapay zekâ güvenliği ise modelin kendi davranışının da zararsız ve kontrol edilebilir olmasıyla ilgilenir.

Yapay zekâ güvenliği yalnız gelecekteki riskler için mi?

Hayır. Bugünkü yanlış bilgi, önyargı ve kötüye kullanım sorunları da alanın kapsamındadır. Uzun vadeli riskler bunun yalnızca bir parçasıdır.

İlgili terimler

Yapay Zekâ Hizalaması(AI Alignment)Yapay zekâ hizalaması (AI alignment), yapay zekâ sistemlerinin hedeflerinin ve davranışlarının insanların gerçek niyetleri, değerleri ve güvenlik beklentileriyle uyumlu olmasını sağlamaya yönelik araştırma ve uygulama alanıdır.Kontrol Problemi(AI Control Problem)Kontrol problemi, giderek daha yetenekli hâle gelen yapay zekâ sistemlerinin insanların niyetine uygun davranmasını, gerektiğinde düzeltilebilmesini ve durdurulabilmesini nasıl güvence altına alacağımız sorusudur.Korkuluk(Guardrails)Korkuluk (guardrails), bir yapay zekâ sisteminin girdilerini ve çıktılarını denetleyerek zararlı, hatalı, gizli bilgi içeren ya da kapsam dışı yanıtlar üretmesini önlemeye yönelik kurallar, filtreler ve kontrol mekanizmalarının bütünüdür.Yapay Zekâ Risk Yönetimi(AI Risk Management)Yapay zekâ risk yönetimi, bir kurumun geliştirdiği ya da kullandığı yapay zekâ sistemlerinin doğruluk, önyargı, güvenlik, gizlilik ve hukuki uyum gibi alanlardaki risklerini sistematik olarak belirlemesi, ölçmesi ve azaltmasıdır.Yorumlanabilirlik(Interpretability)Yorumlanabilirlik (interpretability), bir yapay zekâ modelinin belirli bir çıktıyı neden ve nasıl ürettiğini insanların anlayabilmesi ve bu amaçla modelin iç işleyişini inceleyen yöntemlerin ve araştırma alanının genel adıdır.Halüsinasyon(Hallucination)Yapay zekâ halüsinasyonu, bir dil modelinin gerçekte var olmayan ya da yanlış bir bilgiyi akıcı ve kendinden emin bir dille doğruymuş gibi sunmasıdır. Uydurma kaynaklar, hatalı rakamlar ve var olmayan özellikler en sık görülen örneklerdir.