Kaspersky, "dolaylı istem enjeksiyonu" adlı saldırı tekniğini keşfetti

Kaspersky, ChatGPT gibi büyük dil modellerinin çıktılarını değiştirmek ve yapay zeka destekli sohbet botlarını aramak için kullanılan "dolaylı istem enjeksiyonu" adlı saldırı tekniğinin arttığını ortaya çıkardı.

Şirketten yapılan açıklamaya göre, LLM'ler, belge analizinden işe alıma ve tehdit araştırmalarına kadar çeşitli uygulamalarda kullanılan güçlü araçlar haline geldi. Kaspersky araştırmacıları, kötü niyetli kişilerin web sitelerine ve çevrimiçi belgelere gizli talimatlar yerleştirebildiği bir güvenlik açığının internette kamuya açık ortamlarda istismar edildiğini keşfetti.

Bu talimatlar daha sonra LLM tabanlı sistemler tarafından algılanabiliyor ve potansiyel olarak arama sonuçlarını veya sohbet robotu yanıtlarını etkileyebiliyor.

Dolaylı hızlı enjeksiyon için kullanım alanları belirlenen çalışmaya göre, iş arayanlar, işe alım algoritmalarını manipüle etmek ve yapay zeka sistemleri tarafından önceliklendirme sağlamak için öz geçmişlere özel istemler yerleştiriyor. Saldırıyı gerçek kişilerin kontrolünden gizlemek için küçük yazı tipleri kullanmak veya metin rengini arka planla eşleştirmek gibi teknikler uygulanıyor.

Reklam verenler, arama sohbet robotlarını etkileyerek ürünler hakkında olumlu yorumlar oluşturmalarını sağlamak için açılış sayfalarına enjeksiyonlar yerleştirirken, LLM'lerin yaygın kullanımına karşı çıkan bireyler, kişisel web sitelerine ve sosyal medya profillerine protesto yönlendirmeleri yerleştiriyor ve konuya dair muhalefetlerini mizahi, ciddi veya agresif talimatlarla ifade ediyor.

Sosyal medyada kullanıcılar, genellikle şiirler, ASCII sanatı veya siyasi konularda görüşler üretme talepleriyle, bir hakaret biçimi olarak veya spam botlarını bozmak için istem enjeksiyonunu kullanabiliyor.

Çalışma, finansal kazanç gibi kötü niyetli kullanımlara dair herhangi bir kanıt bulamamış olsa da, gelecekteki potansiyel riskleri vurgulamaktan geri durmuyor.

- "LLM'lerin güvenli ve sorumlu bir şekilde kullanılmasını sağlayabiliriz"

Açıklamada görüşlerine yer verilen Kaspersky Makine Öğrenimi Teknolojisi Araştırma Ekibi Araştırma Geliştirme Grup Müdürü Vladislav Tushkanov, konuya ilişkin şunları kaydetti:

"Dolaylı istem enjeksiyonu, yapay zeka çağında sağlam güvenlik önlemlerine duyulan ihtiyacı vurgulayan yeni bir güvenlik açığını simgeliyor. Bu riskleri anlayarak ve uygun koruma önlemlerini uygulayarak, LLM'lerin güvenli ve sorumlu bir şekilde kullanılmasını sağlayabiliriz."

Kaspersky uzmanları LLM'ye dayalı mevcut ve gelecekteki sistemlerini korumak için şu önerilerde bulunuyor:

"LLM tabanlı sistemlerinizdeki potansiyel güvenlik açıklarını belirleyin ve hızlı enjeksiyon saldırılarıyla ilişkili riskleri değerlendirin. Pazarlama botları radikal açıklamalar yapmaları için manipüle edilebileceğinden ve bu durum potansiyel itibar kaybına yol açabileceğinden, itibarla ilgili risklerin farkında olun.

Korumanın ancak belli bir yere kadar mümkün olabileceğini kabullenin. Özellikle multimodal enjeksiyonlar gibi karmaşık saldırılarda hızlı enjeksiyona karşı tam koruma sağlamak mümkün değildir. Tam bir güvenlik sunmasalar da, LLM'lerin girdi ve çıktılarını filtrelemek için girdi ve çıktı denetleme araçlarını kullanabilirsiniz.

LLM sistemlerinde güvenilmeyen veya doğrulanmamış içeriğin işlenmesinden kaynaklanan risklerin var olabileceğinin farkında olun ve kabullenin. İstenmeyen eylemleri önlemek için yapay zeka sistemlerinin karar verme yeteneklerini kısıtlayın. LLM tabanlı sistemleri çalıştıran tüm bilgisayarların ve sunucuların güncel güvenlik araçları ve uygulamaları ile korunduğundan emin olun."

Teknoloji Haberleri

Teknoloji haberleri, dijital dünyanın hızla gelişen ve değişen yüzünü yakından takip eden haber türüdür. Bu haberler, teknoloji sektöründeki yenilikleri, lansmanları, gelişmeleri ve diğer ilgili konuları ele alır. Teknoloji haberleri, günümüzün hızla değişen dünyasında hem profesyoneller hem de genel okuyucular için büyük bir öneme sahiptir. İşte teknoloji haberlerinin ana özellikleri:

• Yenilik ve Gelişmeler: Teknoloji haberleri, en yeni teknolojik gelişmeleri ve yenilikleri sunar. Özellikle akıllı cihazlar, yapay zeka, siber güvenlik ve diğer teknolojik alanlarda yaşanan gelişmeler bu haberlerin odak noktasıdır.

• Ürün Lansmanları: Teknoloji şirketleri, yeni ürünlerini piyasaya sürdüğünde, bu ürünlerin tanıtımı teknoloji haberlerinin merkezindedir. Akıllı telefonlar, tabletler, bilgisayarlar, oyun konsolları ve daha fazlası, bu kategoriye dahil edilir.

• Siber Güvenlik ve Mahremiyet: Dijital dünyadaki güvenlik tehditleri ve veri mahremiyeti endişeleri de teknoloji haberlerinin önemli bir bileşenidir. Bu haberler, siber saldırılar, veri sızıntıları ve güvenlik önlemleri hakkında bilgi verir.

• Bilim ve Araştırma: Teknoloji haberleri aynı zamanda bilim ve araştırma dünyasını da kapsar. Özellikle uzay keşifleri, tıbbi buluşlar ve çevre dostu teknolojiler bu alana dahildir.

• Tüketici Elektroniği: Tüketici elektroniği ürünleri, teknoloji haberlerinin ayrılmaz bir parçasıdır. Televizyonlar, kulaklıklar, akıllı saatler ve daha fazlası, incelemeleri ve karşılaştırmalarıyla bu haberlerde yer alır.

Dijital Dünyanın Nabzını Tutan Bilgi Kaynağı Milat'ta

Teknoloji haberleri, bireylerin dijital dünyadaki değişimlere ayak uydurmasına, teknolojik cihazlarını seçerken bilinçli kararlar vermesine ve güvenli bir çevrimiçi deneyim elde etmesine yardımcı olur. Ayrıca, teknoloji şirketlerinin inovasyonlarını ve rekabetçi ürünlerini tanıtarak sektöre yön verir. Bu nedenle, teknoloji haberleri, bilgi çağının vazgeçilmez bir parçasıdır ve herkesin takip etmesi faydalıdır. En güncel teknoloji haberleri için Milatgazetesi.com adresini ziyaret edebilirsiniz.