Bir yapay zekâ hizmetinin güvenliği yalnızca onu sunan uygulamaya bağlı değil; kullandığı dış sağlayıcılar da risk zincirinin parçası. Fireworks AI’de yaşanan güvenlik olayı bunun bir örneği: üçüncü taraf bulut sağlayıcısı üzerinden şirketin geliştirme makinelerine erişildi ve ek müşteri verileri etkilendi. Bu veriler arasında, Notion’ın Insights özelliğinde kullanılan Notion AI sohbet dökümleri de bulunuyordu.
4
8
Notion, olayın kendi sistemlerine yönelik bir saldırı olmadığını ve etkilenen çalışma alanlarının yüzde 1’den azını oluşturduğunu bildirdi. Etkilenen çalışma alanlarının büyük çoğunluğunda dökümler belirli bir kullanıcıya ya da çalışma alanına bağlanamıyordu.
3
4
Saldırı nasıl gerçekleşti?
Fireworks’e göre, araştırma ve geliştirme makinelerini barındıran üçüncü taraf bulut sağlayıcısı 23 Ekim’de bir güvenlik olayı yaşadı. 24 Ekim’de yetkisiz bir taraf bu erişim yolunu kullanarak Fireworks’ün geliştirme makinelerine ulaştı ve izinsiz bir iş yükü çalıştırdı. Şirket etkinliği aynı gün tespit etti.
4
14
Açıklamalarda saldırının üçüncü taraf sağlayıcıdan Fireworks’ün geliştirme ortamına uzanan yolu anlatılıyor; ancak kullanılan teknik açık ya da saldırganların her bir veriye hangi adımlarla ulaştığı ayrıntılı biçimde ortaya konmuş değil. Bildirilen temel sonuç, geliştirme ortamına erişimin müşteri verileri üzerinde ek etkiye yol açması.
14
Hangi veriler etkilendi?
Fireworks’ün güncellenen açıklamasında kaynak metaverileri ile faturalandırma ve ödeme geçmişi yer aldı. Bazı müşteriler için veri kümeleri ve tamamlanmamış model ağırlıklarının da etkilendiği belirtildi. Fireworks, ödeme kartı numaralarını saklamadığını söyledi.
4
9
34
Notion tarafındaki veriler, kullanıcıların yapay zekâyı nasıl kullandığını anlamaya yardımcı olan Insights özelliği için yapılan sınıflandırma çalışmalarında kullanılan sohbet dökümleriydi. Notion, etkilenen çalışma alanlarının yüzde 1’den az olduğunu; bunların büyük çoğunluğunda dökümlerin belirli bir kullanıcı veya çalışma alanıyla ilişkilendirilemediğini açıkladı.
3
4
Notion’ın yanıt takvimi
- 2 Kasım: Fireworks, Notion’a küçük bir veri kümesine erişildiğini bildirdi. Notion’ın ilk incelemesinde kümenin sentetik test verilerinden oluştuğu ve müşteri sohbetlerini içermediği düşünüldü.
8
- 3 Kasım: Notion, Fireworks ile bağlantısını kesti ve sağlayıcının sistemlerinde tutulan verilerini sildi.
5
- 6 Kasım: Fireworks, müşteri verilerine de erişilmiş olabileceği konusunda Notion’ı uyardı.
5
- 8 Kasım: Fireworks, ilgili veri kümesinde Insights için kullanılan Notion AI sohbet dökümlerinin bulunduğunu doğruladı.
8
- 9 Kasım: Notion, etkilenen müşterilerle iletişime geçmeye başladı.
15
- 11 Kasım: Notion, inceleme sırasında etkilenen kullanıcı mesajlarında bulduğu açıkta kalmış Notion API anahtarlarını iptal etti.
8
Notion ayrıca soruşturma sırasında Insights özelliğini devre dışı bıraktı ve Fireworks üzerinden açık ağırlıklı modeller sunmayı durdurdu.
10
11 Etkilenen müşterilere, asistana yazdıkları parola, API anahtarı veya diğer kimlik bilgilerinin açığa çıkmış olabileceğini varsayarak bunları değiştirmeleri önerildi.
21
Soruşturma ve olası motivasyon
Fireworks, soruşturma için Palo Alto Networks’ün Unit 42 ekibiyle çalıştığını ve kolluk kuvvetlerine bilgi verdiğini açıkladı.
34 Şirket, saldırganların yetkisiz model erişimini yasa dışı yönlendirme ağ geçitleri üzerinden yeniden satmayı amaçladığını düşünüyor. “LLMJacking” olarak anılan bu motivasyon, Fireworks’ün değerlendirmesi; saldırganların kimliğinin kesin olarak belirlendiği anlamına gelmiyor.
7
Bu olay, Fireworks’ün ekim ayında açıkladığı ikinci ihlaldi. Önceki olay 6 Ekim’de tespit edilmişti; burada anlatılan sonraki saldırı yolu ise üçüncü taraf bulut sağlayıcısındaki olayla başlayıp 24 Ekim’de Fireworks’ün geliştirme makinelerine ulaştı.
7
14
Yapay zekâ tedarik zinciri açısından çıkarım
Bir şirketin kendi sistemlerinde ihlal yaşanmaması, müşterilerinin verilerinin güvende olduğu anlamına her zaman gelmiyor. Yapay zekâ hizmetleri verileri işlemek için dış sağlayıcılara başvurduğunda, bu sağlayıcıların altyapısı ve geliştirme ortamları da güvenlik değerlendirmesinin parçası oluyor. Notion olayında bildirilen giriş noktası Fireworks’ün bulut sağlayıcısıydı; etkilenen sohbetler ise Notion’ın bir özelliği için işleniyordu.
4
8
Yapay zekâ hizmeti seçen ekipler, bir sağlayıcının veya alt yüklenicisinin hangi verileri sakladığını, bunları nerede işlediğini ve gerektiğinde erişimin ne kadar hızlı kesilebileceğini sorgulayabilir. Mümkün olduğunda parolaları ve API anahtarlarını istemlere yazmamak; bir gizli bilginin açığa çıkan dökümde yer almış olabileceği durumlarda anahtarı iptal etmek veya değiştirmek de riski azaltmaya yardımcı olur.