“Multimodal AI” nedir?
Multimodal AI (çok modlu yapay zeka), tek bir model mimarisi içinde birden fazla giriş/çıkış modalitesinde: metin, görsel, ses, video, yapılandırılmış veri: işleyen ve üreten AI sistemlerini tarif eder. GPT, Claude, Gemini ve Llama gibi model aileleri, görsel ve metin girdilerini kabul eden, metin üreten ve giderek sesli yanıt verebilen multimodal sistemler içerir. Multimodal yetenek, daha önce birden fazla uzmanlaşmış modeli birleştirmeyi gerektiren uygulamaları mümkün kılar.
Yaygın multimodal yetenekler
- Görsel + metin: görselleri tanımlama, belge okuma, ekran görüntüsü analizi, OCR.
- Ses + metin: transkripsiyon, gerçek zamanlı sesli asistanlar, ses analizi.
- Video + metin: video içeriğini özetleme, olayları çıkarma, kareler arasında nesneleri tanımlama.
- Üretim: metinden görsel (DALL-E, Stable Diffusion), metinden video (Sora, Runway), metinden konuşmaya.
Hukuki ve uyum dikkati
- Biyometrik veri: multimodal girdilerdeki yüz, ses ve yürüyüş KVKK ve GDPR Madde 9 uyarınca özel nitelikli kişisel veri oluşturabilir.
- AB AI Act: duygu-tanıma sistemleri ve belirli biyometrik kategorilendirmeler ek kısıtlamalarla karşılaşır.
- Telif: telifli görseller, ses ve video üzerinde eğitim, salt metinden daha fazla dava maruziyeti yaratır.
- Modaliteler arası enjeksiyon: görseller ve sesler salt metin filtrelerine görünmez düşmanca talimatlar taşıyabilir.
Türk startup’larında
Türk multimodal AI uygulamaları (sağlık görüntüleme, belge işleme, perakende katalog) bakımından biyometrik veriler, KVKK m. 6 uyarınca özel nitelikli kişisel veridir ve yalnızca bu maddede sayılan işleme şartlarından birine dayanılarak, Kurulca belirlenen yeterli önlemler alınarak işlenebilir. Multimodal vendor seçiminde verinin Türkiye’de işlenmesi veya yurt dışı aktarımın KVKK m. 9’da öngörülen aktarım mekanizmalarından birine dayandırılması tipik gereksinimdir.
Yapın: multimodal girdileri hassasiyete göre sınıflandırın (özellikle biyometrik); KVKK / GDPR için veri akışlarını belgeleyin.
Yapmayın: görsel/ses modellerinin metinle aynı yönetişimden muaf olduğunu varsaymayın: kabul ettikleri girdiler genelde daha hassastır.
Kaynak. 6698 sayılı Kişisel Verilerin Korunması Kanunu; (AB) 2016/679 sayılı Genel Veri Koruma Tüzüğü (GDPR). Kanun bağlantıları mevzuat.gov.tr üzerindeki güncel resmî metinlere gider.