Kulak İçi Kulaklıklardaki Yapay Zeka Ajanları, Sürekli Olarak Bağlam Duyarlı Yardımı Dinliyor

Michigan Üniversitesi ve Fudan Üniversitesi’nden bir araştırma ekibi, ses tabanlı etkileşimleri bağlam farkındalığı ile artırmak için tasarlanmış açık kaynak kodlu bir AI destekli kulaklık sistemi olan Buddie’yi tanıttı.

Buddie, sürekli dinleme sırasında enerji tüketimini azaltmak için enerji verimli sıkıştırma kullanır. Elektrik ve Bilgisayar Mühendisliği Profesörü Robert Dick liderliğindeki proje, teknolojiyi tüketicilere ve geliştiricilere sunmak için 23 Aralık’ta bir Kickstarter kampanyası başlattı.

Buddie, kulaklık ve bir akıllı telefon uygulamasını birleştirerek konuşma bağlamını anlayabilen bir sesli arayüz oluşturur. Sistem, konuşmaları dinleyerek arka plan bilgileri toplar, böylece AI asistanlarının daha doğru yanıtlar vermesini sağlar. Örneğin, yakın zamanda bahsedilen bir ismi hatırlayabilir veya bir toplantıdan görevleri özetleyebilir.

Dick’e göre, bağlam farkındalığı, kullanıcıların sürekli olarak arka plan bilgilerini sağlamalarını gerektiren mevcut AI sistemlerinde önemli bir kısıtlamayı ele alır. Buddie, AI asistanlarının gerekli bağlamı elde etmelerine izin vererek bu etkileşimleri düzene sokmayı hedefliyor.

Buddie kulaklıklar, günlük yaşama AI’yi entegre etme olanağı sunar ve ChatGPT veya diğer AI ajanlarını bağlam farkında kişisel bir asistana dönüştürür. Sürekli dinleyerek, Buddie, kullanıcıların durumlarını sürekli açıklamalarına gerek kalmadan, AI sistemlerine ihtiyaç duydukları bağlamı sağlar.

Bu eller serbest etkileşim, kullanıcıların her zaman, her yerde AI ile iletişim kurmalarını sağlar. Buddie, ChatGPT gibi AI ajanlarını destekleyen akıllı kulaklıklar ve iOS ve Android için açık kaynaklı bir mobil uygulama içerir. İsteğe bağlı üçüncü taraf premium hizmetler de mevcuttur, bu da kullanıcıların deneyimlerini özelleştirmelerine olanak sağlar.

İş ve kişisel kullanım için tasarlanan Buddie, toplantıları döküm ve özetleme, eylem maddelerini yakalama ve konuşmalar sırasında hızlı, ilgili ipuçları sağlama yoluyla üretkenliği artırmayı hedefliyor.

Örneğin, patronunuz bilmediğiniz bir kelimeyi anarsa, Buddie hızlıca onun tanımını sağlar. Zoom ve Microsoft Teams dahil olmak üzere çeşitli toplantı platformlarıyla entegre olur, çeşitli iletişim stillerine destek sunar.

İş yerinin ötesinde, Buddie kullanıcı tercihlerini öğrenerek ve kişiye özel öneriler sunarak günlük yaşamda yardımcı olur. Başarıları yansıtmak, görevleri takip etmek ve anlamlı anları vurgulamak için günlük özetler sağlar.

Araştırmacılar, Buddie kulaklıkların kullanıcı gizliliğini korurken AI destekli bağlam farkındalığı sağlamak üzere tasarlandığını belirtiyor. Ses verileri yakalanır ve Buddie akıllı telefon uygulamasına kablosuz olarak iletilir, burada metne dönüştürülür ve birkaç saniye içinde silinir.

Transkriptler şifrelenmiş ve kullanıcının cihazında yerel olarak saklanmıştır, yetkisiz erişimi engeller. Veri, kullanıcı tarafından açıkça talep edilmedikçe uzak sunuculara iletilmez. Üçüncü taraf AI hizmetlerini kullanmayı tercih edenler için

Buddie’nin sürekli dinleme yeteneği, özellikle enerji tüketimi konusunda teknik zorluklar doğurur. Bunu çözmek için, kulaklıklar enerji verimli sıkıştırma teknikleri kullanarak pil üzerindeki yükü azaltır.

Projenin açık kaynaklı yaklaşımı, kullanıcıları ve geliştiricileri yeni uygulamaları keşfetmeye, yazılımı değiştirmeye ve gelişimine katkıda bulunmaya teşvik eder. Buddie, erken destekçiler için maliyetine—40 dolar—mevcut.

Ancak, Buddie’nin durum farkındalığına dayalı tasarımı ne kadar yenilikçi olursa olsun, siber güvenlik alanında büyüyen endişeleri vurgular. Morphisec‘teki siber güvenlik uzmanları, saldırganların artan bir şekilde, durum farkında cihazlarda bulunan gelişmiş özellikler gibi, generatif AI sistemlerini kullanarak bu sistemleri istismar ettiği konusunda uyarıyorlar.

Örneğin, model çıkarma teknikleri potansiyel olarak AI sistemlerini tersine mühendislik yapmak için kullanılabilir, davranışlarını taklit ederek yetkisiz bilgiler elde etmek veya sofistike saldırılar başlatmak için.

Buddie’nin sürekli dinleme yeteneği, hızlı enjeksiyon saldırıları gibi zafiyetler hakkında soruları da gündeme getiriyor. Bir AI sisteminin yönlendirmelerini manipüle ederek, saldırganlar potansiyel olarak onun zararlı veya istenmeyen çıktılar üretmesini sağlayabilir, Morphisec tarafından bildirildiği gibi.

Buddie’nin bağlam farkında işlevselliğini mümkün kılanlar gibi ileri AI modelleri, başarılı saldırı stratejilerini belirlemek için filtreleri aşabilecek uyumlu komutlar oluşturabilir, diyor Morphisec.

Buddie’nin gelecekteki iterasyonları, gizlilik özelliklerini geliştirmeyi, yerleşik zekayı dahil etmeyi ve daha güçlü veri koruma politikalarına sahip AI sistemlerini seçme seçenekleri sunmayı hedefliyor. Şimdilik, odak noktası, ses tabanlı etkileşimleri geliştirmekte ve bağlam farkında AI’nın günlük kullanımdaki potansiyelini anlamakta.