Looki, yaşamı anlama modeli Loom'u tanıttı: algılama, deneyimleme ve uzun vadeli hafıza olmak üzere üç katmanlı işleme

动察 Beating AI hızlı haber: AI giyilebilir cihaz şirketi Looki, kamera ve mikrofonla kaydedilen günlük yaşamı zaman, içerik ve orijinal kanıtlarla birlikte uzun vadeli bir hafızaya dönüştüren ve AI'nın istediği zaman erişebildiği çok modlu model serisi Loom'u yayınladı.

Örneğin, kullanıcı öğlen iş arkadaşlarıyla yemek yerken bir projeyi tartışıyor ve sonunda Cuma günü veriler çıkana kadar karar vermeyi beklemeye karar veriyor. Loom yalnızca "yemek yeme" ve "konuşma"yı tanımakla kalmamalı, aynı zamanda tartışma içeriğini, kararı ve nedenini de kaydetmelidir. Birkaç gün sonra bu proje tekrar konuşulduğunda, AI o zamanki kaydı bulup getirebilir.

Loom üç bölümden oluşur:

Sense (Algılama): Kullanıcının şu anda ne yaptığını sürekli olarak belirler. Özel olarak eğitilmiş bir ayırt edici model kullanarak "yemek yiyor mu", "konuşuyor mu" gibi soruları doğrudan puanlar; her seferinde metin açıklaması üretmesine gerek yoktur. Model ayrıca önceki zaman diliminin durumunu da dikkate alarak dönme veya engellenme nedeniyle etkinlik tanımasının sürekli değişmesini önler.

Moment (Deneyim): Farklı zamanlarda toplanan görüntü ve sesleri hizalar, bir deneyimin nerede başlayıp nerede bittiğini otomatik olarak belirler ve temel gerçekleri, zamanı ve ilgili kanıtları içeren bir açıklama oluşturur. Deneyimleri yalnızca sabit sürelere göre video kesmek yerine konuşma içeriğine göre bölebilir.

Memory (Hafıza): Deneyimleri günlük, haftalık, aylık özetler ve uzun vadeli hafıza olarak düzenler. Soruları yanıtlarken AI önce özetlere bakabilir, ardından katman katman belirli deneyimleri bulabilir ve gerekirse ayrıntıları doğrulamak için orijinal görüntü veya ses kaydına geri dönebilir.

Şu anda Loom hâlâ birden fazla özel model ve hafıza erişim sistemiyle birlikte çalışıyor ve gelecekte bu yeteneklerin daha da uçtan uca bir çok modlu modelde birleştirilmesi planlanıyor.

Resmi öz testlerde Sense, yaklaşık 20 günlük etkinlik türünü tanıdı, F1 puanı 88,6 ve ortalama her değerlendirme 0,51 saniye sürdü. Moment, deneyimlerin başlangıç ve bitiş zamanlarını belirlemede Gemini Flash'ı geride bıraktı, ancak ürettiği metin açıklamaları hâlâ onun kadar doğru değil. Memory 79,0 puan aldı; mem0'dan 18 puan daha yüksek ve her soru için ortalama işlenen Token miktarı onun yalnızca %14,5'i kadar.

Loom öncelikle Looki'nin kendi giyilebilir cihazlarında kullanılacak; şu anda bağımsız model API'si açık değil ve model ağırlıkları da açık kaynak değil.