Open-Source Kinesis, kasla Mac kontrolü için Meta’nın Neural Band teknolojisini tersine mühendislikle inceliyor

Meta, “Neural Band”ı başlangıçta Ray-Ban Display artırılmış gerçeklik gözlükleri için bir giriş cihazı olarak tasarladı. Bileklik, havada el hareketlerini izlemek için kameralara güvenmek yerine, yüzey elektromiyografisi (sEMG) kullanarak kullanıcının sinir sisteminin koluna gönderdiği minik elektrik sinyallerini okur. Parmak seğirmesi veya başparmakla sıkma hareketi algılandığında, cilde temas eden sensörler parmak fiziksel hareketi tamamlamadan önce motor impulslarını tespit eder; böylece eller doğal pozisyondayken çalışan, görünmez ve yorgunluk hissi yaratmayan bir kontrol cihazı oluşturulur. Ancak bu teknoloji, yakın zamana kadar Meta’nın kendi donanımıyla sınırlıydı.

Geliştirici callbacked tarafından GitHub’da yayınlanan açık kaynaklı bir proje olan Kinesis, bilekliğin şifrelenmemiş Bluetooth Low Energy (BLE) paket akışını tersine mühendislik yoluyla analiz etti. Kinesis menü çubuğu yardımcı programı, Meta’nın tescilli arka plan programlarını ve bulut sunucularını tamamen atlayarak Bluetooth üzerinden donanımla doğrudan eşleşir. Ham nöromüsküler sensör sinyallerini macOS sistem olaylarına dönüştürerek, başparmak ile işaret parmağı arasında yapılan sıkıştırma hareketi fare tıklaması olarak algılanır, parmakları yuvarlamak sistem ses seviyesini ayarlar ve hafif bir bilek hareketi Mission Control'da sanal masaüstü alanları arasında geçiş yapar.

Şu anda Kinesis'in kullanımı macOS ile sınırlıdır. Ancak, geniş çaplı çapraz platform desteği neredeyse kesin görünüyor. Geliştirici, Apple’ın özel çerçevelerine güvenmek yerine bandın ham BLE protokolünü haritalandırdığı için, kod çözücüyü Linux veya Windows’a taşımak oldukça basit ve bu, herhangi bir işletim sisteminde açık kaynaklı sinirsel masaüstü gezinme için kapıyı açabilir. Kinesis hakkında daha fazla bilgiyi aşağıdaki bağlantıda bulabilirsiniz.