Fly Brain HubEnglish

デモ・ゲーム

flybrain-eyegaze-tracking

Rick Gorman (@rickgorman)

ウェブカメラの視線追跡を MaleCNS のシミュレーションの入力にする。ブラウザ側の MediaPipe が虹彩と頭部姿勢から画面上の注視点を推定し、ページの外に出るのは画面上のハエから注視点への正規化された方向だけ。それが左右の LC4・LPLC2 を駆動し、162,517 ニューロン・6,138,378 結合の漏洩積分発火を 80 ms 走らせ、下行ニューロン 1,310 本の膜電位の線形読み出しが速度になる。学習するのは読み出しだけで配線は固定、目標座標は読み出しに届かない。コネクトームが視線推定の精度を上げるわけではない、と README が明記している。

公式サイト ↗

flybrain-eyegaze-tracking

#gaze-tracking#webcam#mediapipe#lc4#lplc2#descending-neurons#malecns

確認した出典

上の情報は掲載日にこれらのページを読んで確認したものです。