デモ・ゲーム

Call fly

cashew-labs

ハエに電話をかけて会話するデモ。聞きながら話す全二重の音声モデルが 80ms フレームで応答するので、こちらから割り込める。その横にコネクトームがリザバーとして置かれる。音声モデルの 4,096 次元の内部状態を固定の 64 特徴に要約し、保持された MaleCNS グラフに(自分の 1 ステップ前の活動と一緒に)入力し、128 特徴にプールし、学習済みアダプタを通して、テキストトークンのスコアに小さく上限付きの補正をかける。ブラウザの 3D 可視化は飾りではなく、その補正に使っているリザバーの状態そのものを描いている。

公式サイト ↗リポジトリ ↗

Call fly

#voice#full-duplex#reservoir#visualization#malecns

確認した出典

上の情報は掲載日にこれらのページを読んで確認したものです。