HTMでTHETAのぶれぶれ動画を整合させて体験にまとめるシステム

HTM 脳

要するに自分が目で見てやっていること

そしてそれを追体験できるようにする「夢に見る」


何が入力として必要か

  • THETAの映像
  • 時間をつなげていくシーケンスデータ
    • 音声つぶやき
      • 言語キーにもなるかも
      • 言語のイメージとしてのシーンや注視物
    • 節目節目でのGPSや位置情報
    • 注視している物体のマーキング
      • 輪郭とか
      • 注視した、ということのカウント
    • 運動データ
      • 加速度
      • 角加速度
      • 地図上の近傍ビーコン
  • 動作のデータ
    • 加速度
    • 進行の意図
      • テキスト
      • 音声
    • あとで、場所から移動へとつなげたい


記憶として呼び出す場合のメジャーなキーは何か？それを学習できるか？
例えば番組のカチンコに書いてある文字が画像のスタートならば、とか、
適当に挟まれる映像とか、マーカーになるオブジェクトとか

マーカーになるオブジェクトは、シーンそのものがオブジェクトのマーカーにもなる

そういう構造がHTMである