スマートグラス・MRグラス

MRグラス、欲しい～～～！！！

• スマートグラスじゃなくて？
  • スマートグラスはコンピュータインタラクションのうち、人→計算機の幅が狭いものを指すと思っている
    • スマートウォッチは計算機（ウォッチ本体）から時間を受け取るだけ
      • 人→計算機はせいぜい表示を切り替えて通知を見たり天気を見たりタイマーを開始したりする程度
    • スマートグラスもこういう感じで、あまりインタラクティブではないものを指す印象
  • それじゃ駄目なんですよね（たぶん後述してると思う）
• なぜ欲しい？
  • 可搬性の高い環境を作る ため
    • 最も大きいモチベーションはこれだと思う
      • むしろ「可搬性の高い環境を作る」の言い換えが「MRグラスが欲しい」になるまでありそう
    • 視野を占領せずに携帯できるので、空間を持ち運ぶことが出来るとまで言えるのでは？
      • （視野を占領する例：VR）
  • 人間のやることを減らす ため
    • 「取り出す」という動作はなかなか少なくない手間だと思っている

MRグラスといえど、厳密にはこれは（以下の要件を守っていれば）正直なんでも良い
脳にマイクロチップ埋める（BMI？）とかでも良いし、何なら物理デバイスよりこっちのほうが快適になりそう

• 常時身につけることが前提
  • 睡眠（と入浴）を除く
    • 睡眠中、つまりコンピュータインタラクションが不可能な状況で装着してても意味なくね
      • このタイミングで充電を行うという想定
  • 24 - (睡眠時間) h連続動作させることができる程度のバッテリー容量は欲しいよね
• 視界に情報が表示される
  • こうすれば「取り出す」という動作を撤廃できる
  • コンピューターとのインタラクションのために、人間が持つ「手」という相互作用のための器官を物理的に塞いでしまうのは損失すぎる
• 視野を塞がない
  • 「常時身につける」のために
  • 塞ぐ例：VR
• 外部デバイスを使わずにほとんどの操作ができる
  • 必然的にハンドトラッキングとかになりそう
    • ほかは視線検知とか・・・？

現状あるやつじゃ駄目？

• Meta QuestのようなVR HMDは不適格だと思っている
  • カメラを介さないと外が見えない
  • HMDをつけたまま外出したら不自然に思われる！というのはそれが少数派だからで、それならスマホとかいう変な板を眺めてる人もそれが少数派だったら奇妙にならないかなあ
    • つまりは「社会が悪い」ということで
      • 無理がある気がしてきた
  • HMDは重い
    • VRChatとかでは本当に1日通して付ける人間もいるので、慣れれば良いかもしれないけど
      • ただ、今回はあくまで「現実で生きる」事を考えているので（メタバースから目を逸しつつ）
• 他には、NrealLightやMagic Leap、この際だからAndroid/iOSを搭載したスマホ・タブレットも不適格
  • これらには共通で最悪の弱点があって、基本的に消費者目線であること
    • （写真・動画編集とかイラストレーションとかはそこそこできるけど）
    • 誰かが開発したゲームやツールをストアからインストールして使う前提
    • スマホで動くC言語のIDEみたいなアプリもあるけど、それでAndroidネイティブアプリを開発できるという話は聞いたことがない
    • さらに、ファイルシステムが致命的に不便
      • iOSは特に顕著
      • 「だからiPad OSはPCの代替にならない」という主張をどこかで見て、なるほど～と思った
        • iPad OSはマルチタスクも苦手（画面分割はあるけど不自由）
  • そもそもスマホは画面が小さすぎて、レポート作成すらつらい
• 外出先でプログラミングしたいだけじゃね？はい・・・

実際何が必要なんだろう

• 表示部分
  • NrealLightやVuzix Shieldやあのあたりのようなもの
  • それすらも排除できたら嬉しさが増しそうだけど
• カメラ
  • ハンドトラッキング用

MRグラスを作るのに課題は山ほどある

• 技術面
  • バッテリーをどうやって持たせるか
    • 寝てるときは流石に外して、その時に充電できれば良いかな
      • 充電忘れはどうしよう
        • 忘れたときの対策を考える？
        • 忘れないような工夫？
    • 一日中付けるなら24 - (睡眠時間)で、14~18時間くらいもたせないといけなさそう
  • 諸々のUI/UXデザイン
    • ランチャーとかキー入力とかどうするんだろう
    • ハンドトラッキングにする？課題は以下：
      • 精度（トラッキング自体もそうだし、ジェスチャーの判別も）
      • 画像処理に必要なリソース消費（どれだけ負荷がかかるか）
    • キー入力は普通にQWERTYで良い？
      • キー入力時の物理的なフィードバックがない
      • せっかくハンドトラッキングがあるんだからそれをもとにした入力はないのか？
      • ただ、ユーザーとしては、新しい入力方式を覚えるよりすでにある入力方式が使えるほうが嬉しい
        • メンタルモデルがあるから
  • 発熱
    • NrealLightでは、ちょくちょく「発熱が気になる」というレビューがあった
    • しっかり抑えないと不満になりやすそう
• 倫理などの面
  • カメラとプライバシー
    • ハンドトラッキングを実装するとなればカメラを付けるのは必須なんだけど、それで写真を撮れるようになるとプライバシーが・・・
  • ながら歩き問題
    • 視野に常時表示してたらそりゃずっと画面見ながら歩いてるようなものだから