サブキャラ的な何かを表示できるようにしたい

[malaybaku]

アクセサリの超強い版みたいな新仕様の案です。

モチベーション

• デスクトップマスコットはアバターなりキャラなりが2体並ぶほうが間が持ちやすいことが知られている(多分)
• 配信でもoptionalに活用されうる

概要

データ形式

• 実体はpngの画像セット、またはVRM

できること(案)

• メインアバターの表情が切り替わるときに反応できる
  • この「表情」には瞬きも含まれる
• メインアバターの動きに何らか連動する
  • 同時とかじゃなくて多少遅れて追従するとか
• 操作に対しての反応が何かある
  • ただしメインアバターとは異なる

直近でやらないけどやっても良いかも

• Word to Motionとかでサブキャラの動きも指定できる
• デフォルトのサブキャラを選択肢としてビルドに埋め込む

やらないこと

• メインアバターと独立して細かく制御できる
  • つまり、VMagicMirrorの複数起動みたいな状態を作ることは特に目指さない

[malaybaku]

この処理のためにNLua(かそれに近い何か)を導入して以下のAPIを出し、画像とモデル両方の動的な動きに対応するのが良さそう

アセット読み込み

• VRM/画像のロード/アンロード
  • VRMのほうが大変そうなので初動でVRMをomitしても良さげ
  • ※VRMはこの方法でロードする場合にライセンスチェックを飛ばしたいので、それが妥当になるようなUIの操作手順を考えること

アセット操作

• VRM/画像のroot位置がget/setできるやつ
  • 画像については2D配置と3D配置が両方ほしい…
• VRMにvrmaが効かせられる何か

スクリプトが入力で受け付けるデータ

• VMC Protocol送信について再検討する #1050 の結果としてBundleして送信できるようになるはずの、VMCPで送れそうな情報全般
• それ以外の、VMMに特有の状態全般(下記は例)
  • ゲーム入力モードのon/off
  • FaceSwitch由来の表情とか
  • ハンドル操作モードでの回ってる角度
  • 会話状態 (喋ってそうか黙ってそうか、くらいの粒度で)