mirror of
https://github.com/vrm-c/UniVRM.git
synced 2026-04-18 21:17:17 -05:00
142 lines
6.0 KiB
Markdown
142 lines
6.0 KiB
Markdown
# `v0.58` BlendShapeProxy
|
|
|
|
## BlendShapeKeyのインタフェースを厳格化、整理
|
|
|
|
BlendShapeKeyを作成する方法が不明瞭だったため、
|
|
より明示的な API に置き換えました。
|
|
|
|
* BlendShapeClip.Key 追加
|
|
|
|
| arguments | before | after | 備考 |
|
|
|--------------------------------------|--------------------------|--------------------------------|------------------------------------------------------------------------------------------------------------------------|
|
|
| string name, BlendShapePreset preset | public constructor | private constructor | BlendShapePreset.Unknownのときの挙動が不明瞭だった。代わりに、CreateFromPreset または CreateUnknown を使用してください |
|
|
| BlendShapeClip | BlendShapeKey.CreateFrom | BlendShapeKey.CreateFromClip | 他の関数に合わせて、名前を変更 |
|
|
| BlendShapePreset | public constructor | BlendShapeKey.CreateFromPreset | オーバーロードをやめて明示的な関数に変更 |
|
|
| string | public constructor | BlendShapeKey.CreateUnknown | オーバーロードをやめて明示的な関数に変更。 |
|
|
|
|
## 使用するメソッド
|
|
|
|
* [推奨] `SetValues`
|
|
* [非推奨] `ImmediatelySetValue`
|
|
* [上級者向け] `AccumulateValue`
|
|
* [上級者向け] `Apply`
|
|
|
|
## スクリプトから BlendShape weight を適用する
|
|
|
|
`SetValues` 関数のみを使用します。
|
|
そのフレームで必要な表情の weight 値をすべて集めてから `SetValues` を 1 回だけ呼んで設定します。
|
|
|
|
```csharp
|
|
var proxy = GetComponent<VRMBlendShapeProxy>();
|
|
|
|
proxy.SetValues(new Dictionary<BlendShapeKey, float>
|
|
{
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.A), 1f}, // [0, 1] の範囲で Weight を指定
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.Joy), 1f}, // システム定義の表情は enum で指定
|
|
{BlendShapeKey.CreateUnknown("USER_DEFINED_FACIAL"), 1f}, // ユーザ定義の表情は string で指定
|
|
});
|
|
```
|
|
|
|
## 複数の BlendShape weight を適用する際の競合の問題について
|
|
|
|
この節では、なぜ `SetValues` を使わなければならないのかという疑問に回答します。
|
|
|
|
たとえば 2 つの VRMBlendShape `Blink_L` と `Blink_R` が
|
|
|
|
VRMBlendShape `Blink_L`
|
|
|
|
* Mesh `A` の Blendshape `eye_close_L` の weight 値 `100`
|
|
* Mesh `A` の Blendshape `eye_close_R` の weight 値 `1`
|
|
|
|
VRMBlendShape `Blink_R`
|
|
|
|
* Mesh `A` の Blendshape `eye_close_L` の weight 値 `1`
|
|
* Mesh `A` の Blendshape `eye_close_R` の weight 値 `100`
|
|
|
|
で定義されているとします。
|
|
このとき両目を閉じたいモチベーションから、両方を有効にする意図で下記のように実行します。
|
|
|
|
```csharp
|
|
proxy.ImmediatelySetValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_L), 1.0f);
|
|
proxy.ImmediatelySetValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_R), 1.0f);
|
|
```
|
|
|
|
すると、左目だけが開いてしまいます。
|
|
これは後から `ImmediateSetValue` した `Blink_R` が `Blink_L` と競合して weight を上書きしてしまうからです。
|
|
したがって VRM の表情制御においては下記の 2 通りのどちらかの方法で書くことが求められます。
|
|
これらの方法はこの競合の問題を解決して表情を設定することができます。
|
|
|
|
```csharp
|
|
proxy.SetValues(new Dictionary<BlendShapeKey, float>
|
|
{
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_L), 1.0f},
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_R), 1.0f},
|
|
});
|
|
```
|
|
|
|
または
|
|
|
|
```csharp
|
|
proxy.AccumulateValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_L), 1.0f); // すぐに適用せずにたくわえる
|
|
proxy.AccumulateValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_R), 1.0f);
|
|
proxy.Apply(); // 蓄積した値をまとめて適用する
|
|
```
|
|
|
|
WIP
|
|
|
|
## 何故、複数のSetterがあるのか
|
|
|
|
* LipSync
|
|
* 瞬き
|
|
* 視線制御(BlendShapeで視線を動かすタイプのモデル)
|
|
* プログラムによる喜怒哀楽
|
|
|
|
上記のような複数のBlendShapeが別々のコンポーネントから設定された場合に、
|
|
BlendShape同士が競合することがわかりました。
|
|
後で設定した値で上書きされて希望のBlendShapeが適用されないという状態になります。
|
|
これを解決するために、一か所で中央集権的に制御する必要があります。
|
|
|
|
合成したり排他制御した、BlendShapeClipの集合のスナップショットをまとめて適用することを想定して `SetValues`
|
|
|
|
## ImmediatelySetValue
|
|
|
|
簡単なテストプログラムでの利用を想定しています。
|
|
|
|
例：
|
|
|
|
```csharp
|
|
var proxy = GetComponent<VRMBlendShapeProxy>();
|
|
|
|
proxy.ImmediatelySetValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.A), 1.0f);
|
|
```
|
|
|
|
## AccumulateValue + Apply
|
|
|
|
例：
|
|
|
|
```csharp
|
|
var proxy = GetComponent<VRMBlendShapeProxy>();
|
|
|
|
proxy.AccumulateValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_L), 1.0f); // すぐに適用せずにたくわえる
|
|
proxy.AccumulateValue(BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_R), 1.0f);
|
|
proxy.Apply(); // 蓄積した値をまとめて適用する
|
|
```
|
|
|
|
下記のSetValuesを推奨しています。
|
|
|
|
## SetValues
|
|
|
|
BlendShape合成器が必要に応じ呼び出すことを想定しています。
|
|
|
|
例：
|
|
|
|
```csharp
|
|
var proxy = GetComponent<VRMBlendShapeProxy>();
|
|
|
|
proxy.SetValues(new Dictionary<BlendShapeKey, float>
|
|
{
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_L), 1.0f},
|
|
{BlendShapeKey.CreateFromPreset(BlendShapePreset.Blink_R), 1.0f},
|
|
});
|
|
```
|