あぁーVRでもギターが弾きてぇよー

僕はギターが大好きだ。中一でベンチャーズ(パイプラインとか....)をコピーし、今でも歪ませた音ばかりを出している。30後半になったけども必死にスウィープ奏法を練習している。そんな大好きなギターをなんとかVR上でコントローラとして使えないかなーと思ったのがこの記事のきっかけです。

ということで手元にあるギターをOculus Questのコントローラーとして使用できないかを考えてみよー

f:id:amidaMangrove:20191225011133p:plain

これだ！多分これでいけるんじゃあないかと思うのでやってみる。おそらくコーディング量はほぼ0です。

用意するもの

Keijiroさんが公開している「Lasp」と「OscJack」を使用します。Unityは2019.3.0fを使用。

github.com

他必要なものはどのご家庭にもある

ギター
オーディオインターフェース

となります。さらにOculus Questがケーブルレスなのを考慮し

ワイヤレスシステム（あれば）
ワイヤレスヘッドフォン（あれば）

この辺まで揃えられればなんか良さそう

まぁぶっちゃけオーディオインターフェース経由ならギターである必要はないのです。もっといえば、PCにマイクが内臓できてればとりあえず入力は取れます。

Oculus Questのipアドレスを調べる

Oscを使用するためOculus QuestとPCをUSBで繋ぎ以下のコマンドをcmdに入力してipアドレスを調べます。(事前にadbがインストールされている前提)

adb shell ip addr show wlan0

「inet xxx.xxx.xxx.xxx brd ～」とipアドレスが表示されるので覚えておきましょう。このipアドレスを送信アプリに埋め込みます。

Lasp → OSC送信用のプロジェクトを作成する

変換とOSC送信するPCアプリと、受信側のOculus Questアプリの2つを作ります。

まずは送信側のプロジェクトを作りそれぞれ「Lasp」と「OscJack」をインポートしておきます。

Laspを使用してオーディオ入力を受け取る

低・中・高の音域を取り出したいのでSphereをヒエラルキーに３つ追加しそれぞれ「AudioLevelTracker」をアタッチして「Filter Type」を「Low Pass」「Band Pass」「High Pass」に設定しておきます。

f:id:amidaMangrove:20191221184302p:plain とりあえず左から「Low」「Band」「High」。きちんとオーディオ入力が取れているか確認するため簡単なスクリプトを作りアタッチします。

using System.Collections;
using System.Collections.Generic;
using UnityEngine;

public class NormalizedLevelView : MonoBehaviour
{
    public float Level { get;  set; }
    
    void Update()
    {
        transform.localScale = new Vector3(Level, Level, Level);
    }
}

アタッチしたら「AudioLevelTracker」の「Normalized Level Event」にプロパティの「Level」を設定します。 f:id:amidaMangrove:20191221221638p:plain