gesture.live

鍵盤に触れずにコードを鳴らしたいなら、左手は常に働いている。指で1から7まで数えれば、現在のキーのコードが鳴る。モードもメニューも要らない。手を返せば同じ数が平行短調に切り替わり、指を下に向ければコードが半音下がる。どのポーズにも二つ目の選択肢が隠れている。

手の甲をカメラに向けて握るとモードアークが呼び出される。手を動かすと一番近いセルが強調され、開くとそのモードが固定される。代わりに手のひらを後ろに向けるジェスチャーをすると切り替えが取り消されるので、事故で何かが変わることはない。演奏の途中で右手に新しい役割を渡す素早い方法だ。

右手はドラム、ベース、メロディ、エフェクト、彫刻を担う。ドラムはキットのファミリーごとにピンチの指を一つ与え、ベースは密度とオクターブ跳躍を演奏させ、メロディは各指に音域を割り当てる。彫刻はアルペジオの速度、エンベロープ、グライド、トレモロでコードの声を作り変え、これらはモード間で固定されたままになる。

コードをどこで保持するかは、どのコードかと同じくらい重要だ。コードの手を持ち上げると音が鳴っている間に音が積み重なり、下げるとコードがまた薄くなる。手首を返すとパッドのフィルターと音の長さがスイープするので、保ったコードは手の下で色を変え続ける。

サンプラーモードは自分の音声を再生する。マイクから最大8秒取り込むか、ファイルをページにドロップすると、そのテイクがピンチの指に載る。各指は自分の素材を保ち、ギターのサンプルがあらかじめ読み込まれているので、既定のピンチが無音のキーを鳴らすことはない。

コードの手はあなたと一緒に歌える。4つ目のコードボイスが、あなたの生の声の音高を、保っているコードの各音に同時に移調する。すべてコードにクオンタイズされる。カットオフと彫刻は、パッドを形作るのとまったく同じようにあなたの声を形作る。マイクとスピーカーがハウリングするのでヘッドホンがおすすめだ。

キーとテンポからコードの声やスパイスの設定まで、音楽の状態全体を名前をつけて保存し、演奏の途中でフレーム内のデッキから好きな曲を読み込める。録音はワイド形式に加えて、スマートフォン向けの720x1280の縦長シートにも対応し、両方を同時に行うこともできる。

手の追跡は自分のマシン上のWebAssemblyで動く。フレームが届くサーバーは存在しないので、デバイスの外には何も出ない。テイクは手元に届く前にブラウザ内で完成する。これにより楽器はプライベートに保たれ、登録に邪魔されず素早く始められる。手の追跡で音楽を作る人にとって、このローカルな方式こそが要点だ。