視線入力でゲームなどを楽しんでいたりもしますが、「視線入力のすごさを知ってもらいたい」という思いと大好きなロックやテクノを聞くばかりでなく、演奏したい、という思いから、「視覚センサーと指先でのスイッチ操作の組み合わせにより、ローランドMC-101グルーヴボックスを独自のスタイルで演奏でき、フジロックなどの野外フェスに出演したりして、音楽に囲まれた素敵な人生を送る！」というニーズとなりました。

実際の機材をダイレクトに操作することができることは、憧れのアーティストと同じ機材を使えている、という満足につながる。

Roland MC-101 の操作ができるようになれば、きっと他の機器も操作できるようになる。

これらの機器を使ってライブをする様子を多くの人に見てもらえることになれば、視線入力の可能性も伝えられそう。

そのために

①自助具によって指先の動きのみのスイッチ操作を改善したい。

② 物理的にモノを動かして音楽を演奏するトリックが欲しい。

梶山さんが実際に操作してみたい機材のひとつが，Roland MC-101 Groovebox というものです．
4トラックのループを自在に構築し，フェーダーやエフェクターの組み合わせで演奏することができます．

メーカー公式サイト：https://www.roland.com/jp/products/mc-101/

上の「目標・課題」

①自助具によって指先の動きのみのスイッチ操作を改善したい。

② 物理的にモノを動かして音楽を演奏するトリックが欲しい。

を解決するためのアイデア

既存技術を活用して早い実装ができそうに思います．

オープンソースのロボットアームが普及してきました。価格は下がってきたとはいえ、いまだ数十万円はかかりそうなソリューションです。

つまみ部分はピッチリとはまるようにTPU素材、旗(羽)の部分はPETG素材で。 

PLA素材でもいいと思います。 

アイデアスケッチの3DプリンターDJについての取り組み

Python でプログラムしたアプリケーションから直接 3D プリンタを操作するテストです。

ノズル部分の操作をイメージしたく簡易的にカメラを設置してみました。

ノズル部分の移動はカメラで撮影している領域の上下左右にボタンを設置し、ここにマウスポインタが重なると、G-Codeが転送されてノズルが移動します。UFOキャッチャーのクレーンにカメラがついているイメージです。

とりあえず自分の中の初期イメージですが、このユーザーインターフェースは梶山さんの意見を反映しながら改善していきます。

画面の任意の位置にマウスポインタを置いてクリックすると、画面中央からの距離と方向を赤い線で表示させています。この赤い線の長さと方向でノズル部分の移動を操作します。（G-Codeは未実装）

梶山さんがTinkerCADを視線入力だけで操作されているということなので、そこからヒントが得られないかなと考えてます。フェーダーやツマミの操作は検討中。

ちなみに画面は自分のディスプレイの背景です。

ヒートベッドを挟み込むベルトをXY軸にクロスさせる形状とした．

ベルトに設けた爪で MC-101 を固定している．

belt_x.stl (220mm)

belt_xs.stl (200mm)

つまみにかぶせるカバーのプロトタイプ各種
プロトタイプ1は，旗タイプで異素材の組合せとしている．旗が干渉する問題があり，サイズを調整した．

その後，Z軸高さが操作スピードに関わる影響が大きいことがわかり，高さを低くしつつ操作性を高めるために十字形のつまみをデザインした．
フェーダーカバーもつまみと高さを揃えている．

プロトタイプ-2：十字型

フェーダーカバー

実際に動かしてみると、写真の手前〜奥方向は大丈夫でしたが、左右方向はノズルヘッドが3Dプリンタの支柱とぶつかってしまい厚みを減らすことになりました。

画像はノズルカバーの改良案です。stlファイルの図面は以下にあります。

視線入力で表現できる音楽で梶山さんの中の世界観を引き出す

テクノやロックの演奏でライブ活動（目指せ、The Chemical Brothers）

視線入力でオーケストラ

複数人で演奏、視線入力で複数のアクチュエーターの操作

リアルタイムの使用感、タイムラグのない演奏

音楽とビジュアルの演出：視線入力 VJ との共演など