見出し画像

[個人開発]ＩｏＴとＡＲで楽器を作るまで

suo

はじめに

マトリョミンという楽器を真似たオモチャをIoTで作ったときの開発の日記です。

マトリョミンとは、マトリョーシカ型のテルミンのこと。テルミンとは電子楽器で、手と楽器(テルミン)との距離を調節するだけで音階を変えられる、ちょっと不思議な楽器です

画像1

マトリョーシカ＋テルミン＝マトリョミン

ＩｏＴでテルミン(風)に音を奏でて、ＡＲで見た目をマトリョーシカ(風)にします。『ＩｏＴとＡＲを組み合わせる』という自身初挑戦の記録です。

完成した楽器

完成したのはこれ。マトリョーシカと、その隣から近づく板との距離によって音階が変わります。

作り方はQiitaに投稿しました。

画像2

ここから開発日記です。

ステップ（１）ドレミファソラシドを奏でる

ＩｏＴでスピーカーを制御する方法を確認します。obniz というＩｏＴデバイスを使いました。

ステップ（２）超音波距離センサーを使ってみる

超音波で距離を計測するセンサーで、距離を測る方法を確認しました。

トラブル発生

スピーカーと距離センサーを組み合わせる方法を模索していたら、謎のエラーが発生。電源容量が不足？う～ん、わからん。

距離センサーが調子悪いので新品のセンサーを調達しました。

新品のセンサーに取り替えたら謎のエラーが解消！エラーの原因は、センサー故障だった。

ステップ（３）テルミン風の完成

スピーカーとセンサーを連携させて、距離に応じて音階が変わる仕組みが完成！これでテルミン風の楽器ができた。次は見た目をマトリョーシカにしていく。

ステップ（４）

見た目をマトリョーシカにしたときに部品が隠れるように、スピーカー、センサーとＩｏＴを縦長にまとめました。部品をまとめるときにLEGOが活躍しました（LEGO便利）

ステップ（５－１）

ＡＲで、３Ｄオブジェクトのテクスチャを切り替える仕組みを作りました。この時点では、ＩｏＴと連携はしていません。

ステップ（５－２）

さきほど作ったテクスチャを切り替えるＡＲと、スピーカーと距離センサーを制御するＩｏＴを連携しました。"距離センサーで計測した距離によって、ＡＲのテクスチャが切り替わる"という仕組みを作るのに苦戦しました。

ステップ（６）

ＩｏＴとＡＲを連携できたので、ＡＲで表示するマトリョーシカを用意します。距離に応じて画像が切り替わるので、マトリョーシカもいくつかパターンを用意しました。

※このイラストのデータはこちらのnoteに置きました

ステップ（７）完成っ！

下の２つの仕組み作り、その２つを連携してマトリョミン(風)の完成です。
● ＩｏＴで距離センサーとスピーカーを制御
● ＡＲで見た目をマトリョーシカ

obniz公式さんから嬉しい反応頂きました、ありがとうございます。

画像3

ステップ（５－２）の"距離センサーで計測した距離によって、ＡＲのテクスチャが切り替わる"の仕組みがうまく作れず苦戦しましたが、無事完成してよかった。

こんな弱小ブログでもサポートしてくれる人がいることに感謝です。