音たっちくん

Category
Application / Web Application
Date
2024.02
Tools
JavaScript(React)

リンクはこちら

コンセプト

2023年夏に大学にて行われたワークショップにて高校生に音楽創作を楽しんでもらうことを目標にチームでの制作を行った。その後、2024年2月に愛知県立芸術大学にて行われた「インターカレッジソニックアーツフェスティバル」と「Sonic Interaction 2024 Vol.1」にて展示を行い、その展示に向けたアップデートも行った。

Tensorflow.jsにてカメラの映像から手の座標を取得、そこから人差し指の座標のみを使用し円を追従させ、円とパネルの座標が合った場合のみに音が鳴るようにしている。アップデート時にはFireBaseを使用し、Google認証とデータベース上にプリセットを保存してログイン時に読み出せるようにしていった。

チームでの開発を行い、初期はUI/UXを担当。チームメンバーが卒業してからは、システムのアップデートも担当している。