梶研

mocopi センシング スケジュール 短期的な予定 mocopi でセンシング mocopi x Unity 色んな動作をとる 誤差を計測(簡易) 動作をグラフ化 bvhをパースするパッケージを作る 動作判別 csv に書き出せるアプリを作る 研究をしたい テーマを考える 研究する 論文を書く 発表する 長期的な予定 1月~ 研究 12月 WiNF2024 進捗 階段の上り下り 4号館別館の3階から2階へ下りて、上る 経路 位置 気圧 階段を上ったのに気圧にあまり変化がない → ポケットに入れていたから? 撮り直す 経路 位置 気圧 加速度のノルムとピーク 位置yと加速度のノルムのピーク ジャンプ 3回 + 1回 + 1回 y軸の位置 結果 rootの位置(y)は、地面を基準としている 階段を上り下りすると、基準が変わり補正が掛かる 手足がついた瞬間に基準が変わり、補正されるため、 ジャンプ中や、一歩を踏み出している時は基準が変わらない 平面空間であれば取れるが、上下する階段やエレベーター等の判別は難しそう 何やればいいか迷走してます bvhをパースするパッケージを作る 現状、bvhをパースするパッケージはないため、自作する 各関節は相対的な位置・角度で表されているため扱いづらい → 簡単に絶対的な位置・角度を取得できるようにする 結果 2行で取得できるようになった # ファイルを指定 bvhp = BVHparser('sample/jump.bvh') # 欲しい関節を指定 absolute_motion_df = bvhp....

mocopi センシング スケジュール 短期的な予定 端末姿勢推定 データを収集 グラフを作成 静止状態の判別 端末の姿勢を推定 加速度を世界座標に変換 Unity で可視化 mocopi でセンシング mocopi x Unity 色んな動作をとる 誤差を計測(簡易) 動作をグラフ化 動作判別 csv に書き出せるアプリを作る Androidアプリ開発 長期的な予定 1月~ 研究 12月 WiNF2024 進捗 端末姿勢推定 端末の姿勢を可視化 各軸の回転とy軸を変動させた mocopi でセンシング csv に書き出せるアプリを作っていたが、時間がかかりそうなので、 bvhで保存したファイルからの動作推定を先にした 動作をとる モードを モーション の 保存 に切り替えて、bvhファイルとして保存する. BVH Sender mocopiアプリで記録したモーションデータ（BVH形式）を、ローカルネットワーク上にUDP送信することができるアプリケーションです。 WireShark で見てみると、UDPで送信されていることがわかる あまり使い道はなさそう BVHファイルをパースする HIERARCHY は、モデルの構造を定義している MOTION は、実際の動作が書かれている HIERARCHY ROOT root { OFFSET 0 93.2929 0 CHANNELS 6 Xposition Yposition Zposition Zrotation Xrotation Yrotation JOINT torso_1 { OFFSET 0 5....

mocopi センシング 出席率 3年セミナー：??% スケジュール 短期的な予定 mocopi でセンシング mocopi x Unity 色んな動作をとる 誤差を計測(簡易) csv に書き出せるアプリを作る 動作判別 Androidアプリ開発 長期的な予定 1月~ 研究 12月 WiNF2024 進捗 mocopi x Unity 参考: EVMC4UでUnityとバーチャルモーションキャプチャーをつなぐ方法 | STYLY mocopi(本体) -[Bluetooth]→ mocopi(アプリ) mocopi(アプリ) -[UDP]→ Python(mcp-reciever) Python(mcp-reciever) -[VMC]→ Unity リアルタイムでUnityで可視化 色んな動作をとる 足踏み,逆立ち 腹筋,腕立て 素振り,剣道 誤差を計測(簡易) 30m歩く 計測方法・結果 実際に30m歩く 歩きつつ mocopi(アプリ) 内のグリッドを数える 30m歩いたところ、バーチャルでは29m歩いたことになった 外で100mくらい歩いて誤差を計測したい 計測アプリを作る 既存のアプリ等の問題点 扱いづらい PC側が受信(Python)と表示(Unity)で分かれている csv書き出し未対応 Pythonに追加すれば良いが、扱いづらい 移動距離等が分かりづらい グリッドを数える必要がある 技術 Tauri Rust (受信側) Next.js (表示側) 表示とアニメーションができた ブラウザ上で動くようにした 三角関数で円形に動くアニメーションを作った...

Unity で可視化 出席率 3年セミナー：??% スケジュール 短期的な予定 端末姿勢推定 データを収集 グラフを作成 静止状態の判別 端末の姿勢を推定 加速度を世界座標に変換 Unity で可視化 カルマンフィルタを用いた推定 長期的な予定 ~12月 Androidアプリ開発 進捗 Unity でスマホの動きを可視化した z軸の回転 スマホくるくる 可視化した Kotlinを触りはじめた やりたいこと Android アプリ mocopi スマホと組み合わせてより詳細な動きをとりたい mocopi同士の位置 座っている状態の精度 気圧 余談 全てのイベントが終了した 技育CAMP vol.7 技育展 予選 技育CAMP vol.9 Hack U 技育CAMP アドバンス 技育展 決勝 工科展 新たな誘惑から逃げ切れた バイト辞めます ライブにいく GReeeeN 岡崎体育 ペンギンと会ってきた 最近の疲れを癒されてきた

工科展 出席率 3年セミナー：??% スケジュール 短期的な予定 端末姿勢推定 データを収集 グラフを作成 静止状態の判別 端末の姿勢を推定 加速度を世界座標に変換 Unity で可視化 カルマンフィルタを用いた推定 長期的な予定 9月中旬まで 端末姿勢推定(加速度, 角速度) 10月中 端末姿勢推定(カルマンフィルタ) 11月中 Kotlin(とRust)の勉強 「いつでもセンシングアプリ」 進捗 工科展 制作物 大学内の施設や教室の混雑を知れるアプリ 技術 フロント Next.js バック Go Gin Gorm ipv4 smtp 結果 優秀賞をいただいた 展示中の様子 感想 ネットワークつよつよな方が来たりしたが、 全ての質問に対して回答とスライドを用意しており、 完璧に対応できたのが良かった. チームが崩壊しており、牧野先輩・林先輩に助けを求めてなんとか完成させており、 自分たちでできなかったという点ではPMとして良くなかった。 余談 学祭で模擬店をやった 牧野先輩に買わせた韓国のサイダーがめっちゃ売れた 売れ残りのたこ焼きを食べながらタコパした