全身トラッキングができるスマホアプリ『TDPT』とは？仕様を解説！【検証動画有】

全身トラッキングができるスマホアプリ『TDPT』。

このアプリでできることやトラッキング可能な部位／範囲、動く際のコツについてをまとめました。

参考までに、実際に動いて撮影した動画も載せています。

『TDPT』のダウンロード・利用を検討している方は、ぜひこの記事を参考にしてみてくださいね。

『TDPT』とは？

『TDPT』は、PC用全身トラッキングソフト『ThreeDPoseTracker』のスマホアプリ版です。

iPhoneのカメラに映した人間の動きを、リアルタイムでアプリ上の3Dモデルに反映させることができます。

基本DL無料ですが、課金することで利用できる機能もあります。

『TDPT』でできること

『TDPT』を使って【無料でできること】と【課金したらできるようになること】について説明します。

無料でできること

課金したらできるようになること

『TDPT』にインポートできる3Dモデルのファイル

現時点で動作確認ができているのは『VRMファイル』のみです。

VRMモデルのインポート方法はこちら

『TDPT』でトラッキングできる範囲

『TDPT』では、全身をトラッキング可能です。

ただ、モデルに動きを正確に反映させるためには、カメラに全身を映すことが前提となり、撮影場所にはある程度の広さが必要です。

『TDPT』でトラッキングが難しい部位・動き

『TDPT』を使ってみて、トラッキングが難しいなと感じた部位や動きは以下です。

表情

表情のトラッキングは対応していないようです。

指先

指先（手首より先）の動きは反映されません。

肩の上下

肩を上下すると、腕は上下しますが肩が上がって首が詰まるような感じは出ません。

前後の動き

正面からのスマホ1台によるトラッキングのため、体の裏側に腕や足がある場合に正確にとらえることが難しいようです。

早すぎる動き

動きが素早すぎると、カクカクしたような動きになることがあります。

『TDPT』で撮影したモーションの検証動画

約8畳の部屋で動画を撮ってみました。

トラッキング精度に関しては、部屋の広さや撮影角度等の問題もあるかと思いますが、参考に一つにしていただければ幸いです。

屈伸・伸脚などの体操

ボックスステップ

回転

Y字バランス

『TDPT』でうまくトラッキングするコツ

実際にトラッキングをしてみて、うまくトラッキングするにはコツをつかむことが大切だなと感じました。

主に重要だと感じたのは以下の点です。

『TDPT』に対応しているスマホのスペック・機種

現在『TDPT』をダウンロードできるのは【iPhone(iOS)】のみとなっています。

対応しているiPhoneの機種・スペックはこちらです。

『TDPT』を触ってみた所感

私が実際に『TDPT』を使ってみて感じたことをまとめました。

今までにない画期的なアプリ

スマホ1台のみでこれだけトラッキングできるのはかなり優秀で、他に類をみないアプリです。

広い場所が必要

全身を綺麗にトラッキングするためには、全身を途切れることなく映せるくらいの広い場所が必要です。

長時間利用は難しい

数分使うとスマホが熱くなり、動きもカクカクし始めます。

上下左右・横移動の動きは問題ない

上下左右や横移動の動きについては、かなり正確かつ安定したトラッキングができます。

前後の動きに弱い

腕や足が交差したり胴体の裏側へ回ってしまうと、判別されにくくなります。

指先のトラッキングができない

指の動きに関してはトラッキングができず、手のひらの向きや手首の曲がりなども同様に判別されません。

また、まだ検証していませんが、指先をトラッキングできるVR機器『LeapMotion』と連動させることで、『TDPT』で撮影したモーションに追加で指先も動かせるかもしれません。（PC版・スマホ版両方でできるかは不明）

『TDPT』についてのよくある質問

アプリは完全無料ですか？

無料でも使えますが、課金して使えるようになる機能もあります。

精度を上げるにはどうしたら良い？

トラッキングしやすい要素を増やすようにしましょう。

（例：『全身が映る広い場所での撮影』『背景をスッキリさせる』『体に密着した服を着る』など）

指先の細かい動きも取り入れるには？

ハンドトラッキングができるVR機器『LeapMotion』の使用でできるかもしれません（未検証）。

表情を変化させるには？

『VSeeFace』というフェイストラッキングソフトも同時に使うことでできるかもしれません（未検証）。

Android版アプリはありますか？

2021年7月現在、Android版のアプリはリリースされていないようです。

『TDPT』についてのまとめ

いかがでしたでしょうか。

今回は、『TDPT』を軽く触ってみた感想について書きました。

私自身まだがっつり検証できていないので、もっとトラッキング精度が上がる方法等もあるかもしれません。

気になった方は、ぜひご自身でもダウンロードして遊んでみてくださいね！

最後までお読みいただきありがとうございました。

関連記事はこちら