视频人物骨骼提取代码

[liuyu2013]

js零基础，想把您的这个想法用python来写。看了您写的源码想请教一下，就是按照您系统架构那张图，对于上传的视频文件或者摄像头实时采集的动作，哪一块的代码将这些进行了骨骼的提取呢？

[xianfei]

好像mediapipe官方给出了python的库 可以用于3d骨骼坐标点提取 转成骨骼姿态这块儿你得再查查有没有相应的库了

[coralineyang]

hello up主，可以请教一下实时地从3d骨骼坐标到fbx动画用到什么技术吗？我们最近也在做类似的工作，我们目前只能非实时地基于一段视频，将动作迁移到fbx的3d形象，不知道怎么才能实时地让fbx随视频或者摄像头动起来。

[xianfei]

hello up主，可以请教一下实时地从3d骨骼坐标到fbx动画用到什么技术吗？我们最近也在做类似的工作，我们目前只能非实时地基于一段视频，将动作迁移到fbx的3d形象，不知道怎么才能实时地让fbx随视频或者摄像头动起来。

魔改的kalidokit 这个项目本来只支持VRM

[coralineyang]

hello up主，可以请教一下实时地从3d骨骼坐标到fbx动画用到什么技术吗？我们最近也在做类似的工作，我们目前只能非实时地基于一段视频，将动作迁移到fbx的3d形象，不知道怎么才能实时地让fbx随视频或者摄像头动起来。

魔改的kalidokit 这个项目本来只支持VRM

谢谢！再请问一下，这个是每一帧都得到一个fbx/vrm文件，然后每一帧渲染一次吗？

[xianfei]

hello up主，可以请教一下实时地从3d骨骼坐标到fbx动画用到什么技术吗？我们最近也在做类似的工作，我们目前只能非实时地基于一段视频，将动作迁移到fbx的3d形象，不知道怎么才能实时地让fbx随视频或者摄像头动起来。

魔改的kalidokit 这个项目本来只支持VRM

谢谢！再请问一下，这个是每一帧都得到一个fbx/vrm文件，然后每一帧渲染一次吗？

中间没有文件 只是内存数据 来驱动骨骼

[liuyu2013]

你好，请问一下你们将动作迁移到fbx的3d形象是用什么语言开发的呀，或者什么相应的技术能方便透露一下吗？我目前只能拿到人体骨骼检测点的坐标，不知道怎么跟3d形象进行映射

[xianfei]

你好，请问一下你们将动作迁移到fbx的3d形象是用什么语言开发的呀，或者什么相应的技术能方便透露一下吗？我目前只能拿到人体骨骼检测点的坐标，不知道怎么跟3d形象进行映射

JavaScript开发的，使用kalidokit将坐标转换为姿态，然后把姿态赋值给骨骼