Animation 人脸动画与演讲同步

Animation 人脸动画与演讲同步,animation,voice,expression,speech,synthesizer,Animation,Voice,Expression,Speech,Synthesizer,我正在开发一个交互式口语对话系统,在这个系统中,用户将对系统说些什么,系统将用声音回答他,并根据声音生成面部表情。 但是,我不知道怎样才能产生面部表情。 有人会告诉我,我如何开始,或者如果有任何开源软件包已经存在,那将是非常好的。 如果有人知道任何与此相关的开源软件,请告诉我。你可以通过制作脸部视频来生成面部表情吗?就我个人而言,我想我会从这个开始。你可以通过拍摄脸部视频来生成面部表情?就我个人而言,我想我应该从这一点开始。你真的需要面部表情,还是像你在旧的非3d动画片中看到的那样张嘴和闭嘴就足

我正在开发一个交互式口语对话系统,在这个系统中,用户将对系统说些什么,系统将用声音回答他,并根据声音生成面部表情。 但是,我不知道怎样才能产生面部表情。 有人会告诉我,我如何开始,或者如果有任何开源软件包已经存在,那将是非常好的。
如果有人知道任何与此相关的开源软件,请告诉我。

你可以通过制作脸部视频来生成面部表情吗?就我个人而言,我想我会从这个开始。

你可以通过拍摄脸部视频来生成面部表情?就我个人而言,我想我应该从这一点开始。

你真的需要面部表情,还是像你在旧的非3d动画片中看到的那样张嘴和闭嘴就足够了?如果是这样的话,你可以试着用一个简单的方法把嘴巴和语音幅度包络匹配起来

你真的需要面部表情吗,还是像你在一部旧的非3d动画片中看到的那样张嘴和闭嘴就足够了?如果是这样的话,你可以试着用一个简单的方法把嘴巴和语音幅度包络匹配起来

您可以使用开放源代码,它提供了全面的、基于API的、基于动作单元生成不同的面部表情。HapFacs API目前可在windows平台上使用。基于Haptek软件开发的HapFacs。它还提供内置的唇同步功能,并与大多数文本到语音引擎兼容。HAPFAS1.0最初是用C编写的,但您可以通过在大多数开发平台上引用其.dll文件来使用API。通过组合不同的动作单元,可以生成不同强度的面部表情。通过使用配置,您可以生成7种不同强度的通用面部表情。

您可以使用开源,它提供了全面的基于API的API,根据动作单元生成不同的面部表情。HapFacs API目前可在windows平台上使用。基于Haptek软件开发的HapFacs。它还提供内置的唇同步功能,并与大多数文本到语音引擎兼容。HAPFAS1.0最初是用C编写的,但您可以通过在大多数开发平台上引用其.dll文件来使用API。通过组合不同的动作单元,可以生成不同强度的面部表情。通过使用配置,您可以生成7种不同强度的通用面部表情。

此项目与其他系统一起,包含您需要的:

引述:

Galatea是一个提供开源、无许可证的项目 用于构建拟人口语对话代理的软件工具包。 换句话说,使用此工具包,您可以构建自己独特的 逼真的可视代理,可通过语音与您进行通信 语言


此项目以及其他系统包含您需要的:

引述:

Galatea是一个提供开源、无许可证的项目 用于构建拟人口语对话代理的软件工具包。 换句话说,使用此工具包,您可以构建自己独特的 逼真的可视代理,可通过语音与您进行通信 语言


我们将等待您开发和制造它opensource@Jake:当然,如果我这样做了,那么我一定会让它开源!我们将等待您开发和制造它opensource@Jake:当然,如果我这样做了,那么我一定会让它开源!但是我如何与正在合成的语音同步呢?我使用FreeTTS作为合成器引擎,JSAPI作为语言。但是我如何与正在合成的语音同步呢?我使用FreeTTS作为合成器引擎,JSAPI作为语言。我不能不使用任何附加硬件就使用它吗?我不能不使用任何附加硬件就使用它吗?