Sprite kit 2D SpriteKit LipSync

有人对如何在SpriteKit中进行2D角色唇形同步有什么想法吗

明确地说，我们希望做一些你在应用商店SpeakAZoo看到的事情。我们将呈现各种口腔位置（音素）。。。在运行时，我们希望能够解码一些音频并同步显示正确的口腔位置。这是100%的“2D”，带有插图字符

寻找一个产品，API或如何最好地进行指导。我们有各种各样的声音，我们的角色可以说

---

任何人使用任何在iOS/ObjectiveC/

中运行良好的产品，在sprite kit中使用都不难，只需按照southpark的制作方式进行操作，为您的嘴准备一个sprite对象，并根据当前播放的音频设置正确的嘴形即可。现在，根据音频获得正确的形状是你最大的麻烦所在，你可能感兴趣的是。你放入一个音频文件，然后开始将音频分解成单词。然后，它输出一个文本文件，其中包含嘴应该移动到的不同声音（例如“e”）。我在Blender中使用它进行唇形同步，并使用形状键（每种声音对应一个），但这可能会有所帮助。它不会实时运行，但可用于预处理。在sprite kit中执行此操作并不困难，只需按照southpark的制作方式执行，为您的嘴设置一个sprite对象，并根据当前播放的音频放置正确的嘴形。现在，根据音频获得正确的形状是你最大的麻烦所在，你可能感兴趣的是。你放入一个音频文件，然后开始将音频分解成单词。然后，它输出一个文本文件，其中包含嘴应该移动到的不同声音（例如“e”）。我在Blender中使用它进行唇形同步，并使用形状键（每种声音对应一个），但这可能会有所帮助。它不会实时运行，但可以用于预处理。