顔のアニメーション音声と同期

私は対話型音声対話システムを開発しています。対話型対話システムでは、ユーザーがシステムに何か言い、システムが音声で応答し、表情を音声で生成します。しかし、私はどのように私は表情を生成することができますどのような考えを得ることができません。誰かが私にどのように始めることができるか、あるいはオープンソースパッケージがすでに存在する場合は、それは非常にいいと誰に教えてくれますか？誰かがこれに関連するオープンソースソフトウェアについて知っていれば教えてください。顔のアニメーション音声と同期

出典

2012-03-03 roshan_iiita

私たちは、あなたがそれを開発するのを待ち、それが – Jake

@Jakeをオープンソースしなければなりません：確かに、もし私がしたら、私はそれをオープンソースにしましょう！ –

あなたの顔のビデオを作成することで表情を生成できますか？個人的には、まずそれから始めたいと思います。

出典

2012-03-03 18:27:43 Jake

しかし、私は合成されている音声とどのように同期しますか？私は言語としてシンセサイザーエンジンとJSAPIとしてFreeTTSを使用しています。 –

古い（3D以外の）アニメーションで十分に見えるように、表情が本当に必要ですか、口の開閉ですか？その場合は、envelope detectorを使用して、口を音声振幅エンベロープに一致させることができます。

出典

2012-03-04 22:29:37 Shannon

追加のハードウェアを使用せずに使用することはできませんか？ –

オープンソースHapFacs1.0 APIを使用すると、包括的なFACSベースのAPIを使用して、アクションユニットに基づいて異なる表情を生成できます。 HapFacs APIは現在Windowsプラットフォームで利用可能です。 HapekはHaptekソフトウェアに基づいて開発されました。また、組み込みのリップシンクロナイゼーション機能を提供し、ほとんどのテキスト読み上げエンジンと互換性があります。 HapFacs1.0はもともとC＃で書かれていますが、ほとんどの開発プラットフォームで.dllファイルを参照することでAPIを使用できます。さまざまなアクション単位を組み合わせることで、さまざまな強さで表情を生成できます。 EMFACSの設定を使用すると、異なる強度で7つのユニバーサルな表情を生成できます。他のシステムと一緒に

出典

2012-11-07 21:24:01

このプロジェクトでは、何が必要含まれています

http://osdn.jp/projects/galatea

引用：

「ガラテアは、」オープンソースを提供するためのプロジェクト、ライセンスフリーです擬人化音声対話エージェントを構築するためのソフトウェアツールキット。言い換えれば、このツールキットを使用して、あなたは話さ言語を経由してあなたと通信することができ、独自のユニークな生きているような視覚的なエージェントを構築することができます

出典

2013-07-30 07:24:15 Rauf

Galateaの最新のリンクは次のとおりです：http://osdn.jp/projects/galatea/ – Pierz

顔のアニメーション音声と同期

答えて

関連する問題