Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Есть задача реализовать анимацию говорящей головы. #37

Closed
6opb6a opened this issue Mar 16, 2016 · 3 comments
Labels
Other Things that can't be classified anywhere else (S4 - Invalid) wontfix / can't reproduce

Comments

@6opb6a
Copy link

6opb6a commented Mar 16, 2016

При использовании вашего синтезатора, есть ли такая возможность получить состояние сигнала на аудио-выходе. Для того, чтобы синхронизировать движение губ с воспроизводимой репликой.?

@linvinus
Copy link

непонятно что имеется ввиду под "состояние сигнала на аудио-выходе"
может просто оцифровать аналоговый сигнал со звуковой карты? это любой контроллер может

@abitrolly
Copy link
Contributor

@6opb6a есть возможность получить прям дискретизированный сэмпл, который можно хоть на выход, хоть в анализатор, хоть в Blender. Но писать код придётся. )

@abitrolly
Copy link
Contributor

Но это плохой способ (я не про Blender). Круче сделать в Blender motion tracking реального видео с губами, привязать это к тексту, ввести в HMM модель эти переменные искажения кривизны, и научить сразу читать сурдоперевод для людей со слабым слухом. =) Т.е. не надо через ж (т.е. через звук) это прогонять, чтобы не терять сигнал.

@alex19EP alex19EP added (S4 - Invalid) wontfix / can't reproduce Other Things that can't be classified anywhere else labels Jun 16, 2020
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
Other Things that can't be classified anywhere else (S4 - Invalid) wontfix / can't reproduce
Projects
None yet
Development

No branches or pull requests

4 participants