Выводы и рекомендации Gen-2 Motion Brush
Подписывайтесь на телеграм-канал
В канале я регулярно обозреваю обновления нейросетей, пишу гайды, делюсь промптами, буду рада вашим реакциям, комментариям и репостам.
Начинать с минимальных отклонений на ползунках, при больших значениях объект начинает деформироваться.
Точно выделять объект, который хотите анимировать. Не обведённая область может потянуть за собой шлейф.
Нейросеть чувствительна к выделяемой области, если вы заденете соседние объекты, то с большей вероятностью они тоже будут деформироваться, к примеру, если задеть часть лица при обводке волос, то оно тоже начнёт деформироваться.
Это команда однозначно сделала анимацию более управляемой, но ей всё ещё нужна доработка, чтобы результат соответствовал ожиданиям. Для меня всё это напоминает ожившие фотографии из Гарри Поттера, тогда это казалось волшебным и нереальным, а на самом деле теперь мы и сами можем делать такую магию.
С первой попытки получилось сделать водопад у домов, волосы, но не у всех, приближение корабля, для всего остального понадобилось больше попыток.
Лучше чтобы объекты анимации были обособлены, и на них не наслаивались другие объекты в сцене (Лео Ди Каприо сидит очень плотно к костру, из-за этого сеть заанимировала и его, выделение вплотную с его ногами).
То, что вы выделили объект - не означает, что остальная сцена будет статична, нейросеть продолжает анимировать и на невыделенных частях изображения. К примеру, на фото с домом и водопадом сеть дорисовала дождь, движение ветвей от ветра, Ди Каприо заиграл на гитаре, и за ним также ветки колышутся от ветра, звезды движутся над кораблём.