Компания Runway представила Act-One. / нейрогифки :: Act-One :: нейронные сети :: runway

runway нейронные сети нейрогифки Act-One 

Компания Runway представила Act-One. Это фича для генерации анимированных персонажей на основе мимики, движений и голоса в качестве входных данных. Одну запись можно использовать для создания нескольких персонажей в разных стилях.

При этом не нужны ни гринскрин, ни оборудование для захвата движения. Всё делается в пару кликов.
Со звуком можно посмотреть здесь https://runwayml.com/research/introducing-act-one


Подробнее






runway,нейронные сети,нейрогифки,Act-One
Еще на тему
Развернуть

Отличный комментарий!

Переизобрели витьюберов.
Liru Liru 23.10.202412:53 ссылка
+49.8
Переизобрели витьюберов.
Liru Liru 23.10.202412:53 ответить ссылка 49.8
Мы сделаем новых витьюберов! Теперь с ИИ и шлюхами! То есть, добавим только ИИ...
baali baali 23.10.202413:23 ответить ссылка 18.8
Блин, ОнлиФанс преобразится!
XmyPb XmyPb 23.10.202413:27 ответить ссылка 2.8

Только у втюберов оно качественнее, а у тех, кто заморачивается, прям балдёж. А тут жуть какая-то

Скорее сырая технология, первые 3Д человеки тоже жутко смотрелись.
uniold uniold 23.10.202414:03 ответить ссылка 4.0
честно?

мне эта пиксарщина нравится
26994 26994 23.10.202414:08 ответить ссылка 8.1
Берешь порно в любимом редком жанре, старое, как дедовские медали, в ужасном качестве, страшными актёрами, с кучей артефактов, и, возможно, цензурой. Прогоняешь через сетку - на выходе получаешь отличного качества хентай, или фурри, или раф на кокосовом молоке.
Tibalz Tibalz 23.10.202414:48 ответить ссылка 7.7
Ну, это все-равно что сказать что языковые модели вроде ChatGPT это переизобретение скрепки-помощника из ворда. VTube'ры хоть и смотрятся выигрышнее на данный момент, на самом деле деревянные куклы со степенями свободы хрен-да-маленько. Эта технология хоть и выглядит пока кринжово и с эффектом зловещей долины, в будущем переплюнет текущую технолонию VTuber'ов, так как при таком же качестве визуала быдет выдавать гораздо более широкий спектр эмоций, свободы действия и прочего. Например, идет стрим, ведет VTuber, а ты хочешь именно свою вайфу - бац, и пожалуйста. Или заменил блогера на ютабе на вайфу и кайфуешь.
gretham gretham 23.10.202416:16 ответить ссылка -0.8
Волка анимировали чуть коряво. Но если наличие у него усиков Гомеса Аддамса было запланировано, то даже хорошо.
Было в Симпсонах.
Тогда использовали технологию Motion Capture (Захват движения), она очень дорогая, для неё много всякого оборудования нужно. Тут не motion capture, а нейросеть использовали, гораздо более дешевая альтернатива.

FaceRig выдаёт такой же результат по качеству?

лучше
TOMAT TOMAT 23.10.202413:22 ответить ссылка 0.6
Хахаха
А ну покажи
I V >
warrcan warrcan 23.10.202413:38 ответить ссылка 15.1
Вот например:
Aarc Aarc 23.10.202413:40 ответить ссылка 2.6

Это же не FaceRig, это что-то из Unreal Engine 5. FaceRig ещё в 2014 году вышел и выдавал анимацию на уровне заправского витуберского аватара, если не терял лицо на распознавании

Ну, это тоже фейс риг, только он управляется не ручками, а по видео снятом на айфончик.
_
Ругами ты его тоже можешь двигать, но там уже уметь надо
Aarc Aarc 23.10.202414:21 ответить ссылка 0.5

FaceRig - это конкретная программа, которая работает через вебкамеру на компе, а не через айфон

Аа, я думал имеется ввиду набор костей для лица
Aarc Aarc 23.10.202414:27 ответить ссылка 0.3
Ух бля, кайф!
- Дорогой, пожалуйста, давай нормально займемся сексом!
- Нет, я надену VR шлем, а ты будешь секси красной пандой.
нет, не даёт. для хорошего результата надо уметь снимать, а потом ещё и править.
Нихкя себе, прямо как в любой сфере деятельности!
Тут не 3D же, видео полностью генереное
kosoi kosoi 23.10.202413:19 ответить ссылка 2.2
>Тогда использовали технологию Motion Capture (Захват движения), она очень дорогая, для неё много всякого оборудования нужно.
Да нет, простая дешевая технология. Дорогие там последние 5% отшлифованности, на которые и уходят 95% бюджета. А если последние 5% не нужны - то достаточно дешевая технология. Так что нейросеть - никакая не альтернатива, она даже до уровня первых 95% дешевого моушен капчура не дотягивает.

Подобные нейросети как альтернатива актуальны разве что в проектах уровня "Дети против волшебников".
А если к этой технологии подвязать метки Motion Capture то думаю качество в разы вырастет. Подозреваю создатели этой сетки то же в эту степь подумали уже.
Rolar Rolar 03.11.202406:16 ответить ссылка 0.0

Выражения лица выглядят даже как-то слишком реалестично. Будто мультяшная маска надета на реального человека.

DrXak DrXak 23.10.202412:57 ответить ссылка 2.3
Эффект зловещей долины, хуле
CoDer CoDer 23.10.202413:02 ответить ссылка 8.2
Хз, мне норм
Тут скорее то, что мы привыкли видеть мультяшную анимацию на мультяшных персонажах, а не реальную мимику с её изъянами. Ну и плюс видно что глаза пассивные, и не работают как нужно.
QuadroBear Valley
26994 26994 23.10.202415:16 ответить ссылка 1.8
нажняя дико всратая
sylla sylla 23.10.202413:02 ответить ссылка 0.5
Ждем апгрейда витуберов
это уже какая по счёту?
у меня в стиме до сих пор висит прога, купленная году так в 18-м. Так и не юзаная ни разу лул, ибо вебку покупать только ради неё ебал
yiffysan yiffysan 23.10.202413:14 ответить ссылка 1.0
телефон с камерой подключаешь кабелем и вебка готова, покопай магазин приложений
пробовал как-то. качество дерьмо, ибо у меня телефон соответствующий
Iriun Webcam - бесплатная приложуха, что из телефона вебку делает. Относительно норм работает.
Yural Yural 23.10.202413:47 ответить ссылка 0.4
Круто!
Cave Cave 23.10.202413:15 ответить ссылка 0.3

И вот сейчас было бы хорошее время для реализации такого амбициозного проекта как L.A. Noir.

Odin Odin 23.10.202413:21 ответить ссылка 2.0

Чёт меня от всего этого наплыва ИИ-генеренных-гифок стало так корёжить, когда я вижу очередную гифку, где лицо разговаривает, но я не слышу звука. Уже даже от реальных записей, где такое происходит, меня прям крутит.

Фу. Ужасно смотрится, прям как ранние дубовые попытки в перенос эмоций живых людей в анимацию.

Выглядит как говёная графика из мультфильмов 00х, которые мимо проката сразу на тв шли
Если речь идёт об генерации полноценных 3д моделей сразу с ригом то это капец как круто. Ибо сделать всё вручную капец как трудозатратно. Просто на одну модель вручную может уйти от 10 до 100 часов без рига и прочих настроек. А если просто генерация анимированной 2д картинки в генераторе... То ну ок.
842690 842690 23.10.202414:34 ответить ссылка 0.0
Генерации на лету? Вряд ли. Моделька ладно, но там же ещё и зубы, язык, волосы, которые отдельно высаживать, расчёсывать и ригать.
а цены на изготовление мультиков всё равно вырастут.
Эффект зловещей долины прямо зашкаливающий.
lentinant lentinant 23.10.202416:09 ответить ссылка -0.6
Только зарегистрированные и активированные пользователи могут добавлять комментарии.
Похожие темы

Похожие посты