Нейросеть нарисовала лицо по голосу. / лица :: новости :: нейросеть

maks_nero

Нейросеть нарисовала лицо по голосу.

Американские разработчики представили нейросетевую модель Speech2Face. Обученная на нескольких миллионах видео, эта модель умеет воссоздавать по спектрограмме речи человека примерное изображение его лица, основываясь на трех основных параметрах: поле, расе и возрасте. Описание алгоритма и результаты его работы доступны в препринте,опубликованном на arXiv.org.

Подробнее

нейросеть,лица,новости

Еще на тему

нейросеть(25746)

новости(11336)

Развернуть

Отличный комментарий!

Интересно, какое лицо у говорилки.

1Jaz 01.06.201910:39 ссылка

+6.6

Формайл с Цереса 01.06.201910:58 ссылка

+55.2

Комментарии 29 01.06.201910:23 ссылка 26.9

Охренеть, фотороботы по звуку речи.

Алексей Шибаев 01.06.201910:36 ответить ссылка 7.8

Рептилоидов вычислять

Gridоn 01.06.201910:39 ответить ссылка ↑ 1.3

Ага, когда уже даже не знаешь, как доказать причастность лица к преступлению...

Atin Di'kut 01.06.201914:35 ответить ссылка ↑ 0.8

Интересно, какое лицо у говорилки.

1Jaz 01.06.201910:39 ответить ссылка 6.6

Формайл с Цереса 01.06.201910:58 ответить ссылка ↑ 55.2

ПРОПУСКАЕШЬ ЧЕРЕЗ НЕЙРОСЕТЬ СВОЙ ГОЛОС ЗАПИСАННЫЙ ЧЕРЕЗ ГОВНОДИНАМИКИ
@
ОЖИДАНИЕ:

@
РЕАЛЬНОСТЬ:

ЭльфНедобиток 01.06.201910:46 ответить ссылка 25.9

Попадание очень плохое. И как оно определяет цвет косметики и растительность на лице?

Фиговина 01.06.201910:46 ответить ссылка 4.9

По звуку отражающемуся в волосках бороды

Домовой Сыч 01.06.201910:53 ответить ссылка ↑ 14.5

Че, опять конкурс?

kreozot 01.06.201910:47 ответить ссылка 1.6

Я после прошлого ещё от истощения не оправился, давайте попозже.

TheFatTroll 01.06.201910:57 ответить ссылка ↑ 0.1

Прошлый еще не закрыли..

ZakRum 01.06.201911:00 ответить ссылка ↑ 0.3

Ну погнали!

ссылка на гифку

Serefka 01.06.201911:05 ответить ссылка 19.5

ссылка на гифку

ЭльфНедобиток 01.06.201911:08 ответить ссылка ↑ 32.4

ссылка на гифку

ЭльфНедобиток 01.06.201911:14 ответить ссылка ↑ 31.2

Взял и затмил мою шутку своим мемом

ссылка на гифку

Serefka 01.06.201911:50 ответить ссылка ↑ 8.0

Желтейший пост. На картинке выше изображение по голосу - справа, в середине "восстановленное изображение", сгенерированное с кадра из видео, которое слева.
По итогу эксперимента: нейросеть хорошо угадывает пол по голосу (вау!), неплохо угадывает возраст (+- 10 лет), и белых определяет белыми, а азиатов азиатами, индусов и черных оно определяет таковыми очень плохо. Сами черты лица на картинке не играют никакой роли, оно просто генерирует абстрактные лица на основе пола, возраста и расы.

filmgirl 01.06.201911:16 ответить ссылка 2.4

Замечу, что расу он определяет с точностью 60% для белых и 50% для азиатов. Учитывая, что он почти в 50% вообще всех записывает в белых, выглядит это как статистически незначительные успехи, которые сами же авторы списывают на неудачную выборку.

filmgirl 01.06.201911:19 ответить ссылка ↑ 1.0

Дополню Вас изображением №12 из статьи, "Примеры неудач"

(b) Ethnicity mismatch
(c) Age mismacth (old to young)
(d) Age mismacth (young to old)

Зонтик 01.06.201911:24 ответить ссылка ↑ 4.8

пункт b меня вверг в кататонию.

Wanzerr 01.06.201911:32 ответить ссылка ↑ 1.6

□ Anonymous 05/14/09(Thu)15:13 N0.31141483D ED
»31141379
»31141379
»31141379
THIS. 95% of spiders are completely harmless and can't even bite you.
The dangerous ones live in the wilderness and shithole countries anyways.
So. man the fuck up, /v/. You faggots would be scared of your own

krako 01.06.201913:06 ответить ссылка ↑ 0.5

Австралицы триггеред

Hagh 01.06.201913:31 ответить ссылка ↑ 0.3

попахивает каким то наебаловом

Tatsumaster 01.06.201911:44 ответить ссылка 0.1

Посмотрел бы я как нейросеть сгенерирует лица актёров озвучки аниме.

Dorian_Gray 01.06.201911:45 ответить ссылка 0.2

Проще всего с азиатами голос угадывать

gornyy 01.06.201913:14 ответить ссылка 0.0

на порно уже проверили?

Kover_Bez_Druzei 01.06.201913:30 ответить ссылка 0.0

Чтобы это работало, должно быть соответствие между голосом и чертами лица. Тоесть его сначала нужно доказать. Но ведь язык чисто культурная вещь, негр выросший в снг будет говорить по русски или украински абсолютно также, как и русские и украинцы. Никогда его не отличишь по голосу.

korall 01.06.201914:20 ответить ссылка 1.2

Ну, хз. Из-за формы черепа возможны какие-то частотные аномалии в голосе. Это не про правильность речи.

akam 01.06.201918:03 ответить ссылка ↑ 0.2

Я ж об этом. Сначала нужно доказать, создать теорию.
Хотя в принципе, в конце статьи написано, что как раз эта работа и может рассматриваться именно в качестве проверки корреляции. Тоесть это не какое-то предложение, а просто изучение. Но, результаты пока что не очень соответствуют.

korall 01.06.201920:53 ответить ссылка ↑ 0.0

Только зарегистрированные и активированные пользователи могут добавлять комментарии.

Похожие темы