
Фахівці навчили технологію малювати за допомогою декількох мільйонів відео.
Група американських розробників представила нейронн мережу Speech2Face, здатну намалювати портрет людини по його голосу. Про це повідомило arXiv.org.
Моделі під силу намалювати зображення, взявши за основу підлогу, расу, вік. Розробкою займався колектив з Массачусетського технологічного інституту, у складі якого був Тахьон О.
Підписуйтеcь на наш Telegram-канал Lenta.UA - ЄДИНІ незалежні новини про події в Україні та світі
Вчені вирішили використовувати для навчання нейромережі датасета AVSpeech. Він містить близько мільйона коротких відео більше сотні тисяч різних людей. При цьому відео- та аудіо розділені.
Точність роботи технології творці визначили відповідно до трьох демографічними показниками. Порівняно піддали підлогу, орієнтовний вік і расу людей з оригінальних роликів та «висновок», зроблений нейромережею.
Також були виявлені недоліки моделі. Вона не завжди в змозі визначити вік з точністю до десяти років, а найкраще зображує європеоїдів і азіатів. Вважається, що остання проблема пов'язана з нерівномірністю присутності різних рас у вибірці для навчання.
За словами дослідників, в їхні плани не входило доскональне копіювання зовнішності людини. Вони прагнули до точної ідентифікації статі, віку, етносу.
На фото: оригінальні зображення, відновлені і «намальовані» по голосу.
Читайте також: Вчені розповіли, як роботи колонізують Місяць
Читайте також: Китайці планують створити робота-гумориста
Новини
У Чернігові чоловік намагався спалити ТЦК
04:40 30 кві 2025.
На Буковині правоохоронець створив схему із заробітку на ухилянтах
02:20 30 кві 2025.
Дональд Трамп назвав найкращого кандидата на пост Папи Римського
23:20 29 кві 2025.
Марко Рубіо знову заявив, що США можуть відмовитись від ролі посередника між Україною та Росією
22:45 29 кві 2025.
Меган Маркл потрапила до чергового скандалу
22:45 29 кві 2025.
У Німеччині перевага АдГ у опитуваннях зміцнюється
22:15 29 кві 2025.
Московські переговори спецпредставника Трампа не принесли успіху
21:30 29 кві 2025.
Медики з'ясували, які хвороби пришвидшують розвиток деменції
21:13 29 кві 2025.
Половина домашніх собак у Берліні утримується незаконно
20:45 29 кві 2025.