
Фахівці навчили технологію малювати за допомогою декількох мільйонів відео.
Група американських розробників представила нейронн мережу Speech2Face, здатну намалювати портрет людини по його голосу. Про це повідомило arXiv.org.
Моделі під силу намалювати зображення, взявши за основу підлогу, расу, вік. Розробкою займався колектив з Массачусетського технологічного інституту, у складі якого був Тахьон О.
Підписуйтеcь на наш Telegram-канал Lenta.UA - ЄДИНІ незалежні новини про події в Україні та світі
Вчені вирішили використовувати для навчання нейромережі датасета AVSpeech. Він містить близько мільйона коротких відео більше сотні тисяч різних людей. При цьому відео- та аудіо розділені.
Точність роботи технології творці визначили відповідно до трьох демографічними показниками. Порівняно піддали підлогу, орієнтовний вік і расу людей з оригінальних роликів та «висновок», зроблений нейромережею.
Також були виявлені недоліки моделі. Вона не завжди в змозі визначити вік з точністю до десяти років, а найкраще зображує європеоїдів і азіатів. Вважається, що остання проблема пов'язана з нерівномірністю присутності різних рас у вибірці для навчання.
За словами дослідників, в їхні плани не входило доскональне копіювання зовнішності людини. Вони прагнули до точної ідентифікації статі, віку, етносу.
На фото: оригінальні зображення, відновлені і «намальовані» по голосу.
Читайте також: Вчені розповіли, як роботи колонізують Місяць
Читайте також: Китайці планують створити робота-гумориста
Новини
Ціни на нафту обвалилися
13:30 09 кві 2025.
Сирський хоче знати, де перебувають 6 мільйонів ухилянтів
13:15 09 кві 2025.
Обвал даху нічного клубу в Домінікані: загинуло майже 100 людей
12:55 09 кві 2025.
ЗСУ знищили російський бомбардувальник
12:30 09 кві 2025.
Зрадники хотіли підірвати депутатів у Хмельницькій області
12:15 09 кві 2025.
Угода зі США: Кабмін виділив понад 100 мільйонів на консультантів
11:55 09 кві 2025.
РФ почала наступ на Сумську та Харківську області
11:30 09 кві 2025.
Повітряні сили знищили пункт управління окупантів на Херсонщині (ВІДЕО)
11:15 09 кві 2025.
Окупанти завдали масованого удару по Харкову
10:55 09 кві 2025.
Трамп хоче заощадити трильйон доларів
10:30 09 кві 2025.
РФ завдала масованого удару дронами по Дніпру
10:15 09 кві 2025.