Новые фильтры для лица TikTok пугающе хороши, что может быть довольно плохо

Джесс Уэтербед и Миа Сато

Если вы пролистывали TikTok на прошлой неделе, вы, вероятно, видели видео примерно такого содержания: женщина выглядит удивленной, глядя на свое лицо в камере. Она касается своих губ, век, щек, словно задаваясь вопросом, действительно ли части ее лица могут быть реальными. «Это вообще не я», — сказал один из пользователей.

Это потому, что на самом деле лицо, к которому они прикасаются, на самом деле не их собственное. Это результат необычайно впечатляющего нового фильтра для лица под названием «Bold Glamour», который заполонил приложение, и множество пользователей снимали на видео свою реакцию на то, как правдоподобно он меняет их внешность, будь то с восхищением, восторгом или откровенным ужасом. Освещение фильтра в прессе было поистине диким: заголовки называли фильтр «психологической войной» и «ужасающим».

Реакция оправдана: Bold Glamour — один из самых впечатляющих эффектов TikTok, и, похоже, это первый взгляд на то, как инструменты на базе искусственного интеллекта могут сделать трансформацию лица труднее обнаружить и даже лучше изменить внешний вид людей. Но на данный момент TikTok хранит секрет Bold Glamour в тайне — компания проигнорировала многочисленные электронные письма от The Verge с просьбой подтвердить, что Bold Glamour использует ИИ, хотя в прошлом месяце компания представила новый набор инструментов фильтрации ИИ для создателей эффектов. .

В обновлении от 22 февраля Effect House, инструмента создания фильтров, TikTok объявил, что создатели эффектов теперь будут иметь доступ к нескольким генеративным эффектам искусственного интеллекта, которые изменяют черты лица пользователя в реальном времени. Новые эффекты включают ластик для бровей, эффект сморщивания губ и эффект улыбки, а создатели с ранним доступом уже создали фильтры с использованием новых инструментов. В своих руководствах для создателей TikTok обещает, что генеративные эффекты соответствуют коже пользователя и являются безупречными.

Эти методы отличаются от того, как создавалось большинство эффектов фильтров до сих пор. Традиционные фильтры обычно берут изображение с вашей 2D-камеры и отображают ваше лицо на преувеличенной 3D-модели, говорит Люк Херд, консультант по дополненной реальности, который работал над фильтрами Snapchat и Instagram. Эти эффекты могут деформироваться или давать сбой, если вы загораживаете их, поскольку 3D-наложение с трудом соответствует макету вашего лица.

«Это своего рода веха и индикатор странности мира постреальности, который ждет нас впереди», — говорит Мемо Актен, доцент кафедры вычислительного искусства и дизайна в Калифорнийском университете в Сан-Диего. точно эффект меняет лица.

Bold Glamour преображает лица пользователей так, как мы привыкли ожидать от традиционных «косметических» фильтров, но гораздо более впечатляющим образом. Он добавляет четкий контур по бокам лица и носа, делая цвет лица матовым и ровным. Брови более пышные и симметричные. Губы более пухлые. В глазах блестящий, остекленевший взгляд — присутствующий, но пустой. С тех пор, как на прошлой неделе фильтр стал популярным, на TikTok уже было опубликовано более 9 миллионов видео с использованием этого фильтра.

Но несмотря на то, что в Bold Glamour присутствуют образы фильтров для лица, пользователи TikTok заметили, что в этом эффекте есть что-то другое. В отличие от других фильтров, которые создают впечатление, будто на лице пользователя нарисованы мультяшные ресницы или преувеличенные тени для век, модификации Bold Glamour, кажется, перемещаются вместе с человеческим лицом под ними и даже адаптируются при применении к мужским лицам. И самое главное, фильтр почти не искажает изображение, когда пользователь кладет руку перед собой, что является обычным явлением для других эффектов лица.

Херд говорит, что Bold Glamour, вероятно, использует технологии машинного обучения — и, в частности, генеративно-состязательные сети (GAN) — чтобы совершить этот впечатляющий подвиг.

«Проще говоря, GAN сталкивают две конкурирующие нейронные сети друг с другом в кулачном бою насмерть», — говорит Херд. В случае с Bold Glamour это соревнование между изображением вашего лица камерой и стилем, в который TikTok хочет вас превратить. «Поскольку он использует вас, он затем сравнивает аспекты вашего лица с набором изображений, которые начинают совпадать с вашими щеками, глазами, бровями, губами и многим другим». В конечном итоге технология объединяет два набора изображений в один. «Если мы сделаем это достаточно быстро, мы сможем достичь частоты кадров видео», — говорит Херд. «И теперь у нас есть эффект следующего уровня, такой как Bold Glamour!»