В социальных сетях всегда были спам и ненужные сообщения. Новым является то, что генеративный искусственный интеллект сделал «создание контента» практически бесплатным — и это меняет баланс между тем, чего хотят пользователи, и тем, что лента новостей может экономически выгодно предоставлять.
«Некачественная» обработка изображений и видео, созданная с помощью ИИ (дешевые, созданные с минимальными усилиями синтетические изображения и видео), — это не просто эстетическая претензия. Это сигнал о том, что...стимулы экономики создателей и стимулы алгоритмов ранжированияОни сталкиваются с новой кривой предложения: неограниченным количеством носителей информации, производимых машинным способом.
Негативная реакция, которую мы наблюдаем, — это первая попытка восстановить доверие и смысл в лентах новостей, которые все больше оптимизируются для вовлечения аудитории, а не для подлинности.
Что люди подразумевают под «хламом, созданным с помощью ИИ»?
«AI-ерунда» — это не технический термин, а культурный. Обычно он относится к медиаконтенту, созданному с помощью ИИ, который:
- Производится быстро (и в больших объемах)
- Повторяющийся (одни и те же шаблоны, персонажи, штампы)
- эмоционально манипулятивный (трогательные детские сцены, религиозные образы, шокирующие сцены насилия)
- Низкий уровень проверяемого контекста (отсутствие источника, информации о происхождении, ответственности).
Часть этого комична и явно фальшива (гориллы, поднимающие гантели, рыбы в обуви). Часть же призвана обмануть — и именно здесь она становится разрушительной.
Ключевой момент заключается в том, что «неряшливое» изображение — это не только вопрос о том, «реалистично» ли оно. Это вопрос о том, насколько оно «реалистично».значимыйКогда ленты новостей заполняются искусственным шумом, даже реальный контент начинает казаться менее ценным, потому что он конкурирует за внимание аудитории.
Шок предложения: почему ситуация с поставками так быстро изменилась.
Причина, по которой это происходит сейчас, проста: экономические факторы привели к резкому падению предельных издержек на производство видеоролика.
До появления генеративного ИИ создателю требовалось время, оборудование, навыки редактирования или, по крайней мере, четкая идея. С помощью современных инструментов для работы с изображениями и видео создатель может быстро генерировать десятки или сотни вариантов, тестировать, какие из них работают, и масштабировать то, что работает.
Это приводит к «шоку предложения контента», противостоять которому системы ранжирования изначально не были предназначены.
Если ваша лента новостей работает на основе алгоритма, обученного максимально повышать вовлеченность пользователей, а вовлеченность легко вызвать с помощью эмоционально заряженного синтетического контента, система естественным образом усилит ее — даже если пользователи позже скажут, что она им не нравится.
Слепое пятно алгоритма: вовлеченность — это не качество.
Большинство платформ не ранжируют контент по достоверности или полезности. Они ранжируют его по сигналам, которые могут измерить:
- время просмотра
- лайки/реакции
- комментарии
- репосты
- клик-переход
Эти показатели отражают интенсивность, а не точность.
Созданный с помощью ИИ медиаконтент часто демонстрирует хорошие результаты по этим показателям, потому что он:
- Богатый новизной (неожиданные визуальные эффекты)
- эмоционально оптимизированный (милый, шокирующий, вызывающий гнев)
- бесконечно вариативны (вариации стоят недорого)
Это создает парадокс: пользователи могут жаловаться на некачественный контент в комментариях, но сам факт комментирования может способствовать его распространению.
Иными словами, «негативная реакция» может стать топливом.
Экономика создателей: стимулы для наводнения этой зоны.
Второй фактор — монетизация. Если канал может зарабатывать деньги за счет просмотров и вовлеченности аудитории, стимулом становится публикация как можно большего количества контента, позволяя алгоритму выбирать победителей.
Когда искусственный интеллект снижает себестоимость производства, конкуренция становится меньше связана с мастерством и больше с:
- объем
- экспериментирование
- оптимизация для рекомендательной системы
Вот почему некоторые из наиболее заметных провалов сосредоточены вокруг предсказуемых штампов: это проверенные шаблоны для привлечения внимания.
Это также объясняет, почему платформы могут говорить о «жестких мерах», одновременно продвигая инструменты, упрощающие процесс создания контента: их бизнес-модель построена на обилии контента, а не на его дефиците.
Человеческий фактор: внимание, доверие и «разложение мозга».
Один из наиболее вероятных долгосрочных негативных последствий заключается не в том, что всех обманывает конкретное фейковое видео. Дело в том, что постоянное воздействие низкосмысленного синтетического контента меняет наше отношение к происходящему в сети.
Есть как минимум три психологических эффекта, заслуживающих внимания:
-
Усталость от проверки
Если для определения подлинности этого явления требуются усилия, многие люди со временем перестанут проверять. В итоге они начнут пожимать плечами. -
фрагментация внимания
Кратковременный, насыщенный стимулами контент приучает людей быстро переключаться на что-то другое. Когда же количество раздражителей увеличивается, лента новостей превращается в беговую дорожку. -
Размывание доверия
Когда пользователи чувствуют, что ими манипулируют — создатели контента, инструменты искусственного интеллекта или сама платформа — они могут меньше доверять не только фейковому контенту, но и реальному.
В этом и заключается главная опасность: не один обман, а общее снижение «температуры правды» в онлайн-жизни.
Система модерации перестраивается на основе ошибочного предположения.
Сложность для платформ заключается в том, что «ненужный контент, созданный с помощью ИИ» — это не одна категория запрещенного контента. Она охватывает следующие категории:
- спам
- мошенничество
- дезинформация
- тревожный контент
- хлам, не требующий больших усилий
И это часто субъективно. То, что для одного «ерунда», для другого может быть развлечением.
В то же время многие платформы сократили возможности модерации со стороны человека и перешли к следующим методам:
- автоматизация
- сообщения пользователей
- этикетки сообщества
Это плохо работает, когда противник использует большое количество атак и умеет адаптироваться.
Хуже того, сама модерация может приобрести политический характер: если вы слишком строго определяете «низкое качество», создатели контента обвиняют вас в цензуре; если же вы определяете его слишком расплывчато, пользователи обвиняют вас в том, что вы позволяете платформе прийти в упадок.
Недостающая инфраструктура: отслеживание происхождения и «подтверждение происхождения».
Перспективным подходом является переход от «выявления подделок» к «доказательству подлинности».
Обнаружение затруднено, потому что генеративный медиаконтент постоянно совершенствуется, и нет единого универсального признака. Определение происхождения затруднено, потому что требует стандартов и внедрения.
Однако у системы подтверждения происхождения есть преимущество: её можно выстроить в виде цепочки доказательств:
- метаданные захвата
- подписание при создании
- хранение с защитой от несанкционированного вскрытия
- проверка при загрузке
Если платформа может предложить действительно значимую метку «проверенное происхождение», это поможет пользователям различать:
- реальные кадры
- отредактированные, но аутентичные кадры
- синтетические среды
Однако подтверждение происхождения работает только в том случае, если:
- создатели дают согласие
- платформы обеспечивают единообразную маркировку
- Система устойчива к лёгкой подделке.
В противном случае это превратится в очередной декоративный значок.
Возможно ли существование «социальных сетей без лишней грязи»?
Полностью исключить использование корма без добавок маловероятно, поскольку граница между:
- креативный ремикс
- сатира
- спам
- обман
…его трудно определить, но легче использовать в своих целях.
Однако платформа все еще может повлиять на ситуацию, изменив стимулы:
- сократить монетизацию для контента, требующего минимальных усилий.
- ограничивать повторяющиеся загрузки
- наказывать за использование приманок
- награда за медиаконтент с подтвержденным происхождением
- усиление препятствий для подозрительных учетных записей
Простейший вариант — это не «запретить ИИ», а «прекратить поощрять дешевые объемы».
Два правдоподобных варианта будущего
Будущее 1: нормализация.Пользователи адаптируются, платформы немного маркируют контент, и всё ненужное становится фоновым шумом — как спам-письма. Люди учатся, каким уголкам интернета можно доверять.
В этом мире «реальность» становится нишевым дополнительным преимуществом. Среднестатистический пользователь воспринимает ленту как фоновое развлечение, а цена ошибки (в отношении подлинности ролика) настолько низка, что людям становится все равно.
Будущее 2: бифуркация.Ленты новостей разделяются. Один слой становится ориентированным на развлечения и перегруженным синтетическим контентом. Другой слой становится меньше по размеру, тщательно отбирается, учитывает происхождение контента и обходится дороже в обслуживании.
В этом мире доверие становится товаром. Сообщества платят за человеческий отбор контента, более строгие проверки личности и более четкие правила в отношении синтетического контента. Компромисс заключается в масштабе: сеть с высоким уровнем доверия растет медленнее, потому что не может терпеть бесконечное количество дешевого контента.
Если это второе будущее станет реальностью, то ключевой дефицит будет не в содержании. Это будет...доверять.
Практический контрольный список для пользователей (и для платформ)
Дляпользователи:
- Если пост в первую очередь призывает к эмоциям (лайкам, возмущению, жалости), предполагайте манипуляцию, пока не увидите контекст.
- Предпочтение следует отдавать авторам, которые регулярно предоставляют информацию об источнике видеоматериала: где, когда и как были сняты кадры.
- Не стоит «спорить в комментариях» по поводу очевидной ерунды; вы можете навредить своей ленте.
Дляплатформы:
- Ограничивать скорость загрузки шаблонов данных и применять штрафные санкции к почти идентичным вариантам.
- Необходимо сделать маркировку медиаконтента, созданного с помощью ИИ, обязательной, а не добровольной.
- Рассматривайте происхождение информации как инфраструктуру: подписание, проверка и контрольный след.
- Настройте систему монетизации таким образом, чтобы массовое создание контента, не требующего больших усилий, приносило меньше прибыли.
Итог
Некачественная разработка ИИ — это не столько «странный интернет-тренд», сколько предсказуемый результат столкновения двух стимулов: алгоритмов, вознаграждающих за вовлеченность, и инструментов, делающих создание контента практически бесплатным.
Негативная реакция реальна, но она изменит ленту только в том случае, если изменятся стимулы — либо посредством политики платформы (ограничение объема и поощрение за достоверность контента), либо путем миграции пользователей в пространства, где подлинность является главным товаром.
Источники
- Новости BBC (Технологии):https://www.bbc.com/news/articles/c9wx2dz2v44o?at_medium=RSS&at_campaign=rss