Темы · Как это работает

A/B-тестирование

Перевод статьи «A/B testing» из The Instagram* Algorithm Encyclopedia (algos.wiki). Оригинал: https://algos.wiki/topic/ab-testing, версия от 3 ноября 2026. Перевод выполнен с помощью нейросетей и может содержать неточности — сверяйтесь с первоисточниками. Неофициальный ресурс, не связан с Instagram* и Meta*.

A/B-тестирование в Instagram* означает, что разным группам людей дают разные версии функции или системы и сравнивают их поведение, чтобы проверить, работает ли изменение так, как задумано.1 2 Тесты рекомендаций включали контент в ленте из аккаунтов, на которые люди не подписаны, а в исследовании Meta* о рекомендациях коротких видео сообщалось о росте числа показов публикаций и лайков.3 4

Некоторые прошлые тесты позволяли зрителям выбирать темы, которых они хотели бы видеть больше или меньше, или предлагали участникам оставить отзыв.3 5 Тестирование также позволяет сравнивать способы обработки видео или проверять, повышают ли изменения в рекомендациях вовлечённость, не делая контент менее свежим и не увеличивая вычислительные затраты.2 6

В августе 2026 года Адам Моссери объяснил, что Instagram* проводит тесты перед запуском, а после него может временно не распространять значимые изменения на 1%, 2% или 5% людей, чтобы сравнить поведение, и снимает это исключение, когда результаты совпадают с ожиданиями.1

Эксперименты, которые меняют то, что видят люди

В объявлении Instagram* о профиле уточнялось, что перестановка значков, кнопок и вкладок не затронет фото и видео в сетке профиля.7 В сентябре 2020 года Моссери объявил о тестировании трёх версий главного экрана Instagram*, в которых вкладки Reels и «Магазин» располагались по-разному, — в ответ на изменения в просмотре видео, покупках и роли авторов.10

Его эксперимент с рекомендациями в июне 2021 года включал выбор тем, которых люди хотели бы видеть больше или меньше; этот выбор был частью того исторического теста.3 Моссери предложил участникам эксперимента с лентой в мае 2022 года оставлять комментарии, а в июле объяснил, что полноэкранный режим пока недостаточно хорош, чтобы выпускать его для всех.5 9

В Meta* Newsroom был описан ограниченный тест мобильного приложения, построенного вокруг Reels, в Индии в сентябре 2025 года: приложение открывалось сразу в Reels, а вкладка «Подписки» предлагала рекомендованный контент из аккаунтов, на которые человек подписан, контент от взаимных подписок или публикации и Reels в порядке от новых к старым.11

Как это менялось

2018
ноябрь
Instagram* объявил о поэтапных тестах макета профиля, в которых в течение следующих недель будут применяться разные сочетания изменений.7
2021
июнь
Моссери объявил, что начались первые эксперименты с рекомендациями в ленте и что на той же неделе появится ещё одна версия.3
2021
ноябрь
Моссери объяснил, что Instagram* проверяет идеи примерно на 1% или 2% людей, собирает отзывы и дорабатывает их, а затем либо закрывает проект, либо выпускает его для всех.8
2022
май
Моссери объявил о тесте нового иммерсивного режима просмотра в основной ленте главного экрана.5
2022
июль
Моссери уточнил, что полноэкранный режим ленты — это тест, в котором участвуют лишь несколько процентов людей.9

Подготовка вариантов перед сравнением групп

По исследованиям и патентам Meta*; они могут не описывать, как Instagram* работает сейчас

Инженерная команда Meta* в блоге Instagram* Engineering описала, как в тесте обработки видеорекламы подготовка вариантов шла до сравнения групп.2 Команда создавала альтернативные кодировки видео — их обработанные версии — только после того, как реклама была успешно опубликована, поэтому подготовка теста не влияла на создание рекламы.2

Затем инженерная команда Meta* взяла рекламу, для которой были доступны и старые, и новые версии, и показывала новые версии половине пользователей, а старые — другой половине.2 Команда сообщила, что новые версии показали себя значительно лучше, и это стало доводом в пользу их внедрения.2

Сравнение результатов рекомендаций и рекламы

По исследованиям и патентам Meta*; они могут не описывать, как Instagram* работает сейчас

В исследованиях Meta* используются онлайн-сравнения A/B — тесты с участием людей, которые пользуются сервисом, — чтобы измерять результаты альтернативных вариантов рекомендаций и рекламы.4 12 13 Для рекомендаций коротких видео в Instagram* исследование Meta* о OneShot сообщило о росте числа сессий, проведённого времени, показов публикаций и лайков, в том числе о росте проведённого времени на 0,136% и числа лайков на 0,251%.4

Для рекомендаций рекламы, которые обслуживают пользователей Facebook* и Instagram*, исследование Meta* сравнило несколько конфигураций с меньшей моделью — компьютерной системой, обученной давать рекомендации, — под названием MoNN Small; лучшая из описанных конфигураций улучшила онлайн-показатель рекламы на 2,57%.12

Исследование Meta* о рекомендациях также проверяло схему, в которой общая большая модель обобщала интерес человека к каждому возможному элементу, а меньшие модели для разных направлений рекомендаций использовали эти сводки вместе с собственной информацией.13

В том же исследовании Meta* приводились результаты онлайн-сравнения A/B этой схемы с эталонной системой, в которой был один этап рекомендаций вместо общей большой модели и меньших моделей, а также совокупный прирост от последующих версий, поэтому эти два набора результатов относятся к разным сравнениям.13

Проверка защитных мер и вычислительных затрат

По исследованиям и патентам Meta*; они могут не описывать, как Instagram* работает сейчас

Исследование Meta* о SlimPer расширяет оценку изменений ленты и Reels в Instagram* за пределы вовлечённости: в нём проверяется, не ухудшаются ли другие показатели.6 В исследовании Meta* сообщалось об отсутствии ухудшений в проверках свежести контента и в других проверках качества наряду со значительным ростом вовлечённости.6

В исследовании Meta* также сообщалось, что требования к мощностям специализированных вычислительных чипов, которые система использует, чтобы обучаться на данных и давать рекомендации, остались примерно прежними.6 В статье Meta* описано тестирование системы перед её более широким запуском в Reels и ленте Instagram*.6

См. также

Источники

Эксперименты, которые меняют то, что видят люди

Как это менялось

Подготовка вариантов перед сравнением групп

Сравнение результатов рекомендаций и рекламы

Проверка защитных мер и вычислительных затрат

См. также

Источники

Instagram*

Адам Моссери

Исследования и патенты Meta*

Источники ответа