A/B-тест Bing увеличил выручку на 12%. Microsoft искала сбой #shorts
Как A/B-тест увеличил рекламную выручку Microsoft Bing на 12% и почему компания сначала решила, что произошёл сбой? Это реальный бизнес-кейс о проверке гипотез, рекламных экспериментах и ошибках при принятии решений.
В 2012 году сотрудник Microsoft предложил небольшое изменение: сделать заголовки рекламных объявлений в поисковой системе Bing длиннее.
Но идею посчитали неважной и отложили больше чем на полгода.
Позже разработчик всё-таки решил её проверить и запустил A/B-тестирование. Одной группе пользователей показывали старую рекламу, другой — объявления с изменёнными заголовками.
Результат оказался неожиданным: рекламная выручка выросла примерно на 12%.
Рост был настолько большим, что система мониторинга подняла тревогу. Обычно такие показатели означали ошибку в подсчётах или технический сбой.
Но после проверки выяснилось, что результат настоящий.
По оценке исследователей, если бы эффект сохранялся в течение года, такое изменение могло бы принести более 100 миллионов долларов дополнительной выручки на американском рынке.
Почему даже опытные специалисты Microsoft не заметили потенциал этой идеи?
Потому что заранее определить эффективность изменения бывает практически невозможно.
Этот кейс показывает, зачем бизнесу нужны A/B-тесты, проверка продуктовых гипотез и эксперименты на реальных пользователях.
Иногда вместо долгих обсуждений гораздо полезнее быстро протестировать идею и посмотреть на реальные результаты.
И история Microsoft Bing далеко не единственный пример того, как крупные компании ошибаются при принятии решений.
Почему руководители, исследователи и эксперты не всегда оказываются правы?
Об этом рассказываю в полном видео на YouTube-канале ISweesh.
ISweesh — проверка продуктовых гипотез и исследование спроса с помощью ИИ:
Наш Telegram-канал про маркетинг и стартапы:
Источник кейса — Harvard Business Review:
#Microsoft #Bing #ABтестирование #ПроверкаГипотез #Shorts
source