Контекст
Zillow известна сервисом оценки жилья в США. В 2018 году компания запустила Zillow Offers: она сама покупала дома по цене, рассчитанной алгоритмом, быстро их ремонтировала и перепродавала. Модель зарабатывала на точности прогноза цены и на скорости оборота.
Симптом
В 2021 году рынок жилья быстро менялся, а алгоритм продолжал предлагать высокие цены. В третьем квартале 2021 года компания купила 9 680 домов, а продала 3 032. Часть домов пришлось выставлять дешевле цены покупки.
Причина
Ошибка прогноза в несколько процентов, допустимая для справочной оценки, при покупке тысяч домов превращается в прямой убыток. У модели не было достаточных ограничений: она продолжала покупать, когда её прогнозы уже расходились с рынком.
Развилка
Продолжать масштабировать покупки, рассчитывая, что модель научится, или признать, что риск прогноза цен больше допустимого.
Решение
2 ноября 2021 года совет директоров решил закрыть Zillow Offers. Руководство объяснило это тем, что непредсказуемость прогноза цен на жильё оказалась намного выше, чем компания предполагала.
Исполнение
Компания начала продавать дома из запаса, в том числе через сделки с институциональными инвесторами, и объявила о сокращении примерно 25 процентов сотрудников, около 2 000 человек.
Итог
За третий квартал 2021 года Zillow списала $304,4 млн стоимости запасов домов и ожидала ещё $240–265 млн расходов в четвёртом квартале. В день после объявления акции компании упали примерно на четверть.
Что это значит для вас
Модель ИИ ошибается всегда, вопрос в цене ошибки. Если модель принимает решения с деньгами, у неё должны быть пределы и человек, который её останавливает.
- Какие решения в вашей компании уже принимает алгоритм и кто проверяет его ошибки?
- Сколько стоит одна ошибка модели и сколько таких ошибок вы выдержите подряд?
- По каким признакам вы остановите автоматическое решение?
Первым мы бы посчитали цену ошибки для каждого решения, которое хотят передать ИИ, и определили, где нужен человек для проверки.
Ключевые даты
| Год | Событие |
|---|---|
| 2018 | Запуск Zillow Offers |
| 2021, III квартал | Куплено 9 680 домов, продано 3 032; списание $304,4 млн |
| 2021, 2 ноября | Решение закрыть Zillow Offers и сократить около 25 процентов сотрудников |
Источники
- Zillow Group. Form 8-K, 2 ноября 2021 (письмо акционерам за третий квартал 2021): Источник
- Zillow Group. Form 10-Q за третий квартал 2021: Источник
- CNBC. *Zillow says it's closing home-buying business, reports Q3 results*, 2 ноября 2021: Источник
- Stanford Graduate School of Business. *Flip Flop: Why Zillow's Algorithmic Home Buying Venture Imploded*: Источник
Следующий разбор: Netflix. Защищать прибыльную модель или вкладываться в следующую →
