Деньги были, доступа не было: что двое суток без Яндекс Пэй показали бизнесу

11 октября миллионы людей открыли приложение и не смогли заплатить своими же деньгами. Платёжный сервис Яндекса не работал почти двое суток: не проходили оплаты в магазинах, переводы по СБП, не выводились накопления. При этом компания заявила, что ни одна запись не потеряна.

То есть деньги были. Доступа к ним не было. Для бизнеса это, пожалуй, главный урок осени, и он не про Яндекс.

Что произошло

За несколько дней у Яндекса один за другим остановились три дата-центра: Сасово 7–8 октября, часть инфраструктуры в Калуге 9 октября и Владимир 11 октября. После третьей остановки резерва не хватило.

• Платежи. Яндекс Пэй перестал работать 11 октября с 08:22 и частично вернулся только 13 октября.
• Выплаты. Водители такси не могли вывести деньги за свои же смены.
• Каскад. Вместе с облаком Яндекса, по данным DownDetector, падали Магнит, Додо, Ламода, М.Видео, Делимобиль и даже сайт аэропорта Пулково.

По оценке экспертов, запаса прочности у системы не оказалось: резерв закончился после третьего отключения.

Почему это урок не про Яндекс

Ни одна инфраструктура не застрахована от сбоя. Вопрос не в том, ляжет ли ваш провайдер, а в том, что будет с вашим бизнесом, когда это случится. Сбой показал три уязвимые точки, которые есть у большинства компаний:

• один способ приёма оплаты;
• одно облако, в котором живёт всё — от сайта до кассы;
• одна система, через которую идут выплаты сотрудникам и исполнителям.

Когда точка одна, её отказ останавливает всё сразу. Компании, у которых в эти дни был второй вариант, просто переключились. Остальные ждали.

Пять вещей, которые стоит сделать, пока всё работает

1. Второй способ оплаты. Резервный эквайринг или платёжный провайдер, который подключён и проверен заранее. Переключение должно занимать минуты, а не дни переговоров.
2. Резерв для критичных сервисов. Сайт, корзина и касса не должны целиком зависеть от одного облака. Хотя бы статичная страница с альтернативными способами оплаты должна жить у другого провайдера.
3. Счета в разных банках. Расчётные счета в двух банках из разных групп. Оборотные деньги не стоит держать в одном сервисе.
4. Резервные выплаты. Если курьерам, водителям или подрядчикам платите через одну систему, заранее договоритесь о запасном способе.
5. Готовое сообщение клиентам. Шаблон уведомления о сбое с альтернативными способами оплаты. В день аварии на тексты не будет времени, а молчание стоит дороже самого сбоя.

И то же самое — для личных денег

Принцип тот же: не хранить всё в одной точке. Две карты банков из разных групп и немного наличных закрывают большинство сценариев.

Отдельно интересно, что в те же дни биткоин работал как обычно: у сети нет главного дата-центра, её данные хранятся на тысячах компьютеров по всему миру. Но и здесь есть оговорка: криптовалюта на бирже — это снова чужой сервер и чужой рубильник. Она ваша, только когда ключи от кошелька у вас.

Деньги, к которым у вас нет доступа, в моменте — не ваши деньги. Это одинаково верно для кассы магазина, зарплаты водителя и личных накоплений. Сбой длился двое суток. Подготовка к следующему займёт один вечер.

Больше разборов о том, где лежат деньги и кто к ним имеет доступ, — у меня в профиле.

Источники:

• Яндекс: сообщение о работе дата-центров
• Коммерсантъ: сбой 11 октября и затронутые сервисы
• avo.cards: хронология сбоя Яндекс Пэй
• Код Дурова: поэтапное восстановление Яндекс Пэй
• Фонтанка: оценки экспертов

Интерфейсы и суммы на иллюстрациях — условные примеры.