Компания Coinbase вновь оказалась под пристальным вниманием после крупного сбоя, нарушившего торговлю, задержавшего обновление баланса счетов и временно заблокировавшего доступ некоторых пользователей к отдельным частям платформы в один из самых оживленных периодов на криптовалютном рынке.
Причиной сбоя, продолжавшегося несколько часов с 7 по 8 мая, в конечном итоге оказалась неисправность системы охлаждения в центре обработки данных Amazon Web Services. По данным Coinbase, в результате отказа нескольких чиллеров на объекте произошел перегрев, который вызвал каскадные проблемы с инфраструктурой в ключевых биржевых системах.
Основные выводы
- Сбой в работе Coinbase нарушил торговлю и доступ к учетным записям в нескольких сервисах.
- Сбой в системе охлаждения AWS вызвал проблемы с инфраструктурой каскадного обмена данными.
- Coinbase временно приостановила торговлю спотовыми, прайм-трейдерами и деривативами на период восстановления.
- Генеральный директор Брайан Армстронг назвал инцидент «неприемлемым» для клиентов.
- Архитектура биржи отдавала приоритет торговле с низкой задержкой, а не максимальной отказоустойчивости.
- Сбой возобновил опасения по поводу зависимости криптовалют от централизованной облачной инфраструктуры.
- Coinbase планирует пересмотреть компромиссы в инфраструктуре между скоростью и надежностью.
Сбой затронул спотовую торговлю, Coinbase Prime, производные финансовые инструменты и международную биржу компании. Некоторые пользователи не могли совершать сделки или выводить средства, в то время как другие сообщали о задержках в обновлении баланса и проблемах с доступом к учетным записям, поскольку внутренние системы пытались восстановиться.
Генеральный директор Coinbase Брайан Армстронг публично прокомментировал инцидент, назвав произошедшее неприемлемым для клиентов.
Сбой в системе охлаждения AWS выявил слабые места в работе биржи.
Этот инцидент выявил более глубокую проблему в современной биржевой инфраструктуре: баланс между сверхбыстрым исполнением сделок и устойчивостью системы к сбоям в облачной среде.
По словам Армстронга, большинство систем Coinbase спроектированы с учетом резервирования, что позволяет им выдерживать потерю даже одной системы. Зона доступности AWSОднако сама централизованная биржа оказалась более уязвимой из-за особенностей своей конструкции, ориентированной на торговлю с низкой задержкой.
Этот компромисс особенно важен для институциональных и профессиональных трейдеров, многие из которых полагаются на размещение торговых систем в непосредственной близости от инфраструктуры биржи, чтобы сократить задержки исполнения до микросекунд.
На практике Coinbase оптимизировала некоторые части своей биржи, ориентируясь на скорость, а не на максимальную отказоустойчивость. Когда проблема с охлаждением AWS вызвала более масштабные проблемы, нестабильность инфраструктурыВ результате одновременно начали выходить из строя механизм сопоставления заказов платформы и внутренние системы обмена сообщениями.
Торги приостановлены из-за сбоя внутренних систем.
Руководитель инженерного отдела Coinbase Роб Витофф позже объяснил, что механизм сопоставления заявок биржи потерял кворум — минимальное количество синхронизированных узлов, необходимых для безопасного продолжения торговли. В то же время кластеры обмена сообщениями Kafka, отвечающие за связь между внутренними сервисами, вышли из строя, что привело к задержке информации о балансах клиентов на всей платформе.
«Потеря данных не произошло», — подчеркнула Coinbase в процессе восстановления. Чтобы избежать дальнейшей нестабильности, компания временно приостановила торговую активность на розничных, институциональных и профессиональных счетах, пока инженеры работали над восстановлением систем. Вместо того чтобы сразу же возобновить работу биржи, Coinbase постепенно возобновляла торговлю. Сначала компания перевела рынки в режим отмены сделок, затем провела проверку продуктов, включила аукционный режим и, наконец, восстановила полную функциональность торговли.
Витофф признал серьезность последствий отключения электроэнергии для потребителей.
Coinbase пересматривает приоритеты в области инфраструктуры.
Хотя в конечном итоге работа сервисов была восстановлена, сбой усилил опасения по поводу сильной зависимости криптоиндустрии от централизованных поставщиков облачной инфраструктуры, таких как AWS.
Пострадавший регион AWS, US-East-1, долгое время считался одним из важнейших центров облачных вычислений. В нем сосредоточены огромные объемы финансовой, корпоративной и интернет-инфраструктуры, что делает его частой точкой концентрации рисков. Аналитики отрасли неоднократно предупреждали, что сбои, связанные с системами электроснабжения, отказами систем охлаждения или проблемами в сети в этом регионе, могут одновременно оказывать влияние на множество секторов.
Инцидент с Coinbase продемонстрировал, как даже проблемы с физической инфраструктурой внутри центра обработки данных могут за считанные минуты парализовать основные операции по торговле криптовалютой.
Армстронг заявил, что компания теперь пересмотрит свой подход к балансу между скоростью выполнения задач, требованиями клиентов к размещению оборудования и отказоустойчивостью инфраструктуры в будущем.
Он добавил, что Coinbase считает, что продолжительность будущих сбоев может быть существенно сокращена, даже если некоторые чувствительные к задержкам биржевые системы продолжат отдавать приоритет скорости.
Сбой также произошел в период более масштабной реструктуризации Coinbase. Компания недавно объявила о планах сократить штат примерно на 14%, сославшись на необходимость контроля над расходами. криптографический рынок условия и повышение операционной эффективности, обеспечиваемое инструментами искусственного интеллекта.
Однако для трейдеров первоочередным приоритетом остается надежность.
Централизованные биржи Криптовалюты продолжают доминировать на рынке ликвидности, но подобные инциденты подчеркивают операционные риски, связанные с крупномасштабными торговыми платформами. Будь то кибератаки, сбои в облачных сервисах или всплески трафика, простои во время нестабильной рыночной конъюнктуры могут лишить пользователей возможности реагировать, в то время как на рынке перемещаются миллиарды долларов.
Последний сбой в работе Coinbase может в конечном итоге оказаться чем-то большим, чем просто временная неполадка. Он возобновил более широкую дискуссию о том, жертвуют ли крупнейшие биржи отрасли отказоустойчивостью в погоне за скоростью торговли, и какой риск неосознанно ложится на пользователей, когда инфраструктура выходит из строя в неподходящий момент.
