Архитектура хранения

Архитектура хранения сталкивается с экономическим тупиком из-за нерентабельности одноуровневых SSD-систем в эпоху эксабайтов

Компания WD указывает на фундаментальный сбой подходов, полагающихся исключительно на твердотельные накопители для задач искусственного интеллекта. При переходе от петабайтов к эксабайтам стоимость хранения опережает рост полезной нагрузки, так как организации платят премию за скорость там, где необходима лишь емкость. В инфраструктурах ИИ данные проходят через разные стадии жизненного цикла, и одноуровневая система не позволяет разграничить потоки мгновенного доступа и долгосрочного архивирования. Это приводит к тому, что хранилище становится скрытым налогом на каждый запрос пользователя, искажая приоритеты команд разработки между сокращением сроков хранения и принятием растущих затрат.

Событие: Компания WD идентифицировала фундаментальный сбой в стратегиях хранения данных для ИИ, основанных исключительно на SSD, который делает их нерентабельными при масштабах эксабайтов.

Фактор: Глобальный объем генерируемых данных достигнет 718 зеттабайт к 2030 году согласно прогнозам IDC, что делает невозможным размещение всего массива на дорогих твердотельных накопителях без критического роста операционных расходов.

Риск: Одноуровневая флеш-архитектура усложняет восстановление после сбоев, так как фоновые процессы конкуренции за пропускную способность ввода-вывода и сужение окна отката из-за удаления старых чекпоинтов повышают уязвимость системы.

Тренд: Индустрия смещается к многоуровневой архитектуре (tiered storage), где SSD используются для активных данных с высокой частотой доступа, а HDD — для логов инференса и завершившихся прогонки, что оптимизирует соотношение цены и скорости.

Инсайт: Переход на многоуровневую систему после накопления больших массивов данных требует значительных затрат на миграцию, поэтому правила tiering необходимо определять до достижения эксабайтовых объемов для контроля капитальных затрат.

Подробнее →